[发明专利]一种农业大数据的处理方法、装置、设备和存储介质

说明书

本发明实施例公开了一种农业大数据的处理方法、装置、设备和存储介质，该方法包括：采集农业大数据；将农业大数据进行清洗处理，根据清洗后的农业大数据形成关系型数据库；将农业大数据存储到分布式文件数据系统中；建立分布式搜索引擎；当接收到搜索请求时，分布式搜索引擎调用分布式文件数据系统和关系型数据库中的农业大数据并进行数据分析，根据分析结果进行反馈。实现了对农业大数据的近实时搜索、分析、高效和合理的应用。

技术领域

本发明实施例涉及大数据领域，尤其涉及一种农业大数据的处理方法、装置、设备和存储介质。

背景技术

近年来，随着各种智能传感终端在农业领域的应用，使农业数据来源更加广泛、新颖、多样。由于农业数据体量大、实时性强、关联度高，因此如何对农业大数据进行合理的应用具有重大的意义。

目前国内外关于农业大数据的研究主要集中在如何对农业大数据进行采集和如何对采集到的农业大数据进行存储，通过对农业大数据的分析为农业决策提供依据。

虽然农业大数据可以为农业决策提供可靠的数据支撑，但目前对农业大数据的应用仍然不够完善，往往需要用户自己建立农业大数据相关数据库，对农业大数据的应用存在不合理并且效率低的现象。

发明内容

本发明实施例提供一种农业大数据的处理方法、装置、设备和存储介质，以实现农业大数据的高效、合理应用。

第一方面，本发明实施例提供了一种农业大数据的处理方法，包括：

采集农业大数据；

将农业大数据进行清洗处理，根据清洗后的农业大数据形成关系型数据库；

将农业大数据存储到分布式文件数据系统中；

建立分布式搜索引擎；

当接收到搜索请求时，分布式搜索引擎调用分布式文件数据系统和关系型数据库中的农业大数据并进行数据分析，根据分析结果进行反馈。

第二方面，本发明实施例提供了一种农业大数据的处理装置，包括：

数据采集模块：用于采集农业大数据；

分布式文件数据系统：用于存储数据采集模块采集到的农业大数据；

数据清洗模块：用于清洗数据采集模块采集到的农业大数据，得到关系型数据库；

分布式搜索引擎建立模块：用于建立分布式搜索引擎；

农业大数据应用模块：用于调用分布式文件数据系统和关系型数据库中的农业大数据并对分析数据，将分析结果返回给应用端。

第三方面，本发明实施例提供了一种农业大数据的处理设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现上述第一方面所述的农业大数据的处理方法。

第四方面，本发明实施例提供了一种计算机可读存储介质，包括：

该程序被处理器执行时实现上述第一方面所述的农业大数据的处理方法。

本发明实施例提供的一种农业大数据的处理方法、装置、设备和存储介质，通过采集农业大数据并对农业大数据进行清洗处理，并分别将采集到的农业大数据存储到分布式文件数据系统和关系型数据库中。当接收到搜索请求时，建立的分布式搜索引擎调用分布式文件数据系统和关系型数据库中的农业大数据并进行分析，根据分析结果进行反馈。本方案不需要用户自己建立农业数据库，解决了对农业大数据的应用不合理并且效率低的现象，实现了农业大数据的近实时搜索、分析、高效并且合理的应用。