[发明专利]应用于农业物联网的数据处理方法及装置

摘要

本发明公开了一种应用于农业物联网的数据处理方法及装置，包括目标数据采集模块、数据整理模块、数据特征提取模块、数据分析模块、数据定位模块、监测模块、预警模块和中央处理器。本发明在实现目标数据定向采集的同时实现了冲突数据和亢余数据的自动清除，提高了数据源的可靠性。基于MapReduce进行数据特征的提取，将纷繁多样的海量数据转换成具有价值的可用数据，提高了大规模数据的分析效率。

主权项

1.应用于农业物联网的数据处理装置，其特征在于，包括：目标数据采集模块，内设算法编辑模块，用于各种目标数据的采集，并将采集到的数据发送到数据整理模块；数据整理模块，用于查找所述数据之间存在的冗余内容以及冲突内容，并将清除相应的冗余内容和冲突内容；数据特征提取模块，采用MapReduce对整理完成后的数据进行特征数据的提取；数据分析模块，采用神经网络模型基于所述特征数据完成对应数据的评估，并输出评估结果；数据定位模块，基于所述特征数据为整理完成后的数据在数据库中找到合适的位置，并为其找到相似数据点，建立其与相似数据点之间的关系；监测模块，以静态jar包的形式部署在处理装置内，用于通过脚本录制方式进行数据处理过程中目标数据采集模块、数据整理模块、数据特征提取模块以及数据分析模块工作流程数据的录制，并基于录制的流程数据实现各模块工作状态的评估，将评估结果发送到中央处理器；预警模块，用于根据中央处理器发送的控制命令输出对应的预警信息；中央处理器，用于协调上述模块工作。