[发明专利]基于可信度面向大数据及普通数据的数据采集方法和系统

摘要

本发明涉及一种数据采集方法和系统，其方法包括：获取采集条件，根据采集条件获取多个目标数据；根据预设特征匹配度对目标数据进行分类，得到数据群体；分别获取对应各目标数据的个体可信度，并根据个体可信度获取数据群体的群体可信度；判断群体可信度是否大于或等于预设值；若是，采集数据群体中对应的目标数据存入目标数据库或大数据存储库。如此，根据群体可信度和预设值对目标数据组成的数据群体进行筛选，当群体可信度大于或等于预设值时才采集对应的目标数据，避免采集到不可靠的数据，提高数据采集的正确率。

主权项

一种数据采集方法，其特征在于，包括以下步骤：获取采集条件，根据所述采集条件获取多个目标数据；对所述目标数据进行分类，得到数据群体；分别获取对应各目标数据的个体可信度，并根据所述个体可信度获取所述数据群体的群体可信度；判断所述群体可信度是否大于或等于预设值；若是，则采集所述数据群体中对应的目标数据存入目标数据库或大数据存储库。