[发明专利]一种基于大数据的运维平台远程数据采集系统

权利要求书

1.一种基于大数据的运维平台远程数据采集系统，其特征在于，包括意向录入单元、对象检索单元、可信分析单元、数据滤除单元、准入核实单元、身份验证单元、身份库、控制器、显示单元、存储单元和管理单元；

其中，所述意向录入单元用于录入目标要求数据，目标要求数据即为用户所需采集的数据要求，该数据要求包括数据方向、关键词和内容简介；所述意向录入单元用于将目标要求数据传输到对象检索单元，所述对象检索单元接收意向录入单元传输的目标要求数据，并根据目标要求数据自主获取到所有的相关数据，相关数据即为所有的出现过关键词的数据；所述对象检索单元用于将获取到的相关数据传输到可信分析单元，所述可信分析单元用于对相关数据进行可信分析处理，得到相关数据的复量值Fj、被引用次数Yj和隔差时间Gj；

所述可信分析单元用于将相关数据的复量值Fj、被引用次数Yj和隔差时间Gj传输到数据滤除单元，所述数据滤除单元内置有滤除规则；

所述准入核实单元用于让用户上传身份信息，身份信息包括身份标识、密码和间隔时间，间隔时间为用户录入每一个密码之间的间隔时间；

所述准入核实单元用于将身份信息传输到身份验证单元，所述身份验证单元接收准入核实单元传输的身份信息，并对其进行验证处理，根据处理过程产生通过信号和勉通信号；

所述身份验证单元用于将用户及其对应的通过信号和勉通信号传输到数据滤除单元，所述数据滤除单元接收可信分析单元传输的用户及其对应的通过信号和勉通信号，并结合滤除规则、复量值Fj、被引用次数Yj和隔差时间Gj对相关数据进行滤除处理，具体滤除处理步骤为：

SS1：首先获取到相关数据及其对应的复量值Fj、被引用次数Yj和隔差时间Gj；

SS2：利用公式计算相关数据的可取值Kq，具体计算公式为：

Kq＝0.411*Fj+0.356*Yj+0.233*Gj；

式中，0.411、0.356和0.233均为权值；

SS3：根据Kq值从大到小的顺序，将排名前百分之二十的标记为优质数据；

排名处于前百分之四十到前百分之二十的标记为中级数据；

剩余标记为随机数据；

SS4：当接收到用户的为通过信号时，自主获取到对应预设的用户权限，用户权限包括高级、中级和低级，分别对应能够仅获取到优质数据、中级数据及其以上的数据和随机数据及其以上的数据；

SS5：获取到用户权限给予对应的数据进行标记为展示数据；

SS6：当接收用户的为勉通信号时，获取到用户权限对应的数据，并会随机去除一半数据之后进行标记为展示数据。

2.根据权利要求1所述的一种基于大数据的运维平台远程数据采集系统，其特征在于，所述可信分析处理的具体处理过程为：

步骤一：首先获取到相关数据；

步骤二：任选一相关数据；

步骤三：获取到该相关数据的所有内容，同时获取到目标要求数据中所有的关键词；

步骤四：任选一关键词；

步骤五：将该关键词与相关数据进行匹配，获取到该关键词的出现次数，将该出现次数标记为C1；

步骤六：任选下一关键词，重复步骤五，得到第二个关键词的出现次数C2；

步骤七：重复步骤六，得到所有关键词的出现次数Ci，i＝1...n；

步骤八：获取到关键词中出现次数不为零的关键词个数占所有关键词个数的比例，将该比例标记为出现比Cb；

步骤九：利用公式计算复量值F，具体计算公式为：

式中，X1和X2均为预设的权值，且满足X1+X2＝1，且0X2X11；

步骤十：得到该相关数据的复量值F，并将其标记为F1；

步骤十一：任选下一相关数据，重复步骤三-步骤十一，得到所有相关数据的复量值Fj，j＝1...m；

步骤十二：获取到所有相关数据的被引用次数Yj，Yj与Fj一一对应；

步骤十三：获取到所有相关数据的上传时间，根据上传时间自动获取到距离当下的时间，将该时间标记为隔差时间Gj，j＝1...m，其中Gj与Fj一一对应；

步骤十四：得到相关数据的复量值Fj、被引用次数Yj和隔差时间Gj。