[发明专利]舆情数据的处理方法及装置

说明书

本发明公开了一种舆情数据的处理方法及装置，其中，该方法包括：定位舆情组件在客户端界面中的坐标位置，其中，所述舆情组件用于在所述客户端中触发展示目标对象的舆情信息；在所述坐标位置上驱动所述舆情组件，以触发所述目标对象的舆情展示请求，其中，所述舆情展示请求用于向服务器请求舆情数据；截取所述客户端的数据传输报文，其中，所述数据传输报文携带所述舆情数据；根据所述舆情数据对所述目标对象进行情感分析。通过本发明，解决了相关技术中采集舆情数据效率低的技术问题，提高了舆情数据的采集效率。

技术领域

本发明涉及大数据领域，尤其是一种舆情数据的处理方法及装置。

背景技术

相关技术中，为用户提供更好的线上内容和产品，需要进行舆情分析，而舆情分析的数据来源包括用户的评论信息。

相关技术中的常见的人工采集评论数据(包含后台拉取数据)效率低、人工成本高，不能实现对用户市场需求的快速反映，严重影响了业务的推进。现有的数据采集技术大多是基于网络通用采集系统的开发和人工录入两种，后者效率太低，前者主要是依赖网络通信原理和http(s)请求响应原理，对网页中公开或自有数据进行采集，不能对app中，或者是网页中未直接展示的舆情数据中进行采集，导致相关技术中采集评论数据的效率低，渠道少，数据不完善。

针对相关技术中存在的上述问题，目前尚未发现有效的解决方案。

发明内容

为解决相关技术中采集舆情数据效率低的技术问题，本发明实施例提供了一种舆情数据的处理方法及装置。

根据本发明的一个实施例，提供了一种舆情数据的处理方法，包括：定位舆情组件在客户端界面中的坐标位置，其中，所述舆情组件用于在所述客户端中触发展示目标对象的舆情信息；在所述坐标位置上驱动所述舆情组件，以触发所述目标对象的舆情展示请求，其中，所述舆情展示请求用于向服务器请求舆情数据；截取所述客户端的数据传输报文，其中，所述数据传输报文携带所述舆情数据；根据所述舆情数据对所述目标对象进行情感分析。

可选的，定位舆情组件在客户端界面中的坐标位置包括：获取客户端界面的第一像素元组，以及获取所述舆情组件的界面图像的第二像素元组；在所述第一像素元组中遍历查找与所述第二像素元组匹配的第三像素元组；将所述第三像素元组在所述客户端界面中的坐标位置确定为所述舆情组件在所述客户端界面中的坐标位置。

可选的，定位舆情组件在客户端界面中的坐标位置包括：提取所述舆情组件的标识符，其中，所述标识符包括以下至少之一：图像、文字、符号；在所述客户端界面的中查找包括所述标识符的操作组件；定位所述操作组件在所述客户端界面中的坐标位置。

可选的，在所述坐标位置上驱动所述舆情组件包括：通过web驱动在所述坐标位置上生成触控信号；响应所述触控信号，运行所述舆情组件。

可选的，截取所述客户端的数据传输报文包括：向所述服务器发送所述舆情展示请求；监测所述服务器响应所述舆情展示请求反馈的请求响应报文；若监测到所述请求响应报文，截取所述请求响应报文。

可选的，根据所述舆情数据对所述目标对象进行情感分析包括：从所述数据传输报文中提取数据包，对所述数据包进行清洗，得到所述舆情数据；将所述舆情数据存储在逗号分隔值CSV文件中；将所述CSV文件中舆情数据转换为python对象；基于所述python对象对所述目标对象进行情感分析。

可选的，根据所述舆情数据对所述目标对象进行情感分析包括：遍历所述舆情数据中的每一条评论，采用预设自然语言处理工具包NLTK计算每一条评论对应的情感值，基于所述情感值确定对应评论的情感倾向，其中，所述情感倾向包括以下之一：正向、负向、中性；以及采用分词工具切分所述舆情数据中的每一条评论，统计所述舆情数据中出现频率最高的至少一个高频分词；基于所述情感倾向和所述高频分词确定所述目标对象的情感属性。