[发明专利]社交媒体信息采集方法、装置、系统、设备及存储介质有效
申请号: | 201910255758.2 | 申请日: | 2019-04-01 |
公开(公告)号: | CN110046319B | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 李宇涵;曹六一;张丹;于晓明 | 申请(专利权)人: | 北大方正集团有限公司;北京北大方正电子有限公司 |
主分类号: | G06F16/958 | 分类号: | G06F16/958;G06F16/9536;G06Q50/00 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张子青;刘芳 |
地址: | 100871 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 社交 媒体 信息 采集 方法 装置 系统 设备 存储 介质 | ||
本申请实施例提供一种社交媒体信息采集方法、装置、系统、设备及存储介质,该方法包括:向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务装置根据待采集社交媒体的特征信息给所述采集调度装置分配对应的账号资源;根据所述账号资源,生成和/或衍生调度采集任务;向采集程序动态加载装置发送第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件;根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。本实施例提供的方法能够适用于通用社交媒体信息的采集。
技术领域
本申请实施例涉及社交媒体信息采集技术领域,尤其涉及一种社交媒体信息采集方法、装置、系统、设备及存储介质。
背景技术
随着近几十年来互联网的急速发展,越来越多的人倾向于在网络中发表观点、获取资讯,各类社交活动都已经迁移至互联网中。而社交媒体作为互联网社交中最重要的组成部分,吸引了大量的用户在社交媒体中注册账号、发表言论等。
由于社交媒体用户基数的庞大和互联网的迅捷,在社交媒体上公开的内容扩展的速度与广度都远远高于传统媒体,使得社交媒体上传播的信息极有可能快速而强烈地威胁到社会公共安全,因此对社交媒体的网站内容进行分析是十分必要的。其中,对社交媒体中的信息采集是对网站内容中数据分析前的必须环节。
但是,因为社交媒体的网站交互复杂,访问控制严格,传统采集方案一般无法直接应用于社交媒体,且存在开发周期长,采集效率低等问题。
发明内容
本申请实施例提供一种社交媒体信息采集方法、装置、系统、设备及存储介质,以克服现有技术中无法直接应用于社交媒体,且存在开发周期长,采集效率低的问题。
第一方面,本申请实施例提供一种社交媒体信息采集方法,应用于采集调度装置,包括:
向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务装置根据待采集社交媒体的特征信息给所述采集调度装置分配对应的账号资源;
根据所述账号资源,生成和/或衍生调度采集任务;
向采集程序动态加载装置发送第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件;
根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。
在一种可能的设计中,所述多个通用服务组件包括第一通信模块;
所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:
通过所述第一通信模块向服务器发送网络请求指令,所述网络请求指令包括所述账号资源和所述调度采集任务,所述网络请求指令用于请求所述服务器根据所述调度采集任务下载所述调度采集任务对应的第一任务结果,并根据所述账号资源,将所述第一任务结果通过所述第一通信模块反馈给所述采集调度装置;
接收所述第一通信模块返回的所述第一任务结果,并对所述任务结果进行解析,确定采集结果。
在一种可能的设计中,所述多个通用服务组件中包括第二通信模块和滤重模块;
所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北大方正集团有限公司;北京北大方正电子有限公司,未经北大方正集团有限公司;北京北大方正电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910255758.2/2.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置