[发明专利]社交媒体信息采集方法、装置、系统、设备及存储介质有效
申请号: | 201910255758.2 | 申请日: | 2019-04-01 |
公开(公告)号: | CN110046319B | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 李宇涵;曹六一;张丹;于晓明 | 申请(专利权)人: | 北大方正集团有限公司;北京北大方正电子有限公司 |
主分类号: | G06F16/958 | 分类号: | G06F16/958;G06F16/9536;G06Q50/00 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张子青;刘芳 |
地址: | 100871 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 社交 媒体 信息 采集 方法 装置 系统 设备 存储 介质 | ||
1.一种社交媒体信息采集方法,其特征在于,应用于采集调度装置,包括:
向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务装置根据待采集社交媒体的特征信息给所述采集调度装置分配对应的账号资源;
根据所述账号资源,生成和/或衍生调度采集任务;
向采集程序动态加载装置发送第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件;
根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。
2.根据权利要求1所述的方法,其特征在于,所述多个通用服务组件包括第一通信模块;
所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:
通过所述第一通信模块向服务器发送网络请求指令,所述网络请求指令包括所述账号资源和所述调度采集任务,所述网络请求指令用于请求所述服务器根据所述调度采集任务下载所述调度采集任务对应的第一任务结果,并根据所述账号资源,将所述第一任务结果通过所述第一通信模块反馈给所述采集调度装置;
接收所述第一通信模块返回的所述第一任务结果,并对所述任务结果进行解析,确定采集结果。
3.根据权利要求1所述的方法,其特征在于,所述多个通用服务组件中包括第二通信模块和滤重模块;
所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:
通过所述第二通信模块向服务器发送网络请求指令,所述网络请求指令用于请求所述服务器根据所述调度采集任务下载所述调度采集任务对应的第二任务结果,所述滤重模块用于接收所述第二通信模块发送的第二任务结果,并对所述第二任务结果进行滤重,得到滤重后的第二任务结果,将滤重后的第二任务结果发送至所述第二通信模块,所述第二通信模块用于将所述第二任务结果发送至所述滤重模块,并将所述滤重后的第二任务结果反馈给所述采集调度装置;
接收所述第二通信模块返回的所述滤重后的第二任务结果,并对所述滤重后的第二任务结果进行解析,确定采集结果。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述多个通用服务组件中还包括写入模块;
在所述确定采集结果之后,所述方法还包括:
通过所述写入模块将所述采集结果写入到预设目录中,并控制存储所述采集结果的所述预设目录中的单个文件内存小于等于预设内存。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
向所述账号资源服务装置发送第三请求信息,所述第三请求信息用于请求获取存储在所述账号资源服务装置中的所述账号资源的目标账号资源列表,所述目标账号资源列表为当前时刻的账号资源列表;
接收所述目标账号资源列表,并对所述目标账号资源列表中的账号资源进行监控;
将所述目标账号资源列表中异常的账号资源发送至所述账号资源服务装置,以使所述账号资源服务装置对所述异常的账号资源进行处理。
6.一种社交媒体信息采集方法,其特征在于,应用于采集程序动态加载装置,包括:
触发启动采集调度装置的指令,所述启动采集调度装置的指令用于启动多个采集调度装置,以使多个所述采集调度装置分别向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务器根据待采集社交媒体的特征信息给多个所述采集调度装置中的每个采集调度装置分配对应的账号资源,以使每个所述采集调度装置根据所述账号资源,生成和/或衍生对应的调度采集任务;
接收多个所述采集调度装置分别发送的第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件,以使每个所述采集调度装置根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定对应的采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北大方正集团有限公司;北京北大方正电子有限公司,未经北大方正集团有限公司;北京北大方正电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910255758.2/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置