[发明专利]社交媒体信息采集方法、装置、系统、设备及存储介质有效

专利信息
申请号: 201910255758.2 申请日: 2019-04-01
公开(公告)号: CN110046319B 公开(公告)日: 2021-04-09
发明(设计)人: 李宇涵;曹六一;张丹;于晓明 申请(专利权)人: 北大方正集团有限公司;北京北大方正电子有限公司
主分类号: G06F16/958 分类号: G06F16/958;G06F16/9536;G06Q50/00
代理公司: 北京同立钧成知识产权代理有限公司 11205 代理人: 张子青;刘芳
地址: 100871 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 社交 媒体 信息 采集 方法 装置 系统 设备 存储 介质
【权利要求书】:

1.一种社交媒体信息采集方法,其特征在于,应用于采集调度装置,包括:

向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务装置根据待采集社交媒体的特征信息给所述采集调度装置分配对应的账号资源;

根据所述账号资源,生成和/或衍生调度采集任务;

向采集程序动态加载装置发送第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件;

根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。

2.根据权利要求1所述的方法,其特征在于,所述多个通用服务组件包括第一通信模块;

所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:

通过所述第一通信模块向服务器发送网络请求指令,所述网络请求指令包括所述账号资源和所述调度采集任务,所述网络请求指令用于请求所述服务器根据所述调度采集任务下载所述调度采集任务对应的第一任务结果,并根据所述账号资源,将所述第一任务结果通过所述第一通信模块反馈给所述采集调度装置;

接收所述第一通信模块返回的所述第一任务结果,并对所述任务结果进行解析,确定采集结果。

3.根据权利要求1所述的方法,其特征在于,所述多个通用服务组件中包括第二通信模块和滤重模块;

所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:

通过所述第二通信模块向服务器发送网络请求指令,所述网络请求指令用于请求所述服务器根据所述调度采集任务下载所述调度采集任务对应的第二任务结果,所述滤重模块用于接收所述第二通信模块发送的第二任务结果,并对所述第二任务结果进行滤重,得到滤重后的第二任务结果,将滤重后的第二任务结果发送至所述第二通信模块,所述第二通信模块用于将所述第二任务结果发送至所述滤重模块,并将所述滤重后的第二任务结果反馈给所述采集调度装置;

接收所述第二通信模块返回的所述滤重后的第二任务结果,并对所述滤重后的第二任务结果进行解析,确定采集结果。

4.根据权利要求1-3任一项所述的方法,其特征在于,所述多个通用服务组件中还包括写入模块;

在所述确定采集结果之后,所述方法还包括:

通过所述写入模块将所述采集结果写入到预设目录中,并控制存储所述采集结果的所述预设目录中的单个文件内存小于等于预设内存。

5.根据权利要求4所述的方法,其特征在于,所述方法还包括:

向所述账号资源服务装置发送第三请求信息,所述第三请求信息用于请求获取存储在所述账号资源服务装置中的所述账号资源的目标账号资源列表,所述目标账号资源列表为当前时刻的账号资源列表;

接收所述目标账号资源列表,并对所述目标账号资源列表中的账号资源进行监控;

将所述目标账号资源列表中异常的账号资源发送至所述账号资源服务装置,以使所述账号资源服务装置对所述异常的账号资源进行处理。

6.一种社交媒体信息采集方法,其特征在于,应用于采集程序动态加载装置,包括:

触发启动采集调度装置的指令,所述启动采集调度装置的指令用于启动多个采集调度装置,以使多个所述采集调度装置分别向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务器根据待采集社交媒体的特征信息给多个所述采集调度装置中的每个采集调度装置分配对应的账号资源,以使每个所述采集调度装置根据所述账号资源,生成和/或衍生对应的调度采集任务;

接收多个所述采集调度装置分别发送的第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件,以使每个所述采集调度装置根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定对应的采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北大方正集团有限公司;北京北大方正电子有限公司,未经北大方正集团有限公司;北京北大方正电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910255758.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top