[发明专利]社交媒体信息采集方法、装置、系统、设备及存储介质有效

专利信息
申请号: 201910255758.2 申请日: 2019-04-01
公开(公告)号: CN110046319B 公开(公告)日: 2021-04-09
发明(设计)人: 李宇涵;曹六一;张丹;于晓明 申请(专利权)人: 北大方正集团有限公司;北京北大方正电子有限公司
主分类号: G06F16/958 分类号: G06F16/958;G06F16/9536;G06Q50/00
代理公司: 北京同立钧成知识产权代理有限公司 11205 代理人: 张子青;刘芳
地址: 100871 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 社交 媒体 信息 采集 方法 装置 系统 设备 存储 介质
【说明书】:

本申请实施例提供一种社交媒体信息采集方法、装置、系统、设备及存储介质,该方法包括:向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务装置根据待采集社交媒体的特征信息给所述采集调度装置分配对应的账号资源;根据所述账号资源,生成和/或衍生调度采集任务;向采集程序动态加载装置发送第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件;根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。本实施例提供的方法能够适用于通用社交媒体信息的采集。

技术领域

本申请实施例涉及社交媒体信息采集技术领域,尤其涉及一种社交媒体信息采集方法、装置、系统、设备及存储介质。

背景技术

随着近几十年来互联网的急速发展,越来越多的人倾向于在网络中发表观点、获取资讯,各类社交活动都已经迁移至互联网中。而社交媒体作为互联网社交中最重要的组成部分,吸引了大量的用户在社交媒体中注册账号、发表言论等。

由于社交媒体用户基数的庞大和互联网的迅捷,在社交媒体上公开的内容扩展的速度与广度都远远高于传统媒体,使得社交媒体上传播的信息极有可能快速而强烈地威胁到社会公共安全,因此对社交媒体的网站内容进行分析是十分必要的。其中,对社交媒体中的信息采集是对网站内容中数据分析前的必须环节。

但是,因为社交媒体的网站交互复杂,访问控制严格,传统采集方案一般无法直接应用于社交媒体,且存在开发周期长,采集效率低等问题。

发明内容

本申请实施例提供一种社交媒体信息采集方法、装置、系统、设备及存储介质,以克服现有技术中无法直接应用于社交媒体,且存在开发周期长,采集效率低的问题。

第一方面,本申请实施例提供一种社交媒体信息采集方法,应用于采集调度装置,包括:

向账号资源服务装置发送第一请求信息,所述第一请求信息用于请求所述账号资源服务装置根据待采集社交媒体的特征信息给所述采集调度装置分配对应的账号资源;

根据所述账号资源,生成和/或衍生调度采集任务;

向采集程序动态加载装置发送第二请求信息,所述第二请求信息用于请求调用所述采集程序动态加载装置提供的多个通用服务组件;

根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,所述采集结果用于表示对所述待采集社交媒体进行社交媒体信息采集后得到的采集数据。

在一种可能的设计中,所述多个通用服务组件包括第一通信模块;

所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:

通过所述第一通信模块向服务器发送网络请求指令,所述网络请求指令包括所述账号资源和所述调度采集任务,所述网络请求指令用于请求所述服务器根据所述调度采集任务下载所述调度采集任务对应的第一任务结果,并根据所述账号资源,将所述第一任务结果通过所述第一通信模块反馈给所述采集调度装置;

接收所述第一通信模块返回的所述第一任务结果,并对所述任务结果进行解析,确定采集结果。

在一种可能的设计中,所述多个通用服务组件中包括第二通信模块和滤重模块;

所述根据所述调度采集任务,通过所述多个通用服务组件和所述账号资源,确定采集结果,包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北大方正集团有限公司;北京北大方正电子有限公司,未经北大方正集团有限公司;北京北大方正电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910255758.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top