[发明专利]网络资讯采集方法及装置在审
申请号: | 201711456851.7 | 申请日: | 2017-12-28 |
公开(公告)号: | CN108021706A | 公开(公告)日: | 2018-05-11 |
发明(设计)人: | 黄毅华;成洪山 | 申请(专利权)人: | 广州市西美信息科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京超凡志成知识产权代理事务所(普通合伙) 11371 | 代理人: | 宋南 |
地址: | 510000 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网络 资讯 采集 方法 装置 | ||
本发明提供了一种网络资讯采集方法及装置,涉及互联网技术领域。网络资讯采集方法应用于服务端,该包括接收采集参数,采集参数包括目标网站的URL地址;依据URL地址获得目标网站中的资讯内容;将资讯内容与预先建立的多个不同行业类别的素材库进行匹配,得到资讯内容对应的行业类别;将资讯内容存储至对应行业类别的素材库中。本发明提供的网络资讯采集方法及装置能够较好地提高资讯采集的工作效率,提高资讯采集内容的质量,同时能够对采集到的资讯内容进行规范的分类存储,很好地防止了海量内容采集后因乱放置而浪费空间的现象,方便对采集到的资讯内容后续进行阅读及进一步筛选。
技术领域
本发明涉及互联网技术领域,具体而言,涉及一种网络资讯采集方法及装置。
背景技术
现有公众获取网络资讯的方式已从报纸、广播、电视等方式逐渐转变为以互联网为主流方式。而网络资讯透过互联网的传播,通过不同来源使得其产生持续性的影响力和传播力。
目前许多网络资讯的采集是基于人工浏览采集的方式,通过人工浏览采集的方式存在着采集速度慢、采集操作复杂、采集内容质量差一件筛选有用资讯难等问题,其消耗大量时间和经历并且效果达不到预期的理想。在信息膨胀的当今,在海量的网络资讯中通过人工采集的方式显然不能满足网络资讯的采取需求。
发明内容
有鉴于此,本发明实施例的目的在于提供一种网络资讯采集方法及装置,以改善上述问题。
第一方面,本发明实施例提供了一种网络资讯采集方法,应用于服务端,所述方法包括:
接收采集参数,所述采集参数包括目标网站的URL地址;
依据所述URL地址获得所述目标网站中的资讯内容;
将所述资讯内容与预先建立的多个不同行业类别的素材库进行匹配,得到所述资讯内容对应的行业类别;
将所述资讯内容存储至对应行业类别的素材库中。
可选地,所述采集参数还包括采集方式,所述依据所述URL地址获得所述目标网站中的资讯内容,包括:
依据所述URL地址和所述采集方式获得所述目标网站中的资讯内容。
可选地,所述采集参数还包括第一关键词,所述依据所述URL地址和所述采集方式获得所述目标网站中的资讯内容,包括:
依据所述URL地址和所述采集方式获得所述目标网站中包含所述第一关键词的目标字段的资讯内容。
可选地,每个所述素材库中包括第二关键词,所述将所述资讯内容与预先建立的多个不同行业类别的素材库进行匹配,得到所述资讯内容对应的行业类别,包括:
将所述资讯内容与预先建立的多个不同行业类别的素材库中的第二关键词进行匹配,得到所述资讯内容与各个素材库的匹配度;
将匹配对最高的素材库所对应的行业类别作为所述资讯内容对应的行业类别。
可选地,所述方法还包括:
接收用户终端上传的查询请求,所述查询请求包括第三关键词;
将包含所述第三关键词的所述资讯内容的存储地址发送给所述用户终端。
第二方面,本发明实施例还提供了一种网络资讯采集装置,应用于服务端,所述网络资讯采集装置包括:
接收模块,用于接收采集参数,所述采集参数包括目标网站的URL地址;
获取模块,用于依据所述URL地址获得所述目标网站中的资讯内容;
匹配模块,用于将所述资讯内容与预先建立的多个不同行业类别的素材库进行匹配,得到所述资讯内容对应的行业类别;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市西美信息科技有限公司,未经广州市西美信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711456851.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:可接地的简洁型旅行转换插头
- 下一篇:聚苯醚粉体及制造方法