[发明专利]正确数据的获取方法和装置有效
申请号: | 201110457415.8 | 申请日: | 2011-12-30 |
公开(公告)号: | CN103186618A | 公开(公告)日: | 2013-07-03 |
发明(设计)人: | 张程 | 申请(专利权)人: | 北京新媒传信科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京市隆安律师事务所 11323 | 代理人: | 权鲜枝 |
地址: | 100089 北京市海淀区万*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 正确 数据 获取 方法 装置 | ||
1.一种正确数据的获取方法,其特征在于,根据获取到的数据源建立索引数据库,所述方法包括:
接收用户的搜索请求,所述搜索请求中携带至少两个关键词,所述关键词属于同一数据的候选项;
在索引数据库中分别搜索所述关键词,并统计与关键词所匹配的数据的搜索结果数目;
比较所述搜索结果数目,将具有最大搜索结果数目的关键字作为获取到的正确的数据。
2.根据权利要求1所述的方法,其特征在于,
所述数据源是利用互联网中的网页数据得到的。
3.根据权利要求2所述的方法,其特征在于,通过如下方式获取所述数据源:
抓取互联网上的当前网页的数据存储至数据源中;
检测所述当前网页上的所有统一资源定位符URL,访问并抓取所述URL所对应网页并将该网页的数据存储至数据源中;将所述URL所对应的网页设置为当前网页,继续执行所述抓取互联网上的当前网页的数据存储至数据源中。
4.根据权利要求3所述的方法,其特征在于,通过如下方式更新所获取到的数据源:
获取当前网页的更新标签信息,所述更新标签信息指示网页的更新时间;
根据所述更新标签信息判断当前网页中的数据是否为新数据,若否,不再抓取当前网页中的数据,若是,抓取当前网页的数据存储至数据源中,检测所述当前网页上的所有URL,访问并抓取所述URL所对应网页并将该网页的数据存储至数据源中,以及,将所述URL所对应的网页设置为当前网页。
5.根据权利要求2所述的方法,其特征在于,所述根据获取到的数据源建立索引数据库包括:
对数据源中存储的网页数据进行解析,提取出索引数据,并利用该索引数据建立索引数据库,所述索引数据包括网页内容数据和数据编码类型。
6.一种正确数据的获取装置,其特征在于,所述装置包括
数据库建立单元,用于根据获取到的数据源建立索引数据库;
搜索请求接收单元,用于接收用户的搜索请求,所述搜索请求中携带至少两个关键词,所述关键词属于同一数据的候选项;
搜索统计单元,用于在索引数据库中搜索分别所述关键词,并统计与关键词所匹配的数据的搜索结果数目;
比较确认单元,用于比较所述搜索结果数目,将具有最大搜索结果数目的关键字作为获取到的正确的数据。
7.根据权利要求6所述的装置,其特征在于,
所述数据库建立单元所使用的数据源是利用互联网中的网页数据得到的。
8.根据权利要求7所述的装置,其特征在于,所述数据库建立单元包括数据存储模块和数据抓取模块,
所述数据存储模块,用于抓取互联网上的当前网页的数据存储至数据源中;
所述数据抓取模块,用于检测所述当前网页上的所有统一资源定位符URL,访问并抓取所述URL所对应网页;
所述数据存储模块,还用于将所述数据抓取模块所访问的网页的数据存储至数据源中,将所述URL所对应的网页设置为当前网页。
9.根据权利要求8所述的装置,其特征在于,所述数据库建立单元还包括数据源更新模块,
所述数据源更新模块,用于获取当前网页的更新标签信息,所述更新标签信息指示网页的更新时间;根据所述更新标签信息判断当前网页中的数据是否为新数据,若否,不再抓取当前网页中的数据,若是,抓取当前网页的数据存储至数据源中,检测所述当前网页上的所有URL,访问并抓取所述URL所对应网页并将该网页的数据存储至数据源中,以及,将所述URL所对应的网页设置为当前网页。
10.根据权利要求7所述的装置,其特征在于,
所述数据库建立单元,具体用于对数据源中存储的网页数据进行解析,提取出索引数据,并利用该索引数据建立索引数据库,所述索引数据包括网页内容数据和数据编码类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京新媒传信科技有限公司,未经北京新媒传信科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110457415.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置