[发明专利]文本提取方法、敏感词判定方法、装置和服务器有效
申请号: | 201410077249.2 | 申请日: | 2014-03-04 |
公开(公告)号: | CN104899201B | 公开(公告)日: | 2019-05-14 |
发明(设计)人: | 李炳 | 申请(专利权)人: | 腾讯科技(北京)有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F16/953 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 江崇玉 |
地址: | 100080 北京市海淀区海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种文本提取方法、敏感词判定方法、装置和服务器,属于互联网技术领域。所述文本提取方法包括:对于文本集合中的每一条文本信息,提取文本信息中的关键词;对于提取到的每一个关键词,通过至少两个预定哈希函数中的每一个哈希函数分别计算关键词在预定阵列中所对应的位置;检测关键词在预定阵列中所对应的位置处存储的内容是否都是预定标识;若检测结果为都是预定标识,则判定关键词为敏感词;提取文本集合中不包含敏感词的文本信息;达到了当通过多个哈希函数计算得到的关键词在预定阵列中所对应的位置处存储的内容都是预定标识时,即可判定关键词是敏感词,提高了文本信息的提取效率的效果。 | ||
搜索关键词: | 敏感词 文本信息 哈希函数 文本提取 预定标识 判定 文本集合 位置处 服务器 存储 互联网技术 检测结果 提取效率 检测 | ||
【主权项】:
1.一种文本提取方法,其特征在于,所述方法包括:对于文本集合中的每一条文本信息,提取文本信息中的关键词;对于提取到的每一个关键词,通过至少两个预定哈希函数中的每一个哈希函数分别计算所述关键词在预定阵列中所对应的位置,所述预定阵列为目标位置处存储有预定标识的阵列,所述目标位置为通过所述至少两个预定哈希函数中的每一个哈希函数对敏感词库中的每个敏感词进行哈希计算后,计算得到的哈希值在所述预定阵列中所对应的位置;检测所述关键词在所述预定阵列中所对应的位置处存储的内容是否都是所述预定标识;若检测结果为都是所述预定标识,则判定所述关键词为敏感词;提取所述文本集合中不包含所述敏感词的文本信息。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(北京)有限公司,未经腾讯科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410077249.2/,转载请声明来源钻瓜专利网。