[发明专利]一种用于短文本的去重方法及装置在审
| 申请号： | 201610915522.3 | 申请日： | 2016-10-20 |
| 公开（公告）号： | CN106569989A | 公开（公告）日： | 2017-04-19 |
| 发明（设计）人： | 李苗苗 | 申请（专利权）人： | 北京智能管家科技有限公司 |
| 主分类号： | G06F17/24 | 分类号： | G06F17/24;G06F17/27 |
| 代理公司： | 北京品源专利代理有限公司11332 | 代理人： | 孟金喆,胡彬 |
| 地址： | 101500 北京市密云县经济开发*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明实施例公开了一种用于短文本的去重方法，该方法包括获取短文本的文本串信息；对所述文本串进行分词，根据所述文本串的分词信息得到所述文本串的关键词；根据所述关键词对应的权重得到文本子串，所述文本子串包括阈值个数的关键词；去除所述文本子串的重复项。本发明实施例提供的技术方案，通过获取文本串的关键词，达到了对原文本串的泛化效果，提高了去重的泛化能力和效率，计算量小，实现了多个文本串间去重的效果。 | ||
| 搜索关键词： | 一种 用于 文本 方法 装置 | ||
【主权项】：
一种用于短文本的去重方法，其特征在于，包括：获取短文本的文本串信息；对所述文本串进行分词，根据所述文本串的分词信息得到所述文本串的关键词；根据所述关键词对应的权重得到文本子串，所述文本子串包括阈值个数的关键词；去除所述文本子串的重复项。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京智能管家科技有限公司，未经北京智能管家科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201610915522.3/，转载请声明来源钻瓜专利网。
