[发明专利]文本去重方法、装置、电子设备及存储介质有效
| 申请号: | 202310612468.5 | 申请日: | 2023-05-29 |
| 公开(公告)号: | CN116341566B | 公开(公告)日: | 2023-10-20 |
| 发明(设计)人: | 华娇娇;唐华云;赵凌;黄山;杨昂;王延昭;高兰兰 | 申请(专利权)人: | 中债金科信息技术有限公司 |
| 主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F18/22;G06F40/295;G06F16/35 |
| 代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 张晓霞 |
| 地址: | 101118 北京市通州区宋庄镇*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明提供一种文本去重方法、装置、电子设备及存储介质,涉及人工智能技术领域,该方法包括:获取多篇文本和每篇文本中的目标主体名称;基于多篇文本,确定多个第一相似文本对;第一相似文本对中的两篇文本之间的距离小于预设距离;从多个第一相似文本对中筛选出多个第二相似文本对;第二相似文本对中的两篇文本分别对应的目标主体名称存在交集;基于多个第二相似文本对中的各文本之间的相似度,确定多个相似文本集;对每个相似文本集进行去重处理,得到目标文本。本发明可以提升文本去重的准确率。 | ||
| 搜索关键词: | 文本 方法 装置 电子设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中债金科信息技术有限公司,未经中债金科信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310612468.5/,转载请声明来源钻瓜专利网。





