[发明专利]文本检测方法、装置、计算设备及计算机可读存储介质有效
申请号: | 201810546892.3 | 申请日: | 2018-05-31 |
公开(公告)号: | CN108829780B | 公开(公告)日: | 2022-05-24 |
发明(设计)人: | 于洋;刘磊;徐香义;柏少乾 | 申请(专利权)人: | 北京万方数据股份有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/36;G06F40/211;G06F40/279;G06F40/247 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 张筱宁 |
地址: | 100036*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种文本检测方法、装置、计算设备及计算机可读存储介质,该文本检测方法包括:对待检测文本进行聚类预处理,得到所述待检测文本各分句中各分词对应的相似类列表;基于所述相似类列表确定所述待检测文本中所有分句对应的相似句子列表,并对所述相似句子列表中各相似句子进行合并,得到相似片段;基于所述相似片段确定所述待检测文本与所述相似片段所属文本的相似度。本申请中,实现了对文本的有效检测,提升了检测效率;并且通过采用TF_IDF值进行差值计算方式,不仅提高了计算的精确度,亦极大地提高了检测速度。 | ||
搜索关键词: | 文本 检测 方法 装置 计算 设备 计算机 可读 存储 介质 | ||
【主权项】:
1.一种文本检测方法,其特征在于,包括:对待检测文本进行聚类预处理,得到所述待检测文本各分句中各分词对应的相似类列表;基于所述相似类列表确定所述待检测文本中所有分句对应的相似句子列表,并对所述相似句子列表中各相似句子进行合并,得到相似片段;基于所述相似片段确定所述待检测文本与所述相似片段所属文本的相似度。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京万方数据股份有限公司,未经北京万方数据股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810546892.3/,转载请声明来源钻瓜专利网。