[发明专利]新词发现中的字符串过滤方法有效
申请号: | 201010298510.3 | 申请日: | 2010-09-29 |
公开(公告)号: | CN101950306A | 公开(公告)日: | 2011-01-19 |
发明(设计)人: | 牟小峰 | 申请(专利权)人: | 北京新媒传信科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F17/27 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹 |
地址: | 100089 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种新词发现中字符串过滤方法,该方法包括:步骤A、估计候选字符串的成词概率;步骤B、将成词概率大于第一预设阈值的候选字符串作为词语串输出。本发明所述方法在区分垃圾串和词语串时使用了概率估计方法,通过词的上下文约束和词位的成词概率来给字符串排序,同时采用了N元搭配来过滤垃圾串。本发明所述方法的优点在于:1)支持任意长度的新词发现(大于等于2个汉字);2)识别准确率明显提高;3)计算复杂度低,符合工程实用的目的。 | ||
搜索关键词: | 新词 发现 中的 字符串 过滤 方法 | ||
【主权项】:
一种新词发现中字符串过滤方法,其特征在于,该方法包括:步骤A、估计候选字符串的成词概率;步骤B、将成词概率大于第一预设阈值的候选字符串作为词语串输出。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京新媒传信科技有限公司,未经北京新媒传信科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201010298510.3/,转载请声明来源钻瓜专利网。