[发明专利]文本分词的方法及装置在审
申请号: | 202211681104.4 | 申请日: | 2022-12-27 |
公开(公告)号: | CN116050398A | 公开(公告)日: | 2023-05-02 |
发明(设计)人: | 潘帅;张伟;陈曦;麻志毅 | 申请(专利权)人: | 浙江大胜达包装股份有限公司;浙江省北大信息技术高等研究院;杭州未名信科科技有限公司 |
主分类号: | G06F40/284 | 分类号: | G06F40/284;G06F40/242;G06N3/048;G06N3/047;G06N3/08;G06N3/0442 |
代理公司: | 北京辰权知识产权代理有限公司 11619 | 代理人: | 尹倩倩 |
地址: | 311215 浙江省杭州市萧山*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种文本分词的方法及装置,方法包括:获取目标语料;基于预训练好的文本分词模型确定所述目标语料中目标位置的文本成词的可能性;其中,所述预训练好的文本分词模型基于目标词库中词的随机组合合成的训练语料训练得到,所述目标词库基于最大连接分词和回溯过滤法确定;基于所述目标位置的文本成词的可能性对目标语料进行分词。基于此,实现无需人工标注数据,且能够有效的切分行业领域新词。 | ||
搜索关键词: | 文本 分词 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大胜达包装股份有限公司;浙江省北大信息技术高等研究院;杭州未名信科科技有限公司,未经浙江大胜达包装股份有限公司;浙江省北大信息技术高等研究院;杭州未名信科科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202211681104.4/,转载请声明来源钻瓜专利网。
- 上一篇:一种荧光聚酰亚胺胶带的制备方法和应用
- 下一篇:一种光子集成的光域均衡器芯片