[发明专利]跨语言文本表示方法和装置有效
申请号: | 201910678829.X | 申请日: | 2019-07-25 |
公开(公告)号: | CN110413736B | 公开(公告)日: | 2022-02-25 |
发明(设计)人: | 王硕寰;孙宇 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F40/30;G06K9/62 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 王艳斌 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出一种跨语言文本表示方法和装置,其中,方法包括:获取第一语种对应的第一训练文本和第一跨语言表示模型,其中,第一跨语言表示模型包括第一通用向量子模型和文本表示子模型;获取待处理文本对应的目标语种的第二训练文本;根据第一训练文本和第二训练文本训练第一通用向量子模型得到第二通用向量子模型;根据第二通用向量子模型和文本表示子模型获取目标语种的第二跨语言表示模型。由此,基于语义对齐处理挖掘不同语种之间的通用向量,基于通用向量进行跨语言文本处理,保证了跨语言处理模型的表示效果。解决了现有技术中,跨语言处理模型难以跨越语种不同的障碍导致的表示效果较差的技术问题。 | ||
搜索关键词: | 语言 文本 表示 方法 装置 | ||
【主权项】:
1.一种跨语言文本表示方法,其特征在于,包括以下步骤:获取第一语种对应的第一训练文本和第一跨语言表示模型,其中,所述第一跨语言表示模型包括第一通用向量子模型和文本表示子模型;获取待处理文本对应的第二语种的第二训练文本,其中,所述第二语种与所述第一语种不同,所述第一训练文本和所述第二训练文本语义相同;根据所述第一训练文本和所述第二训练文本训练所述第一通用向量子模型得到第二通用向量子模型;根据所述第二通用向量子模型和所述文本表示子模型获取所述第二语种的第二跨语言表示模型,以便于基于所述第二跨语言表示模型对所述待处理文本进行文本表示。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910678829.X/,转载请声明来源钻瓜专利网。