[发明专利]基于预训练的语义模型的模型改进方法及装置有效
| 申请号： | 202010555885.7 | 申请日： | 2020-06-17 |
| 公开（公告）号： | CN111709252B | 公开（公告）日： | 2023-03-28 |
| 发明（设计）人： | 陈徐屹;黄世维 | 申请（专利权）人： | 北京百度网讯科技有限公司 |
| 主分类号： | G06F40/30 | 分类号： | G06F40/30;G06F16/31;G06N20/00 |
| 代理公司： | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人： | 王达佐;马晓亚 |
| 地址： | 100085 北京市*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请公开了基于预训练的语义模型的模型改进方法及装置，涉及自然语言处理、深度学习技术领域。具体实现方案为：基于预训练的语义模型，得到初始改进模型，其中，在初始改进模型中，基于哈希查找法确定输入向量的语义结果信息；基于模型蒸馏法，训练初始改进模型，得到改进模型。本方案通过基于对输入向量进行哈希查找以得到输入向量的语义结果信息，替代了原有的语义模型的繁杂的迭代计算过程，得到了模型参数少、压缩比例高的改进模型，并提高了改进模型的处理速度。 | ||
| 搜索关键词： | 基于 训练 语义 模型 改进 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司，未经北京百度网讯科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010555885.7/，转载请声明来源钻瓜专利网。
- 上一篇：一种用于制备光子晶体的方法
- 下一篇：一种NiV合金金相试样的制备方法
