[发明专利]模型训练方法、文本标签生成方法、装置、设备及介质在审
申请号: | 202110399762.3 | 申请日: | 2021-04-14 |
公开(公告)号: | CN113722422A | 公开(公告)日: | 2021-11-30 |
发明(设计)人: | 牟文晶 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/9532;G06F16/9535;G06F40/30;G06N20/00 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 祝亚男 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 训练 方法 文本 标签 生成 装置 设备 介质 | ||
1.一种模型训练方法,其特征在于,所述方法包括:
获取搜索行为信息,所述搜索行为信息用于表示搜索过程中与输入行为对应的搜索输入数据以及与点击行为对应的搜索结果数据;
对所述搜索行为信息进行数据清洗,得到训练数据,所述训练数据包括清洗后的至少一条搜索输入数据和每条搜索输入数据对应的至少一条搜索结果数据;
以所述训练数据中的搜索结果数据为输入信息,所述搜索输入数据为监督信息,训练得到目标模型,所述目标模型用于提取文本的文本标签。
2.根据权利要求1所述的方法,其特征在于,所述获取搜索行为信息,包括:
响应于第一输入行为,获取与所述第一输入行为对应的第一输入数据;
响应于对展示的搜索结果的第一点击行为,获取与所述第一点击行为对应的至少一个第一结果数据;
响应于第二输入行为,将所述第一输入行为、所述第一输入数据、所述第一点击行为以及所述至少一个第一结果数据,获取为一条搜索行为信息。
3.根据权利要求1所述的方法,其特征在于,所述对所述搜索行为信息进行数据清洗的方式,包括下述至少一项:
响应于任一条搜索行为信息中的搜索输入数据不满足词性条件,移除所述任一条搜索行为信息,所述词性条件用于指示至少一种词性;
响应于任一条搜索行为信息中的搜索输入数据包括第一词语库中的任一词语,移除所述任一条搜索行为信息,所述第一词语库用于存储至少一个词语;
响应于任一条搜索行为信息中的搜索输入数据的语义不完整,移除所述任一条搜索行为信息;
响应于任一条搜索行为信息中的搜索输入数据与搜索结果数据之间的关联度小于关联度阈值,移除所述任一条搜索行为信息。
4.根据权利要求1所述的方法,其特征在于,所述以所述训练数据中的搜索结果数据为输入信息,所述搜索输入数据为监督信息,训练得到目标模型,包括:
对于所述训练数据中的任一搜索结果数据,使用至少一个目标符号分别替换所述任一搜索结果数据中属于第二词语库的至少一个词语,得到所述任一搜索结果数据对应的替换结果数据,一个目标符号用于代表一个词语;
基于本次迭代过程对应的第一模型对所述替换结果数据进行处理,得到包括所述至少一个目标符号的第一输出结果;
将所述第一输出结果中的目标符号替换为对应的词语,得到第二输出结果;
基于所述第二输出结果和所述任一搜索结果数据对应的搜索输入数据之间的差异,调整所述第一模型的参数,得到下次迭代过程对应的第二模型;
基于所述第二模型进行迭代,直到得到训练完毕的所述目标模型。
5.一种文本标签生成方法,其特征在于,所述方法包括:
获取待推荐的目标文本;
基于目标模型对所述目标文本进行处理,得到目标文本标签;
其中,所述目标模型基于权利要求1至4任一项训练得到。
6.根据权利要求5所述的方法,其特征在于,所述基于目标模型对所述目标文本进行处理,得到目标文本标签,包括:
使用至少一个目标符号分别替换所述目标文本中属于第二词语库的词语,得到替换文本;
基于所述目标模型对所述替换文本进行处理,得到包括所述至少一个目标符号的替换文本标签;
将所述替换文本标签中的目标符号替换为对应的词语,得到所述目标文本标签。
7.一种模型训练装置,其特征在于,所述装置包括:
信息获取模块,用于获取搜索行为信息,所述搜索行为信息用于表示搜索过程中与输入行为对应的搜索输入数据以及与点击行为对应的搜索结果数据;
数据清洗模块,用于对所述搜索行为信息进行数据清洗,得到训练数据,所述训练数据包括清洗后的至少一条搜索输入数据和每条搜索输入数据对应的至少一条搜索结果数据;
训练模块,用于以所述训练数据中的搜索结果数据为输入信息,所述搜索输入数据为监督信息,训练得到目标模型,所述目标模型用于提取文本的文本标签。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110399762.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种低辐射高隔热玻璃门窗
- 下一篇:一种通知消息的显示方法及电子设备