[发明专利]一种电商实体识别模型的构建方法、构建装置、设备和介质在审
| 申请号: | 201910810417.7 | 申请日: | 2019-08-29 |
| 公开(公告)号: | CN110516251A | 公开(公告)日: | 2019-11-29 |
| 发明(设计)人: | 王千;梁新敏;陈曦 | 申请(专利权)人: | 秒针信息技术有限公司 |
| 主分类号: | G06F17/27 | 分类号: | G06F17/27;G06N3/04;G06N3/08 |
| 代理公司: | 11463 北京超凡宏宇专利代理事务所(特殊普通合伙) | 代理人: | 武成国<国际申请>=<国际公布>=<进入 |
| 地址: | 100000 北京市朝阳*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 标注 样本 实体识别 样本特征 构建装置 样本输入 语言模型 样本集 构建 向量 文本 输出 合并 转化 | ||
本发明公开了一种电商实体识别模型的构建方法、构建装置、设备和介质,所述方法包括:获取电商实体的标注样本集;其中,所述标注样本集中的标注样本,是将文本中电商实体所对应的字符进行标注得到的;针对每一标注样本,将该标注样本中的字符和词转化为向量,得到该标注样本对应的第一样本特征;以及,将该标注样本输入至训练好的语言模型,得到该标注样本对应的第二样本特征;将所述第一样本特征和所述第二样本特征的合并结果输入至待训练的实体识别模型,以所述第一样本特征对应的标注样本中标注的电商实体作为所述待训练的实体识别模型的输出,对所述待训练的实体识别模型进行训练,得到训练好的实体识别模型。
技术领域
本申请涉及自然语言处理领域,尤其涉及一种电商实体识别模型的构建方法、构建装置、设备和介质。
背景技术
自然语言处理领域是人工智能以及语言学领域的分支学科,主要是探讨计算机对于自然语言的理解和运用。自然语言处理技术已经逐步深入到生活和生产各个方面,并带了非常大的工作效率上的提升,因此,许多商家通过自然语言处理的方法在大量的互联网数据中获取电商实体,进而根据获取到的电商实体推送广告。
在获取电商实体的过程中需通过标注样本对实体识别模型进行训练。但是,上述这种训练方式中,标注样本是通过人工的方式进行标注的,由于被标注的样本比较复杂,且在标注样本时投入的人工成本和时间成本较高,得到的标注样本较少,进而通过标注样本训练好的实体识别模型在测试时得到的结果并不足够准确。
发明内容
有鉴于此,本申请的目的在于提供了一种电商实体识别模型的构建方法、构建装置、设备和介质,以解决现有技术中如何提高从待测试文本中获取电商实体的准确度问题。
第一方面,本申请实施例提供了一种电商实体识别模型的构建方法,包括:
获取电商实体的标注样本集;其中,所述标注样本集中的标注样本,是将文本中电商实体所对应的字符进行标注得到的;
针对每一标注样本,将该标注样本中的字符和词转化为向量,得到该标注样本对应的第一样本特征;以及,将该标注样本输入至训练好的语言模型,得到该标注样本对应的第二样本特征;
将所述第一样本特征和所述第二样本特征的合并结果输入至待训练的实体识别模型,以所述第一样本特征对应的标注样本中标注的电商实体作为所述待训练的实体识别模型的输出,对所述待训练的实体识别模型进行训练,得到训练好的实体识别模型。
可选的,所述将该标注样本中的字符和词转化为向量,得到该标注样本对应的第一样本特征,包括:
将所述标注样本输入至训练好的字符级模型,得到所述标注样本的字符特征;以及,
将所述标注样本输入至训练好的词级模型,得到所述标注样本的词特征;
将所述标注样本的字符特征和词特征进行合并,得到所述第一样本特征。
可选的,构建训练好的语言模型包括如下步骤:
获取网络语料训练样本集;其中,所述网络语料训练样本集中包含有多个训练样本;
针对每一个训练样本,将仅添加有开始标识的训练样本输入至待训练的语言模型,将仅添加有结束标识的训练样本作为所述待训练样本的输出,对所述语言模型进行训练,以得到所述训练好的语言模型。
可选的,所述网络语料训练样本集包括:
网络中向用户展示的文章;
网络社交平台中用户所发布的内容。
可选的,所述构建方法还包括:
获取待测试样本;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于秒针信息技术有限公司,未经秒针信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910810417.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:新词的发现方法和装置
- 下一篇:数据标注方法、装置、计算机设备和存储介质





