[发明专利]一种电商商品的品目预测机器人及其实现方法

说明书

本发明提供一种电商商品的品目预测机器人及其实现方法，先通过海量无标注语料对下载的所述bert预训练语言模型bert‑base‑chinese进行预训练，得到预训练后bert模型；再经过模型微调过程对预训练后bert模型进行微调，从而得到最佳模型，并保存最佳模型的模型参数列表。最后通过运行所述最佳模型，加载所述最佳模型的模型参数列表，核验模型对商品归类的准确率；直到准确率不低于阈值时结束，此时得到的bert模型即为所述电商商品的品目预测机器人。本发明根据品目库标准，依托大数据，通过人工智能算法模型实现商品品目预测，能快速、精准、智能地从大规模商品数据中识别商品类目，助力企业采购数字化、自动化、智能化转型升级，为供应链端商品治理归类降本增效。

技术领域

本发明涉及计算机技术领域，特别涉及一种电商商品的品目预测机器人及其实现方法。

背景技术

在大数据时代，随着大数据、人工智能、区块链等技术的广泛应用，技术的发展推动了采购业务数字化升级的进程。电子商务的蓬勃发展已经成为推动我国商业经济发展的重要增长点，电商企业也在充分运用大数据的技术优势来完善商品管理模式，并取得了显著成效。目前，电商企业面临的市场竞争有增无减，尤其是面对新时代下采购平台的海量商品数据，企业只有不断提高商品、人力等方面的成本控制管理水平，不断提高商品标准化治理水平，才能有效地降低供应链成本、提高自身的竞争优势。

由于商品种类五花八门，商品分类问题往往涉及庞大的数据量。与此同时，新产品层出不穷，商品分类需要紧跟商品更新迭代的速度。采用传统的人工标注的方式进行商品分类和审核已经无法满足大数据时代下商品分类的需求，这种方式不仅工作量大，费时费力，而且判断标准较为主观，误判率较高。因此，对商品进行自动化分类已成为当前的主要发展趋势。

发明内容

本发明要解决的技术问题，在于提供一种电商商品的品目预测机器人的实现方法，依托大数据、人工智能等技术实现电商商品的品目预测机器人，解决传统人工为主方式商品数据治理分类低效问题。

第一方面，本发明提供了一种电商商品的品目预测机器人，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述计算机程序的实现方法包括：

环境搭建过程，下载bert预训练语言模型bert-base-chinese；通过海量无标注语料对下载的所述bert预训练语言模型bert-base-chinese进行预训练，得到预训练后bert模型；该海量无标注语料未作商品标题的标注；

模型微调过程，基于品目库标准构建品目标签集文件class.txt，供预训练后bert模型读取；将品目清单进行one-hot编码形成标签矩阵；选取run_classifier.py文件作为下游分类任务的分类器；在所述run_classifier.py文件中关联数据集文件、品目标签集文件class.txt和初始模型参数列表，从而能加载标注数据集C和所述标签矩阵作为分类器的输入，加载初始模型参数列表并配置初始学习率参数值后运行分类器，通过分类器对输入的各个商品标题信息进行所属品目的推理，列出推理结果；重新配置学习率参数值和模型参数列表，继续运行分类器，并进行推理，如此反复，得到多个推理能力不同的bert模型；选择分类器推理能力最高的bert模型作为最佳模型，并保存最佳模型的模型参数列表；

模型评估过程，运行所述最佳模型，加载所述最佳模型的模型参数列表；输入测试数据集核验输出结果的置信度，核验模型对商品归类的准确率，若准确率低于阈值，则重新配置学习率取值和模型参数列表后再进行模型微调，直到准确率不低于阈值时结束，此时得到的bert模型即为所述电商商品的品目预测机器人；

其中，所述下游分类任务是用于将商品标题信息文本分为若干商品类目；所述标注数据集C标注了商品标题和品目标签；所述模型参数列表包括商品属性、名称和品牌的相关参数；所述测试数据集为一定数量的商品标题信息的数据集。

第二方面，本发明提供了一种电商商品的品目预测机器人的实现方法，包括：