[发明专利]推广内容的评价方法、装置、电子设备和存储介质在审
申请号: | 201910361747.2 | 申请日: | 2019-04-30 |
公开(公告)号: | CN110189163A | 公开(公告)日: | 2019-08-30 |
发明(设计)人: | 程建明 | 申请(专利权)人: | 北京三快在线科技有限公司 |
主分类号: | G06Q30/02 | 分类号: | G06Q30/02;G06N3/08 |
代理公司: | 北京市隆安律师事务所 11323 | 代理人: | 权鲜枝 |
地址: | 100190 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多目标模型 样本数据 标签 存储介质 电子设备 评价模型 样本 复杂场景 评估设备 数据生成 样本偏差 子网络 准确率 从站 跳转 多样性 缓解 申请 网络 学习 | ||
本申请公开了推广内容的评价方法、装置、电子设备和存储介质。所述方法包括:根据推广数据生成样本数据;所述样本数据包括多个标签,且至少包括与唤起行为对应的唤起标签;将所述样本数据输入到基于深度学习网络的多目标模型中进行训练,得到推广内容的评价模型;所述多目标模型包括与各标签分别对应的子网络;根据所述推广内容的评价模型对待评价的推广内容进行评价。该技术方案的有益效果在于,考虑到了与APP相关的推广内容的唤起行为,适用站内与站外结合的复杂场景,能够有效评估设备从站外跳转到站内APP的可能性;在样本利用率上由于加入了唤起标签,并采用多目标模型,提高了样本多样性和特征丰富度,缓解了样本偏差问题,提高了评价准确率。
技术领域
本申请涉及内容推广技术领域,具体涉及推广内容的评价方法、装置、电子设备和存储介质。
背景技术
如何评价推广内容与用户需求的契合度一直是一个难题,深度学习的不断发展为推广内容的评价带来了新的解决思路,通过将用户与推广内容相关的各类行为作为样本进行学习,可以预估一个推广内容是否能够被用户点击等等。但是这也带来了新的问题,深度学习模型的种类、样本的选择等都是影响评价效果的因素。现有技术中的评价方式存在支持的场景较少、样本利用率低等缺陷,有待改进。
发明内容
鉴于上述问题,提出了本申请以便提供一种克服上述问题或者至少部分地解决上述问题的推广内容的评价方法、装置、电子设备和存储介质。
依据本申请的一个方面,提供了一种推广内容的评价方法,包括:
根据推广数据生成样本数据;样本数据包括多个标签,且至少包括与唤起行为对应的唤起标签;
将样本数据输入到基于深度学习网络的多目标模型中进行训练,得到推广内容的评价模型;多目标模型包括与各标签分别对应的子网络;
根据推广内容的评价模型对待评价的推广内容进行评价。
可选地,将样本数据输入到基于深度学习网络的多目标模型中进行训练,得到推广内容的评价模型包括:
基于梯度下降的方法,降低多目标模型使用的损失函数的值,对各子网络的参数同时进行更新。
可选地,推广数据包括推广内容的展现数据;
多个标签还包括:与点击行为对应的点击标签,与转化行为对应的转化标签;
根据推广内容的评价模型对待评价的推广内容进行评价包括:预估待评价的推广内容的点击率、唤起率和转化率。
可选地,多目标模型使用的损失函数包括若干个交叉熵损失函数,各交叉熵损失函数分别用于计算一项差异性信息,差异性信息包括如下的一种或多种:
点击标签与相应子网络预估值的差异;
点击标签、唤起标签与相应子网络预估值的差异;
点击标签、唤起标签、转化标签与相应子网络预估值的差异。
可选地,根据推广数据生成样本数据包括:
根据推广数据抽取如下的一维或多维原始特征,得到相应的特征序列:设备特征,用户特征,推广内容特征,上下文特征。
可选地,根据推广数据生成样本数据还包括:
对原始特征进行如下的一种或多种处理,得到相应的特征序列:特征embedding处理,one-hot编码处理,multi-hot编码处理,特征归一化,特征分桶,特征交叉。
可选地,深度学习网络包括如下的一种或多种:
深度神经网络,卷积神经网络,长短期记忆网络,变换网络。
依据本发明的另一方面,提供了一种推广内容的评价装置,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910361747.2/2.html,转载请声明来源钻瓜专利网。