[发明专利]展示信息组合确定方法、装置、存储介质及电子设备在审

专利信息
申请号: 201811647015.1 申请日: 2018-12-29
公开(公告)号: CN111401594A 公开(公告)日: 2020-07-10
发明(设计)人: 李亦锬;余林韵;陈嘉闽;黄训蓬;李磊 申请(专利权)人: 北京字节跳动网络技术有限公司
主分类号: G06Q10/04 分类号: G06Q10/04;G06Q50/00;G06N20/00
代理公司: 北京英创嘉友知识产权代理事务所(普通合伙) 11447 代理人: 魏嘉熹;南毅宁
地址: 100041 北京市石景山区*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 展示 信息 组合 确定 方法 装置 存储 介质 电子设备
【说明书】:

本公开涉及一种展示信息组合确定方法、装置、存储介质及电子设备。所述方法包括:获取数据库中的N个候选展示信息,所述N个候选展示信息为数据库中所有展示信息的全部或部分,其中,N为大于1的正整数;将所述候选展示信息输入至与所述候选展示信息对应的目标决策模型,获得目标展示信息组合,所述目标展示信息组合包括M个所述候选展示信息,所述目标决策模型是利用强化学习网络模型构建的,且所述目标决策模型用于根据输入的展示信息确定出能够获得最大回报值的展示信息组合,其中,1≤MN。这样,利用强化学习方法,可自动生成目标展示信息组合,节省人力,还可以使目标展示信息组合能够获得最大的回报值,使用户利益最大化。

技术领域

本公开涉及计算机技术领域,具体地,涉及一种展示信息组合确定方法、装置、存储介质及电子设备。

背景技术

信息流(Feeds)是社交媒体移动应用中最重要的创新点之一,即当用户加载显示界面时为用户呈现一系列信息。该一系列信息就是一系列展示信息,展示信息可以在展位进行展示,从而获得一定的回报值。展位可以为用于对展示信息进行展示的虚拟或实际的载体。在数据库中存在多种可供展示的展示信息,而在实际的展示中,由于每一次可用于展示的展位数量有限,这些可供展示的展示信息无法全部展示,只能从中选择一部分进行展示,这一部分展示信息可视为展示信息组合。现有技术中,对于展示信息组合的确定需要人工收集数据后进行人为选择,这样,一方面需要投入大量的人力、物力、时间等,效率很低,另一方面,由于人工选择的方式受限于个人经验等因素,会使确定出的展示信息组合得到的回报值无法估量,易出现回报值过低的情况。

发明内容

本公开的目的是提供一种展示信息组合确定方法、装置、存储介质及电子设备,以自动生成展示信息组合。

为了实现上述目的,根据本公开的第一方面,提供一种展示信息组合确定方法,所述方法包括:

获取数据库中的N个候选展示信息,所述N个候选展示信息为数据库中所有展示信息的全部或部分,其中,N为大于1的正整数;

将所述候选展示信息输入至与所述候选展示信息对应的目标决策模型,获得目标展示信息组合,所述目标展示信息组合包括M个所述候选展示信息,所述目标决策模型是利用强化学习网络模型构建的,且所述目标决策模型用于根据输入的展示信息确定出能够获得最大回报值的展示信息组合,其中,1≤MN。

可选地,所述与候选展示信息对应的目标决策模型通过以下方式获得:

获取历史展示信息组合以及所述历史展示信息组合对应的实际回报值,其中,所述历史展示信息组合包括M个所述候选展示信息;

根据所述N个候选展示信息、所述历史展示信息组合以及所述历史展示信息组合对应的实际回报值,对强化学习网络模型进行训练,以获得所述目标决策模型。

可选地,所述根据所述N个候选展示信息、所述历史展示信息组合以及所述历史展示信息组合对应的实际回报值,对强化学习网络模型进行训练,以获得所述目标决策模型,包括:

初始化所述强化学习网络模型,并根据所述N个候选展示信息和所述强化学习网络模型生成第一展示信息组合,所述第一展示信息组合包括M个所述候选展示信息;

确定与所述第一展示信息组合相同的历史展示信息组合,并将该历史展示信息组合对应的实际回报值确定为所述第一展示信息组合对应的实际回报值;

将所述第一展示信息组合对应的实际回报值输入至所述强化学习网络模型中,以调整所述第一展示信息组合中各候选展示信息在所述强化学习网络模型中的权重参数;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811647015.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top