[发明专利]一种数据拼接方法、装置、电子设备及存储介质有效
| 申请号: | 201811437134.4 | 申请日: | 2018-11-28 | 
| 公开(公告)号: | CN109522133B | 公开(公告)日: | 2020-10-02 | 
| 发明(设计)人: | 王雨生;徐凯 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 | 
| 主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F16/22;G06Q30/02 | 
| 代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 | 
| 地址: | 100080 北京市石景山区*** | 国省代码: | 北京;11 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 一种 数据 拼接 方法 装置 电子设备 存储 介质 | ||
本公开公开了一种数据拼接方法、装置、电子设备及存储介质。其中,该方法包括:获取在各商品展示页面触发的至少两个事件的监测数据;对获取的所述监测数据进行分片,得到预设数量的分片数据包;将所述分片数据包发送至对应的数据拼接服务器,以使各数据拼接服务器分别对所述分片数据包中的监测数据进行数据拼接,得到数据拼接结果。本公开实施例解决了现有技术的数据拼接方案在监测数据的数据量十分庞大时,服务器负担大,容易造成服务器拥堵,影响数据的拼接和存储过程的问题,可以通过对数据进行分片实现对数据拼接任务的分配,各服务器只需负责对应的数据拼接任务,服务器负担小,可以避免服务器拥堵,有效提高系统的稳定性。
技术领域
本公开实施例涉及数据处理技术,尤其涉及一种数据拼接方法、装置、电子设备及存储介质。
背景技术
在发布不同的商品展示页面后,会对各个商品展示页面的多个事件进行监测,获取与事件对应的监测数据。例如,对各个商品展示页面的点击事件,购买事件,以及扣费事件进行监测。为了便于对各个商品展示页面的数据进行分析与统计,需要对每一个商品展示页面对应的全部监测数据进行拼接,形成一张数据表,即每一个商品展示页面对应的一张数据表。
现有技术中,通常在获取各个商品展示页面的监测数据后,直接进行拼接。由于监测数据的数据量十分庞大,服务器负担大,容易造成服务器拥堵,影响数据的处理和存储过程。
发明内容
本公开提供一种数据拼接方法、装置、电子设备及存储介质,以实现对数据拼接任务进行分配,避免服务器拥堵,提高系统稳定性。
第一方面,本公开实施例提供了一种数据拼接方法,包括:
获取在各商品展示页面触发的至少两个事件的监测数据;
对获取的监测数据进行分片,得到预设数量的分片数据包;
将分片数据包发送至对应的数据拼接服务器,以使各数据拼接服务器分别对分片数据包中的监测数据进行数据拼接,得到数据拼接结果。
上述方案中,可选的是,对获取的所述监测数据进行分片,得到预设数量的分片数据包,包括:
确定在各商品展示页面触发的事件数量;
针对每个分片数据包,将在同一个商品展示页面触发的所有事件的监控数据分配至同一个分片数据包内;
汇总分片数据包,得到预设数量的分片数据包;其中,分片数据包中的监控数据对应的事件数量等于在至少一个商品展示页面触发的事件数量。
上述方案中,可选的是,事件包括点击事件,购买事件,以及扣费事件;
确定在各商品展示页面触发的事件数量,包括:
分别获取在各商品展示页面触发的点击事件数量、购买事件数量、以及扣费事件数量,并求和;
将求和结果作为在各商品展示页面触发的事件数量。
上述方案中,可选的是,预设数量等于数据拼接服务器的数量。
上述方案中,可选的是,在获取在各商品展示页面触发的至少两个事件的监测数据之前,还包括:
对在各商品展示页面触发的至少两个事件进行监测,生成对应的监测数据;
对监测数据进行存储。
上述方案中,可选的是,还包括:
获取各数据拼接服务器生成的数据拼接结果,对数据拼接结果进行存储。
第二方面,本公开实施例还提供了一种数据拼接装置,包括:
数据获取模块,用于获取在各商品展示页面触发的至少两个事件的监测数据;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811437134.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
 - 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
 - 数据发送方法、数据发送系统、数据发送装置以及数据结构
 - 数据显示系统、数据中继设备、数据中继方法及数据系统
 - 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
 - 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
 - 数据发送和数据接收设备、数据发送和数据接收方法
 - 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
 - 数据发送方法、数据再现方法、数据发送装置及数据再现装置
 - 数据发送方法、数据再现方法、数据发送装置及数据再现装置
 





