[发明专利]数据的存储方法和装置有效
申请号: | 201610730521.1 | 申请日: | 2016-08-25 |
公开(公告)号: | CN107783993B | 公开(公告)日: | 2021-11-30 |
发明(设计)人: | 叶一舟;张锋;杨磊 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/95 |
代理公司: | 北京博浩百睿知识产权代理有限责任公司 11134 | 代理人: | 宋子良 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 | ||
1.一种数据的存储方法,其特征在于,包括:
获取至少一个操作对象的日志信息,所述日志信息包括:任意一个操作对象的多个行为数据,以及每个行为数据之间跳转时的关联因子,所述行为数据是用户针对操作对象的动作;
基于树状存储结构保存所述任意一个操作对象的行为数据和所述每个行为数据之间跳转时的关联因子,得到每个操作对象的网络行为关系数据,所述网络行为关系数据用于展示所述用户在一次会话中的多种行为之间的关系;
以用户访问操作对象过程的会话为单位,确定所述会话中包含的多个操作对象;
将所述会话中包含的多个对象的网络行为关系数据进行关联存储,得到所述用户在所述会话内发生的网络访问结果;
其中,在将所述会话中包含的多个对象的网络行为关系数据进行关联存储,得到所述用户在所述会话内发生的网络访问结果之后,所述方法还包括:
还原所述树状存储结构保存的所述网络行为关系数据和用户关系数据,得到多层逻辑哈希树的结构;
对所述多层逻辑哈希树的结构进行列转行处理,将多值的列按照列转行后的顺序填充到输出数据集中,得到基于产品信息的全链路行为序列。
2.根据权利要求1所述的方法,其特征在于,在获取至少一个操作对象的日志信息之前,所述方法还包括:
对数据池中的数据进行分层,得到至少如下数据层:原始层、公共层、中间层和应用层;
按照业务类型从分层后的数据池中确定多个关键字段,其中,所述关键字段用于表征所述操作对象对应的行为数据;
根据所述关键字段之间的业务跳转关系,得到所述每个行为数据之间跳转时的关联因子。
3.根据权利要求1所述的方法,其特征在于,在以用户访问操作对象过程的会话为单位,确定所述会话中包含的操作对象之前,所述方法还包括:
获取所述用户的基本信息,以及与所述用户的网络访问行为关联的产品信息和其他用户的基本信息;
以所述用户的基本信息为根节点,基于树状存储结构来存储所述产品信息和所述其他用户的基本信息,得到所述用户的所述用户关系数据。
4.根据权利要求2或3所述的方法,其特征在于,还原所述树状存储结构保存的所述网络行为关系数据和所述用户关系数据,得到多层逻辑哈希树的结构包括:
还原所述用户关系数据包括:将所述用户的基本信息、所述产品信息和其他用户的基本信息存储至哈希树中,且内层表单和外层表单中各自仅存储相同类型的值。
5.根据权利要求2或3所述的方法,其特征在于,还原所述树状存储结构保存的所述网络行为关系数据和所述用户关系数据,得到多层逻辑哈希树的结构包括:还原所述网络行为关系数据,其中,还原所述网络行为关系数据包括如下至少之一:
在所述操作对象为曝光产品的情况下,将曝光产品对应的配置文件中的字段tag和解析的value值一一映射,映射结果存储在内层表单中,并将内存表单存储至外层表单中;
在所述行为数据为点击操作的情况下,获取点击操作数据,从所述点击操作数据中分割出独立的点击根节点,并基于所述点击根节点获取关联的操作信息存储至哈希树中。
6.根据权利要求3所述的方法,其特征在于,在得到基于所述产品信息的全链路行为序列之后,所述方法还包括:
调用解读工具从所述多层逻辑哈希树的结构中获取样本数据,其中,所述样本数据以key-value形式进行存储;或者,
调用所述解读工具读取所述列转行后的全链路行为序列。
7.根据权利要求6所述的方法,其特征在于,在获取所述样本数据或获取所述全链路行为序列之后,所述方法还包括:
读取所述样本数据或所述全链路行为序列中的静态数据和统计后的特征数据;
基于所述静态数据和统计后的特征数据,生成训练数据集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610730521.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置