[发明专利]一种数据处理方法及装置在审
申请号: | 201910327309.4 | 申请日: | 2019-04-23 |
公开(公告)号: | CN110209643A | 公开(公告)日: | 2019-09-06 |
发明(设计)人: | 陈义哲 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/16;G06F16/14 |
代理公司: | 北京汇思诚业知识产权代理有限公司 11444 | 代理人: | 冯晓平 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供了一种数据处理方法及装置,本发明涉及大数据技术领域,方法包括:获取第一文件数据,第一文件数据为用户行为日志数据;读取第一文件数据的分割规则,分割规则为固定份数分割、固定容量分割、固定行数分割中的至少一种;按照分割规则对第一文件数据进行分割,得到多个子文件,其中,每个子文件包括至少一条用户行为日志数据;将多个子文件写入目标数据库,每个子文件设有时间段标识;根据预设的筛选条件筛选目标数据库,得到与筛选条件相符合的用户行为日志数据,筛选条件包括用户信息、时间段信息、用户行为分组中的任意一种。本发明实施例提供的技术方案能够解决现有技术中用户行为日志文件处理效率低的问题。 | ||
搜索关键词: | 用户行为日志 文件数据 分割规则 筛选条件 分割 目标数据库 数据处理 子文件 读取 时间段信息 固定容量 文件处理 文件写入 用户信息 用户行为 大数据 固定行 时间段 预设 筛选 分组 | ||
【主权项】:
1.一种数据处理方法,其特征在于,所述方法包括:获取第一文件数据,所述第一文件数据为用户行为日志数据;读取所述第一文件数据的分割规则,所述分割规则为固定份数分割、固定容量分割、固定行数分割中的至少一种;按照所述分割规则对所述第一文件数据进行分割,得到多个子文件,其中,每个所述子文件包括至少一条用户行为日志数据;将多个所述子文件写入目标数据库,每个所述子文件设有时间段标识;根据预设的筛选条件筛选所述目标数据库,得到与所述筛选条件相符合的用户行为日志数据,所述筛选条件包括用户信息、时间段信息、用户行为分组中的任意一种。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910327309.4/,转载请声明来源钻瓜专利网。