[发明专利]通用特征库生成方法及装置、存储介质、电子设备在审
申请号: | 201711228008.3 | 申请日: | 2017-11-29 |
公开(公告)号: | CN109947811A | 公开(公告)日: | 2019-06-28 |
发明(设计)人: | 曲以元 | 申请(专利权)人: | 北京京东金融科技控股有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/215;G06F16/25 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 王辉;阚梓瑄 |
地址: | 101111 北京市北京经济*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基础指标 通用特征 原始指标 运算处理 库生成 数据源 预处理 数据处理技术 存储介质 电子设备 分组结果 加工阶段 分组 重复 | ||
1.一种通用特征库生成方法,其特征在于,包括:
获取多个数据源并对各所述数据源进行预处理得到多个原始指标;
根据各所述原始指标的变量对各所述原始指标进行分组并对分组结果进行第一运算处理得到多个基础指标;
根据各所述基础指标的共性将各所述基础指标分为多个指标类,并对各所述指标类进行第二运算处理得到多个衍生指标;
将各所述原始指标、基础指标以及衍生指标进行汇总得到所述通用特征库。
2.根据权利要求1所述的通用特征库生成方法,其特征在于,获取多个数据源并对各所述数据源进行预处理得到多个原始指标包括:
根据所述通用特征库的待服务范围从多个数据系统中获取与所述待服务范围关联的多个数据源;
对获取到的各所述数据源进行抽取、加载、转换以及清洗得到多个所述原始指标。
3.根据权利要求2所述的通用特征库生成方法,其特征在于,对获取到的各所述数据源进行抽取包括:
根据预设抽取方式对获取到的各所述数据源进行抽取;
其中,所述预设抽取方式包括实时抽取以及历史抽取中的一种。
4.根据权利要求1所述的通用特征库生成方法,其特征在于,根据各所述原始指标的变量对各所述原始指标进行分组包括:
根据各所述原始指标的变量将各所述原始指标分为数值变量、分类变量以及时间变量中的多种。
5.根据权利要求4所述的通用特征库生成方法,其特征在于,对分组结果进行第一运算处理得到多个基础指标包括:
根据所述数值变量以及分类变量的主键维度对所述数值变量以及分类变量进行第一运算处理得到多个基础指标。
6.根据权利要求5所述的通用特征库生成方法,其特征在于,所述第一运算处理包括计数、求和、最小值、最大值以及平均值中的多种。
7.根据权利要求5所述的通用特征库生成方法,其特征在于,对分组结果进行第一运算处理得到多个基础指标之后,所述通用特征库生成方法还包括:
提取各所述基础指标的共性。
8.根据权利要求1所述的通用特征库生成方法,其特征在于,根据各所述基础指标的共性将各所述基础指标分为多个指标类,并对各所述指标类进行第二运算处理得到多个衍生指标包括:
根据各所述基础指标的共性将各所述基础指标分为单变量指标类以及多变量指标类;
对所述单变量指标类以及多变量指标类进行第二运算处理得到多个衍生指标。
9.根据权利要求8所述的通用特征库生成方法,其特征在于,所述第二运算处理包括单一运算处理以及多运算处理;
其中,所述单一运算处理包括对数、开方、平方以及倒数中的一种或多种;
所述多运算处理包括加减乘除运算中的一种或多种。
10.一种通用特征库生成装置,其特征在于,包括:
转换清洗模块,用于获取多个数据源并对各所述数据源进行预处理得到多个原始指标;
第一处理模块,用于根据各所述原始指标的变量对各所述原始指标进行分组并对分组结果进行第一运算处理得到多个基础指标;
第二处理模块,用于根据各所述基础指标的共性将各所述基础指标分为多个指标类,并对各所述指标类进行第二运算处理得到多个衍生指标;
汇总模块,用于将各所述原始指标、基础指标以及衍生指标进行汇总得到所述通用特征库。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-9任一项所述的通用特征库生成方法。
12.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-9任一项所述的通用特征库生成方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东金融科技控股有限公司,未经北京京东金融科技控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711228008.3/1.html,转载请声明来源钻瓜专利网。