[发明专利]多类型数据的采集方法、装置、设备及可读存储介质有效
| 申请号: | 201910608694.X | 申请日: | 2019-07-05 |
| 公开(公告)号: | CN110457312B | 公开(公告)日: | 2023-07-07 |
| 发明(设计)人: | 刘雪花 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
| 主分类号: | G06F16/22 | 分类号: | G06F16/22 |
| 代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国 |
| 地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 类型 数据 采集 方法 装置 设备 可读 存储 介质 | ||
1.一种多类型数据的采集方法,其特征在于,所述多类型数据的采集方法包括以下步骤:
当接收到任务配置指令时,读取与所述任务配置指令对应的任务标识符、关联字段以及顺序标识;
根据各所述关联字段,对各所述任务标识符对应的任务进行关联,并将所述顺序标识添加到关联后的各所述任务中;
从预设存储单元中抓取与各所述任务对应的字段数据,并根据所述顺序标识,将各所述字段数据添加到预设表格模板中保存,以对与各所述任务对应的各个类型的数据进行采集;
所述根据所述顺序标识,将各所述字段数据添加到预设表格模板中保存的步骤包括:
调用所述预设表格模板,并根据所述顺序标识,将各所述关联字段对应的关联字段名,以及与各所述任务对应的任务字段名添加到所述预设表格模板的表头中;
将各所述关联字段添加到所述预设表格模板中与所述关联字段名所对应的关联位置;
根据各所述字段数据对应的各所述任务,将各所述字段数据添加到所述预设表格模板中与各所述任务字段名对应的任务位置,以对各所述字段数据进行保存;
所述根据所述顺序标识,将各所述关联字段对应的关联字段名,以及与各所述任务对应的任务字段名添加到所述预设表格模板的表头中的步骤包括:
读取所述预设表格模板的表头中的初始单元格变量,并根据所述初始单元格变量确定所述表头中的初始单元格,将各所述关联字段对应的关联字段名添加到所述初始单元格中;
判断所述顺序标识是否为预设默认标识,若为所述预设默认标识,则根据与各所述任务对应的各字段数据的抓取时间,将与各所述任务对应的任务字段名添加到所述预设表格模板的表头中;
若不是所述预设默认标识,则根据与各所述任务对应的任务字段名在所述顺序标识中的排列顺序,将各所述任务字段名添加到所述预设表格模板的表头中。
2.如权利要求1所述的多类型数据的采集方法,其特征在于,所述根据与各所述任务对应的各字段数据的抓取时间,将与各所述任务对应的任务字段名添加到所述预设表格模板的表头中的步骤包括:
根据与各所述任务对应的各字段数据的抓取时间,对与各所述任务对应的任务字段名的先后顺序进行排列,生成第一排列顺序;
读取所述表头中字段单元格变量的第二排列顺序,根据所述第一排列顺序和所述第二排列顺序的对应关系,将各所述任务字段名添加到各所述字段单元格变量对应的字段单元格中。
3.如权利要求2所述的多类型数据的采集方法,其特征在于,所述根据各所述字段数据对应的各所述任务,将各所述字段数据添加到所述预设表格模板中与各所述任务字段名对应的任务位置的步骤包括:
根据各所述字段数据对应的各所述任务,以及各所述任务对应的任务字段名,在各所述字段数据和各所述任务字段名之间建立关联关系;
将与各所述任务对应的各所述字段数据形成字段数据列,并根据所述关联关系中各所述任务字段名所在的字段单元格,将各所述字段数据列添加到预设表格模板中与各所述字段单元格对应的数据列中。
4.如权利要求1-3任一项所述的多类型数据的采集方法,其特征在于,所述根据各所述关联字段,对各所述任务标识符对应的任务进行关联的步骤之前包括:
将各所述任务标识符和预设敏感标识符对比,判断各所述任务标识符中是否存在所述预设敏感标识符;
若存在所述预设敏感标识符,则读取所述任务配置指令对应用户账户的账户标识,并判断所述账户标识是否为高级权限标识;
若所述账户标识为高级权限标识,则执行根据各所述关联字段,对各所述任务标识符对应的任务进行关联的步骤;
若所述账户标识不是高级权限标识,则将各所述任务标识符中存在的所述预设敏感标识符设为待修改标识符,并输出对所述待修改标识符进行修改的提示信息。
5.如权利要求4所述的多类型数据的采集方法,其特征在于,所述根据所述顺序标识,将各所述字段数据添加到预设表格模板中保存的步骤之后包括:
读取保存各所述字段数据的预设表格模板的地址信息以及命名信息,并将所述地址信息和命名信息添加到预设下载语句中,生成下载链接;
将所述下载链接输出,以对采集的与各所述任务对应各个类型的数据进行下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910608694.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





