[发明专利]一种集群式文本化海量敏感数据处理方法及系统在审
申请号: | 201710336815.0 | 申请日: | 2017-05-14 |
公开(公告)号: | CN107247741A | 公开(公告)日: | 2017-10-13 |
发明(设计)人: | 谢宇波 | 申请(专利权)人: | 四川盛世天成信息技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F21/62 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 610000 四川省*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 集群 文本 海量 敏感 数据处理 方法 系统 | ||
1.一种集群式文本化海量敏感数据处理方法,其特征在于包括:
获取对象数据库的元数据;
获取对象数据库的结构化数据文本;
建立服务集群;
对所述结构化数据文本进行分页和分组;
对所述结构化数据文本进行脱敏处理,获得目标数据库;
对所述对象数据库执行结构化文本导入,以导入所述目标数据库。
2.如权利要求1所述的方法,其特征在于,所述建立服务集群为建立由Web服务管控的服务集群。
3.如权利要求1所述的方法,其特征在于,所述对所述结构化数据文本进行脱敏处理,包括所述服务集群通过并行处理对所述结构化数据文本进行脱敏处理。
4.如权利要求1所述的方法,其特征在于,所述获取对象数据库的元数据,为通过数据库直连的方式获取对象数据库的元数据。
5.一种集群式文本化海量敏感数据处理系统,其特征在于包括:
用于获取对象数据库的元数据的装置;
用于获取对象数据库的结构化数据文本的装置;
服务集群;
用于对所述结构化数据文本进行分页和分组的装置;
用于对所述结构化数据文本进行脱敏处理获得目标数据库的装置;
用于对所述对象数据库执行结构化文本导入以导入所述目标数据库的装置。
6.一种产品,其特征在于包括:
主控处理服务器,所述主控处理服务器用于设置脱敏处理的数据处理规则、数据处理范围和运行参数;
数据处理服务器,所述数据处理服务器用于对所述对象数据库执行访问配置文件处理、数据读取处理、数据脱敏处理和数据写入处理,所述主控处理服务器和数据处理服务器的协同作用获得目标数据库。
7.如权利要求6所述的产品,其特征在于,所述数据处理服务器可根据所述对象数据库中数据量的多寡进行配置;当配置多个数据处理服务器时,所述多个数据处理服务器采用多线程、多进程和负载均衡的处理方式并行工作。
8.如权利要求6所述的产品,其特征在于,所述主控处理服务器通过Web服务管控的方式管控所述数据处理服务器的工作。
9.一种产品,其特征在于包括:
存储器,用于存储程序;
处理器,用于通过执行所述存储器存储的程序以实现如权利要求1-4中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,包括程序,所述程序能够被处理器执行以实现如权利要求1-4中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川盛世天成信息技术有限公司,未经四川盛世天成信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710336815.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:直播间功能定制方法及装置
- 下一篇:一种基于网页特征的正文信息抽取方法