[发明专利]大数据平台敏感数据的发现方法、装置、设备及存储介质在审
| 申请号: | 201711455217.1 | 申请日: | 2017-12-28 |
| 公开(公告)号: | CN110019764A | 公开(公告)日: | 2019-07-16 |
| 发明(设计)人: | 陆艳军;杨翔;邓秘密;黄国强;赵立农;谭文贵;钟全龙;方东旭 | 申请(专利权)人: | 中国移动通信集团重庆有限公司;中国移动通信集团公司 |
| 主分类号: | G06F16/335 | 分类号: | G06F16/335 |
| 代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 娜拉 |
| 地址: | 401121*** | 国省代码: | 重庆;50 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 敏感数据 大数据 发现 敏感数据信息 存储介质 敏感级别 有效数据 策略库 采集 数据重要性 准确度 脚本命令 模式匹配 分类 析取 敏感 保存 配置 分析 | ||
1.一种大数据平台敏感数据的发现方法,其特征在于,包括如下步骤:
将大数据组件内需要保护的敏感数据进行分类,定义每类敏感数据的具体内容及属性,并根据数据重要性或敏感程度确认所述敏感数据的敏感级别;
根据所述分类及所述敏感级别,配置所述敏感数据的发现规则及发现策略,形成发现策略库;
通过脚本命令从所述大数据组件内采集用于敏感数据分析的有效数据;
根据所述发现策略库对采集的所述有效数据进行模式匹配,析取敏感数据信息,对所述敏感数据信息进行属性补全并保存。
2.根据权利要求1所述的大数据平台敏感数据的发现方法,其特征在于,所述通过脚本命令从所述大数据组件内采集用于敏感数据分析的有效数据包括:
根据所述大数据组件的类型从内置的脚本库中获取其对应的数据采集脚本;
获取用于连接所述大数据组件的相关参数,执行所述数据采集脚本,以连接所述大数据组件;
通过执行不同的所述数据采集脚本,采集对应的数据信息;
过滤所述数据信息,筛选出新增或变更的所述数据信息,以此作为用于敏感数据分析的所述有效数据。
3.根据权利要求2所述的大数据平台敏感数据的发现方法,其特征在于,如果所述内置的脚本库无法支持复杂场景下的敏感数据,则通过自定义的方式手动配置生成新的采集脚本,测试成功后将所述采集脚本作为内置脚本信息保存至所述内置的脚本库。
4.根据权利要求1所述的大数据平台敏感数据的发现方法,其特征在于,所述根据所述发现策略库对采集的所述有效数据进行模式匹配、析取敏感数据信息包括:
获取用于析取敏感数据的所述有效数据;
从所述发现策略库中获取所述敏感数据的所述发现规则及所述发现策略;
采用模式匹配的方法将所述有效数据与所述发现规则及所述发现策略进行逐条匹配;
如果匹配成功,则标识其为敏感数据。
5.根据权利要求4所述的大数据平台敏感数据的发现方法,其特征在于,如果所述有效数据与所述发现规则及所述发现策略逐条匹配后均不成功,则将所述有效数据标识为非敏感数据并保存。
6.根据权利要求1所述的大数据平台敏感数据的发现方法,其特征在于,所述发现策略由单个或多个所述发现规则组合而成,所述发现规则包括由字符、数字、符号形成的规则表达式或结构表达式字符串。
7.一种大数据平台敏感数据的发现装置,其特征在于,包括:
分类分级单元(110),用于将大数据组件内需要保护的敏感数据进行分类,定义每类敏感数据的具体内容及属性,并根据数据重要性或敏感程度确认敏感数据的敏感级别;
配置单元(120),用于根据敏感数据的所述分类及所述敏感级别,配置敏感数据的发现规则及发现策略,形成发现策略库;
采集单元(130),用于通过脚本命令从所述大数据组件内采集用于敏感数据分析的有效数据;
析取单元(140),用于根据敏感数据的所述发现规则及所述发现策略对采集的所述有效数据进行模式匹配,析取敏感数据信息,对所述敏感数据信息进行属性补全并保存。
8.根据权利要求7所述的大数据平台敏感数据的发现装置,其特征在于,所述采集单元(130)进一步用于,根据所述大数据组件的类型从内置的脚本库中获取其对应的数据采集脚本,获取用于连接所述大数据组件的相关参数,执行所述数据采集脚本,以连接所述大数据组件,通过执行不同的所述数据采集脚本,采集对应的数据信息,过滤所述数据信息,筛选出新增或变更的所述数据信息,以此作为用于敏感数据分析的所述有效数据。
9.根据权利要求7所述的大数据平台敏感数据的发现装置,其特征在于,所述采集单元(130)进一步用于,如果所述内置的脚本库无法支持复杂场景下的敏感数据,则通过自定义的方式手动配置生成新的采集脚本,测试成功后将所述采集脚本作为内置脚本信息保存至所述内置的脚本库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团重庆有限公司;中国移动通信集团公司,未经中国移动通信集团重庆有限公司;中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711455217.1/1.html,转载请声明来源钻瓜专利网。





