[发明专利]一种大数据处理方法和系统

权利要求书

1.一种大数据处理方法，其特征在于，应用于数据库代理系统，所述数据库代理系统包括数据库代理模块、数据探查模块、数据脱敏模块，所述方法包括：

所述数据库代理模块接收应用客户端数据访问请求，根据所述数据访问请求确定目标源数据库中的目标数据和对所述目标数据的操作类型；

所述数据库代理模块按照所述操作类型对所述目标数据进行操作，得到所述目标源数据库返回的操作结果；

所述数据探查模块按照目标探查策略对所述操作结果进行敏感数据的探查，确定所述操作结果中的敏感数据；

所述数据脱敏模块按照预设脱敏策略对所述操作结果中的敏感数据进行脱敏处理，得到脱敏后的响应数据；

所述数据库代理模块将所述响应数据返回至所述应用客户端。

2.根据权利要求1所述的方法，其特征在于，所述数据探查模块包括预设探查策略，所述数据探查模块按照目标探查策略对所述操作结果进行敏感数据的探查，确定所述操作结果中的敏感数据之前，所述方法还包括：

所述数据探查模块接收目标探查策略的配置信息，根据所述目标探查策略的配置信息对所述预设探查策略进行配置，得到目标探查策略。

3.根据权利要求2所述的方法，其特征在于，所述预设探查策略包括：不同类型的源数据库的属性信息。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

所述数据探查模块按照目标探查策略对所述操作结果进行敏感数据的探查，生成探查过程中的探查日志；

所述数据探查模块根据所述探查日志对所述探查过程进行审计处理，生成探查审计报告数据。

5.根据权利要求1所述的方法，其特征在于，所述数据探查模块按照目标探查策略对所述操作结果进行敏感数据的探查，确定所述操作结果中的敏感数据之后，所述方法还包括：

所述数据探查模块根据预设的数据库或数据表与具有访问权限的客户端的对应关系，确定所述应用客户端是否对所述敏感数据所对应的数据库或数据表具有访问权限；

若是，则所述数据探查模块将所述敏感数据进行可视化展现；

若否，则所述数据探查模块按照预设脱敏策略对所述操作结果中的敏感数据进行脱敏处理，得到脱敏后的响应数据。

6.一种大数据处理系统，其特征在于，包括：

数据库代理系统、源数据库；

所述数据库代理系统包括：数据库代理模块、数据探查模块、数据脱敏模块；

所述数据库代理模块，用于接收应用客户端数据访问请求，根据所述数据访问请求确定目标源数据库中的目标数据和对所述目标数据的操作类型；

所述数据库代理模块，用于按照所述操作类型对所述目标数据进行操作，得到所述目标源数据库返回的操作结果；

所述数据探查模块，用于按照目标探查策略对所述操作结果进行敏感数据的探查，确定所述操作结果中的敏感数据；

所述数据脱敏模块，用于按照预设脱敏策略对所述操作结果中的敏感数据进行脱敏处理，得到脱敏后的响应数据；

所述数据库代理模块，用于将所述响应数据返回至所述应用客户端。

7.根据权利要求6所述的系统，其特征在于，所述数据探查模块包括预设探查策略，所述数据探查模块，用于接收目标探查策略的配置信息，根据所述目标探查策略的配置信息对所述预设探查策略进行配置，得到目标探查策略。

8.根据权利要求7所述的系统，其特征在于，所述预设探查策略包括：不同类型的源数据库的属性信息。

9.根据权利要求6所述的系统，其特征在于，

所述数据探查模块，用于按照目标探查策略对所述操作结果进行敏感数据的探查，生成探查过程中的探查日志；

所述数据探查模块，用于根据所述探查日志对所述探查过程进行审计处理，生成探查审计报告数据。

10.根据权利要求6所述的系统，其特征在于，

所述数据探查模块，用于根据预设的数据库或数据表与具有访问权限的客户端的对应关系，确定所述应用客户端是否对所述敏感数据所对应的数据库或数据表具有访问权限；

所述数据探查模块，用于若确定所述应用客户端对所述敏感数据所对应的数据库或数据表具有访问权限，则将所述敏感数据进行可视化展现；

所述数据探查模块，用于若确定所述应用客户端对所述敏感数据所对应的数据库或数据表不具有访问权限，则按照预设脱敏策略对所述操作结果中的敏感数据进行脱敏处理，得到脱敏后的响应数据。