[发明专利]一种基于项目反应理论的数据去重方法、装置及设备

权利要求书

1.一种基于项目反应理论的数据去重方法，其特征在于，包括：

获取待上传数据；

根据项目反应理论，确定所述待上传数据的理论隐私分数，包括：根据项目反应理论，利用最大似然函数方法确定所述待上传数据的可见度和敏感度；根据所述可见度和所述敏感度，确定所述待上传数据的理论隐私分数；

根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定所述副本数据的去重阈值，包括：根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定综合隐私分数；根据所述综合隐私分数，依据目标函数确定所述副本数据的去重阈值，其中，所述目标函数为T_i为副本数据i的去重阈值，PR_i为副本数据i的综合隐私分数，a为预设系数；

在所述副本数据的数量大于所述去重阈值时，执行数据去重操作。

2.如权利要求1所述的方法，其特征在于，所述根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定综合隐私分数，包括：

将所述理论隐私分数反馈给当前用户；

响应所述当前用户的接受请求以根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定综合隐私分数；

响应所述当前用户的自定义请求以获取所述当前用户自定义的隐私分数，并根据所述隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定综合隐私分数。

3.如权利要求1-2任意一项所述的方法，其特征在于，在所述根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定所述副本数据的去重阈值之后，还包括：

若所述副本数据的数量小于所述去重阈值，则按照第一加密方法对所述待上传数据进行加密，并将加密后的待上传数据存储到所述云存储服务器；

若所述副本数据的数量等于所述去重阈值，则按照第二加密方法对所述待上传数据进行加密，并将加密后的待上传数据存储到所述云存储服务器。

4.如权利要求3所述的方法，其特征在于，所述第一加密方法为对称加密方法，所述第二加密方法为收敛加密方法。

5.一种基于项目反应理论的数据去重装置，其特征在于，包括：

数据获取模块：用于获取待上传数据；

理论隐私分数确定模块：用于根据项目反应理论，确定所述待上传数据的理论隐私分数，所述理论隐私分数确定模块包括：第一单元：用于根据项目反应理论，利用最大似然函数方法确定所述待上传数据的可见度和敏感度；第二单元：用于根据所述可见度和所述敏感度，确定所述待上传数据的理论隐私分数；

阈值确定模块：用于根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定所述副本数据的去重阈值，所述阈值确定模块具体用于：根据所述理论隐私分数、云存储服务器中所述待上传数据的副本数据的隐私分数，确定综合隐私分数；根据所述综合隐私分数，依据目标函数确定所述副本数据的去重阈值，其中，所述目标函数为T_i为副本数据i的去重阈值，PR_i为副本数据i的综合隐私分数，a为预设系数；

去重模块：用于在所述副本数据的数量大于所述去重阈值时，执行数据去重操作。

6.一种基于项目反应理论的数据去重设备，其特征在于，包括：

存储器：用于存储计算机程序；

处理器：用于执行所述计算机程序以实现如权利要求1-4任意一项所述的一种基于项目反应理论的数据去重方法的步骤。

7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时用于实现如权利要求1-4任意一项所述的一种基于项目反应理论的数据去重方法的步骤。