[发明专利]数据存储方法、装置及电子设备在审
申请号: | 202211619279.2 | 申请日: | 2022-12-14 |
公开(公告)号: | CN116088756A | 公开(公告)日: | 2023-05-09 |
发明(设计)人: | 胡宏炜;吴佳俊;潘恩宇;王毅 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06N20/00 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 黄海英 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 电子设备 | ||
1.一种数据存储方法,其特征在于,包括:
获取多个存储节点的节点信息,其中,所述节点信息至少包括所述多个存储节点的参数信息、数据存储量信息以及状态信息,所述多个存储节点用于存储数据;
基于目标模型对所述多个存储节点的节点信息进行处理,得到每个存储节点的存储概率值,其中,所述目标模型是基于所述多个存储节点的历史节点信息以及当前节点信息进行训练得到的,所述每个存储节点的存储概率值表征所述每个存储节点的数据存储量;
基于所述每个存储节点的存储概率值从所述多个存储节点中确定目标存储节点;
将待存储数据存储至所述目标存储节点中。
2.根据权利要求1所述的方法,其特征在于,在获取多个存储节点的节点信息之后,所述方法还包括:
基于所述多个存储节点的节点信息确定所述每个存储节点的数据存储量;
计算所述多个存储节点的数据存储量的方差,得到第一方差值。
3.根据权利要求2所述的方法,其特征在于,在将待存储数据存储至所述目标存储节点中之后,所述方法还包括:
获取所述多个存储节点的当前数据存储量;
计算所述多个存储节点的当前数据存储量的方差,得到第二方差值;
计算所述第一方差值和所述第二方差值的差值,得到回报值,其中,所述回报值表征所述多个存储节点的数据存储波动量。
4.根据权利要求3所述的方法,其特征在于,在将待存储数据存储至所述目标存储节点中之前,所述方法还包括:
步骤1,检测所述待存储数据是否成功存储至所述目标存储节点中;
步骤2,若所述待存储数据未成功存储至所述目标存储节点中,确定负反馈值,并计算所述负反馈值与所述回报值之和,得到目标回报值,并重复执行步骤1-步骤2,直至所述待存储数据成功存储至所述目标存储节点中,或在未成功存储的次数大于第一预设阈值时,将所述待存储数据存储至候选存储节点中,其中,所述候选存储节点为所述多个存储节点中数据存储量大于或等于第二预设阈值的存储节点,所述目标回报值用于更新所述目标模型,所述负反馈值与所述未成功存储的次数呈正相关。
5.根据权利要求4所述的方法,其特征在于,在将待存储数据存储至所述目标存储节点中之后,所述方法还包括:
检测第一缓存区中经验数据的数量是否大于或等于第三预设阈值,其中,所述经验数据为所述多个存储节点的历史节点信息、所述当前节点信息以及所述目标回报值;
在所述经验数据的数量大于所述第二预设阈值时,将所述经验数据发送至计算节点,并清理所述第一缓存区中的经验数据,其中,所述计算节点用于训练所述目标模型。
6.根据权利要求5所述的方法,其特征在于,在所述经验数据的数量大于所述第二预设阈值时,将所述经验数据发送至计算节点,包括:
监控所述计算节点的运行状态;
在所述计算节点处于计算状态时,将所述经验数据存储至第二缓存区中;
在所述计算节点处于计算完成状态时,将所述经验数据存储至经验回放池中,其中,所述经验回放池用于存储所述目标模型的更新数据。
7.根据权利要求6所述的方法,其特征在于,所述目标模型通过如下步骤更新:
基于所述计算节点获取模型更新参数;
基于所述模型更新参数更新所述目标模型。
8.根据权利要求7所述的方法,其特征在于,在基于所述计算节点获取模型更新参数之前,所述方法还包括:
基于所述计算节点获取预设数量的经验数据;
基于所述预设数量的经验数据确定所述目标模型的目标函数;
基于所述目标函数确定所述模型更新参数,其中,所述模型更新参数为训练后的目标模型的模型参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211619279.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置