[发明专利]基于联邦学习的数据传输优化方法、设备及可读存储介质在审
申请号: | 202110343403.6 | 申请日: | 2021-03-30 |
公开(公告)号: | CN112948129A | 公开(公告)日: | 2021-06-11 |
发明(设计)人: | 胡水海;苏霖锋 | 申请(专利权)人: | 深圳致星科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F12/0882;G06N20/00 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 郝怀庆 |
地址: | 518000 广东省深圳市南山区粤海街道高新*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 联邦 学习 数据传输 优化 方法 设备 可读 存储 介质 | ||
本申请公开了一种基于联邦学习的数据传输优化方法、设备及可读存储介质,所述基于联邦学习的数据传输优化方法应用于第一设备,所述基于联邦学习的数据传输优化方法包括:获取待传输数据,并将所述待传输数据转换为携带第一硬件设备信息的待传输比特流;将所述待传输比特流发送至第二设备,以供所述第二设备基于所述第一硬件设备信息以及获取的第二硬件设备信息共同对应的数据转换方式,将所述待传输比特流转换为适配于所述第二硬件设备信息的目标格式数据,并拷贝至所述第二硬件设备信息对应的目标设备内存。本申请解决了联邦学习异构框架中不同类型硬件设备进行数据传输时兼容性差的技术问题。
技术领域
本申请涉及通信技术领域,尤其涉及一种基于联邦学习的数据传输优化方法、设备及可读存储介质。
背景技术
随着计算机技术的不断发展,通信技术的发展也越来越快,目前,在进行数据传输时,通常是由数据发送方的CPU设备直接发送至数据接收方的CPU设备执行计算任务,在联邦学习场景中,由于数据通常为数据位宽极大的密态数据,CPU设备的算力往往无法满足联邦学习的要求,进而联邦学习的各参与方通常具备各自的硬件加速方案,例如,基于GPU硬件的并行加速计算方案和基于FPGA硬件的并行加速计算方案等,进而在联邦学习异构框架中,各参与方的不同类型硬件设备进行数据传输时的兼容性较差。
发明内容
本申请的主要目的在于提供一种基于联邦学习的数据传输优化方法、设备及可读存储介质,旨在解决现有技术中联邦学习异构框架中不同类型硬件设备进行数据传输时兼容性差的技术问题。
为实现上述目的,本申请提供一种基于联邦学习的数据传输优化方法,所述基于联邦学习的数据传输优化方法应用于第一设备,所述基于联邦学习的数据传输优化方法包括:
获取待传输数据,并将所述待传输数据转换为携带第一硬件设备信息的待传输比特流;
将所述待传输比特流发送至第二设备,以供所述第二设备基于所述第一硬件设备信息以及获取的第二硬件设备信息共同对应的数据转换方式,将所述待传输比特流转换为适配于所述第二硬件设备信息的目标格式数据,并拷贝至所述第二硬件设备信息对应的目标设备内存。
为实现上述目的,本申请提供一种基于联邦学习的数据传输优化方法,所述基于联邦学习的数据传输优化方法应用于第二设备,所述基于联邦学习的数据传输优化方法包括:
接收第一设备发送的待传输比特流,并对所述待传输比特流进行第一次反序列化,获得第一硬件设备信息和待转换比特流;
获取第二硬件设备信息,并基于所述第一硬件设备信息和所述第二硬件设备信息,将所述待转换比特流转换为适配于所述第二硬件设备信息的目标格式数据;
将所述目标格式数据拷贝至所述第二硬件设备信息对应的目标硬件加速设备执行计算任务。
为实现上述目的,本申请提供一种基于联邦学习的数据传输优化方法,所述基于联邦学习的数据传输优化方法应用于第一设备,所述基于联邦学习的数据传输优化方法包括:
接收第二设备发送的第二硬件设备信息,并获取待传输数据以及第一硬件设备信息;
基于所述第一硬件设备信息和所述第二硬件设备信息,将所述待传输数据转换为待传输比特流;
将所述待传输比特流发送至第二设备,以供第二设备将所述待传输比特流转换为适配于所述第二硬件设备信息的目标格式数据。
为实现上述目的,本申请提供一种基于联邦学习的数据传输优化方法,所述基于联邦学习的数据传输优化方法应用于第二设备,所述基于联邦学习的数据传输优化方法包括:
获取第二硬件设备信息,并将所述第二硬件设备信息发送至第一设备,以供所述第一设备基于待传输数据对应的第一硬件设备信息与第二硬件设备信息,将所述待传输数据转换为适配于所述第二硬件设备信息的待传输比特流;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳致星科技有限公司,未经深圳致星科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110343403.6/2.html,转载请声明来源钻瓜专利网。