[发明专利]基于掩码计算的数据表解析方法、装置、设备及存储介质有效
申请号: | 202310647218.5 | 申请日: | 2023-06-02 |
公开(公告)号: | CN116361346B | 公开(公告)日: | 2023-08-08 |
发明(设计)人: | 于帆;李明;赵鑫鑫;姜凯;王雄儒 | 申请(专利权)人: | 山东浪潮科学研究院有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/2457;G06F16/245 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 陈颖 |
地址: | 250000 山东省济*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 掩码 计算 数据表 解析 方法 装置 设备 存储 介质 | ||
1.一种基于掩码计算的数据表解析方法,其特征在于,包括:
接收客户端发送的数据查询指令,并对所述数据查询指令进行解析,以得到目标计算算子;
确定参与算子运算的数据表中的相关数据,并基于所述相关数据进行掩码计算,以得到有效数据掩码;所述算子运算为基于所述目标计算算子的数据运算;
基于所述有效数据掩码以及所述数据表中的原始行数据进行数据运算,以得到有效列数据;
基于所述目标计算算子对所述有效列数据进行加速运算,并根据运算结果输出目标数据,以将所述目标数据返回至所述客户端;
其中,所述确定参与算子运算的数据表中的相关数据,并基于所述相关数据进行掩码计算,以得到有效数据掩码,包括:
在任务管理层确定参与算子运算的数据表,并确定所述数据表中参与算子运算的数据的行长度、起始字节、持续字节;
在查询加速层基于所述行长度生成相同长度的最大数据掩码,并基于所述起始字节对所述最大数据掩码进行右移操作,以得到右移掩码;
在查询加速层基于所述起始字节以及所述持续字节对所述最大数据掩码进行左移操作,以得到左移掩码;
将所述右移掩码与所述左移掩码进行同或运算,以得到有效数据掩码。
2.根据权利要求1所述的基于掩码计算的数据表解析方法,其特征在于,所述接收客户端发送的数据查询指令,并对所述数据查询指令进行解析,以得到目标计算算子,包括:
接收客户端基于终端应用层发送的数据查询指令,并在指令解析层对所述数据查询指令进行处理,以得到与所述数据查询指令相应的底层代码;
对所述底层代码进行解析,以得到若干计算算子;
基于预设优化算法对所述若干计算算子进行算子优化,以得到目标计算算子。
3.根据权利要求1所述的基于掩码计算的数据表解析方法,其特征在于,所述基于所述有效数据掩码以及所述数据表中的原始行数据进行数据运算,以得到有效列数据之前,还包括:
对所述相关数据进行数据加密操作以及数据压缩操作,以基于得到的压缩数据在处理器以及加速卡之间进行数据传输。
4.根据权利要求1所述的基于掩码计算的数据表解析方法,其特征在于,所述基于所述有效数据掩码以及所述数据表中的原始行数据进行数据运算,以得到有效列数据,包括:
利用所述有效数据掩码以及所述数据表中的原始行数据进行与运算,以提取所述原始行数据中参与所述算子运算的有效列数据。
5.根据权利要求1所述的基于掩码计算的数据表解析方法,其特征在于,所述基于所述有效数据掩码以及所述数据表中的原始行数据进行数据运算,以得到有效列数据之后,还包括:
缓存所述原始行数据,以实现所述有效列数据与所述原始行数据的同步运算。
6.根据权利要求1至5任一项所述的基于掩码计算的数据表解析方法,其特征在于,所述基于所述目标计算算子对所述有效列数据进行加速运算,并根据运算结果输出目标数据,以将所述目标数据返回至所述客户端,包括:
在查询加速层确定所述目标计算算子相应的算子算法,并通过所述算子算法对所述有效列数据进行加速运算,以得到相应的运算结果;
基于所述运算结果的生成顺序输出目标数据,并将所述目标数据返回至所述客户端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东浪潮科学研究院有限公司,未经山东浪潮科学研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310647218.5/1.html,转载请声明来源钻瓜专利网。