[发明专利]一种数据反序列化装置及计算终端在审
| 申请号： | 201910664325.2 | 申请日： | 2019-07-23 |
| 公开（公告）号： | CN110399415A | 公开（公告）日： | 2019-11-01 |
| 发明（设计）人： | 臧春峰;王斌;严大卫;陈芬 | 申请（专利权）人： | 江苏鼎速网络科技有限公司 |
| 主分类号： | G06F16/25 | 分类号： | G06F16/25;G06F16/2455 |
| 代理公司： | 苏州友佳知识产权代理事务所(普通合伙) 32351 | 代理人： | 储振 |
| 地址： | 214000 江苏省无锡市滨*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供了数据反序列化装置及计算终端，该数据反序列化装置包括控制单元，以串行方式受控于控制单元的至少一个加速单元；加速单元由数据输入模块、数据切分引擎、反序列化引擎集群、数据合并引擎及数据输出模块组成，反序列化引擎集群由并行的若干基于AVRO的反序列化引擎组成，通过反序列化引擎生成反序列化数据，并通过数据合并引擎顺序地根据Schema文件对反序列化数据执行拼接后输出。通过本发明所揭示的该数据反序列化装置及基于该数据反序列化装置的计算终端，显著地降低了数据在反序列化处理中对云平台、数据中心所配置的CPU资源、内存资源及计算机总线带宽资源的消耗。 | ||
| 搜索关键词： | 反序列化 引擎 计算终端 加速单元 数据合并 集群 反序列化处理 数据输出模块 数据输入模块 计算机总线 串行方式 带宽资源 内存资源 数据执行 数据中心 引擎生成 配置的 云平台 拼接 受控 并行 消耗 输出 | ||
【主权项】：
1.一种数据反序列化装置(100)，其特征在于，包括：控制单元(10)，以串行方式受控于控制单元(10)的至少一个加速单元(60)；所述加速单元(60)由数据输入模块(61)、数据切分引擎(62)、反序列化引擎集群(63)、数据合并引擎(64)及数据输出模块(65)组成，所述反序列化引擎集群(63)由并行的若干基于AVRO的反序列化引擎组成；所述数据切分引擎(62)对数据输入模块(61)传入的Schema文件确定切分粒度，并将切分后的序列化数据循环分发至若干反序列化引擎中，以通过所述反序列化引擎生成反序列化数据，并通过数据合并引擎(64)顺序地根据Schema文件对反序列化数据执行拼接后输出。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于江苏鼎速网络科技有限公司，未经江苏鼎速网络科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910664325.2/，转载请声明来源钻瓜专利网。
- 上一篇：一种图书荐购系统设计
- 下一篇：一种分布式数据库操作优化访问处理方法及系统
