[发明专利]一种信息表文件的读取系统及方法在审
申请号: | 201711316384.8 | 申请日: | 2017-12-12 |
公开(公告)号: | CN108108411A | 公开(公告)日: | 2018-06-01 |
发明(设计)人: | 王礼春 | 申请(专利权)人: | 苏州蜗牛数字科技股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京德崇智捷知识产权代理有限公司 11467 | 代理人: | 王金双 |
地址: | 215000 江苏省*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 信息表 读取 解析 文件转换模块 读取模块 读取系统 文件对象 聚合 转换 表头信息 内容分组 容器结构 文件存储 文件内容 信息存储 用户读取 构建 解压 流式 算法 内存 分组 消耗 节约 | ||
1.一种信息表文件的读取系统,其特征在于,包括:信息表文件转换模块和文件对象读取模块,其中,
所述信息表文件转换模块,其以列为单位对信息表文件中的内容分组聚合,并基于表头信息对分组聚合的内容进行转换;
所述文件对象读取模块,其采用流式解压算法,读取转换后的信息表文件;再基于解析指示,解析转换后的信息表文件的文件内容。
2.根据权利要求1所述的信息表文件的读取系统,其特征在于,所述表头信息包括:表头大小、信息表行数、信息表列数、关键列、各列名称、各列类型、列缺省值、各列数值区起始地址、列存储区信息和列分区映射信息。
3.根据权利要求1所述的信息表文件的读取系统,其特征在于,所述信息表文件转换模块,其还用于对信息表文件进行预处理,所述预处理包括:
获取信息表文件的列数;
确定信息表文件中每列的数据类型;
选择信息表文件中的关键列进行排序;
设置信息表文件中每列的缺省值;
对信息表文件中列数值内容进行填充;
对信息表文件中重复的列数据进行合并。
4.根据权利要求1所述的信息表文件的读取系统,其特征在于,
所述文件对象读取模块,其依据选择的列信息,使用流式解压算法,在指定位置处,从转换后的信息表文件中读取指定数量字节的文件内容到系统的公共映射区;
从系统的公共映射区获取文件内容,根据解析指示,采用指定的读取方式进行解析;
其中,所述指定的读取方式包括:指定行列、遍历或者二分查找读取方式。
5.一种信息表文件的读取方法,其特征在于,包括以下步骤:
以列为单位对信息表文件中的内容分组聚合,并基于表头信息对分组聚合的内容进行转换;
采用流式解压算法,读取转换后的信息表文件,再基于解析指示,解析转换后的信息表文件的文件内容。
6.根据权利要求5所述的信息表文件的读取方法,其特征在于,所述表头信息包括:表头大小、信息表行数、信息表列数、关键列、各列名称、各列类型、列缺省值、各列数值区起始地址、列存储区信息和列分区映射信息。
7.根据权利要求5所述的信息表文件的读取方法,其特征在于,所述基于表头信息对分组聚合的内容进行转换的步骤包括:对信息表文件进行预处理的步骤,所述预处理包括:
获取信息表文件的列数;
确定信息表文件中每列的数据类型;
选择信息表文件中的关键列进行排序;
设置信息表文件中每列的缺省值;
对信息表文件中列数值内容进行填充;
对信息表文件中重复的列数据进行合并。
8.根据权利要求5所述的信息表文件的读取方法,其特征在于,所述采用流式解压算法,读取转换后的信息表文件,再基于解析指示,解析转换后的信息表文件的文件内容的步骤是,
依据选择的列信息,使用流式解压算法,在指定位置处,从转换后的信息表文件中读取指定数量字节的文件内容到系统的公共映射区;
从系统的公共映射区获取文件内容,根据解析指示,采用指定的读取方式进行解析;
其中,所述指定的读取方式包括:指定行列、遍历或者二分查找读取方式。
9.根据权利要求8所述的信息表文件的读取方法,其特征在于,采用指定行列的读取方式进行解析的步骤是,先读取解析指示中的指定行号、列号的内容,再计算指定行号、列号的内容的字符串的存储地址,再去字符串的存储地址所在空间处解析出对应的字符串的具体数值内容。
10.根据权利要求8所述的信息表文件的读取方法,其特征在于,采用二分查找的读取方式进行解析的步骤是,排序查找转换后的信息表文件的关键列中与解析指示中的指示内容相同行的行号,获取到与指示内容相对应的键值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州蜗牛数字科技股份有限公司,未经苏州蜗牛数字科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711316384.8/1.html,转载请声明来源钻瓜专利网。