[发明专利]一种基于行存储数据库的数据处理方法和设备

说明书

技术领域

本发明涉及互联网技术领域，尤其涉及一种基于行存储数据库的数据处理方法和设备。

背景技术

行存储方式是目前主流的关系数据库存储技术实现方式，其基本思路是：将数据按照行为单位进行存储，并通过索引技术提高查询的效率。该方式很适合OLTP(On-Line Transaction Processing，联机事务处理)的场景，在频繁的插入、删除、更新操作，以及小数据量(若干行)的查询方面优势较为突出。但是，随着PB(PetaByte，千万亿字节)级别的超大型数据仓库的出现，行存储方式的不足逐渐显现。

由于传统的数据仓库产品是以行为单位进行存储的，且数据仓库查询操作多而更新和插入操作较少，而多数查询分析都是基于某些特定列进行操作。因此，通过行存储方式实现的数据仓库不可避免的会带来非必要的IO(Input/Output，输出/输入)操作。同时，行存储方式实现的数据仓库存储单元中的数据的共性较少，不利于数据压缩。

正是针对上述行存储数据仓库的不足，列存储数据仓库应运而生。其基本实现思路是将数据按照列为单位进行存储，并通过链接表示不同的列值之间的关系。因为它是基于列进行存储的，可以很好的克服上述行存储数据仓库的缺陷。但是，列存储数据仓库同样也有不足：首先，虽然数据仓库的多数操作是针对某些特定的列而非全部列，但是多数的操作是针对某几列而非某一列，这些操作在以单个列为单位进行存储的列存储数据仓库产品中，必然会增加更多的查询开销。其次，由于列存储数据仓库出现的时间较短，虽然基本的数据仓库功能已经很好的满足，但是很多传统的行存储数据仓库功能比如存储过程等，还无法兼容，这增加了用户迁移数据仓库系统的难度。另外，让用户放弃多年的数据仓库产品投资，而转向全新的列存储数据仓库产品，本身也是一个艰难的抉择。

发明内容

本发明实施例提供一种基于行存储数据库的数据处理方法和设备，以实现基于行存储数据库的列存储技术。

为了达到上述目的，本发明实施例提供一种行存储数据库的数据处理方法，包括：

数据库系统接收到用户提交的在行存储数据库中创建目标数据表的建表结构化查询语言SQL语句后，在行存储数据库中创建与所述目标数据表对应的数个列表，并创建对应的统一视图；其中，所述数个列表分别与所述目标数据表的各列一一对应；

当所述数据库系统接收到用户提交的对所述行存储数据库中的所述目标数据表中的数据进行处理的请求时，所述数据库系统根据所请求处理的目标数据表所对应的统一视图，对相应列表中的数据进行相应处理。

本发明实施例还提供一种数据库系统，包括：

接收模块，用于接收用户提交的在行存储数据库中创建目标数据表的建表结构化查询语言SQL语句以及对所述行存储数据库中的所述目标数据表中的数据进行处理的请求；

模拟器模块，用于当所述接收模块接收到用户提交的在行存储数据库中创建目标数据表的建表结构化查询语言SQL语句后，在行存储数据库中创建与所述目标数据表对应的数个列表，并创建对应的统一视图；其中，所述数个列表分别与所述目标数据表的各列一一对应；

处理模块，用于当所述接收模块接收到用户提交的对所述行存储数据库中的所述目标数据表中的数据进行处理的请求时，所述数据库系统根据所请求处理的目标数据表所对应的统一视图，对相应列表中的数据进行相应处理。

与现有技术相比，本发明实施例提供的技术方案中，数据库系统根据接收到在行存储数据库中创建目标数据表的SQL语句后，在行存储数据库中创建与目标数据表对应的数个列表；当接收到对行存储数据库中的目标数据表中的数据的处理请求时，对相应列表中的数据进行相应处理，实现了在现有行存储数据库产品的基础上模拟列存储数据库产品，使用户在不需要更换数据库产品的前提下获得列存储技术的优点。

附图说明

图1为本发明实施例中提供的数据库系统的工作原理示意图；

图2～3为本发明实施例提供的一种基于行存储数据库的数据处理方法的流程示意图；

图4为本发明实施例提供的一种数据库系统的结构示意图。

具体实施方式

针对现有技术中行存储技术和列存储技术各自的缺陷，本发明实施例提供了一种数据处理的技术方案，在现有行存储数据库的基础上，模拟列存储数据库，以使行存储数据库产品用户无需进行存储数据库产品更换即可获得列存储技术的优点。