[发明专利]数据处理方法、数据存储系统、计算机设备及存储介质

说明书

本公开关于一种数据处理方法、数据存储系统、计算机设备及存储介质，属于计算机技术领域。本公开通过在数据存储系统中同时设置行存储空间和列存储空间，应用配置信息来配置各个字段的存储形式，对于数据写入需求较大的字段，直接以行存储形式写入到行存储空间，从而能够保证数据的写入速度较快，再调用数据同步功能，将行存储空间中更新的数据同步到列存储空间中，使列存储空间能够存储有完整的、最新的数据，从而能够良好的支持数据查询，保证数据查询的速度较快。

技术领域

本公开涉及计算机技术领域，尤其涉及一种数据处理方法、数据存储系统、计算机设备及存储介质。

背景技术

随着互联网技术的发展，网络中所需要存储的数据也越来越多，海量的数据存储对于数据存储系统的性能要求也大幅提高。而目前的数据存储系统，往往难以同时具备较快的数据写入速度和数据查询速度，难以满足高频率的数据写入和查询需求。因此，如何使数据存储系统能够兼顾数据查询速度和数据写入速度，是一个重要研究方向。

发明内容

本公开提供一种数据处理方法、数据存储系统、计算机设备及存储介质，能够提高数据存储系统的数据查询速度和数据写入速度。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种数据处理方法，应用于数据存储系统，包括：

接收数据写入请求，该数据写入请求包括待写入数据以及该待写入数据所属字段的第一字段标识；

响应于该数据写入请求中的该第一字段标识命中配置信息，将该待写入数据以行存储形式写入该数据存储系统的行存储空间，该配置信息中存储有至少一个目标字段对应的目标字段标识，该目标字段所对应的写入参数和查询参数满足参考条件；

将该行存储空间中的增量数据同步至该数据存储系统的列存储空间，该列存储空间中的数据以列存储形式进行存储。

本公开实施例提供的技术方案，通过在数据存储系统中同时设置行存储空间和列存储空间，应用配置信息来配置各个字段的存储形式，对于数据写入需求较大的字段，直接以行存储形式写入到行存储空间，从而能够保证数据的写入速度较快，再调用数据同步功能，将行存储空间中更新的数据同步到列存储空间中，使列存储空间能够存储有完整的、最新的数据，从而能够良好的支持数据查询，保证数据查询的速度较快。

在一种可能实现方式中，该将该行存储空间中的增量数据同步至该数据存储系统的列存储空间之后，该方法还包括：

获取该数据存储系统的历史操作数据，该历史操作数据存储有被操作数据所属字段的字段标识和对应的数据操作；

基于该历史操作数据，确定该数据存储系统中字段所对应的写入参数和查询参数；

基于该字段所对应的写入参数和查询参数，在该字段中确定候选字段，该候选字段所对应的写入参数和查询参数满足该参考条件；

基于该候选字段的字段标识，对该配置信息进行更新。

本公开实施例中，通过基于真实的历史操作数据，对配置信息进行动态调整，也即是，对行存储空间中所存储的字段进行动态调整，能够有效提高对数据存储系统进行配置的灵活性，使数据存储系统能够更符合当前的业务需求，能够有效解决不同写入、查询比例下，存储空间的字段配置问题。

在一种可能实现方式中，该参考条件为写入参数和查询参数之间的比值大于或等于参考阈值。

在一种可能实现方式中，该基于该候选字段的字段标识，对该配置信息进行更新，包括：

将该候选字段的字段标识与该配置信息中存储的目标字段标识进行匹配；

响应于该候选字段的字段标识与该目标字段标识不同，将该候选字段的字段标识添加至该配置信息中。