[发明专利]一种数据存储方法、装置及主机

说明书

本申请实施例提供了一种数据存储方法、装置及主机，涉及数据处理技术领域，上述方法包括：CPU在监控到应用程序执行写操作时，获取应用程序执行写操作时输入的待更新数据；将待更新数据对应的更新日志写入主机的内存，更新日志包括待更新数据和待更新数据的元数据；向DPU发送内存中存储的更新日志；DPU根据更新日志包括的元数据，存储更新日志包括的待更新数据。应用本申请实施例提供的技术方案可以降低CPU的资源消耗，降低存储访问时延。

技术领域

本申请涉及数据处理技术领域，特别是涉及一种数据存储方法、装置及主机。

背景技术

分布式存储系统因具有较高的可靠性、可用性、存取效率和扩展性，被广泛用于存储服务中。目前，分布式存储系统中，由主机CPU（Central Processing Unit，中央处理器）实现数据的本地落盘和远程复制。随着存储服务需要处理的数据量不断增长，CPU性能的增长已无法满足数据量增长的需求，这种情况下，主机上各种应用程序会相互抢占CPU资源和内存资源，导致CPU频繁进行上下文切换和调度，增大了CPU资源消耗，增大了存储访问时延。此外，主机CPU采用同步进程进行数据的本地落盘和远程复制，这也会大大增加存储访问时延。

发明内容

本申请实施例的目的在于提供一种数据存储方法、装置及主机，以降低CPU的资源消耗，降低存储访问时延。具体技术方案如下：

第一方面，本申请提供了一种数据存储方法，应用于主机的CPU，所述主机还包括DPU（Data Processing Unit，数据中心处理器）；所述方法包括：

在监控到应用程序执行写操作时，获取所述应用程序执行写操作时输入的待更新数据；

将所述待更新数据对应的更新日志写入所述主机的内存，所述更新日志包括所述待更新数据和所述待更新数据的元数据；

向所述DPU发送所述内存中存储的所述更新日志，以使所述DPU根据所述更新日志包括的元数据，存储所述更新日志包括的待更新数据。

在一些实施例中，所述向所述DPU发送所述内存中存储的所述更新日志的步骤，包括：

合并所述内存中存储的多条更新日志，得到合并日志；

向所述DPU发送所述合并日志，以使所述DPU将所述合并日志拆分为多条更新日志，根据拆分得到的每条更新日志包括的元数据，存储每条更新日志包括的待更新数据。

在一些实施例中，所述方法还包括：

监控所述内存中存储的更新日志是否满足预设条件；当满足所述预设条件时，执行所述向所述DPU发送所述内存中存储的所述更新日志的步骤；

所述预设条件包括以下至少一项：

所述写操作完成；

所述内存中存储的更新日志的数据量总和达到预设数据量；

距离上一次发送更新日志的时长达到预设时长；

所述内存中存储的更新日志的条数达到预设条数。

在一些实施例中，所述方法还包括：

在所述将所述待更新数据对应的更新日志写入所述主机的内存的步骤之前，为所述待更新数据分配系统进程，并为所述系统进程分配时间片；

在所述将所述待更新数据对应的更新日志写入所述主机的内存的步骤之后，释放所述时间片。

第二方面，本申请提供了一种数据存储方法，应用于主机的DPU，所述主机还包括CPU；所述方法包括：

接收所述CPU发送的更新日志，所述更新日志为：所述CPU在监控到应用程序执行写操作时，根据所述应用程序执行写操作时输入的待更新数据生成的日志，所述更新日志包括所述待更新数据和所述待更新数据的元数据；

根据所述更新日志包括的元数据，存储所述更新日志包括的待更新数据。

在一些实施例中，所述接收所述CPU发送的更新日志的步骤，包括：