[发明专利]数据更新方法及装置

说明书

本发明公开了一种数据更新方法及装置。其中，该方法包括：第一服务器将训练指示信息推送至第二服务器，并从第二服务器拉取第一单词集合在第二矩阵中对应的第二部分矩阵；第一服务器根据第二部分矩阵、第一矩阵以及第一单词集合对第二部分矩阵和第一矩阵进行更新；第一服务器将更新后的第二部分矩阵发送至第二服务器，并接收第二服务器发送的更新后的第一部分矩阵；第一服务器根据更新后的第一部分矩阵对更新后的第一矩阵进行更新。采用上述方案，本发明解决了现有技术中数据更新过程中第一服务器的数据处理量较大的技术问题。

技术领域

本发明涉及计算机领域，具体而言，涉及一种数据更新方法及装置。

背景技术

主题模型是用于给文本建模的一种方法，在机器学习领域主题模型属于生成模型，即是说该模型可以随机生成可观测的数据，因而主题模型可以随机生成一篇由N个主题组成的文章。通过主题模型对文本进行建模，我们可以对文本进行主题分类、判断文本之间的相似度等等。

现有的主题模型训练的方法大多采用基于参数服务器的分布式架构来进行主题模型的训练。分布式架构中一部分服务器用于存储参数，另一部分服务器进行主题模型的训练过程，进行主题模型训练的服务器需要将存储参数的服务器上存储的内容全部获取到本地才能开始主题模型的训练过程，这就导致了服务器的数据处理量不均衡，严重的浪费了网络开销，影响主题模型的训练效率。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据更新方法及装置，以至少解决现有技术中数据更新过程中第一服务器的数据处理量较大的技术问题。

根据本发明实施例的一个方面，提供了一种数据更新方法，包括：第一服务器将训练指示信息推送至第二服务器，并从所述第二服务器拉取第一单词集合在第二矩阵中对应的第二部分矩阵，其中，所述训练指示信息中携带有第二单词集合以及所述第二单词集合在第一矩阵中对应的第一部分矩阵，所述训练指示信息用于指示所述第二服务器对所述第一部分矩阵以及所述第二矩阵进行更新，所述第一服务器存储了所述第一矩阵，所述第二服务器存储了所述第二矩阵；所述第一服务器根据所述第二部分矩阵、所述第一矩阵以及所述第一单词集合对所述第二部分矩阵和所述第一矩阵进行更新；所述第一服务器将更新后的所述第二部分矩阵发送至所述第二服务器，并接收所述第二服务器发送的更新后的所述第一部分矩阵；所述第一服务器根据更新后的所述第一部分矩阵对更新后的所述第一矩阵进行更新。

根据本发明实施例的另一方面，还提供了一种数据更新方法，包括：第二服务器接收第一服务器推送的训练指示信息，并将第一单词集合在第二矩阵中对应的第二部分矩阵发送至所述第一服务器，其中，所述训练指示信息中携带有第二单词集合以及所述第二单词集合在第一矩阵中对应的第一部分矩阵，所述训练指示信息用于指示所述第二服务器对所述第一部分矩阵以及所述第二矩阵进行更新，所述第一服务器存储了所述第一矩阵，所述第二服务器存储了所述第二矩阵；所述第二服务器响应所述训练指示信息的指示根据所述第一部分矩阵、所述第二矩阵以及所述第二单词集合对所述第一部分矩阵以及所述第二矩阵进行更新；所述第二服务器将更新后的所述第一部分矩阵发送至所述第一服务器，并接收所述第一服务器发送的更新后的所述第二部分矩阵；所述第二服务器根据更新后的所述第二部分矩阵对更新后的所述第二矩阵进行更新。