[发明专利]语言数据的处理方法、装置、存储介质及电子设备

说明书

本申请公开了一种语言数据的处理方法、装置、存储介质及电子设备。其中，该方法包括：将源语言数据翻译成第一目标语言数据；对源语言数据进行语码转换处理，得到第一语码转换数据，以及对第一目标语言数据进行语码转换处理，得到第二语码转换数据；利用源语言数据、第一目标语言数据、第一语码转换数据和第二语码转换数据训练得到多个模型；将第二目标语言数据输入至多个模型，输出多个第一预测结果；利用多个第一预测结果训练得到目标模型；将第三目标语言数据输入至目标模型，输出第二预测结果。本申请解决了现有技术中由于方面层级情感分析需要细粒度的标注处理，导致多种目标语言的情感分析任务的处理效率低下的技术问题。

技术领域

本申请涉及计算机数据处理领域，具体而言，涉及一种语言数据的处理方法、装置、存储介质及电子设备。

背景技术

目前，在针对用户商品评论等情感倾向挖掘应用场景中，方面层级的情感分析(aspect-based sentiment analysis)是其中最为广泛应用的情感分析任务。在实际的商业环境中，往往面临多种目标语言的情感分析场景，例如，AE、Lazada等跨境服务电商的商品评论挖掘算法需要针对数十种目标语言。

为了从商品评论中挖掘出用户的情感倾向，现有技术中通常是针对不同的目标语言分别进行数据标注，以作为模型的训练数据。然而，对于方面层级情感分析需要细粒度的标注处理，因此对于每个目标语言进行分别标注处理，需要花费大量时间、金钱和精力，不利于分析算法的快速部署。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种语言数据的处理方法、装置、存储介质及电子设备，以至少解决现有技术中由于方面层级情感分析需要细粒度的标注处理，导致多种目标语言的情感分析任务的处理效率低下，不利于挖掘出用户情感倾向的技术问题。

根据本申请实施例的一个方面，提供了一种语言数据的处理方法，包括：将源语言数据翻译成第一目标语言数据，其中，上述源语言数据为预先经过标注的数据；对上述源语言数据进行语码转换处理，得到第一语码转换数据，以及对上述第一目标语言数据进行语码转换处理，得到第二语码转换数据；利用上述源语言数据、上述第一目标语言数据、上述第一语码转换数据和上述第二语码转换数据训练得到多个模型；将第二目标语言数据输入至上述多个模型，输出多个第一预测结果，其中，上述第二目标语言数据为预先收集的无标签数据；利用上述多个第一预测结果训练得到目标模型；将第三目标语言数据输入至上述目标模型，输出第二预测结果，其中，上述第三目标语言数据为待分析的无标签数据。

根据本申请实施例的另一方面，还提供了一种语言数据的处理装置，包括：翻译模块，用于将源语言数据翻译成第一目标语言数据，其中，上述源语言数据为预先经过标注的数据；转换处理模块，用于对上述源语言数据进行语码转换处理，得到第一语码转换数据，以及对上述第一目标语言数据进行语码转换处理，得到第二语码转换数据；第一训练模块，用于利用上述源语言数据、上述第一目标语言数据、上述第一语码转换数据和上述第二语码转换数据训练得到多个模型；第一输入模块，用于将第二目标语言数据输入至上述多个模型，输出多个第一预测结果，其中，上述第二目标语言数据为预先收集的无标签数据；第二训练模块，用于利用上述多个第一预测结果训练得到目标模型；第二输入模块，用于将第三目标语言数据输入至上述目标模型，输出第二预测结果，其中，上述第三目标语言数据为待分析的无标签数据。

根据本申请实施例的另一方面，还提供了一种计算机可读存储介质，上述计算机可读存储介质包括存储的程序，其中，在上述程序运行时控制上述计算机可读存储介质所在设备执行任意一项上述的语言数据的处理方法。