[发明专利]多场景流式数据处理方法、系统、网络设备和存储介质

说明书

本申请提供一种多场景流式数据处理方法、系统、网络设备和存储介质，属于计算机技术领域。本申请实施例提供的多场景流式数据处理方法，包括获取目标应用的原始流式数据；根据场景类型，从所述原始流式数据中提取所述场景类型对应的流式数据；获取所述场景类型对应的数据处理规则，所述数据处理规则用于确定成对的流式数据；根据所述数据处理规则，获取所述场景类型对应的流式数据中的成对的流式数据；将获取到的成对的流式数据存储至数据库；通过上述方法实现了对目标应用在多场景下的流式数据获取，并按各个场景的数据处理规则获取承兑的流式数据后，将所有成对的流式数据存入同一数据库中，实现了支持多场景流式数据的处理。

技术领域

本申请涉及计算机技术领域，尤其涉及一种多场景流式数据处理方法、系统、网络设备和存储介质。

背景技术

目前的社交产品都有各自业务的主要功能，例如语音功能、视频功能、游戏功能。为了完成产品的各功能，通常需要分别每个功能配置一个数据表用以存储数据。当需要分析各个功能产生的使用数据时，使用语音功能时的开麦时间，使用视频功能时的开麦及开摄时间等用户数据时，需要分别在各个数据表上搭建数据看板；当不同数据表对应的功能类似时，搭建数据看板的步骤基本一致，造成搭建过程中一定人力物力的浪费。

在进行数据查询时，目前通常为不同功能分别搭建数据看板以供数据查看，且无法实现跨天数据的直接查询；如面对一定时间范围内的查询、跨天查询等特殊查询场景时；也就导致了无法查询过程繁琐、看板搭建过程冗余、无法适配多种场景也无法实现跨天数据场景等问题。

发明内容

本申请提出了一种多场景流式数据处理方法、系统、网络设备和存储介质，以解决现有技术中数据处理时看板搭建繁琐、查询过程复杂以及不支持多场景处理查询等问题。

为了解决上述技术问题，本申请是这样实现的：

第一方面，本申请实施例提供了一种多场景流式数据处理方法，包括：

获取目标应用的原始流式数据；

根据场景类型，从所述原始流式数据中提取所述场景类型对应的流式数据；

获取所述场景类型对应的数据处理规则，所述数据处理规则用于确定成对的流式数据；

根据所述数据处理规则，获取所述场景类型对应的流式数据中的成对的流式数据；

将获取到的成对的流式数据存储至数据库。

第二方面，本申请实施例提供了一种多场景数据流式处理系统，包括：

原始数据获取模块，用于获取目标应用的原始流式数据；

流式数据提取模块，用于根据场景类型，从所述原始流式数据中提取所述场景类型对应的流式数据；

多场景规则配置模块，用于获取所述场景类型对应的数据处理规则，所述数据处理规则用于确定成对的流式数据；

流式数据处理模块，用于根据所述数据处理规则，获取所述场景类型对应的流式数据中的成对的流式数据；

数据存储模块，用于将获取到的成对的流式数据存储至数据库。

第三方面，本申请实施例提供了一种网络设备，包括：处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序，所述程序被所述处理器执行时实现上述第一方面的多场景流式数据处理方法的步骤。

第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面的多场景流式数据处理方法的步骤。

本申请实施例提供的技术方案带来的有益效果至少包括：