[发明专利]一种机器人业务场景下的数据处理方法、装置和电子设备

权利要求书

1.一种机器人业务场景下的数据处理方法，其特征在于，包括：

接收机器人业务场景下收集到的实时数据流；

基于天为颗粒度对所述实时数据流中前一天的数据进行预处理，得到目标数据；

将所述目标数据储存至数据仓，所述数据仓包括分布式存储系统。

2.根据权利要求1所述的方法，其特征在于，所述接收机器人业务场景下收集到的实时数据流，包括：

通过kafka的发布者接口来接收机器人业务场景下收集到的实时数据流，形成不同主题的消息队列。

3.根据权利要求1所述的方法，其特征在于，所述基于天为颗粒度对所述实时数据流中前一天的数据进行预处理，得到目标数据，包括：

利用Spark Streaming将所述实时数据流以天为颗粒度分作多个数据集合；

基于脚本的方式，对所述多个数据集合中前一天的数据进行预处理，得到目标数据。

4.根据权利要求1所述的方法，其特征在于，所述分布式存储系统为HDFS目录；

所述将所述目标数据储存至数据仓，包括：将预处理得到所述目标数据写入HDFS目录。

5.根据权利要求2所述的方法，其特征在于，还包括：

通过kafka的订阅者接口来接收用户的订阅请求；

基于所述消息队列中的数据响应所述订阅请求，并将所述订阅请求对应的数据返回给所述用户。

6.根据权利要求1-5任一项所述的方法，其特征在于，还包括：

基于HIVE数据仓库工具将所述数据仓中的目标数据映射为一张数据库表，并提供查询功能；

接收用户在客户端发送的数据查询请求，并基于所述数据库表将所述用户想要查询的目标数据返回给所述客户端。

7.根据权利要求6所述的方法，其特征在于，所述数据查询请求包括以下之一：存储、查询或分析。

8.一种机器人业务场景下的数据处理装置，其特征在于，包括：

接收模块，被配置为接收机器人业务场景下收集到的实时数据流；

处理模块，被配置为基于天为颗粒度对所述实时数据流中前一天的数据进行预处理，得到目标数据；

存储模块，被配置为将所述目标数据储存至数据仓，所述数据仓包括分布式存储系统。

9.一种电子设备，包括存储器、处理器以及存储在所述存储器中并且可以在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述方法的步骤。