[发明专利]一种基于zeppelin的交互式分析系统

说明书

本发明公开了一种基于zeppelin的交互式分析系统，涉及计算机大数据分技术领域。包括自下而上的zeppelin interpreter、zeppelin server、外围模块和浏览器端，所述zeppelin interpreter为zeppelin处理交互式分析任务时用到的对应任务语言的解析器，所述zeppelin server为管理zeppelin interpreter的处理器，以及调度交互式分析任务、分配资源的中央管理器，所述外围模块对开源组件apache zeppelin进行封装，所述浏览器端用于登录访问所述外围模块。该基于zeppelin的交互式分析系统，工作区管理模块使用户可以管理自己的笔记本单元，统一管理笔记本；任务管理模块使用户可以更加方便地管理任务，便于用户进行任务的编写、运行或停止。

技术领域

本发明涉及计算机大数据分析技术领域，具体为一种基于zeppelin的交互式分析系统，应用于企业的大数据分析处理技术中。

背景技术

现阶段多数企业的数据分析平台均以Hive作为数据仓库，以数据同步的方式将多业务系统主数据抽取到Hive库，然后采用Hive SQL的方式进行数据建模，数据利用过程非常复杂，最终体现到数据分析与可视化时，需要经过多种工具，耗时长，非常不利于新的数据发现，而且一般由专业的实施人员去完成，如何大数据量并且敏捷的利用这些数据资产进行数据分析，是一个迫在眉睫的问题；鉴于此，我们提出了一种基于zeppelin的交互式分析系统。

发明内容

针对现有技术的不足，本发明提供了一种基于zeppelin的交互式分析系统，提供交互式的数据分析和简单的图表可视化，响应快，简化数据发现流程，很好的解决了大数据的快速分析需求，并且支持多种语言的脚本，方便业务人员直接分析。

为实现以上目的，本发明通过以下技术方案予以实现：一种基于zeppelin的交互式分析系统，包括自下而上的zeppelin interpreter、zeppelin server、外围模块和浏览器端；

所述zeppelin interpreter为zeppelin处理交互式分析任务时用到的对应任务语言的解析器；

所述zeppelin server为管理zeppelin interpreter的处理器，以及调度交互式分析任务、分配资源的中央管理器；

所述外围模块对开源组件apache zeppelin进行封装；

所述浏览器端用于登录访问所述外围模块。

可选的，所述外围模块新增有工作区管理模块，以进行笔记本单元的创建、删除和列表展示；

所述工作区管理模块包括创建工作区、删除工作区和获取工作区列表；

所述创建工作区用于输入自定义的工作区名并创建一个新的笔记本单元；

所述删除工作区用于删除用户已创建的工作区并删除该工作区下的所有任务；

所述获取工作区列表用于以列表形式展示用户创建成功的工作区。

可选的，所述外围模块新增有任务管理模块，以进行笔记本单元之下的任务的管理。

可选的，所述任务管理模块包括创建任务、删除任务、启动任务、停止任务、获取工作区下所有的任务、给任务添加标签、给任务删除标签、根据标签和工作区id查询任务以及根据用户名查看所有工作区下的所有任务的状态；

所述创建任务用于根据用户输入的工作区id、任务名称、任务标签创建一个新的任务；

所述删除任务用于根据用户输入的任务id删除对应的任务；

所述启动任务用于根据用户输入的任务id启动对应的任务；