[发明专利]一种基于大数据挖掘的公共政策分析模型部署方法及其系统

说明书

本发明提供了一种基于大数据挖掘的公共政策分析模型部署方法及其系统，所述方法步骤包括：通过自动化建表工具实现多终端数据采集，对采集数据进行建库和版本管理，利用机器学习进行标签标记，通过数据挖掘算法分析数据得出问题数据，通过计算引擎或算法分析问题数据得出解决方案，利用可视化工具使解决方案可视化呈现，建立分析模型。与现有技术相比，本技术通过数据的自动建表、更快速采集，实现多终端数据融合和快速采集；通过在基础库构建个人画像、企业画像，能够自我完善并迭代更新，实现基础库数据及时自我更新；利用数据挖掘算法实现问题自动建议、及时发现，使公共决策标准与问题能够自动预警发现、方案自动生成；利用数据挖掘算法实现方案系统打分、自动评估，解决最佳方案评估难、呈现难的问题；利用GIS、报表工具实现一张图可视化分析。

技术领域

本发明涉及数字信息的传输领域，尤其涉及一种基于大数据挖掘的公共政策分析模型部署方法及其系统。

背景技术

公共政策是政府为实现一定的社会政治、经济和文化目标所采取的政治行动或所规定的行为准则，是一系列谋略、法令、措施、办法、方法、条例等总称，用以规范、指导一切社会公共活动。其中，基层工作者是解决公共问题、达成公共目标、实现公共利益的最小单元，也是落实公共政策的前沿感受者。目前，现有技术方案主要是基于大数据挖掘技术面向基层工作者开展的公共信息智能分析、产学研公共服务以及政策智能匹配等公共活动，缺乏从基层采集、更新、分析、评估到最终指导高层决策的全链覆盖、深度实现的过程。

说明书内容

本发明为了弥补现有技术的不足，提供一种基于大数据挖掘的公共政策分析模型部署方法及其系统，通过综合利用云计算、数据挖掘算法、Spark计算引擎等大数据处理技术，提出一种全链条、完整覆盖、集假设、定义、描述、解释、对策于一体的公共政策分析模型，该模型基于自我完善与修正数据、主动分析问题、自动产生方案及可视化呈现的大数据挖掘分析功能，帮助高层决策者从基层服务中理性获取规划方案，以实现最优分配社会资源、解决社会问题及促进社会发展的目标。

本发明提供了一种基于大数据挖掘的公共政策分析模型部署方法，步骤如下：

通过自动化建表工具实现多终端数据采集，对采集数据进行建库和版本管理，利用机器学习进行标签标记，通过数据挖掘算法分析数据得出问题数据，通过计算引擎或算法分析问题数据得出解决方案，利用可视化工具使解决方案可视化呈现，建立分析模型。

进一步地，使用DLL语句进行建表，使用HTML5页面进行数据录入。

进一步地，使用WebService、RestFul或前置机方式与外部源系统对接进行数据采集。

进一步地，使用机器学习图论推理算法(Graph Inference)进行标签标记。

进一步地，使用数据挖掘朴素贝叶斯模型(Naive Bayesian Model，NBC)推算问题数据。

进一步地，使用Spark计算引擎对问题数据进行计算，得到解决方案。

进一步地，使用最大期望(EM)算法以及Adaboost迭代算法对问题数据进行计算，得到解决方案。

进一步地，使用Echarts、GIS和报表工具对解决方案进行数据可视化呈现，建立分析模型。

进一步地，使用电子地图对解决方案进行数据可视化呈现，建立分析模型。

另外，本发明还提供了一种基于大数据挖掘的公共政策分析系统，该系统包括以下结构：

数据采集模块：通过多终端接口方式采集数据，配置采集规则，管理采集日志；

版本管理模块：对采集和计算后的数据进行版本管理，完成数据渐进式自我完善和修正；