[发明专利]基于互联网大数据的经济发展指数评价方法

说明书

本发明公开了一种基于互联网大数据的经济发展指数评价方法，该方法为：通过网络爬虫技术提取符合需求的互联网数据，根据机器学习方法对所述互联网数据进行预处理；根据分析要求和目的采用数据挖掘方法对预处理后的互联网数据进行归一化、分类、相关分析、指标合成、趋势信息提取获得指数基础数据；对所述指数基础数据进行指数转换获得常用指数数据。本发明弥补了传统经济指数编制的固有缺陷（数据采集时间长、成本高等）；利用自然语言处理技术和数据挖掘技术进行数据分析和指标构建；在当前已存在的经济发展指数基础上，扩展了一些重要的经济发展指数；更加及时、准确的反映经济发展趋势，进行经济预测，辅助经济决策。

技术领域

本发明属于数据分析技术领域，具体涉及一种基于互联网大数据的经济发展指数评价方法。

背景技术

当前，我国经济发展指数主要是由国家统计局采用传统的调查方法进行汇总计算而成，完成该项工作需要大量的人力、物力、金钱以及时间，过程相对较慢；在互联网时代，信息传输速度极快，每天生产出庞大的数据信息，通过大数据挖掘技术可以获取及时、全面的经济信息，进而编制出一系列反映经济形势发展趋势的指数，有助于政府、企业等快速了解当前经济形势变化，及时、有效的做出相关决策。

当前现有的经济发展指数主要是以国家统计局为代表的，采用传统的调查方法和数据计算方法编制而成，指数的形成既费时又费力，其时效性大大折扣，而且受多种因素影响，数据的涵盖面不能过广，这些都是传统指数固有的缺陷。

经济发展指数是以互联网大数据为数据基础，通过借助数据处理、挖掘方法，进而编制而成，其是由一系列指数构成，包括消费环境评价指数、就业压力指数、双创热情指数、投资景气指数和投资环境指数等。经济发展指数的分析流程主要包括：数据采集、数据预处理、数据分析、指数换算。

现有技术在分析过程中进行了季节调整和滤波处理，指数数据中仅留下了趋势信息，即经济发展指数仅能反映数据变化趋势，数值本身是没有实际意义的，不能单独根据某一数值大小去判断经济形势的好坏。

同时，涉及到地域指数时，由于在指数换算中，不同地域的基期不同，会导致地域之间不能进行指数大小比较，只能比较趋势变化。若需要进行指数大小比较时，可以采用固定统一基期值的方法来解决该问题。

发明内容

有鉴于此，本发明的主要目的在于提供一种基于互联网大数据的经济发展指数评价方法。

为达到上述目的，本发明的技术方案是这样实现的：

本发明实施例提供一种基于互联网大数据的经济发展指数评价方法，该方法为：通过网络爬虫技术提取符合需求的互联网数据，根据机器学习方法对所述互联网数据进行预处理；根据分析要求和目的采用数据挖掘方法对预处理后的互联网数据进行归一化、分类、相关分析、指标合成、趋势信息提取获得指数基础数据；对所述指数基础数据进行指数转换获得常用指数数据。

上述方案中，所述经济发展指数包括消费环境评价指数、就业压力指数、双创热情指数、投资景气指数和投资环境指数。

上述方案中，所述经济发展指数为消费环境评价指数时，该方法具体通过以下步骤实现：

步骤101：以过滤关键词从互联网上抓取文本数据；

步骤102：创建消费环境整体评价分析关键词表、消费环境具体评价分析关键词表和监管执法工作评价分析关键词表，并且分别确定关键词表的满意度，获得消费环境整体评价值、消费环境具体评价值和监管执法工作评价值；

步骤103：采用机器学习模型对抓取的文本数据进行情感分析，获得不同情绪倾向的某一关键词的逐日出现频次，再根据情绪倾向差异将获得的所有关键词分为正、中、负三类，将属于同一类别的关键词的正、中、负逐日统计量分别求和，再通过每类关键词中正向和中性倾向的关键词求和除以该关键词出现的总频次；