[发明专利]全网舆情监控系统

说明书

技术领域

本发明涉及对网络社会的有序管理系统，进行网络舆情管理，以此来实现顺应规律，立足阵地、疏堵结合、网络上下互动、整合媒体力量、多渠道引导的立体化机制。

背景技术

为加强对网络社会的有序管理，近年来，国家机关不断加强监控系统建设工作，在全国逐步实现了对网通、电信等主流ISP的监控，并开展了监控工作，取得了一定的成绩。但是，随着技术的发展以及网络应用的不断普及，运营商出口线路条数和带宽不断提升，互联网监控技术本身也在不断发展和提升，从最初的针对10M/100M网络通道的监控，发展到目前的针对多路10GPOS通道的监控；从最初的针对电子邮件、网站浏览的内容监控，发展到现在对即时通信、网络游戏、VOIP等100多种网络应用的监控。监控系统所监控的网络速率越来越高，内容越来越丰富，规模越来越大，所截获的数据也已经达到了上百T的海量规模，如何有效地管理和利用这些海量信息成为下一阶段发展要解决的重点问题之一。在长期的实战过程中，国家职能部门的需求已经从原来的针对特定对象、特定行为、特定内容的监控向大规模数据缓存与分析挖掘方向发展，需要实现面向多运营商的大规模网络统一监控；实现信息内容的综合搜索、基于内容特征、行为特性的实时匹配；在事先不掌握疑犯明确线索的情况下，主动发现网上违法犯罪行为，实现对象、组织、群体、行为、内容的关联。

由于网上的信息量十分巨大，仅依靠人工的方法难以应对网上海量信息的收集和处理，需要加强相关信息技术的研究，形成一套自动化的网络舆情监控系统，及时应对网络舆情，由被动防堵，化为主动梳理、引导。综上所述，特别需要全网舆情监控系统，以解决现有技术的不足。

发明内容

本发明的目的是提供全网舆情监控系统，解决互联网信息不能够随时进行监测的现象。

本发明为解决其技术问题所采用的技术方案是：

全网舆情监控系统，该系统的数据来源包括电信、网通、教育网、联通、铁通、长宽等主要ISP，存储容量：对获取的数据进行存储，对于日志数据存储周期为1年，对文本内容数据的存储周期为1年；

该系统包括有网络通讯平台建设、无线监控系统、远程联网和数据共享、监控业务系统、海量信息处理系统；

另外该系统的子系统包括有：

信息获取子系统：信息获取子系统负责对电信、网通等网络运行单位的出口通道进行监控，截获流经ISP网络出口的数据，通过光纤方式将信息传回数据预处理子系统，信息获取子系统同时为互联网舆情监控系统的业务提供支持可以复用地方原来投入建设监控系统的资源，数据进入监控系统后，进入互联网舆情监控系统的存储部分，此外，还将采用专用接口获取报警处置系统的数据；

信息预处理子系统：信息预处理子系统是实现对各种信息源获取的数据进行还原和数据转换，互联网舆情监控系统的建设需要全面获取从ISP出口通道上的还原后信息，因此需要大量的信息预处理器集群，还原和筛选后的海量信息将进入互联网舆情监控系统的信息存储部分；

数据存储子系统：数据存储子系统是互联网舆情监控系统的基础，由于所需要处理和缓存的数据量巨大，因而整个数据缓存存储子系统规模很大，根据从互联网获取的数据特点，主要包括结构化数据和非结构化数据，因此数据存储子系统也分为结构化数据部分和非结构化数据部分；

数据处理和分析子系统：数据处理和分析子系统是互联网舆情监控系统的核心，负责对信息获取子系统获得的处理后的海量监控数据以及相应的基础库进行进一步的加工和处理，并提供信息查询、统计分析功能，为互联网舆情监控系统实现情报和线索的发现提供支持；

系统管理调度子系统：系统管理调度子系统保障互联网舆情监控系统正常运行，由于整个互联网舆情监控系统规模巨大，合理有效的管理调度是保证整个系统稳定运行的基础，该子系统通过对相关设备、服务器、应用软件等进行监控，配以调度管理策略，使得系统运行状态受到实时监控，故障时能够即时告警，并采取调度措施，使得故障不影响系统正常运行；

业务管理子系统：业务管理子系统是互联网舆情监控系统对用户的接口，用户通过该子系统访问互联网舆情监控系统的服务，为了进一步保证系统的安全性，该模块按照监控工作的要求，制定了规范的处理流程，规范各项活动，该子系统提供任务管理、情报处理、权限管理和系统管理等功能。

进一步，该系统的网络通讯平台建设是为了实现海量数据的截获，监控系统的分流过滤设备将与信息还原处理机集群间存在巨大数据交换量，故配置11台48口10/100/1000M自适应千兆交换机；