[发明专利]一种基于大数据的通信数据检索及呈现方法

说明书

技术领域

本发明涉及通信网络运维技术领域，具体地说是一种基于大数据的通信数据检索及呈现方法。

背景技术

移动网络资源是通信企业对外提供服务的基础，充分利用网络资源，提高资源管理水平和使用效率，是实现企业信息化的关键。通信技术发展迅速，通信网络越来越复杂，海量数据的快速搜索、面向设备/客户/网络事件的全貌信息聚合、基于相似性的协同推荐需求越来越迫切。

传统的资源检索需要定位资源所在专业、模型，再从大量数据中进行检索，快速的资源检索、呈现能为日常维护工作带来极大的便利，对实现从面向网络、面向服务到面向客户服务理念的快速转变提供有力支撑，提升运营商的全业务竞争能力。

发明内容

本发明的技术任务是针对以上不足之处，提供一种基于大数据的通信数据检索及呈现方法，减少在数据检索上花费的时间，还能为数据维护、应用提供快速入口。

一种基于大数据的通信数据检索及呈现方法，其实现过程为：

在不改变原有系统软件架构的情况下，通过数据整合，聚合设备行为、运维行为、用户行为以及非结构化数据，引入搜索引擎技术，实现数据的快速搜索和应用的快速到达；包含海量通信数据检索和应用快速到达两个部分，全文的数据检索包括索引创建和搜索索引两个过程，索引创建将现实世界中所有的结构化和非结构化数据提取信息，创建索引的过程；搜索索引得到用户的查询请求，搜索创建的索引，然后返回结果；

优选的，通信数据检索从空间资源、物理资源、逻辑资源和网络资源四类进行检索。

优选的，对于通信数据根据数据维护热度，对数据进行加权，将关注度高的数据有限检索，数据模型包括专业、模型、空间、热度、数据1和数据2。

例如，寻找既包含字符串“核心”又包含字符串“站点”的文档，并优先显示关注度的数据，我们只需要以下步骤：

取出包含字符串“核心”的文档链表；

取出包含字符串“站点”的文档链表；

加入数据加权值；

通过合并链表、加权值，找出既包含“核心”又包含“站点”的文件。

这样检索出的数据就包含了专业、模型、空间、热度等特性。

对查询语句进行词法分析，语法分析，及语言处理。

词法分析主要用来识别单词和关键字，经过词法分析，得到检索词语，如上面例子：核心、站点；

语法分析主要是根据查询语句的语法规则来形成一棵语法树，如果发现查询语句不满足语法规则，则会报错；

搜索索引，得到符合语法树的文档；

根据得到的文档和查询语句的相关性，对结果进行排序，通过分析能够得到文档，对于查询结果应该按照与查询语句的相关性进行排序，越相关者越靠前；

优选的，索引过程包括：具有一系列被索引文件；被索引文件经过语法分析和语言处理形成一系列词；经过索引创建形成词典和反向索引表；通过索引存储将索引写入硬盘。

优选的，搜索过程包括用户输入查询语句；

对查询语句经过语法分析和语言分析得到一系列词；

通过语法分析得到一个查询树；

通过索引存储将索引读入到内存；

利用查询树搜索索引，从而得到每个词的文档链表，对文档链表进行交，差，并得到结果文档；

将搜索到的结果文档对查询的相关性进行排序；

返回查询结果给用户。

检索通信数据的呈现：

首先提供简洁、快速的检索入口，可输入任意关键词搜索，并可根据热度查看历史检索值；

入口提供多维度的检索功能，满足各种搜索需要；

多个关键词之间的布尔运算算法（缺省为and），支持or、关键词字串完全匹配、关键词排除；

按照专业、模型、区域、热度的综合检索，满足通信数据应用需求，如：八一立交桥基站数据使用频率高，检索时就会优先处理，并放在检索数据前列；

在数据检索基础上，出现在搜索结果中的搜索关键字用特殊字体显示，根据场景提供资源维护、GIS定位、拓扑呈现等入口，实现应用的快速到达。

本发明的一种基于大数据的通信数据检索及呈现方法，具有以下优点：