[发明专利]一种自适应的全局数据快速检索方法

说明书

本发明公开了一种自适应的全局数据快速检索方法。a.接收到查询请求后，对查询请求进行数据查询；b.拆分所述的查询请求，对相关SQL语句查询请求进行数据记录，在整个语句查询过程中记录所有的数据查询时间状态；c.对于第一次查询请求，直接到第三方数据库获取相关请求数据，同时将数据更新内容同步更新到数据查询记录内容；d.对第三方数据库表进行自动数据扫描，对相关性大的数据量进行自动化数据同步处理，并放到数据搜索引擎服务器上进行数据检索服务；e.对更新同步之后的数据操作记录同步维护到数据字典表，对相关的数据操作记录进行更新。本发明具有对多表数据检索速度高，节约数据存储资源的优点。

技术领域

本发明涉及数据索引技术领域，特别是一种自适应的全局数据快速检索方法。

背景技术

目前，对于大型的企业或者大型的系统，针对多个业务系统之间的数据，每个业务都有自己的业务数据存储系统，最终使得整个业务系统存在有很多种数据库系统。而目前在多维度，多库数据表中，对于数据快速检索存在很大问题，比如数据内容繁琐，数据结构不清楚，数据量比较大，对用户目标检索不能快速适应匹配，进而使得当有第三方业务系统需要使用该数据存储内容时，会造成数据存储繁多，数据字典内容种类繁多，数据内容很难快速定位的情况。而为了提升检索速度，目前通常会搭建一系列数据存储框架，这就需要消耗很多服务器资源，并且需要对数据进行全量存储，对于选择抽取，很少进行数据的自动化判断、自动存储，从而浪费很多服务资源。

发明内容

本发明针对现有技术数据量多、检索速度慢、消耗服务器资源多等特点，设计了一种自适应的全局数据检索方法。本发明具有对多表数据检索速度高，节约数据存储资源的优点。

本发明的技术方案：一种自适应的全局数据快速检索方法，包括下述步骤：

a.接收到查询请求后，对查询请求进行数据查询，数据查询包括：所述的查询请求是否请求过，请求过的该查询请求的处理时间，相关请求数据是否已在本地存储，相关请求数据是在本地数据库还是在本地的搜索引擎里；

b.拆分所述的查询请求，对相关SQL语句查询请求进行数据记录，在整个语句查询过程中记录所有的数据查询时间状态，包括查询的语句、查询的具体时间、查询的相关SQL语言、SQL语句是否优化；

c.对于第一次查询请求，直接到第三方数据库获取相关请求数据，同时将数据更新内容同步更新到数据查询记录内容，便于检索数据位置；

d.对第三方数据库表进行自动数据扫描，对相关性大的数据量进行自动化数据同步处理，并放到数据搜索引擎服务器上进行数据检索服务，对于本地数据存储库与数据搜索引擎只存放大数据量；

e.对更新同步之后的数据操作记录同步维护到数据字典表，对相关的数据操作记录进行更新，待数据服务下次更新时候进行数据维护更新，以便快速定位到数据存储位置。

前述的自适应的全局数据快速检索方法所述的步骤a中，接收到查询请求后，首先到本地缓存中进行查询，当缓存中已存在相关请求数据时，直接将所述的相关请求数据返回。

前述的自适应的全局数据快速检索方法所述的步骤c中，对于第一次查询请求，将查询请求与相关请求数据暂存到缓存，以便于再次查询时直接从缓存返回，根据数据字典目录对数据查询进行数据目标库查询。

前述的自适应的全局数据快速检索方法所述的步骤c中，对于第一次查询请求，对相关的查询SQL语句进行数据库自动优化。

前述的自适应的全局数据快速检索方法所述的步骤c中，对优化后的SQL语句再次查询，当相关请求数据返回依旧较慢时，对数据库数据量进行检测，对于查询结果语句慢的数据库进行数据表同步操作。