[发明专利]一种大数据查询方法及系统

说明书

本发明提供了一种大数据查询方法，其特征在于，包括：当接收到用户经由Web页面发送的查询请求时，解析所述查询请求中的维度数组，所述维度数组中包含至少一个查询维度；当所述维度数组满足第一预设条件时，获取所述维度数组中各个查询维度的维度分类；依据所述各个维度分类，按预设的划分规则，将目标大数据划分为多个数据块；依据所述各个查询维度，分别对每一个所述数据块进行数据查询，并将各个查询结果进行汇总，获得目标查询数据。本发明中，首先解析所述查询请求中的维度数组，获取所述维度数组中查询维度的维度分类，依据所述维度分类，将大数据分块，分别对分块数据进行查询，并将查询结果进行汇总，做到快速准确定位目标数据。

技术领域

本发明涉及数据安全分析领域，尤其涉及一种大数据查询方法及系统。

背景技术

随着网络技术的飞速发展，当今各类IT资源飞速膨胀，网络设备层出不穷，随之产生了大量的网络数据信息。如何在大量数据中快速准确的找到目标数据，大数据查询方法的尤为必要。

目前，一般采用多条件组合累加模式对大数据进行查询，对目标数据进行查询时同时输入多个查找条件，每次初始查询都需要与完整的大数据进行比对。

发明人经过研究发现，现有的数据查询方法是对完整的大数据进行查询处理，数据量过大，导致查询的速度随着过滤条件的增加而减慢，无法做到快速准确定位目标数据。

发明内容

有鉴于此，本发明提供一种大数据查询方法及系统，用以解决现有技术中对完整的大数据进行查询处理，因数据量过大，无法做到快速准确定位目标数据的问题，具体方案如下：

一种大数据查询方法，包括：

当接收到用户经由Web页面发送的查询请求时，解析所述查询请求中的维度数组，所述维度数组中包含至少一个查询维度；

当所述维度数组满足第一预设条件时，获取所述维度数组中各个查询维度的维度分类；

依据所述各个维度分类，按预设的划分规则，将目标大数据划分为多个数据块；

依据所述各个查询维度，分别对每一个所述数据块进行数据查询，并将各个查询结果进行汇总，获得目标查询数据。

上述的方法，优选的，所述当所述维度数组满足第一预设条件时，获取所述维度数组中各个查询维度的维度分类包括：

将所述维度数组与已存储的各个历史维度数组进行逐一比较；判断是否存在目标历史维度数组，所述目标历史维度数组中的各个查询维度均包含在当前所述维度数组中；

当不存在时，依据所述各个查询维度的维度属性，获取所述维度数组中各个查询维度的维度分类。

上述的方法，优选的，还包括：

当存在时，判断所述目标历史维度数组中的查询维度的数量是否与所述当前维度数组中的查询维度的数量相同；

当相同时，直接调用所述目标历史维度数组所查询的历史查询数据，将所述历史查询结果作为目标查询数据。

上述的方法，优选的，还包括：

当不相同时，按预设的划分规则，将所述历史查询数据划分为多个数据块；

依据所述各个查询维度，分别对每一个数据块进行查询。

上述的方法，优选的，所述依据各个维度分类，按预设的划分规则，将目标大数据划分为多个数据块包括：

确定各个维度分类的优先级；

依据优先级最高的维度分类，将所述目标大数据划分为多个数据块。

上述的方法，优选的，所述维度分类，包括：