[发明专利]统计交易数据的方法及系统

说明书

技术领域

本发明涉及数据处理技术，尤其涉及与数据统计有关的技术。

背景技术

在许多数据处理系统中，都涉及到数据统计，比如，与交易数据有关的处理系统，就需要接收不间断的交易流水，对交易数据进行多方位统计分析，快速获取准确的统计结果。

现有技术中，统计功能的实现是通过事先确定统计量的具体业务逻辑，然后把具体逻辑固化到系统中。这种方法的缺点在于，当对统计量的需求发生变化时，都需要对系统进行重新改造，这种变化可能是统计业务逻辑的变化，也可能是任何一个相关参数的变化。如此，这种事先确定业务逻辑的统计方式便不再适应这种业务需求的变化。

此外，现有技术中，一般是通过数据库操作来实现统计计算，这需要应用系统与数据库之间频繁交互，包括记录的插入及查询，在数据量较大的情况下，频繁的插入及查询操作效率较低，响应时间比较慢，不能满足即时统计的需求。

发明内容

本发明提供一种统计交易数据的方法，可有效改善上述问题。该统计交易数据的方法包括：预设可滑动时间窗，该可滑动时间窗将当前时间作为一个时间端点，位于该时间窗的其它时间均早于该当前时间；接收交易数据；将所接收的交易数据存储到第一存储区，同时将第一存储区中不在该时间窗内的交易数据从该第一存储区去除；依据预设的过滤条件将统计不需要的数据从第一存储区传输过来的交易数据中滤去；基于过滤后的数据，执行统计算法以获得统计结果。

优选地，该统计交易数据的方法还包括将统计结果以树状数据结构存储在第二存储区。优选地，该树状数据结构为红黑树状数据结构或二叉树状数据结构。优选地，该树状数据结构中，每个存储节点包括与统计维度有关的主键及基于该主键的统计结果。

优选地，该统计交易数据的方法中，该将所接收的交易数据存储到第一存储区包括将应用到不同统计算法的交易数据分别存储到第一存储区的不同存储区域。

优选地，该统计交易数据的方法中，各统计算法具有相应的过滤条件。

根据本发明的示例，还提供一种统计交易数据的系统，其包括：设置模块，其用于预设可滑动时间窗，该可滑动时间窗将当前时间作为其一个时间端点，位于该时间窗内的该端点之前的时间均早于该当前时间；接收模块，其用于接收交易数据；第一存储模块，其用于存储所接收的交易数据，同时将其所存储的交易数据中不在该时间窗内的数据去除；统计模块，其设置成依据预设的过滤条件从所接收的交易数据中滤去统计不需要的数据，并基于过滤后的数据，执行统计算法以获得统计结果。

优选地，该统计交易数据的系统中，该统计模块包括多个统计子模块，各统计子模块包括过滤单元与计算单元，各过滤单元依据预设的过滤条件从所接收的交易数据中滤去与其对应的计算单元不需要的数据，各计算单元基于过滤后的数据，执行统计算法以获得统计结果。

优选地，该统计交易数据的系统中，该系统还包括第二存储模块，用于以树状数据结构存储统计结果。优选地，该树状数据结构为红黑树状数据结构或二叉树状数据结构。优选地，该树状数据结构中，每个存储节点包括与统计维度有关的主键及基于该主键的统计结果。

优选地，该统计交易数据的系统中，该第一存储模块包括不同的存储单元，用于分别存储应用到不同统计算法的交易数据。

通过设置可滑动时间窗，尽可能及时地将统计过的数据滤去，只保留时间窗内的交易数据，可大大降低了数据量，从而节约存储空间。因此，执行本发明所述的统计交易数据的方法或采用本发明所述的统计交易数据的系统，可将所需数据直接存储在执行该方法或采用该系统的设备的内存中，由此在处理时无需再像常规计数那样从数据库读取交易数据到内存再进行统计计算。

附图说明

图1是根据本发明示例的统计交易数据的方法的流程图。

图2非限制地示意了第一存储区与第二存储区的存储形态，该示例仅示意了针对一种统计算法的第一存储区10与第二存储区20。

图3是根据本发明示例的统计交易数据的系统的结构示意图。

图4是统计模块36的示例性结构。

具体实施方式

现在参照附图描述本发明的示意性示例，相同的附图标号表示相同的元件。下文描述的各实施例有助于本领域技术人员透彻理解本发明，且意在示例而非限制。除非另有限定，文中使用的术语（包括科学、技术和行业术语）具有与本发明所属领域的技术人员普遍理解的含义相同的含义。

图1是根据本发明示例的统计交易数据的方法的流程图。所示例的方法可由任意可以处理数据的设备执行。