[发明专利]基于自适应时间窗口的日志消息去重

说明书

本文描述了用于基于自适应时间窗口的日志消息去重的示例技术。在示例中，消息值是从接收到的日志消息获得的。进一步地，在时间窗口中接收到的具有消息值的日志消息的数目被计数。在时间窗口到期时，其中消息值被获得的日志消息和计数的数目被传输。其中日志消息的后续计数要被执行的时间窗口的长度是基于各种参数来确定的。

背景技术

日志消息可以由计算设备生成以提供关于计算设备的操作的信息，诸如计算设备的部件中的故障或计算设备中的扫描操作的结果。日志消息可以被传输给后端计算设备(也称为后端设备)以进行处理并采取补救行为。

附图说明

以下详细描述参考附图，其中：

图1示出了根据本主题的示例实现的用于执行基于自适应时间窗口的日志消息去重的系统。

图2示出了根据本主题的示例实现的具有用于执行基于自适应时间窗口的日志消息去重的系统的网络环境。

图3(a)示出了根据本主题的示例实现的字典。

图3(b)示出了根据本主题的示例实现的字典。

图3(c)示出了根据本主题的示例实现的字典。

图4示出了根据本主题的示例实现的在时间窗口期间和在时间窗口到期时执行的方法。

图5示出了根据本主题的示例实现的用于确定第二时间窗口的长度的方法。

图6示出了根据本主题的示例实现的用于确定第二时间窗口的长度的方法。

图7示出了根据本主题的示例实现的用于传输标记消息的方法。

图8示出了根据本主题的示例实现的用于处理不同优先级的日志消息的方法。

图9示出了根据本主题的示例实现的用于执行基于自适应时间窗口的日志消息去重的方法。

图10示出了根据本主题的示例实现的用于计数和传输与第二优先级(SP)日志消息相对应的标记消息的方法。

图11示出了根据本主题的示例实现的实现用于执行基于自适应时间窗口的日志消息去重的非暂态计算机可读介质的计算环境。

具体实施方式

在计算设备处生成的日志消息可以被发送给后端设备以进行进一步处理。例如，当计算设备的相同操作状态在不同时间出现时，多个日志消息可能是冗余的或随时间重复的。冗余的日志消息的处理浪费了后端设备的计算资源，并且还可能延迟独特的日志消息的处理。此外，有时，例如由于部件中的故障或由于网络连接的丢失，日志消息可能在计算设备中以高速率生成。日志消息以高速率到达后端设备可能会压垮后端设备，从而导致日志消息的处理进一步延迟。

进一步地，在一些情况下，日志消息将由计算设备进行转换，以使它们可以由后端设备处理。因此，如果日志消息以高速率生成，则几轮转换将在短时间段内执行，从而导致计算设备处的大量资源消耗。在冗余日志消息的情况下，这种资源消耗是浪费的。

为了防止将冗余日志消息传输给后端设备，去重技术通常被利用，该技术涉及丢弃在特定持续时间内接收到的冗余消息。然而，这种技术在随机持续时间的泛洪场景(其中日志消息非常频繁地生成)或空闲场景中可能无效。

本主题涉及基于自适应时间窗口的日志消息去重。即使在泛洪场景中，本主题也防止了将冗余消息传输给后端设备。

根据示例实现，消息值是从传入的日志消息获得的。消息值可以是日志消息的全部或一部分，或者可以从日志消息的全部或一部分导出。在示例中，从冗余日志消息获得的消息值可以是相同的。进一步地，具有特定消息值的传入日志消息的数目可以被计数。为了执行计数，存储多个消息值的字典和与每个消息值相关联的计数可以被利用。随后，消息值可以被获得的日志消息以及与消息值相关联的计数可以被传输给后端设备。