[发明专利]一种在线网页信息的实时监测方法和装置

说明书

技术领域

本发明涉及互联网信息监测技术领域，尤其涉及一种在线网页信息的实时监测方法和装置。

背景技术

在线网页的监测主要分为两种方法：一种是该网页投放一定阶段后，根据日志中该网页的展示与点击情况以及访问用户的IP等信息，进行离线分析，分析作弊情况；另一种是根据该网页的实时信息，实时对该网页信息日志中的数据进行统计分析分析，发现信息异常时保存分析数据作为证据并报告。

现有网页信息监测方法一般采用上述的离线方法，离线方法准确率高，但实时性差，不能及时报告该网页的信息异常情况，同时对分析人员的依赖性较大；而实时监测方案还不成熟，采用的信息维度较小，粒度较粗，准确率较低。

发明内容

本发明所要解决的技术问题在于提出一种在线网页信息的实时监测方法和装置，能够实时获取并分析网页信息日志，实现实时的在线网页信息监测。

为解决上述技术问题，本发明采用以下技术方案：

一种在线网页信息的实时监测方法，该方法包括：

实时获取网页信息日志；

通过滑动时间窗口对所述网页信息日志中的展示日志数据或者点击日志数据进行实时统计分析，报告所述展示日志数据或者点击日志数据的特征异常情况。

一种在线网页信息的实时监测装置，包括：

获取模块，用于实时获取网页信息日志；

分析模块，用于通过滑动时间窗口对所述网页信息日志中的展示日志数据或者点击日志数据进行实时统计分析，报告所述展示日志数据或者点击日志数据的特征异常情况。

采用本发明的技术方案，能够实时获取并分析网页信息日志，实现实时的在线网页信息监测。

附图说明

图1是本发明实施例提供的在线网页信息实时监测方法的流程图。

图2是本发明实施例中的监测方法应用于网页流量统计监测时的结果示意图。

图3是本发明实施例提供的在线网页信息实时监测的结构示意图。

具体实施方式

下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。

图1是本发明实施例提供的在线广告作弊实时监测方法的流程图，该方法包括：

S101，实时获取网页信息日志。

本发明实施例中的网页信息日志包括网页展示日志数据和点击日志数据。展示日志数据中可以使用的分析数据包括在线投放的网页以及该网页的来源（Refer）页面，用户代理（User Agent）信息,展示时间，用户来源IP，用户Cooki e,用户地理位置等特征。点击日志数据中包括点击率、点击时间和点击位置（用户鼠标点击点在该页面中对应的位置）等信息。实时获取上述日志数据进行实时分析，以判断在线网页数据是否出现异常。

S102，通过滑动时间窗口对所述网页信息日志中的展示日志数据或者点击日志数据进行实时统计分析，报告所述展示日志数据或者点击日志数据的特征异常情况。

目前数据流的聚集统计大部分是针对界标窗口模型，这种模型假定当前已经到达的数据都是同等重要，基于界标窗口建立的聚集统计反映整个流数据状态。在分析网络整体态势时，久远数据的详细信息并不是必要的，特别是对于本发明实施例中对在线网页信息进行实时监测的应用中，就更需要关注最近到达的数据流，即最近一小时或者数分钟之内的统计数据，而不是历史数据。因此，本发明实施例采用了一种滑动时间窗口模型。

所述滑动时间窗口以基本时间窗口为单位，由至少两个等宽连续的所述基本时间窗口组成并且时间宽度固定。

在所述滑动时间窗口中，由最近的至少两个基本时间窗口组成。滑动时间窗口就是在某个时刻，当前最新的至少两个基本时间窗口的集合。所述滑动时间窗口划分为若干连续的、等宽的基本时间窗口。

当有新的基本时间窗口到达时，移出过期的基本时间窗口。如果一个基本时间窗口的时间范围与当前时间之差超过了所述滑动时间窗口的宽度，则该基本时间窗口是过期的。

当S101中获取了一个所述基本时间窗口对应的时间宽度的网页信息日志后，所述滑动时间窗口移入所述新的基本时间窗口，丢弃过期的基本时间窗口，并对当前滑动时间窗口对应的所述网页信息日志进行统计分析。