[发明专利]一种在线网页信息的实时监测方法和装置

权利要求书

1.一种在线网页信息的实时监测方法，其特征在于，该方法包括：

实时获取网页信息日志；

通过滑动时间窗口对所述网页信息日志中的展示日志数据或者点击日志数据进行实时统计分析，报告所述展示日志数据或者点击日志数据的特征异常情况。

2.如权利要求1所述的方法，其特征在于，所述滑动时间窗口以基本时间窗口为单位，由至少两个等宽连续的所述基本时间窗口组成并且时间宽度固定；

当获取了一个所述基本时间窗口对应的时间宽度的网页信息日志后，所述滑动时间窗口移入新的基本时间窗口，并对当前滑动时间窗口对应的所述网页信息日志进行统计分析。

3.如权利要求1所述的方法，其特征在于，所述对网页信息日志中的展示日志数据进行实时统计分析，进一步包括：

分别根据所述展示日志数据中的用户Cookie、IP、IP3、地域、时间统计在线网页的分布情况，计算在线网页在上述各维度中的集中度，如果在至少一个维度所述集中度大于第一预设阈值或者小于第二预设阈值，则报告数据异常。

4.如权利要求1所述的方法，其特征在于，所述对网页信息日志中的展示日志数据进行实时统计分析，进一步包括：

根据所述展示日志数据中的在线投放页面统计用户访问的网页分布，计算所述用户访问网页的集中度，如果所述集中度大于第一预设阈值或者小于第二预设阈值，则报告数据异常。

5.如权利要求1所述的方法，其特征在于，所述对网页信息日志中的展示日志数据进行实时统计分析，进一步包括：

统计用户访问页面的来源页信息，如果来源页为空的页面数量大于预设数量，则报告数据异常。

6.如权利要求1所述的方法，其特征在于，所述对网页信息日志中的点击日志数据进行实时统计分析，进一步包括：

统计在线网页的点击率和点击位置信息，根据所述点击位置信息去除无效点击，根据不同的时间粒度对点击率进行统计以发现点击作弊。

7.如权利要求1-6任一所述的方法，其特征在于，实时获取网页信息日志后，该方法还包括：

根据所述网页信息日志中的用户代理（User Agent）信息，去除来自网页爬虫的访问量。

8.一种在线网页信息的实时监测装置，其特征在于，包括：

获取模块，用于实时获取网页信息日志；

分析模块，用于通过滑动时间窗口对所述网页信息日志中的展示日志数据或者点击日志数据进行实时统计分析，报告所述展示日志数据或者点击日志数据的特征异常情况。

9.如权利要求8所述的装置，其特征在于，所述分析模块进一步包括：

投放分布统计子模块，用于分别根据所述展示日志数据中的用户Cookie、IP、IP3、地域、时间统计在线网页的分布情况，计算在线网页在上述各维度中的集中度，如果在至少一个维度所述集中度大于第一预设阈值或者小于第二预设阈值，则报告数据异常。

10.如权利要求9所述的装置，其特征在于，所述分析模块进一步包括：

访问分布统计子模块，用于根据所述展示日志数据中的在线投放页面统计用户访问的网页分布，计算所述用户访问网页的集中度，如果所述集中度大于第一预设阈值或者小于第二预设阈值，则报告数据异常。

11.如权利要求10所述的装置，其特征在于，所述分析模块进一步包括：

来源页面统计子模块，用于统计用户访问页面的来源页信息，如果来源页为空的页面数量大于预设数量，则报告数据异常。

12.如权利要求11所述的装置，其特征在于，所述分析模块进一步包括：

点击信息统计子模块，用于统计在线网页的点击率和点击位置信息，根据所述点击位置信息去除无效点击，根据不同的时间粒度对点击率进行统计以发现点击作弊。

13.如权利要求9-12任一所述的装置，其特征在于，所述装置进一步包括：

去除模块，用于根据所述网页信息日志中的用户代理（User Agent）信息，去除来自网页爬虫的访问量。