[发明专利]一种大数据下MOLAP统计分析的方法

摘要

本发明的通过对用户的历史上网数据、登录数据、广告投放等数据的分析，能够统计出WALAN运营平台的用户、网络、广告以及业务量的发展运营情况以及趋势，从而能够根据对历史数据的统计结果，对运营平台的后期营销给出合理的预测，并对此给平台决策层做出相应的决策提供基础，能够根据用户的上网信息以及登录信息等历史数据，统计分析出整个WLAN平台的运营情况，同时本发明能够提供亚秒级的结果查询服务，给WLAN运营平台的高级管理人员的营销计划提供数据基础，本发明还可以应用在用户上网数据收集后的分析，通过该设计，可以为公司管理层的合理正确决策提供数据支撑。

主权项

一种大数据下MOLAP统计分析的方法，其特征在于，包括以下步骤：步骤S1、无线管理系统平台收集用户登录信息，其中包括用户上线时间即用户登录WSMP时间，用户下线时间即用户登出WSMP时间，AP（无线接入设备侧）的MAC即用户登录的AP MAC地址，用户MAC即用户移动设备的MAC地址，用户手机号即用户移动设备的手机号，注册时间即用户首次登录WSMP时间；步骤S2、无线管理系统平台收集门店信息，包括门店名称、门店地理位置和门店的编码信息，上述门店指的是WLAN运营商部署在全国各地的门店；步骤S3、无线管理系统平台收集用户点击事件，包括Portal展现时间即单用户展现Portal的点击时间和广告时间即单用户点击广告的时间，Portal指的是登录页面；步骤S4、上网日志系统收集上网访问信息，包括用户访问URL时间、用户访问URL地址、用户MAC地址、AP的MAC地址、在线时长duration即用户在线上网时长和在线流量traffic即用户在线上网流量；步骤S5、上述数据收集完成后进行总体统计，总体统计支持excel导出，提供报表统计，查询条件为月份/日期/项目名称，总体统计分为：1.总体（WLAN运营商部署省份数、城市数、门店数、AP总数、新增门店数、新增AP数）；2.省份（各省份部署城市、每城市对应的门店、门店中的AP个数、新增门店、新增AP数）；步骤S6、上述数据收集完成后进行用户发展统计，用户发展统计支持excel导出，提供报表统计，查询条件为月份/日期/项目名称，用户发展统计分为：1.按日期查询，表头“门店名称/统计时间/总注册用户数/每日新增用户数/上线用户数/在线峰值用户数/峰值时间/时长/流量/区域/品牌/门店编码”；2.按月查询，表头“省份名称/每月上线用户数/每月新增用户数/日均上线用户数/每月时长/每月流量数”；步骤S7、上述数据收集完成后进行广告统计，广告统计支持excel导出，提供报表统计，广告统计按日期或按月查询，总体/按省份/按门店，表头“门店名称、省份、城市、广告类型、广告点击数、广告展示数、门店编码”；步骤S8、上述数据收集完成后进行业务量统计，业务量统计支持excel导出，提供报表统计，按日期或按月查询，业务量统计分为：1.总体综合业务表（全国上网时长/上网用户数/登录次数/在线流量/日均上网时长/日均上网人数/日均登录次数/日均流量/在线峰值用户数/在线峰值时间/在线峰值流量/流量峰值时刻）；2.每日每次上网时长明细表（用户手机号码/省份/上线时间/下线时间/在线时长/在线流量）；3.每日每用户上网时长明细表（用户手机号码/省份/在线时长/在线流量/上线次数）；步骤S9、数据源表导入，将上述统计完成的关系型数据库中的数据源表（包括总体统计、用户发展统计、广告统计和业务量统计），使用Sqoop工具定时增量导入到分布式文件系统HDFS上；步骤S10、使用编写的MapReduce程序，给对应的数据源表添加相应的维度列（包括时间维度、门店维度等），然后再将生成的HDFS文件导入到非关系型的Hive表中；步骤S11、将Hive表加载到Apache Kylin中，根据元数据的定义，构建引擎从Hive表中抽取数据，并构建Cube，构建后的Cube保存在Hbase存储引擎中；步骤S12、通过Kylin提供的标准SQL接口，后台通过SQL语句快速查询得到统计结果，最后在Web页面中展示出来；步骤S13、为了实现数据统计分析的每日自动更新，使用Oozie工作流引擎服务器，每天自动定时执行以上的S9、S10、S11步骤，最后实现Kylin Cube的定时增量构建。