[发明专利]一种数据采集、查询方法、装置、存储介质及处理器有效
申请号: | 201710453313.6 | 申请日: | 2017-06-15 |
公开(公告)号: | CN109150641B | 公开(公告)日: | 2020-04-17 |
发明(设计)人: | 王安迪 | 申请(专利权)人: | 北京国双科技有限公司 |
主分类号: | H04L12/26 | 分类号: | H04L12/26;H04L29/08 |
代理公司: | 北京鼎佳达知识产权代理事务所(普通合伙) 11348 | 代理人: | 王伟锋;刘铁生 |
地址: | 100083 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 采集 查询 方法 装置 存储 介质 处理器 | ||
本发明公开了一种数据采集、查询方法、装置、存储介质及处理器,涉及计算机技术领域,主要目的是保证前端不仅能够查看元素的点击量以及访问量,还能够呈现元素的关联数据。所述数据采集方法包括:接收自定义数据采集信息;根据所述自定义数据采集信息生成第一配置文件;读取所述第一配置文件,根据所述第一配置文件采集网站监控数据并发送至服务器端,进一步根据采集的网站监控数据对应的路径信息对所述网站监控数据进行定义,生成第二配置文件;向服务器发送所述第二配置文件,以便所述服务器根据所述第二配置文件生成查询数据。本发明主要用于网站监控数据的采集及查询。
技术领域
本发明涉及计算机技术领域,尤其是一种数据采集、查询方法、装置、存储介质及处理器。
背景技术
随着互联网数据行业的蓬勃发展,越来越多的互联网公司开始重视数据的应用,从庞杂的数据背后挖掘、分析用户的行为和喜好,并结合用户需求有针对性地调整和优化企业自身。
现有技术在网站研发过程中,需要用到大量的数据,可以通过前端向后端发送数据获取请求,得到相应的数据,进而在前端进行展示。目前主流的网站分析工具通常使用前端数据监控技术在网页端收集用户访问行为数据和系统信息数据,并将收集到的数据发送至服务器,以便服务器对收集到的数据进行分析,当用户查询数据时会在前端显示采集到的数据结果。
现有的数据采集方式主要有两种,一种是在某个控件操作发生时通过预先写好的JavaScript监测代码来发起数据的代码埋点,进而采集该控件的操作数据,如对元素点击或者元素文本变化进行埋点,然而,通过埋点方式的数据采集需要在客户端网站进行埋点,每一个控件的埋点都需要添加相应的代码,工作量较大;另一种是采用无埋点技术先在客户端网站采集所有数据,不需要再进行额外的埋点操作,再在后端筛选需要分析对象的“无埋点”,进而采集需要分析对象的操作数据,然而,通过无埋点技术只是针对一些简单的操作统计,如按钮点击的次数、时间等,对于比较复杂的应用场景,例如支付事件,需要统计商品名称、价格等数据时,无法采集到详细的数据。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种数据采集、查询方法、装置、存储介质及处理器,使得前端不仅能够查看元素的点击量以及访问量,还能够呈现其他监控数据。
依据本发明实施例的一方面,本发明实施例提供了一种数据的采集方法,可以应用于客户端,包括:
接收自定义数据采集信息;
根据所述自定义数据采集信息生成第一配置文件;
读取所述第一配置文件,根据所述第一配置文件采集网站监控数据并发送至服务器端。
进一步地,所述接收自定义数据采集信息包括:
从页面信息中定位到预定义数据;
根据用户的选择操作确定所述预定义数据相关联的数据;
根据所述预定义数据相关联的数据以及所述预定义数据,得到自定义数据采集信息。
为了实现上述目的,根据本发明的另一方面,提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述所述的数据采集方法。
为了实现上述目的,根据本发明的另一方面,提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述所述的数据采集方法。
依据本发明实施例的另一方面,本发明实施例提供了一种数据查询方法,可以应用于客户端,包括:
根据上述的网站监控数据对应的路径信息对所述网站监控数据进行定义,生成第二配置文件;
向服务器发送所述第二配置文件,以便所述服务器根据所述第二配置文件生成查询数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710453313.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置