[发明专利]数据实时采集并可视化的实现方法及装置有效
申请号: | 201810264886.9 | 申请日: | 2018-03-28 |
公开(公告)号: | CN108549671B | 公开(公告)日: | 2022-07-08 |
发明(设计)人: | 吴侃;李晗 | 申请(专利权)人: | 微梦创科网络科技(中国)有限公司 |
主分类号: | G06F16/26 | 分类号: | G06F16/26 |
代理公司: | 北京卓岚智财知识产权代理事务所(特殊普通合伙) 11624 | 代理人: | 朱燕捷 |
地址: | 100193 北京市海淀区东北旺西路中关村*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 实时 采集 可视化 实现 方法 装置 | ||
1.一种数据实时采集并可视化的实现方法,其特征在于,所述方法包括:
根据预设条件,采集预设时间段内多种数据源的数据,得到待展示的原始数据;其中,多种数据源包括:业务日志数据、业务接口数据、第三方数据;
将待展示的原始数据的数据格式转换适配成可直接用于可视化展示的第一数据格式,得到统一格式的数据;
根据预设配置,实现统一格式的数据可视化;
所述预设配置包括:自主预设展示配置;所述根据预设配置,实现统一格式的数据可视化,具体包括:
根据预设展示配置构造可视化容器的样式,所述可视化容器为展示平台上的区域格,所述可视化容器的样式包括:可视化容器在展示屏上的位置、大小,可视化容器的背景、颜色;
根据预设展示配置获取每个可视化容器与统一格式的数据的对应关系;
根据预设展示配置获取每个可视化容器的可视化模板,根据与所述可视化容器对应的数据渲染可视化模板,实现数据可视化;其中,具有满足多种业务展示需求的可视化模板;所述可视化模板采用响应设计,实现在多种可视化展示的平台展示数据,可视化展示的平台包括:数据大屏、中小屏设备、移动设备。
2.根据权利要求1所述的数据实时采集并可视化的实现方法,其特征在于,所述方法还包括:
根据预设报警条件,定时从预监控数据源获取待监控的原始数据,若所述待监控的原始数据异常则实时报警。
3.根据权利要求1所述的数据实时采集并可视化的实现方法,其特征在于,所述根据预设条件,采集预设时间段内的多种数据源的数据,得到待展示的原始数据,具体包括:
根据预设规则以及用户行为,采集业务日志数据批量上报,存储在第一数据库中;
和/或,根据预设协议,采集业务接口数据;
和/或,根据预设协议,采集第三方数据;
所述根据预设规则、以及用户行为,采集业务日志数据批量上报,存储在第一数据库中,具体包括:
根据在业务功能上部署的特殊标签,采集原始业务日志数据;
将原始业务日志数据的数据格式构造成数组格式,存储在数组中;
计算数组中数组格式的业务日志数据的大小;
当数组中累积的数据大小超过预设数值阈值时,批量上报数据,存储在第一数据库中。
4.根据权利要求1或3所述的数据实时采集并可视化的实现方法,其特征在于,所述将待展示的原始数据的数据格式转换适配成可直接用于可视化展示的第一数据格式,得到统一格式的数据,具体包括:
从第一数据库获取数组格式的业务日志数据,将获取到的业务日志数据的数据格式转换适配成第一数据格式;
和/或,将采集到的业务接口数据的数据格式转换适配成第一数据格式;
和/或,将采集到的第三方数据的数据格式转换适配成第一数据格式;
所述预设配置还包括:预设报表配置;所述根据预设配置,实现统一格式的数据可视化,具体还包括:
根据预设报表配置,定期发送数据汇总邮件。
5.根据权利要求2所述的数据实时采集并可视化的实现方法,其特征在于,所述根据预设报警条件,定时从预监控数据源获取待监控的原始数据,若所述待监控的原始数据异常则实时报警,具体包括:
根据预设的监控规则,确定并输出报警条件;
根据报警条件,判断定时从预监控数据源获取的待监控的原始数据是否符合报警条件,所述预监控数据源为用户设定的需要监控的数据源;
若符合报警条件,则计算当前时间与上次报警时间的差值;
若当前时间与上次报警时间的差值大于预设时间阈值,则报警,并用当前时间更新报警时间;
所述根据预设的监控规则,确定并输出报警条件,具体包括:
若预设的监控规则为一条,将该条监控规则进行数据格式化处理后直接输出报警条件;
若预设的监控规则为多条,确定多条监控规则之间的逻辑关系;根据所述逻辑关系,将所述多条监控规则进行数据格式化处理后采用正则表达式拼接,输出报警条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于微梦创科网络科技(中国)有限公司,未经微梦创科网络科技(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810264886.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:设备跳闸信息检索方法、装置及计算机设备
- 下一篇:一种数据智能分析方法及系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置