[发明专利]日志处理方法、装置及大数据集群有效

专利信息
申请号: 201811141639.6 申请日: 2018-09-28
公开(公告)号: CN109039787B 公开(公告)日: 2022-02-11
发明(设计)人: 王亚亮 申请(专利权)人: 新华三大数据技术有限公司
主分类号: H04L41/069 分类号: H04L41/069;H04L69/22;H04L67/60
代理公司: 北京超凡志成知识产权代理事务所(普通合伙) 11371 代理人: 王文红
地址: 450000 河南省郑州市郑州高新*** 国省代码: 河南;41
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明提供一种日志处理方法、装置及大数据集群,涉及计算机数据处理技术领域。该方法通过在Slave主机上预先开启服务端口,且在Slave主机上预先安装用于监听服务端口和解析本地服务日志的Slave组件,然后利用Slave组件监听指定的服务端口,以确定是否有用户终端对本地的资源进行访问,在用户终端访问本地的资源的过程中,获取并解析对应的服务日志,从而针对大数据集群中各主机,实现对用户终端的访问行为、主机的响应行为的分布式追踪定位。
搜索关键词: 日志 处理 方法 装置 数据 集群
【主权项】:
1.一种日志处理方法,其特征在于,应用于大数据集群中的主机,所述大数据集群包括至少一个Master主机和若干Slave主机,所述Master主机用于管理所述Slave主机,每个所述Slave主机开启有服务端口,且安装有用于监听所述服务端口和解析本地服务日志的Slave组件,所述方法包括:监听指定的服务端口,以判断是否有用户终端通过所述指定的服务端口请求访问本地的资源;在判定有用户终端通过所述指定的服务端口请求访问本地的资源时,获取该用户终端访问本地的资源的过程中所产生的第一服务日志;根据预设解析规则对所述第一服务日志进行解析,生成第一日志文件,并将所述第一日志文件进行存储。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三大数据技术有限公司,未经新华三大数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201811141639.6/,转载请声明来源钻瓜专利网。

同类专利
  • 一种故障处理系统、方法及电子设备-202310859629.0
  • 马晓宇;王兴隆 - 苏州浪潮智能科技有限公司
  • 2023-07-13 - 2023-10-27 - H04L41/069
  • 本申请公开了一种故障处理系统、方法及电子设备,属于电子技术领域,所述故障处理系统包括PCIE交换机、远程设备、若干个服务器节点,所述PCIE交换机包括远程控制模块,所述服务器节点包括基板管理控制器,所述基板管理控制器包括基板管理控制器网页控制单元,所述远程控制模块的第一输出端与所述远程设备的输入端连接,所述远程控制模块的第二输出端分别与若干个基板管理控制器网页控制单元的输入端连接。本申请可以解决融合架构整机柜服务器框架下的多节点统筹故障监控问题,提高了故障处理的效率。
  • 一种门限配置及星座故障判断方法、装置、设备和介质-202310943402.4
  • 朱文进 - 中电信数智科技有限公司
  • 2023-07-28 - 2023-10-24 - H04L41/069
  • 本发明涉及一种门限配置及星座故障判断方法、装置、设备和介质,该方法包括:包括:获取日志中按故障类型划分的数据集合所设置的所有检测门限数值,对所有检测门限数值进行加权平均后生成对应类型故障历史检测门限基线;根据日志中按故障类型划分的数据集合预测检测门限基线短期波动趋势;根据日志中按故障类型划分的数据集合和历史检测门限基线预测检测门限基线中期波动趋势、长期波动趋势;根据检测门限基线短期波动趋势和短期告警数量趋势变化确定短期门限基线是否变更;根据检测门限基线中期波动趋势和中期告警数量趋势变化、长期告警数量趋势变化确定中期门限基线、长期门限基线是否变更;根据变更后的门限基线判断星座是否故障。
  • 日志收集方法、装置、设备、介质及车辆-202211598922.8
  • 梁靖平 - 北京罗克维尔斯科技有限公司
  • 2022-12-14 - 2023-10-24 - H04L41/069
  • 本申请实施例公开了一种日志收集方法、装置、设备、介质及车辆,该日志收集方法通过采集车辆的第一日志,根据第一日志的第一标签信息查找第一信息表,得到第一日志的增量数据,根据日志处理规则处理增量数据,得到目标增量数据,将目标增量数据发送给云端服务器,由云端服务器对目标增量数据执行预定操作。相较于传统的由云端服务器进行日志采集和处理的方案,本申请实施例的日志采集和增量数据的处理,可以由云端服务器之外的设备执行,无需再由云端服务器执行,如此减少了云端服务器的压力。
  • 故障处理的监控方法、装置及电子设备-202310909828.8
  • 杜洁璇;曾东升;朱晓男;刘彩薇 - 中国移动通信集团河南有限公司;中国移动通信集团有限公司
  • 2023-07-20 - 2023-10-20 - H04L41/069
  • 本申请提供了故障处理的监控方法,涉及故障监控技术领域。具体方案:在获取待审核的包括故障设备的属性信息,处理结果,处理措施,故障原因的故障处理信息后,基于故障设备的属性信息,查询确定故障设备当前的设备状态、预设指标的指标值,以对处理结果进行校验,并基于预设的处理信息关联关系表,对处理措施、故障原因进行校验,在处理结果、处理措施、故障原因均校验通过的情况下,确定故障处理信息校验通过。由此,通过对处理措施、处理结果、故障原因进行全面的校验,提高了故障处理信息校验准确性,从而提高了对故障处理监控的可靠性,进而有利于保证故障得到有效解决。
  • 用户绕行管控设备行为的日志审计方法及装置-202310395835.0
  • 刘佳;武星宇;徐世权;杜刚;陈敏时;张晨;谢懿;苏昭玉;杜雪涛;顾宁伦 - 中国移动通信集团设计院有限公司;中国移动通信集团有限公司
  • 2023-04-13 - 2023-10-20 - H04L41/069
  • 本发明实施例公开了一种用户绕行管控设备行为的日志审计方法及装置,方法包括:收集多个日志设备的原始日志信息;将原始日志信息与预设日志模板树进行匹配,提取得到原始日志信息中包含的账号登录信息;其中,预设日志模板树通过预先解析历史原始日志信息构建得到;根据账号登录信息进行账号分类处理,确定对应的账号类别;按照账号类别,将账号登录信息与对应的账号类别知识图谱进行匹配,若不匹配,则确定存在用户绕行管控设备行为。本发明能够解决对原始日志信息解析、用户绕行管控设备行为审计的痛点,解决当前用户绕行管控设备行为审计模型效率低下、人工处理速度慢、易出错等问题,能够及时发现潜在的绕行操作行为,提高网络安全运营能力。
  • 基于设备操作日志的设备状态分析方法、装置和电子设备-202211407222.6
  • 熊成龙 - 中国移动通信集团江西有限公司;中国移动通信集团有限公司
  • 2022-11-10 - 2023-10-20 - H04L41/069
  • 本发明实施例提供了基于设备操作日志的设备状态分析方法、装置和电子设备。该方法包括:采集多个网元的设备操作日志;分析每个网元的设备操作日志的多个设备字段,生成每个设备字段的影响度;根据每个网元的多个设备字段的影响度,生成每个网元的设备状态值;根据每个网元的设备状态值,预测出每个网元的预测设备状态值;根据预测设备状态值,确定每个网元的网元状态场景;根据网元状态场景进行应急处理。本发明实施例提供的技术方案中,能够基于设备操作日志智能分析设备状态,确定出每个网元的网元状态场景并根据网元状态场景进行应急处理,提高了设备状态的分析准确性、实时性和效率。
  • 日志上传方法、日志查询方法、系统-202010617963.1
  • 刘垠阔;易张成哲;王亚强 - 北京爱笔科技有限公司
  • 2020-07-01 - 2023-10-17 - H04L41/069
  • 本申请涉及一种日志上传方法、日志查询方法、系统、计算机设备和存储介质。该方法应用于边缘服务器,包括:响应于日志上传请求,获取终端设备生成的初始日志,其中,终端设备与边缘服务器处于同一个通信集群中;若初始日志的类型为筛选类型,则选取筛选类型对应的日志筛选策略对初始日志进行筛选,得到待上传日志;上传待上传日志至云服务器。可以理解,通过边缘服务器获取与该边缘服务器处于同一个通信集群中的终端设备生成的初始日志,并根据初始日志的类型,选取对应的筛选策略对初始日志进行筛选,得到待上传日志并上传,实现了对初始日志的删减和过滤,减小日志上传的体量,减少网络带宽的占用,提升日志上传的稳定性和效率。
  • 一种车载系统唤醒方法、装置及系统-202310970005.6
  • 田家豪;邹晓冬;王海波;任俊伟;陈涛;李孟春;赵言乐 - 智达诚远科技有限公司
  • 2023-08-03 - 2023-10-13 - H04L41/069
  • 本发明公开了一种车载系统唤醒方法,应用于第一电子控制单元,所述第一电子控制单元和第二电子控制单元之间可进行信号传输,该方法包括:在检测到所述第二电子控制单元通过第一物理信道发送的第一帧报文后进行初始化,并在初始化的过程中打开所述第一物理信道对应的控制器;接收所述第二电子控制单元通过所述第一物理信道发送的第二帧报文;当所述第二帧报文的报文类型为唤醒报文时,执行网络唤醒操作。通过减少发送报文的流程,提高了唤醒效率,节省了唤醒时间;在网络唤醒过程中,不发送应用报文,避免了唤醒过程中应用报文发送时间早于唤醒报文导致总线关闭,使得车载系统无法唤醒的问题。
  • 网站安全审计方法及装置、电子设备及存储介质-202310501266.3
  • 曹辉 - 北京奥星贝斯科技有限公司
  • 2023-05-05 - 2023-10-13 - H04L41/069
  • 本说明书一个或多个实施例提供一种网站安全审计方法及装置、电子设备及存储介质,所述方法包括:获取向API接口层发送的业务请求,并提取所述业务请求的业务信息和唯一标识;根据所述业务请求的唯一标识,从所述审计事件元信息库中获取所述业务请求的元信息,其中,所述元信息包括所述唯一标识和资源标识表达式;利用所述资源标识表达式,从所述业务请求中获取资源标识;将所述业务信息、所述元信息和所述资源标识作为一个历史事件进行存储。因此网站或者软件系统在运行过程中可以利用该方法对每个审计事件进行准确、统一地记录,便于在网站或者软件系统出现故障时进行原因排查,在网站或者软件系统被攻击时进行攻击者锁定。
  • 一种日志管理系统及方法-202311075235.2
  • 张佳文;张洪健;刘大全 - 重庆长安汽车股份有限公司
  • 2023-08-24 - 2023-10-13 - H04L41/069
  • 本申请公开一种日志管理系统及方法,涉及计算机技术领域,该系统包括:数据库、目标服务模块、后台服务模块、SDK;数据库储存配置信息,并将配置信息发送至目标服务模块;配置信息包括:网络通信协议、日志等级、打印信息、储存路径;采用分布式微服务架构模式的目标服务模块包括:多个目标服务,每个服务是需要使用日志管理系统的微服务;目标服务模块将配置信息分布在多个目标服务,多个目标服务分别调用SDK对配置信息进行解析;多个目标服务根据配置信息运行,产生日志信息,并将所产生的日志信息统一通过SDK发送至后台服务模块。本申请提供的日志管理系统能够在计算机系统运行出现问题时,帮助用户通过调取日志信息快速发现问题和解决问题。
  • 日志获取方法、装置、电子设备、芯片及存储介质-202210147478.1
  • 候祥;王建 - OPPO广东移动通信有限公司
  • 2022-02-17 - 2023-10-13 - H04L41/069
  • 本申请适用于互联网技术领域,提供了一种日志获取方法、装置、电子设备、芯片及存储介质。所述日志获取方法包括:获取Wi‑Fi网络的异常问题所属的问题类型基于所述异常问题所属的问题类型,确定目标日志类型,所述目标日志类型是指与所述异常问题所属的问题类型匹配的日志类型;基于所述异常问题所属的问题类型和所述目标日志类型,从所述Wi‑Fi网络出现所述异常问题时生成的日志中获取目标日志,所述目标日志是指与所述异常问题所属的问题类型和所述目标日志类型匹配的日志。通过本申请可获取与Wi‑Fi网络的异常问题相关的日志。
  • 一种日志信息处理方法、装置及相关设备-202310801157.3
  • 朱帅 - 中移(苏州)软件技术有限公司;中国移动通信集团有限公司
  • 2023-07-03 - 2023-10-10 - H04L41/069
  • 本发明提供了日志信息处理方法、装置及相关设备,用于信道中心节点的方法包括:接收对接服务节点发送的第一信息,第一信息包括对接服务节点对应的第一凭证信息和日志请求信息;向日志中心节点发送第一信息;接收日志中心节点发送的第二信息,第二信息为日志中心节点基于第一信息生成的,且第二信息包括第一凭证信息和日志中心节点对日志请求信息的处理结果,处理结果用于指示日志请求信息对应的日志请求是否被执行;向对接服务节点发送第二信息。可以根据不同日志请求所需的日志字段,灵活的调整日志请求信息的消息类型及对应的消息内容,以对日志字段进行初始化、变更、索引等操作。无需预留扩展字段,避免出现字段冗余,提高了日志查询效率。
  • 日志上报方法、电子设备及存储介质-202011086158.7
  • 李煜 - 华为技术有限公司
  • 2020-10-12 - 2023-10-10 - H04L41/069
  • 本申请实施例提供一种日志上报方法、电子设备及存储介质,涉及通信技术领域,该方法包括:响应于检测到的故障事件,生成与所述故障事件对应的第一故障码;其中,所述第一故障码包括第一类型及第二类型;统计所述第一类型故障事件的频率,基于所述频率开启日志上报;基于所述第一类型的第一故障码生成第一日志,将所述第一日志发送给服务器,以完成日志的上报。本申请实施例提供的方法,能够提高日志与故障事件的关联度以及日志传输的效率,由此可以使得服务器提高根据日志定位故障的效率。
  • 一种日志收集方法、装置、设备及存储介质-202310859826.2
  • 代昊琦;直揽月;梁子键;刘绍光;范仲恺;刘明伟;马驰;胡路 - 南方电网数字平台科技(广东)有限公司
  • 2023-07-12 - 2023-10-03 - H04L41/069
  • 本申请公开了一种日志收集方法、装置、设备及存储介质,该方法应用于承载目标应用的用户终端,包括:在目标应用存在异常的情况下,向为目标应用提供功能服务的服务器发送候选日志文件和异常检测请求,以使服务器响应于异常检测请求,在未检测到有效的候选日志文件的情况下,向用户终端反馈日志上传请求;响应于日志上传请求,向服务器重新发送候选日志文件,以使服务器响应于异常检测请求,在检测到有效的候选日志文件的情况下,根据候选日志文件对目标应用进行异常识别。通过用户终端主动和/或被动上传候选日志文件,提升了日志获取的便捷性,有助于提高解决目标应用异常问题的效率。
  • 日志处理方法、装置以及系统-202310567897.5
  • 孙枭凡;沈震坤;邓跨东 - 珠海金山数字网络科技有限公司
  • 2023-05-18 - 2023-10-03 - H04L41/069
  • 本申请提供日志处理方法、装置以及系统,其中所述日志处理方法包括:接收第一日志获取请求并确定待查询日志;基于所述待查询日志对日志展示页面进行渲染并展示;响应于针对所述待查询日志的查看指令,在根据所述日志标识信息确定客户端第一缓存空间存在第一日志信息的情况下,根据所述日志标识信息获取第一日志信息;在根据所述日志标识信息确定所述客户端第一缓存空间不存在第一日志信息的情况下,接收所述第一服务端根据所述日志标识信息获取的第一日志信息对日志展示页面进行渲染并展示,通过上述方法实现了根据需求获取相关日志源文件并在客户端本地进行查看,提高了定位相关日志的效率。
  • 日志处理方法、设备和存储介质-202310584007.1
  • 姚轶麒 - 浙江零跑科技股份有限公司
  • 2023-05-19 - 2023-10-03 - H04L41/069
  • 本申请公开了一种日志处理方法、设备和存储介质,该方法包括:获取目标待处理日志;从预设规则库中确定目标待处理日志匹配的目标判重规则;基于目标判重规则对目标待处理日志进行判重处理,确定第一判重结果;其中,第一判重结果表征已存储日志中是否存在与目标待处理日志重复的第一日志;基于第一判重结果,处理目标待处理日志。通过上述方式,本申请能够提高日志判重结果的准确性,进而能够根据判重结果准确地处理日志。
  • 基于失陷设备的网络安全防御方法、装置及系统-202111076499.0
  • 杨腾霄;崔政强;严涛 - 上海纽盾科技股份有限公司
  • 2021-09-14 - 2023-10-03 - H04L41/069
  • 本发明提供了一种基于失陷设备的网络安全防御方法、装置及系统,涉及网络安全技术领域。所述处理方法包括步骤:获取失陷设备信息,所述失陷设备信息包括该失陷设备的告警信息;以及,获取该失陷设备关联的网络节点的日志信息;基于失陷设备信息和该失陷设备关联的网络节点的日志信息,获得前述失陷设备与该失陷设备关联的网络节点之间相关的根源告警信息,生成失陷设备的威胁情报;所述威胁情报包括情景信息;判断前述情景信息是否匹配网络安全威胁情报数据库中已有的情景,并依据判断对应采取安全防御措施进行网络防御。本发明利用失陷设备获取威胁情报,并从威胁情报中提取情景信息,对对应情景进行网络安全防御,以保障网络安全的稳定运行。
  • 基于告警的网络安全数据处理方法、装置及系统-202110858836.5
  • 杨腾霄;崔政强 - 上海纽盾科技股份有限公司
  • 2021-07-28 - 2023-10-03 - H04L41/069
  • 本发明提供了一种基于告警的网络安全数据处理方法、装置及系统,涉及网络安全技术领域。所述处理方法包括步骤:采集网管系统中的告警信息,以及与前述告警信息相关的网络节点的日志信息;获取前述网络节点的日志信息中的第一类元数据信息,判断前述告警信息与前述第一类元数据信息之间的关联性;根据前述关联性进行告警相关性分析,判定为强关联性时建立第一类元数据信息与前述告警信息的告警因果关系,结束告警相关性分析;否则,依次获取前述网络节点的日志信息的其它类型的元数据信息,重复执行前述操作,直至得到告警因果关系。本发明的优势在于:在分析告警信息时,能够选取到准确的数据信息分析告警,并获得最佳的告警因果分析。
  • 一种云桌面日志收集的方法、装置、设备及存储介质-202310780909.2
  • 赖云泉;高斌;邹琼;周双全 - 深圳市瑞云科技股份有限公司
  • 2023-06-28 - 2023-09-29 - H04L41/069
  • 本发明涉及云桌面技术领域,具体涉及一种云桌面日志收集的方法、装置及设备。该方法包括:获取异常反馈指令;基于所述异常反馈指令,收集客户端日志并上传至云对象存储;基于所述异常反馈指令,向云桌面协议服务端发送请求;其中,所述请求用于请求云桌面协议服务端收集云桌面协议服务端日志并上传至云对象存储;获取云对象存储回传的下载链接,发送所述下载链接至后台管理平台;其中,后台管理平台用于基于所述下载链接,下载所述客户端日志和所述云桌面协议服务端日志,并基于所述客户端日志和所述云桌面协议服务端日志进行诊断。以解决现有技术中云桌面日志收集困难的问题。
  • 一种UMA串口日志获取方法及系统-202310728169.8
  • 陈垄 - 华人运通(上海)云计算科技有限公司
  • 2023-06-19 - 2023-09-29 - H04L41/069
  • 本发明公开了一种UMA串口日志获取方法及系统,该方法包括:在UMA应用层建立多个辅控芯片与主控芯片之间的通信后,所述主控芯片从多个所述辅控芯片中获取所需的日志信息;所述主控芯片对所述日志信息进行筛分,并将筛分后得到的日志信息发送至域控制器;然后所述域控制器对接收到的日志信息进行协议转换,得到相应的SPI信号;所述域控制器对所述SPI信号进行编码转换,得到最终的日志文本,并将所述日志文本上传到TSP平台,工程师只需从TSP平台上下载所述日志文本,即可以进行故障原因分析,从而对车辆的故障模块进行快速、准确定位,无需对车辆进行拆车拆件操作,降低车辆故障定位的难度,提高解决故障的效率。
  • 行为数据的监控方法、装置、计算机设备及介质-202011286429.3
  • 邱贵昌 - 中国平安财产保险股份有限公司
  • 2020-11-17 - 2023-09-26 - H04L41/069
  • 本发明涉及人工智能领域,公开了一种行为数据的监控方法、装置、计算机设备及存储介质,包括:在每次检测到访问请求时,从访问请求中获取用户标识,并基于用户标识,生成随机字符串,将随机字符串加入到请求报文和响应报文中,并根据请求报文和响应报文,生成日志数据,将日志数据存储到日志云平台,在接收到针对用户操作行为的查询请求时,获取查询请求中包含的用户标识,作为目标用户标识,并从日志云平台中,获取目标用户标识对应的日志数据,作为目标日志,对目标日志进行行为轨迹分析,得到目标用户标识对应的可视化行为轨迹,基于可视化行为轨迹,判断目标用户标识对应的操作行为是否异常,本发明提高行为数据的监控效率。
  • 链路日志监控方法、监控平台及计算机可读存储介质-202310830104.4
  • 刘彦;苏楠;谢云昊;徐德飞 - 招商银行股份有限公司
  • 2023-07-06 - 2023-09-22 - H04L41/069
  • 本发明公开了一种链路日志监控方法、监控平台及计算机可读存储介质,其中,所述方法包括:基于卡夫卡消费线程,定时轮询所述卡夫卡消费中间件接收到的业务信息;在所述业务信息为客户端日志时,通过中转服务器将所述客户端日志中的客户端链路日志发送至所述分析模块;在确定分析模块获取到所述客户端链路日志关联的服务器链路日志时,基于所述客户端链路日志和所述服务器链路日志,确定客户端与服务器之间的业务链路的监控结果。本发明旨在提高监控业务链路全面性,提高系统的可用性。
  • 一种业务日志处理方法、装置及系统-202210259398.5
  • 贺鹏 - 京东科技控股股份有限公司
  • 2022-03-16 - 2023-09-22 - H04L41/069
  • 本发明公开了一种业务日志处理方法、装置及系统,涉及计算机技术领域。该方法的一具体实施方式包括:响应于业务应用接入请求,配置业务应用对应的业务日志级别调整的开关配置信息,其中,开关配置信息指示了业务日志对应的开关状态和当前业务日志级别;将开关配置信息发送至业务应用对应的客户端,以使得,客户端根据开关配置信息确定业务应用对应的日志输出策略。该实施方式实现了对业务日志级别调整的统一管理和维护,提高了业务日志处理效率,还实现对业务日志级别的线上快速调整,有效保障了业务系统的稳定性和时效性,提升了用户体验。
  • 一种日志无损压缩分析方法和系统-202310718488.0
  • 田标;崔伟;黄慧 - 天翼数字生活科技有限公司
  • 2023-06-16 - 2023-09-22 - H04L41/069
  • 本发明涉及一种日志无损压缩分析方法和系统。由压缩客户端从项目和功能两个维度对日志进行相似性压缩处理,产生日志记录;由日志压缩服务模块根据压缩时长要求分割日志记录、生成经压缩的日志并其保存到分布式存储服务中,并为每个经压缩的日志生成对应的元数据记录并将其保存到列式数据库中。其中,所述分布式存储服务和所述列式数据库存在于日志无损压缩分析服务端中。本发明既能直接输出运维、质量等工作需要的日志分析结果,又不损失任何原始日志信息,同时还能降低IT资源投入。
  • 基于clickhouse的日志数据导出方法及相关设备-202310704203.8
  • 冯洋 - 平安科技(深圳)有限公司
  • 2023-06-14 - 2023-09-19 - H04L41/069
  • 本申请涉及数据运维技术领域,提出一种基于clickhouse的日志数据导出方法及相关设备,所述方法包括:配置日志参数以生成日志导出请求;基于日志导出请求查询日志数据库以获取第一日志数据集;过滤第一日志数据集中的异常日志获得第二日志数据集;按照主键大小对第二日志数据集中的日志数据进行排序获得第三日志数据集;对第三日志数据集进行数据格式统一后保存至预设云盘的归档日志空间内;依据客户端的web页面统计归档日志空间内的日志数据并进行展示。本申请通过对日志数据的排序和筛选,克服了传统方式导出日志数据的无序繁琐性,能够更简单高效的将clickhouse中的日志数据快速完整的导出。
  • 业务管理方法和装置-202010575896.1
  • 吕华辉;杨航;曹小明;张华兵;陈华军 - 南方电网数字电网研究院有限公司
  • 2020-06-22 - 2023-09-19 - H04L41/069
  • 本申请涉及一种业务管理方法和装置。所述方法包括:采用基于管理设备系统的运行状态和数据规模的多线程多并发的方式获取所述管理设备系统的初始运行信息、并对所述初始运行信息进行预处理,得到所述管理设备系统的可用运行信息;按照预设的分析策略,对通过预设接口接收到的所述可用运行信息进行分析,得到所述管理设备系统的多个维度的分析结果;其中,多个维度的所述分析结果包括:资源统计报表、创立性能巡检报表、告警统计报表、网络拓扑视图、设备性能瓶颈信息和故障信息中的至少一种;将所述分析结果输出至客户端。采用本方法能够提高业务管理的效率。
  • 基于系统审计日志的溯源图构建与剪枝方法、装置及介质-202310669109.3
  • 仇晶;陈荣融;肖千龙;倪晓雅;田志宏;殷丽华;李默涵;胡铭浩;高成亮;郑东阳;陈俊君;邢家旭;汤菲 - 广州大学
  • 2023-06-06 - 2023-09-12 - H04L41/069
  • 本说明书实施例提供了一种基于系统审计日志的溯源图构建与剪枝方法、装置及介质,其中,该方法包括获取不同操作系统审计日志,根据各审计日志信息获取主体信息,事件信息及客体信息,分别构成三元信息组,其中,主体为进程,客体为程序、文件或套接字;根据各三元信息组信息及对应的事件类型,确定对应的处理方法,计算获取各事件的主客体的唯一标识;根据各主客体的唯一标识判断各实体是否存在节点集合中,如果不存在,在节点集合中创建实体节点,且在边集合中创建对应主客体实体之间的边;如果存在,进行剪枝操作获得溯源图。本发明对系统生成的统一格式溯源图进行剪枝处理,在保证因果语义完整性的前提下,大大减少溯源图所需的系统空间。
  • 一种服务器日志数据压缩方法、系统、终端及存储介质-202310784745.0
  • 苏敦快 - 苏州浪潮智能科技有限公司
  • 2023-06-29 - 2023-09-12 - H04L41/069
  • 本发明涉及日志压缩领域,具体公开一种服务器日志数据压缩方法、系统、终端及存储介质,收集日志文件;读取日志文件内的文本内容,对日志文件内的文本内容以空格为标识进行分割,获得多个片段;循环比对各个片段,将内容相同的片段记为一个元素;使用标志符对文本内容中各个元素进行替换,获得新的日志文件;其中,标志符包括两位长度标志符和三位长度标志符;一个元素对应一个标志符;对新的日志文件进行压缩处理。本发明以空格划分片段查找重复元素,进行替换后再进行压缩,减少日志文件字符数,提高压缩效果。
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top