[发明专利]基于嵌入式设备的日志管理方法、装置及系统在审

专利信息
申请号: 202010092112.X 申请日: 2020-02-14
公开(公告)号: CN113268462A 公开(公告)日: 2021-08-17
发明(设计)人: 刘伟欣;周晶晶 申请(专利权)人: 西安诺瓦星云科技股份有限公司
主分类号: G06F16/18 分类号: G06F16/18;G06F11/34
代理公司: 深圳精智联合知识产权代理有限公司 44393 代理人: 邓铁华
地址: 710075 陕西省西安市高新区丈八*** 国省代码: 陕西;61
权利要求书: 暂无信息 说明书: 暂无信息
摘要: 发明实施例提供一种基于嵌入式设备的日志管理方法、装置和系统。所述基于嵌入式设备的日志管理方法例如包括:获取输入参数,其中输入参数包含日志类对象名称、日志数据和所述日志数据的日志等级;根据日志类对象名称查找目标配置数据,其中所述目标配置数据包含日志类对象属性、至少一个数据路径对象属性和至少一个输出设备对象属性;根据日志等级和所述目标配置数据对日志数据进行过滤处理,以得到可输出日志数据和对应可输出日志数据的目标输出设备对象属性,其中目标输出设备对象属性属于至少一个输出设备对象属性;根据日志类对象属性对可输出日志数据进行加工,以得到待输出日志数据;以及根据目标输出设备对象属性输出待输出日志数据。
搜索关键词: 基于 嵌入式 设备 日志 管理 方法 装置 系统
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安诺瓦星云科技股份有限公司,未经西安诺瓦星云科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/202010092112.X/,转载请声明来源钻瓜专利网。

同类专利
  • 一种日志维护方法、装置、设备及介质-202310949046.7
  • 翟明立;宋以强;刘清林 - 苏州浪潮智能科技有限公司
  • 2023-07-31 - 2023-10-27 - G06F16/18
  • 本发明涉及计算机技术领域,尤其涉及一种日志维护方法、装置、设备及介质。所述方法包括:定义与三种预设日志功能一一对应的三种清除级别的注册日志,每一清除级别的注册日志具有对应的清理机制、写入接口和生成方式,不同清除级别的注册日志对应的清理机制不同;响应于系统运行阶段产生待写入日志,则根据所述待写入日志的日志功能从三种清除级别的注册日志中选择一个作为目标注册日志;调用所述目标注册日志中的所述写入接口和所述生成方式执行日志写入以生成日志文件;以及根据所述目标注册日志中的所述清理机制清理所述日志文件。本发明的方案实现了全自动化管理日志,避免日志文件持续增长,提升磁盘空间利用率,降低日志管理维护成本。
  • 日志分析方法、装置、计算机设备及存储介质-201911257624.0
  • 李婉;盛国娟;王颖;史墨祎;石娜 - 中移(杭州)信息技术有限公司;中国移动通信集团有限公司
  • 2019-12-10 - 2023-10-27 - G06F16/18
  • 本发明公开一种日志分析方法、装置、计算机设备及存储介质,包括:获取输入数据集,其中,输入数据集为对获取的原始日志数据进行标准化处理后,具有统一的数据结构的数据;将输入数据集输入至预设的异常分析模型中生成异常数据,其中,异常分析模型为预先训练至收敛状态,用于对日志数据中的异常数据进行提取的循环神经网络模型;基于预设的异常历史数据库,对异常数据进行关联处理。本申请能够快速获取来自不同服务器上的原始日志数据,进行标准化处理后使之具备相同的数据结构,再对日志数据采用循环神经网络模型来进行异常识别,即使在数据量庞大的情况下,也能快速进行识别,并对异常数据进行关联性处理,以加快异常数据处理的速度和精确度。
  • 一种事务日志的缓存方法、装置、设备和存储介质-202010505738.9
  • 王海龙;沈宁;韩朱忠 - 上海达梦数据库有限公司
  • 2020-06-05 - 2023-10-27 - G06F16/18
  • 本发明实施例公开了一种事务日志的缓存方法、装置、设备和存储介质。其中,该方法包括:如果检测到当前物理事务的提交指令,则确定所述当前物理事务的适配日志包,所述适配日志包的剩余缓存空间支持所述当前物理事务内事务日志的全部缓存;在所述适配日志包中缓存所述当前物理事务内的事务日志,并更新所述适配日志包下的有效日志偏移,以按照该有效日志偏移对所述适配日志包内的事务日志进行刷盘。本发明实施例提供的技术方案,避免一个物理事务内的事务日志横跨多个日志包缓存,无需对当前物理事务进行日志解析,提高事务日志的缓存效率,同时避免刷盘后的事务日志出现空洞区域的问题,减少事务日志的缓存空间浪费。
  • 日志分析方法、装置、计算机设备和存储介质-202210373303.2
  • 陈晨阳;庄岳涛 - 腾讯科技(深圳)有限公司
  • 2022-04-11 - 2023-10-24 - G06F16/18
  • 本申请涉及一种日志分析方法、装置、计算机设备和存储介质。所述方法包括:当满足日志扫描条件时,从目标目录中获取待扫描日志,目标目录存放有基于目录映射关系得到的服务容器的服务容器日志;确定与待扫描日志各自相匹配的功能服务类型以及操作指令类型;基于功能服务类型以及操作指令类型,确定与待扫描日志各自相匹配的日志扫描优先级,并根据获取到的负载状态信息确定日志扫描策略;基于日志扫描策略以及日志扫描优先级,对待扫描日志进行异常扫描,得到异常日志分析结果。采用本方法能够加快日志处理速度。
  • 日志处理系统、方法、装置、设备、介质和产品-202211103681.5
  • 杜杨浩 - 深圳前海环融联易信息科技服务有限公司
  • 2022-09-09 - 2023-10-24 - G06F16/18
  • 本申请涉及边缘集群技术领域,公开了一种基于边缘集群的日志处理方法、装置、计算机设备、存储介质和程序产品,提供了一种适用于边缘场景的日志采集方案。日志处理系统部分包括边缘集群和服务端,边缘集群包括多个边缘节点,每个边缘节点运行有用于执行边缘计算的容器;边缘节点,用于采集对应的容器的容器日志;并获取对应的容器的目标边缘集群信息;将目标边缘集群信息注入到容器日志的每一条日志记录中,形成对应的容器的目标容器日志;将目标容器日志发送至服务端;服务端,用于对边缘集群的各个边缘节点发送的目标容器日志存储于日志存储组件。
  • 日志采集过程中管理内存中文件对象的方法和装置-202010830613.3
  • 李晓宁;朱梦 - 中国银行股份有限公司
  • 2020-08-18 - 2023-10-24 - G06F16/18
  • 本发明提供一种日志采集过程中管理内存中文件对象的方法和装置,该方法包括:获取日志读取位置记录文件;根据日志读取位置记录文件,确定每个滚动日志实例的最新顺序标记,存入日志文件最新顺序标记映射;读取待采集日志文件,获取待采集日志文件的最新顺序标记;将待采集日志文件的最新顺序标记与日志文件最新顺序标记映射进行匹配查询,通过多重判断规则,将待采集日志文件的句柄打开,生成待读取日志文件,放入内存的在读文件列表;遍历在读文件列表,获取待读取日志文件的最新顺序标记,将待读取日志文件的最新顺序标记与更新后日志文件最新顺序标记映射进行对比,将符合设定规则的待读取日志文件的句柄关闭并从内存的在读文件列表中清除。
  • 基于语义流图挖掘的系统日志异常检测方法-202310873970.1
  • 李腾;魏少博;林炜国;彭春蕾;李思琦;崔金玉;李德彪 - 西安电子科技大学;西安联飞智能装备研究院有限责任公司
  • 2023-07-17 - 2023-10-20 - G06F16/18
  • 本发明公开一种基于语义流图挖掘的系统日志异常检测方法,主要解决了现有技术针对海量非结构化日志在异常检测任务中日志噪声去除难、系统变更导致检测效果不佳的问题。包括:1)对日志原始语句进行预处理,去除无意义符号并进行分词;2)利用Word2Vec结合日志语句中单词的重要度计算日志语句的词向量;3)利用基于注意力机制的双GRU网络,得到日志语句的句向量表示;4)对日志句向量进行聚类,将相似度高的日志语句划分为一类,构造语义流图;5)通过图卷积神经网络对语义流图进行特征提取和训练,实现异常检测。本方法能够有效解决日志噪声对异常检测的影响,并利用日志语句之间的空间结构信息提高异常检测的准确性。
  • 一种简化日志方法、系统、可读存储介质及计算机设备-202310814874.X
  • 刘永桥 - 重庆两江联创电子有限公司
  • 2023-07-04 - 2023-10-20 - G06F16/18
  • 本发明提供一种简化日志方法、系统、可读存储介质及计算机设备,方法包括获取日志中的文件事项,根据文件事项区分日志的等级,并对各不同等级的日志进行压缩;创建存储文件夹,并将存储文件夹进行分类,得到不同种类的存储文件夹;将各不同等级的日志存储至对应种类的存储文件内,并提取各不同等级的日志中的特征数据,根据特征数据对对应的存储文件夹进行命名;获取与日志同等级的日志文件,将日志文件存储至对应的存储文件夹内,并获取日志文件的存储时间,将存储时间存储至对应的存储文件夹内,并将日志文件进行压缩。本发明能够有效增加日志的可读性,减少日志对磁盘资源的浪费。
  • 日志处理方法、装置、设备及介质-202310293554.4
  • 游树娟;李小涛;牛亚文 - 中国移动通信有限公司研究院;中国移动通信集团有限公司
  • 2023-03-23 - 2023-10-20 - G06F16/18
  • 本发明提供一种日志处理方法、装置、设备及介质。所述方法包括:利用集成学习策略对切片日志进行异常检测,获得所述切片日志的检测结果,所述集成学习策略用于检测所述切片日志的多种异常情况;在所述检测结果指示所述切片日志异常的情况下,根据所述切片日志的语义信息对所述切片日志进行根因定位。本申请的实施例,通过集成学习策略对切片日志进行异常检测,能够实现同时检测日志的多种异常情况,提升日志异常检测准确率和查全率。在检测结果指示所述切片日志异常的情况下,根据所述切片日志的语义信息对所述切片日志进行根因定位,充分利用了日志表达的语义信息,能够识别多种根因,准确率更高、泛化能力更强、智能化程度更高。
  • 一种多线程日志读取方法和装置-202310710401.5
  • 刘启春;孙峰;余院兰;彭青松 - 武汉达梦数据库股份有限公司
  • 2023-06-14 - 2023-10-20 - G06F16/18
  • 本发明涉及数据库技术领域,提供了一种多线程日志读取方法和装置。其中所述方法包括:当第一区块状态为激活状态时,从日志文件中读取所述第一区块的第一数据,将所述第一数据存储至相应的第一缓存中;在读取所述第一数据结束后,将所述第一区块状态更新为读取完成状态;当第一区块状态为读取完成状态时,若第二线程校验得到所述第一数据无效,则将所述第一区块状态更新为激活状态,以便于第一线程再次读取所述第一区块的数据。本发明在文件有效数据范围不断变化时,依旧能够实现日志的有效读取。且由于划分了多个区块,使无需等待日志文件读取完成,即可进行区块中数据的校验,以及后续数据的消费,从而提高日志读取‑消费这一整个流程的效率。
  • 日志系统分布式存储的方法、装置、服务器及存储介质-202010387516.1
  • 李科 - 深圳市卡数科技有限公司
  • 2020-05-09 - 2023-10-20 - G06F16/18
  • 本发明实施例公开了一种日志系统分布式存储的方法、装置、服务器及存储介质,一种日志系统分布式存储的方法,包括:确定待存储日志的需要进行分布式存储的多个表名和多个列簇名;将所述多个表名和多个列簇名使用第一数据格式保存到第一模型中;通过改写第一序列化模式将所述第一模型中的多个表名和多个列簇名写入分布式数据库。本发明实施例提供的一种日志系统分布式存储的方法将日志系统通过第一模型中传入不同的表名和列簇名就能动态的写入分布式数据库,解决了现有技术中日志系统在写入分布式数据库中无法存在多个表名和列簇名的问题,提升了用户的体验。
  • 事件数据处理-202310338100.4
  • K·N·潘 - 黑莓有限公司
  • 2023-03-31 - 2023-10-17 - G06F16/18
  • 本公开的实施例涉及事件数据处理。用于处理事件日志数据的方法、系统和装置,包括被编码在计算机存储介质上的计算机程序。示例事件日志处理方法包括:接收包括多个事件记录的事件日志,该多个事件记录描述了在一段时间内发生在一个或多个计算机系统中的每个计算机系统上的事件;将事件日志转换成图,包括:规范化多个事件记录,包括匿名化每个事件记录中的唯一标识符值并且利用预定值替换每个事件记录中的变量值;将每个规范化的事件记录表示为图中的一个或多个节点;以及生成多个事件聚类,其中每个事件聚类包括节点的聚合群组,并且基于由聚合群组中的节点表示的规范化事件记录的共同属性和规范化事件记录之间的层级关系而被生成。
  • 一种定时任务的重试方法及相关设备-202310473691.6
  • 陈子龙 - 北京来看科技有限公司
  • 2023-04-27 - 2023-10-17 - G06F16/18
  • 本发明公开了一种定时任务的重试方法及相关设备,所述方法包括:设定定时任务的配置信息,获取定时任务的数据质量校验结果和任务执行日志记录,并对数据质量校验结果和任务执行日志记录进行查询得查询结果;基于查询结果判断数据校验结果是否存在异常数据及判断任务执行日志记录是否存在失败任务;若数据校验结果存在异常数据或任务执行日志记录存在失败任务,则查询定时任务的日志信息,并获取定时任务的执行参数;基于配置信息得到定时任务的重试方式,基于重试方式对执行参数进行解析得到解析结果,并基于解析结果对定时任务进行任务重试。本发明规避了人工进行繁琐且重复的任务及数据质量检验的窘境,提高了任务校验的高效性和准确性。
  • 一种日志数据存储方法、查询方法、装置、设备及介质-202310596038.9
  • 饶琛琳;梁玫娟 - 北京优特捷信息技术有限公司
  • 2023-05-24 - 2023-10-17 - G06F16/18
  • 本发明实施例公开了一种日志数据存储方法、查询方法、装置、设备及介质。该日志数据存储方法,包括:采集业务处理中的日志数据,并对日志数据进行日志模式聚类,生成日志聚类模式;根据日志数据以及日志聚类模式,确定对应的模式索引;其中,模式索引用于通过索引为日志数据匹配对应的日志聚类模式;将日志数据中的参数值以列存储形式进行对象存储,并将日志聚类模式对应的模式索引进行本地存储。该方法可以提取日志数据中的参数值进行列存储,可以实现高压缩比的存储;而本地仅存储模式索引,可以节省本地内存;从而减轻网络带宽压力。
  • 事件数据处理-202310332061.7
  • K·N·潘 - 黑莓有限公司
  • 2023-03-31 - 2023-10-17 - G06F16/18
  • 本公开的实施例涉及事件数据处理。用于处理事件日志数据的方法、系统和装置,包括被编码在计算机存储介质上的计算机程序。示例事件日志处理方法包括接收包括多个事件记录的事件日志,事件记录描述在一个时间段内在一个或多个计算机系统中的每个计算机系统上已经发生的事件,包括:将多个事件记录标准化,其中将多个事件记录标准化包括将每个事件记录中的唯一标识符值匿名化以及利用预定值替换每个事件记录中的变量值;将每个标准化的事件记录表示为图中的一个或多个节点;以及生成多个事件聚类,其中每个事件聚类包括节点的聚合组并且基于由聚合组中的节点表示的标准化的事件记录之间的共同属性和层次关系被生成。
  • 一种基于事件日志文件的数据分析处理方法-202310982851.X
  • 周言;马成龙;刘国明 - 拓锐科技有限公司
  • 2023-08-07 - 2023-10-17 - G06F16/18
  • 本发明涉及事件日志文件技术领域,具体公开一种基于事件日志文件的数据分析处理方法,S1、电力事件日志文件获取、S2、电力事件日志文件分类、S3、电力事件日志文件分析、S4、电力设备维修分析、S5、布设线路巡检周期分析、S6、适宜维修时长显示和S7、适宜巡检周期显示,本发明确保电力设备质量分析的精准性,从而为后续设定区域内留存设备的分析提供强有力的数据支持,避免出现电力设备质量不高但没有进行调配的现象,保障区域内电力设备的正常运行,本发明弥补了现有技术这一方面的缺陷,在一定程度上提高了工作人员的巡检效率,保障区域内布设线路的安全运行,提高了区域内布设线路质量分析的参考性和价值性。
  • 日志样本的筛选方法及其装置、电子设备及存储介质-202310945760.9
  • 范淑君;程永龙;王钰;王睿 - 中国工商银行股份有限公司
  • 2023-07-28 - 2023-10-13 - G06F16/18
  • 本发明公开了一种日志样本的筛选方法及其装置、电子设备及存储介质,涉及大数据技术领域,其中,该日志样本的筛选方法包括:获取目标日志集合中每行日志样本以及对应的样本标签,将所有待确认标签对应的日志样本以及对应的样本标签输入至数据整合模型,输出新质心集合,计算待确认标签对应的待确认日志样本与新质心集合中每个新质心的余弦距离值,并选取与待确认日志样本对应的最小余弦距离以及新质心,基于待确认日志样本对应的最小余弦距离以及新质心,确定与该待确认日志样本对应的样本标签,输出包含有效标签的所有日志样本。本发明解决了相关技术中在进行日志筛选时,筛选速度缓慢,效率较低的技术问题。
  • 应用间关联确定、日志关联搜索方法、装置、介质及设备-201911286052.9
  • 吴擒龙;张霞;纪勇 - 东软集团股份有限公司
  • 2019-12-13 - 2023-10-13 - G06F16/18
  • 本公开涉及一种应用间关联确定、日志关联搜索方法、装置、介质及设备。确定方法包括:获取第一应用的多条第一日志信息;根据每条第一日志信息中的日志标识,查询第二应用的多条第二日志信息;若存在具有对应关系的第一日志信息和第二日志信息,则建立第一应用的第一通用唯一识别码字段与第二应用的第二通用唯一识别码字段之间的关联关系。由此,可实现日志信息的自动提取,且能够自动确定不同应用间的关联关系,这样,即使新增其他应用,也能够快速建立该其他应用与原有各应用之间的关联关系,省时省力。另外,当运维人员从某个日志开始查询时,可自动、快速地获取到相关联的日志信息,同时可以保证搜索数据的完整性,从而便于运维人员定位问题。
  • 业务过程事件日志采样方法、系统、存储介质及计算设备-202110914759.0
  • 刘聪;苏轩;张帅鹏;李彩虹 - 北京杰成合力科技有限公司
  • 2021-08-10 - 2023-10-13 - G06F16/18
  • 本发明公开了一种业务过程事件日志采样方法、系统、存储介质及计算设备,包括:1)获取日志直接跟随活动关系集合、开始点集合和结束点集合;2)判断轨迹开始点与开始点集合交集、轨迹结束点与结束点集合交集、轨迹直接跟随活动关系集合与日志直接跟随活动关系集合交集是否都为空集;若判断结果都为空集,则结束对事件日志的轨迹遍历,输出样本日志;若判断结果不全为空集,则从完全遍历采样法、集合覆盖采样法、基于轨迹长度的采样方法、基于轨迹频次的采样方法这四种事件日志采样方法中任意选择一种;3)选择轨迹组成新的日志,新的日志即为样本日志。本发明能够有效地通过采样获取具有足够代表性的样本日志,同时保证了日志完备性。
  • 日志处理方法、装置及服务器和计算机可读存储介质-201910731263.2
  • 刘斌华 - 腾讯科技(深圳)有限公司
  • 2019-08-08 - 2023-10-13 - G06F16/18
  • 本申请公开了一种日志处理方法、装置、系统及一种服务器和计算机可读存储介质,该方法包括:获取原始日志,并提取原始日志的要素;其中,要素包括标准要素和自定义要素,标准要素包括主体、客体、时间和操作类型;基于要素对应的管理系统提取要素的扩展信息;根据每个要素和每个要素对应的扩展信息基于标准上报格式确定原始日志的扩展字段,得到原始日志对应的扩展日志;将扩展日志存储至目标存储器中,以便利用扩展日志进行操作审计。从没有格式化的原始日志中抽取统一的要素标记,使得原本完全不同的原始日志可以采用相同的方法查询关键信息,并通过要素扩展为原始日志扩充更多非常重要的且贴近业务的扩展信息,提高了日志审计效率。
  • 基于卫星通信终端日志收集的方法-202310775682.2
  • 栾文海;张超 - 北京航天科工世纪卫星科技有限公司
  • 2023-06-28 - 2023-10-10 - G06F16/18
  • 本发明提出一种基于卫星通信终端日志收集的方法,用于应对各种突发情况,准确保存终端系统日志与状态上报,为日后排查解决问题,复现场景提供数据支持。包括本地缓存机制和日志传输机制。本地缓存机制为内存缓存与磁盘缓存相结合,内存缓存用于存储最新的日志,磁盘缓存用于持久化存储异常情况下的系统日志与状态;日志传输机制通过压缩回传,可配置化上传,上传成功后清除终端日志的方式,避免日志丢失并较好的实现异常场景定位。
  • 日志解析方法、装置、设备和存储介质-202310644543.6
  • 王峰 - 支付宝(杭州)信息技术有限公司
  • 2023-06-01 - 2023-10-10 - G06F16/18
  • 本申请一个或多个实施例提供一种日志解析方法、装置、设备和存储介质,该方法包括:获取应用程序上报的服务日志;其中,服务日志中包含关键字和与关键字对应的服务数据;从服务日志中提取出关键字,并基于关键字生成与服务日志对应的日志模板;将日志模板输入至日志解析模型,以使日志解析模型对日志模板中包含的各个关键字进行分类处理,得到与各个关键字对应的服务数据的数据类型;其中,日志解析模型为基于日志模板样本进行有监督训练得到的机器学习模型,日志模板样本中包含的各个关键字被标注了对应的服务数据的数据类型;将服务日志中包含的关键字,以及与关键字对应的服务数据的数据类型,作为与服务日志对应的日志解析结果进行输出。
  • 一种日志读取方法、装置、电子设备及可读存储介质-202110610852.2
  • 于宗潍 - 北京奇艺世纪科技有限公司
  • 2021-06-01 - 2023-10-10 - G06F16/18
  • 本申请提供了一种日志读取方法、装置、电子设备及可读存储介质,属于互联网技术领域。本申请通过在到达当前次读取日志的时刻时,获取前次读取的第一日志文件所对应的索引节点和前次读取的读取结束位置;根据所述索引节点确定当前次读取的目标日志文件;在所述目标日志文件中,读取从前次读取的读取结束位置至当前时刻的内容结尾位置之间的操作数据;将所述内容结尾位置确定为当前次读取的读取结束位置。可以根据索引节点确定当前次读取的目标日志文件,然后在目标日志文件中读取从前次读取的读取结束位置至当前时刻的内容结尾位置之间的操作数据,而不是只读取当前写入数据的日志文件中的操作数据,从而避免漏读取数据的问题。
  • 日志管理方法、装置、电子设备及存储介质-202310640289.2
  • 涂晓招 - 中银金融科技有限公司
  • 2023-05-31 - 2023-10-03 - G06F16/18
  • 本发明提供一种日志管理方法、装置、电子设备及存储介质,涉及日志管理技术领域,该方法包括:基于拦截器获取业务接口访问请求对应的日志;在拦截器检测到日志为异常日志的情况下,将异常日志发送至全局异常处理器,基于全局异常处理器对异常日志进行日志对象的封装;在拦截器检测到日志为正常日志的情况下,基于拦截器对正常日志进行日志对象的封装,正常日志为除异常日志之外的日志;将日志对象存放于线程池中,基于数据库日志采集类将日志对象存储至数据库,并可视化显示出数据库中存储的日志的分析结果,数据库日志采集类是预先配置好的,实现了自动对接业务系统日志框架,进行日志管理及日志分析。
  • 一种日志动态控制方法及装置-202310723911.6
  • 郭杰;孙薇薇;徐婷;李远;张云 - 中国民航信息网络股份有限公司
  • 2023-06-16 - 2023-10-03 - G06F16/18
  • 本申请提供了一种日志动态控制方法及装置,方法包括:获取接口的接口信息和接口的日志信息;根据接口信息,获得接口的日志配置策略;根据日志配置策略,将第一日志信息输出至日志文件;其中,第一日志信息为日志配置策略所指示的部分类型的日志信息。本申请通过为接口分配一个对应的日志配置策略,并输出与日志配置策略所指示的部分类型的日志信息至日志文件,减少服务器存储日志信息的压力。不仅如此,本申请还可以将获取接口的日志信息输出至与接口信息对应的日志文件,提高后续问题排查的效率。
  • 一种列存储文件的查询方法及查询装置-201910331414.5
  • 陈俊峰 - 平安科技(深圳)有限公司
  • 2019-04-24 - 2023-10-03 - G06F16/18
  • 本发明实施例提供一种列存储文件的查询方法,包括:从终端获取用户输入的SPL查询语句;根据所述SPL查询语句,确定在分布式文件系统的第一文件中的查询范围;根据所述查询范围从所述第一文件中筛选出第二文件;将所述SPL查询语句按照预设转化规则转化为SQL语句;将所述第二文件导入至大数据平台SQL搜索引擎中,以使所述大数据平台SQL搜索引擎执行所述SQL语句,以搜索出目标查询文件,其中,所述大数据平台SQL搜索引擎包括Hive和/或Spark SQL;及将所述目标查询文件输出至所述终端。本发明实施例提供的列存储文件的查询方法,为原有日志搜索系统的用户提供了统一的查询模式,扩大了SPL语句的查询范围,为列存储数据的查询提供方便。
  • 一种分布式存储的高可靠数据日志模块及其构建方法-201911372380.0
  • 王相宁;韩勇;刘敏;沈海嘉 - 天津中科曙光存储科技有限公司
  • 2019-12-27 - 2023-10-03 - G06F16/18
  • 本发明公开了一种分布式存储的高可靠数据日志模块及其构建方法,该方法包括设置具有主从结构的日志模块,主从结构包括主日志模块与丛从日志模块;采用NVDIMM作为日志存储设备,并在NVDIMM创建多个分区;根据主从结构将NVDIMM均分为同数目分区,一一绑定映射关系;主日志模块上的事务记录到其对应的NVDIMM分区中时,也将该事务记录到从日志模块对应的NVDIMM分区中,各分区中相同事务记录的分区部分为一个日志组;本发明方法中使用NVDIMM对应日志模块的主从结构,提高了日志文件的安全可靠性,对数据一致性的保障起到了至关重要的作用;日志记录为多副本,提高了日志数据的可靠性。
  • 闪存文件系统碎片化的评估方法、装置以及电子设备-202010027916.1
  • 彭冬炜 - OPPO广东移动通信有限公司
  • 2020-01-10 - 2023-10-03 - G06F16/18
  • 本申请公开了一种闪存文件系统碎片化的评估方法、装置以及电子设备。所述方法包括:获取闪存文件系统的目标段中的无效块的分布信息,其中,目标段为包括有效块和无效块的段,基于分布信息,获取目标段中的无效块落在多个指定区间段中的每个指定区间段的无效块数量,其中,多个指定区间段根据连续无效块的大小划分目标段获得,获取多个指定区间段中的每个指定区间段对应的权重,基于每个指定区间段的无效块数量和每个指定区间段对应的权重,获得加权分数作为闪存文件系统碎片化的评估分数。本申请实施例通过添加权重计算闪存文件系统中所有无效块对碎片化的贡献,获取闪存文件系统碎片化的评估分数,以提高闪存文件系统碎片化评估的准确性。
  • 日志文件的编码、解析、存储方法和装置-201810283468.4
  • 刘韩松;吴子奇 - 杭州阿里巴巴智融数字技术有限公司
  • 2018-04-02 - 2023-10-03 - G06F16/18
  • 本申请实施例提供了一种日志文件的编码、解析、存储方法和装置,所述编码方法包括:获取客户端的事件数据,所述事件数据包括客户端描述信息、事件描述信息,以及,事件记录数据;依据所述客户端描述信息和事件描述信息生成文本描述段;依据所述事件记录数据生成事件数据体;将所述文本描述段和事件数据体编码为日志文件。本实施例通过提供一种日志文件的编码协议,从而可以按照该编码协议统一地对客户端的各类数据进行编码,保证了数据的可扩展性和灵活性,方便了编码后的日志文件在多个不同的平台中进行使用,提高了数据的跨平台兼容性。
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top