[发明专利]一种分布式日志处理系统和方法在审
申请号: | 202110703908.9 | 申请日: | 2021-06-24 |
公开(公告)号: | CN113434464A | 公开(公告)日: | 2021-09-24 |
发明(设计)人: | 张跃;吴哲 | 申请(专利权)人: | 江苏创源电子有限公司 |
主分类号: | G06F16/14 | 分类号: | G06F16/14;G06F16/17;G06F16/18 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 刘凤 |
地址: | 215200 江苏省苏州*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 日志 处理 系统 方法 | ||
本申请涉及日志处理技术领域,尤其涉及一种分布式日志处理系统和方法,其中,客户端接收用户在网页中执行的操作指令,并向微服务平台发送操作请求;微服务平台中的多个目标微服务模块执行与操作请求中的操作标识对应的操作指令所指示的处理操作,记录每个目标微服务模块执行处理操作的日志文件;搜索服务器构建存储有操作标识以及与操作标识对应的日志文件的日志数据库;客户端在确定操作指令发生异常时,向搜索服务器发送异常查询请求;搜索服务器从日志数据库中获取与异常查询请求对应的日志文件,并将获取到的日志文件发送至客户端。通过上述方式,可以缩短查询与异常的操作指令对应的日志文件的搜索链路,提高了查询异常日志链路的效率。
技术领域
本申请涉及日志处理技术领域,尤其涉及一种分布式日志处理系统和方法。
背景技术
现有技术中,客户端的界面中如果线上环节出现了异常,需要获取服务器端的权限以查询异常对应的日志文件。
当出现一个异常问题,则需要从服务器容器内查看相关日志文件,即,出现异常的环节对应的日志链路过长,通过常用的查询方式进行链路查询,调用日志的链路会很长,这样导致查询效率不高。
发明内容
有鉴于此,本申请实施例至少提供一种分布式日志处理系统、一种分布式日志处理方法、一种电子设备和一种计算机可读存储介质。
本申请主要包括以下几个方面:
第一方面,本申请实施例提供一种分布式日志处理系统,包括客户端、微服务平台和搜索服务器。
其中,客户端接收用户在网页中执行的操作指令,将携带有与操作指令对应的操作标识的操作请求发送至微服务平台;
微服务平台中的多个目标微服务模块执行与操作请求中的操作标识对应的操作指令所指示的处理操作,记录每个目标微服务模块执行处理操作的日志文件,并将操作标识和所记录的日志文件发送至搜索服务器;
搜索服务器构建存储有操作标识以及与操作标识对应的日志文件的日志数据库;
客户端在确定操作指令发生异常时,将携带有与操作指令对应的操作标识的异常查询请求发送至搜索服务器;
搜索服务器从日志数据库中获取与异常查询请求中的操作标识对应的日志文件,并将获取到的日志文件发送至客户端。
在一种可能的实施方式中,操作标识与操作指令一一对应,一个操作指令所指示的处理操作由多个目标微服务模块共同执行,每个目标微服务模块执行同一操作指令所指示的处理操作的日志文件所对应操作标识是相同的。
在一种可能的实施方式中,微服务平台还包括日志收集模块,日志收集模块与每个目标微服务模块建立连接,用于记录每个目标微服务模块执行处理操作的日志文件。日志收集模块将与操作指令对应的操作标识写入日志文件的头部文件中,并将写入操作标识后的日志文件发送至搜索服务器。
在一种可能的实施方式中,操作标识为用于指示操作指令的通用唯一识别码。
在一种可能的实施方式中,还包括预设日志收集模块的日志配置文件,日志配置文件用于指示需要从每个目标微服务模块中获取的字段信息;基于日志配置文件从每个微服务模块中获取对应的字段信息以生成该目标微服务模块的日志文件。
在一种可能的实施方式中,搜索服务器还用于:将具有相同操作标识的日志文件划分在同一日志集合中,每个日志集合对应一个操作标识。
第二方面,本申请实施例还提供一种分布式日志处理方法,其特征在于,包括:
客户端接收用户在网页中执行的操作指令,将携带有与操作指令对应的操作标识的操作请求发送至微服务平台;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏创源电子有限公司,未经江苏创源电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110703908.9/2.html,转载请声明来源钻瓜专利网。