[发明专利]日志处理方法、装置及存储介质、服务器在审
申请号: | 201810642922.0 | 申请日: | 2018-06-21 |
公开(公告)号: | CN109062774A | 公开(公告)日: | 2018-12-21 |
发明(设计)人: | 韩琪 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F17/30;H04L12/24;H04L29/08 |
代理公司: | 深圳市立智方成知识产权代理事务所(普通合伙) 44468 | 代理人: | 王增鑫 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 网络存储器 话务 服务器 分析 压缩 网络协议地址 日志处理 日志压缩 存储 占用 分布式分析 备份技术 备份日志 存储介质 分析目标 日志备份 日志分析 数据分析 性能瓶颈 专有网络 备份 归档 计算机网络 检索 复制 分配 保证 | ||
本发明涉及话务、计算机网络计算、数据分析、检索、存储、备份技术领域,具体涉及本发明实施例提供的一种日志处理方法,包括:将目标话务日志备份到对应的网络存储器中,网络存储器被分配有网络协议地址;将用于分析目标话务日志的服务器链接到网络协议地址,以使得所述服务器对目标话务日志进行分析;将分析后的目标话务日志压缩获得压缩日志,依据网络存储器指定的归档路径将压缩日志进行存储。日志通过专有网络复制出去再分析,保证了及时性也降低了日志分析过多的占用分析和压缩都占用cpu等资源,通过将日志压缩备份到网络存储器,且将分析日志的服务器挂备份日志的网络存储器的路径,实现分布式分析及压缩,解决了分析的性能瓶颈。
技术领域
本发明涉及话务、计算机网络计算、数据分析、检索、存储、备份技术领域,具体涉及一种日志处理方法、装置及计算机可读存储介质、服务器。
背景技术
随着互联网行业的迅猛发展,尤其是移动端应用的异军突起,新一轮的数据爆炸时代的大门己经开启,各类在线应用相互间的竞争口趋自热化。其中,部分日志不仅能够反应服务器的运行状况,另一部分日志更是为业务提供了发展规划的重要指标。特别地,在话务系统中,由于需要分析一下异常话路,或查询用户对于话务的查询,只能通过tserver日志进行分析,由于日志结构和web的完全不一样,并且有主备日志之分,并且主备都会输出日志,需要区分主备,分析变得非常困难,另外又涉及跨平台的话务转接,造成话务分析变得困难,另外由于日志会被清理,程序本身没有备份。另外在一个全平台中产生的日志量非常大,单平台的tserver日志每秒日志量在5M左右,分析和压缩都占用cpu较高,单台无法满足,从而导致单平台的tserver日志分析成为话务日志分析和定位的瓶颈。
发明内容
为克服以上技术问题,特别是单平台的tserver日志分析成为话务日志分析和定位的瓶颈的问题,特提出以下技术方案:
本发明实施例提供的一种日志处理方法,包括:
将目标话务日志备份到对应的网络存储器中,所述网络存储器被分配有网络协议地址;
将用于分析所述目标话务日志的服务器链接到所述网络协议地址,以使得所述服务器对所述目标话务日志进行分析;
将分析后的目标话务日志压缩获得压缩日志,依据所述网络存储器指定的归档路径将所述压缩日志进行存储。
进一步地,在所述将用于分析所述目标话务日志的服务器链接到所述网络协议地址,以使得所述服务器对所述目标话务日志进行分析之后,还包括:
提取分析后的所述目标话务日志中的关键字段,将所述关键字段存储到数据库中。
优选地,所述关键字段以索引方式存储在数据库中。
进一步地,在所述依据所述网络存储器指定的归档路径将所述压缩日志进行存储之后,还包括:
删除所述网络存储器内的分析后的所述目标话务日志。
进一步地,在所述依据所述网络存储器指定的归档路径将所述压缩日志进行存储中之后,还包括:
构建与web查询接口相对应且能从所述网络存储器中获取到所述压缩日志的日志查询接口。
进一步地,在所述将目标话务日志备份到对应的网络存储器中之前,还包括:
依据预设关键信息和预设匹配规则确定当前日志是否为需要被备份的所述目标话务日志;
当确定所述当前日志为需要被备份的所述目标话务日志时,将备份所述目标话务日志的服务器切换为与所述目标话务日志相对应的服务器。
优选地,所述预设匹配规则为正则匹配规则。
进一步地,在所述将分析后的目标话务日志压缩获得压缩日志之中,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810642922.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种信息处理方法及电子设备
- 下一篇:一种栈层优化判断的方法、系统及设备