[发明专利]一种基于服务开放平台的服务调用数据统计分析方法及系统在审
申请号: | 201911300923.8 | 申请日: | 2019-12-17 |
公开(公告)号: | CN111198806A | 公开(公告)日: | 2020-05-26 |
发明(设计)人: | 舒南飞;白雪珂;林文辉;赖新明 | 申请(专利权)人: | 航天信息股份有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F16/27;G06F16/245;G06F9/54 |
代理公司: | 北京工信联合知识产权代理有限公司 11266 | 代理人: | 姜丽楼 |
地址: | 100195 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 服务 开放 平台 调用 数据 统计分析 方法 系统 | ||
1.一种基于服务开放平台的服务调用数据统计分析方法,其特征在于:
采集服务调用情况数据,所述采集方式包括UDP采集方式以及HTTP采集方式;
将以UDP采集方式采集的数据存储在分布式时序数据库中;
将以HTTP采集方式采集的数据传输至消息队列中间件,调用日志数据处理服务完成消息队列中间件中数据的分析,将分析后数据存入分布式事务数据库中;
依据用户输入的关健字查询,同时检测分布式事务数据库和分布式时序数据库,若所述分布式事务数据库统计分析数值大于或者等于分布式时序数据库统计分析数值,输出分布式事务数据库的查询结果,否则输出分布式时序数据库的查询结果。
2.根据权利要求1所述的方法,其特征在于,所述UDP采集方式包括:
读取服务调用采集数据类型;
对所读取到的所述服务调用采集数据类型设定服务调用采集数据配置,对服务调用日志进行过滤得到关注的服务调用情况;
解析过滤后服务调用日志,提取数据组装成约定格式的字符串,所述字符串包括度量的名称以及数值,设置所述数值的统计数据值类型。
3.根据权利要求2所述的方法,其特征在于:
所述服务调用采集数据类型包括访问来源维度、服务接口API、统计度量、服务请求数量、特定用户服务请求数量、服务访问不同响应状态计数、服务访问不同响应状态不同用户计数以及服务访问唯一用户数;
所述访问来源维度包括用户和应用维度。
4.根据权利要求3所述的方法,其特征在于:
所述统计数据值类型包括计数类型、计时类型以及集合类型,所述集合类型标识服务调用次数、服务调用耗时以及服务调用用户集合。
5.根据权利要求1所述的方法,其特征在于,所述HTTP采集方式包括:
采集网关节点的服务调用日志;
解析服务调用日志获得关健描述信息,将所述关健描述信息封装为json格式,得到封装后字符串。
6.根据权利要求5所述的方法,其特征在于:
所述关健信息包括所访问API接口的基本信息、请求接口基本信息以及响应基本信息。
7.根据权利要求1所述的方法,其特征在于,所述日志数据处理服务包括:
将接收的数据传输至消息队列中间件,在消息队列中形成待消费数据队列;
使用大数据流式计算处理引擎对所述待消费数据队列中数据按预设度量结果读取,将读取结果与时间窗口的实时服务调用日志细粒度数据叠加后写入分布式事务数据库;
将所述待消费数据队列中的数据写入日志明细查询存储引擎中,提供服务接口访问明细查询服务。
8.根据权利要求7所述的方法,其特征在于:
所述分布式事务数据库中包括根据设计指标的最小粒度度量记录以及根据服务调用目标设计的统计指标。
9.根据权利要求7所述的方法,其特征在于:
所述分布式事务数据库中数据更新后,将所述更新后数据同步至分布式事务数据库从库中,由分布式事务数据库从库提供数据查询统计服务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于航天信息股份有限公司,未经航天信息股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911300923.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于DPDK的时间同步方法
- 下一篇:一种带浸泡水报警的探漏装置和系统