[发明专利]基于消息队列和fastDFS微服务架构的异步文件导出方法及系统有效
申请号: | 202010161073.4 | 申请日: | 2020-03-10 |
公开(公告)号: | CN111405020B | 公开(公告)日: | 2023-03-31 |
发明(设计)人: | 徐士强;魏金雷;杨继伟 | 申请(专利权)人: | 山东汇贸电子口岸有限公司 |
主分类号: | H04L67/06 | 分类号: | H04L67/06;H04L67/1097;H04L9/40;G06F16/182;G06F21/62 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 孙园园 |
地址: | 250100 山东省济南市*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 消息 队列 fastdfs 微服 架构 异步 文件 导出 方法 系统 | ||
1.一种基于消息队列和fastDFS微服务架构的异步文件导出方法,其特征在于,该方法是通过认证授权模块、消息组装及推送模块、消息消费处理模块、文件异步生成及上传模块和异步下载模块完成对文件的异步生成及下载,通过消息队列完成分布式部署,进而实现各模块之间松耦合;具体如下:
S1、用户在浏览器登录,向认证授权模块的授权认证服务请求认证授权;其中,认证授权模块用于对登录用户进行授权认证,认证通过才能够对文件进行导出操作;
S2、认证授权通过后,用户选择需要导出的数据进行导出操作,消息组装及推送模块将消息自动根据业务进行区分处理,并组装消息;其中,认证授权通过后,消息组装及推送模块生成一条状态为生成中的记录,组装消息体发送到消息消费处理模块;组装消息的格式根据导出类型决定,导出类型包括直接执行sql查询数据的方式导出和通过调用接口的方式获取数据后导出;
S3、消息消费处理模块接收到组装消息后,进行逻辑处理,并异步获取到需要导出的数据集;其中,消息消费处理模块的工作过程具体如下:
S301、消息消费处理模块接收到消息后,根据获取到的报文进行解析处理;
S302、根据消息内容获取到要导出的数据集;
S303、调用文件异步生成及上传模块;
S4、文件异步生成及上传模块根据数据集生成临时文件,并上传到fastDFS文件系统中进行临时存储,存储完成后更新库中文件状态;
S5、文件生成处理完成后,页面展示下载的文件,用户通过异步下载模块直接将数据导出。
2.根据权利要求1所述的基于消息队列和fastDFS微服务架构的异步文件导出方法,其特征在于,所述步骤S5中用户通过异步下载模块直接将数据导出具体是:用户根据单独下载界面中提供的链接,直接到fastDFS文件系统中进行文件的下载。
3.一种基于消息队列和fastDFS微服务架构的异步文件导出系统,其特征在于,该系统包括,
认证授权模块,用于对登录用户进行授权认证,先进行认证,只有认证通过才能够对文件进行导出操作;其中,认证授权模块用于对登录用户进行授权认证,认证通过才能够对文件进行导出操作;
消息组装及推送模块,用于在认证通过后,生成一条状态为生成中的记录,再组装消息体发送到消息消费处理模块;其中,认证授权通过后,消息组装及推送模块生成一条状态为生成中的记录,组装消息体发送到消息消费处理模块;组装消息的格式根据导出类型决定,导出类型包括直接执行sql查询数据的方式导出和通过调用接口的方式获取数据后导出;
消息消费处理模块,用于在接收到消息后,根据获取到的报文进行解析处理,再根据消息内容获取到要导出的数据集,并调用文件异步生成及上传模块;其中,消息消费处理模块的工作过程具体如下:
S301、消息消费处理模块接收到消息后,根据获取到的报文进行解析处理;
S302、根据消息内容获取到要导出的数据集;
S303、调用文件异步生成及上传模块;
文件异步生成及上传模块,用于在MQ消息消费端接收获取到数据集后,临时生成文件,并上传到fastDFS文件系统中进行临时存储,存储完成后并更新库中文件状态;
异步下载模块,用于在文件生成处理完成后,直接将数据完成导出。
4.根据权利要求3所述的基于消息队列和fastDFS微服务架构的异步文件导出系统,其特征在于,所述异步下载模块的工作过程具体如下:
用户根据单独下载界面中提供的链接,直接到fastDFS文件系统中进行文件的下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东汇贸电子口岸有限公司,未经山东汇贸电子口岸有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010161073.4/1.html,转载请声明来源钻瓜专利网。