“分布式共享存储”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果6208764个，建议您升级VIP下载更多相关专利

[发明专利]基于内存计算的可定制多模式大数据处理系统-CN201610333546.8在审
发明人：冯伟;王金华 -专利权人：中国电子科技集团公司第三十二研究所
申请日： 2016-05-18 - 公布日： 2016-10-12 - 主分类号： G06F17/30 文献下载
摘要：本发明提供了一种基于内存计算的可定制多模式大数据处理系统，包括：数据存储层模块、基于内存的数据共享和管理层模块、基于内存计算的通用执行框架层模块以及访问接口层模块；其中，采用了数据的分布式内存抽象机制、位置感知性调度机制、分布式混合列式存储机制。本发明构建了海量数据存储，提供面向集群并发计算的内存数据管理和共享框架，并提供高效、按需定制的大数据多模式通用处理框架，支持批处理、实时数据流计算，对数据的灵活分析与深度利用提供支撑。
基于内存计算定制模式数据处理系统

[发明专利]一种分布式爬虫框架采集并处理数据的方法-CN202211170649.9在审
发明人：王文清 -专利权人：上海橘涞金融信息服务有限公司
申请日： 2022-09-23 - 公布日： 2023-03-07 - 主分类号： G06F16/951 文献下载
摘要：本发明涉及一种分布式爬虫框架采集并处理数据的方法，包括以下步骤：在分布式主机爬虫中设一个本地的爬取队列Queue，爬取队列Queue用于存储新的Request，随后Request被Scheduler调度，之后Request交给Downloader执行爬取；先进行共享爬取队列，然后在多台主机上同时运行爬虫任务协同爬取；在共享爬取队列中，Scheduler扩展为多个，Downloader扩展为多个，而爬取队列其通过使用代理分布式代理以及构建多台服务器主机进行匿名的部署爬虫框架，可以更好的解决网站的限流问题，从而更好的解决数据入库的效率问题。
一种分布式爬虫框架采集处理数据方法

[发明专利]路测数据处理方法、装置、服务器及存储介质-CN202011186145.7在审
发明人：向阳;刘亮;林昀 -专利权人：北京红山信息科技研究院有限公司
申请日： 2020-10-29 - 公布日： 2021-01-12 - 主分类号： G06F16/182 文献下载
摘要：本发明实施例公开了一种路测数据处理方法、装置、服务器及存储介质，所述方法包括：获取用户通过数据导入接口导入的原始路测数据；确定所述原始路测数据的数据描述信息；根据所述数据描述信息将所述原始路测数据分区存储至分布式文件系统本发明实施例将路测数据存储至分布式文件系统，用户通过访问分布式文件系统即可获取对应的路测数据，实现了路测数据的共享，使路测数据资源最大化利用；同时也降低了路测数据本地存储的成本，减少路测数据丢失的风险。
数据处理方法装置服务器存储介质

[发明专利]数据处理方法和装置-CN201610057344.5在审
发明人：郑壮杰 -专利权人：博雅网络游戏开发（深圳）有限公司
申请日： 2016-01-27 - 公布日： 2017-08-04 - 主分类号： G06F17/30 文献下载
摘要：该方法包括以下步骤对内存分布式文件系统及Spark集群进行配置，将内存分布式文件系统及Spark集群进行关联；启动Spark集群，并对Spark集群初始化；从内存分布式文件系统中读取源数据；对所述源数据进行预处理，得到预处理后的数据；将所述预处理后的数据进行分析得到数据分析结果；将所述数据分析结果存储到所述内存分布式文件系统中。上述数据处理方法和装置，从内存分布式文件系统中读取源数据，为外部读取设备提供内存级速度的跨集群文件共享服务，提高了数据读取效率，且该内存分布式文件系统将数据存储和数据处理分隔开，减少了数据处理中垃圾回收次数和时间
数据处理方法装置

[发明专利]一种分布式文件系统的高度可靠的元数据服务系统-CN202211574984.5在审
发明人：梁雄伟;赵旭;马学睿;徐琛;高一迈 -专利权人：丝路信息港云计算科技有限公司
申请日： 2022-12-08 - 公布日： 2023-03-07 - 主分类号： G06F16/182 文献下载
摘要：本发明涉及分布式存储技术领域，具体涉及一种分布式文件系统的高度可靠的元数据服务系统，包括活动服务器、共享存储池、多个备用服务器、多激活备用策略模块和全局恢复模块，活动服务器对元数据进行管理和操作，并生成日志；共享存储池将活动服务器的元数据和日志同步到每一备用服务器；备用服务器存储元数据和日志；多激活备用策略模块在活动服务器崩溃时，从多个备用服务器中选择目标服务器对元数据进行管理和操作；全局恢复模块将活动服务器和多个备用服务器恢复一致状态解决了现有的分布式文件系统缺乏提供元数据可靠性的有效机制的问题。
一种分布式文件系统高度可靠数据服务系统

[发明专利]一种基于NFS共享的LDAP域用户ACL权限控制方法及装置-CN202010570163.9有效
发明人：吴昊 -专利权人：苏州浪潮智能科技有限公司
申请日： 2020-06-21 - 公布日： 2022-07-19 - 主分类号： G06F16/182 文献下载
摘要：本发明提出了一种基于NFS共享的LDAP域用户ACL权限控制方法，应用于分布式存储系统中，包括：根据LDAP域的参数信息将集群以及客户端加入到LDAP域中；LDAP域中的集群开启NFS服务；创建LDAP域中的集群的用户目录；开启ACL服务，并存储ACL配置信息；获取集群环境，检测集群环境是否支持预设协议；设置并校验LDAP域用户ACL权限，本发明还提出了一种基于NFS共享的LDAP域用户ACL权限控制，有效的提高了存储系统的健壮性、易用性和功能的丰富性，增强分布式存储产品的竞争力。
一种基于 nfs 共享 ldap 用户 acl 权限控制方法装置

[发明专利]一种分布式集群节点访问的方法及装置-CN201710607021.3在审
发明人：臧林劼 -专利权人：郑州云海信息技术有限公司
申请日： 2017-07-24 - 公布日： 2017-11-28 - 主分类号： H04L29/08 文献下载
摘要：本发明公开了一种分布式集群节点访问的方法，在分布式集群环境通过CTDB管理HTTP服务的分布式集群，当利用一个节点的HTTP服务共享集群的存储服务时，节点出现故障或停机时，可以利用CTDB监控到节点的故障情况，同时CTDB服务可以自动将当前访问的节点切换到另一个没有问题的节点上，使用户可以继续正常的访问，而不会感觉到停机，因此实现了分布式集群的高可用性。因此利用CTDB进行监控管理HTTP服务，大大提高了分布式环境中HTTP服务的应用效率和高可用性，使得分布式集群更加简便、高效。本发明还提供一种分布式集群节点访问的装置，同样可以实现上述技术效果。
一种分布式集群节点访问方法装置

[发明专利]一种分布式大田气象远程数据监测系统-CN201610201800.9有效
发明人：陈昕;卢韬;刘天麒 -专利权人：中国农业大学
申请日： 2016-03-31 - 公布日： 2018-06-19 - 主分类号： G01D21/02 文献下载
摘要：本发明涉及一种分布式大田气象远程数据监测系统。多个分布式大田气象监测远方终端通过通信模块与mServer数据中心服务器连接，mServer数据中心服务器与气象监测中心主机相连；所述分布式大田气象监测远方终端包括数据采集模块、数据存储转换模块、身份识别系统和报警器本发明利用通信网络建立多个分布式大田气象监测远方终端与气象监测中心主机之间的通信，利用现成的通信网络，实现对大田环境及时监测、及时预警，信息稳定、可靠、快速、实时。本发明能够对分布式大田气象监测远方终端的身份识别，实现集成管理，提供对分布式大田气象监测远方终端的预警和决策，同时实现不同分布式大田气象监测远方终端之间的数据与智慧共享。
气象监测大田远方终端数据中心服务器远程数据监测中心主机预警身份识别系统数据采集模块通信网络建立报警器集成管理身份识别数据存储通信模块通信网络信息稳定转换模块气象共享监测通信决策

[发明专利]共享文件的访问方法、电子设备及计算机可读存储介质-CN202111564826.7在审
发明人：陈仲涛 -专利权人：北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司
申请日： 2021-12-20 - 公布日： 2022-03-25 - 主分类号： G06F16/16 文献下载
摘要：本申请涉及一种共享文件的访问方法、电子设备及计算机可读存储介质，属于计算机技术领域。该方法应用于宿主机，宿主机中挂载有指定虚拟机的虚拟文件系统，宿主机与分布式存储系统的文件服务接口通信，文件服务接口用于读取存储于分布式存储系统中的数据，该数据为挂载虚拟文件系统时指定虚拟机的虚拟磁盘中存储的数据方法包括宿主机接收针对虚拟文件系统的读操作请求，若虚拟文件系统挂载后没有文件修改时，宿主机通过文件服务接口从分布式存储系统读取与读操作请求相关的数据。该方法可以绕过虚拟机直接读取分布式存储数据，降低了虚拟机被攻击的风险，同时，不会消耗虚拟机的内存资源，提高了数据读取的性能。
共享文件访问方法电子设备计算机可读存储介质

[发明专利]区块链元数据存储系统及其存储方法与检索方法-CN201610930562.5有效
发明人：王宝兴 -专利权人：中金云金融（北京）大数据科技股份有限公司
申请日： 2016-10-31 - 公布日： 2022-04-15 - 主分类号： H04L67/5651 文献下载
摘要：本发明公开了一种区块链元数据存储系统及其存储及检索方法，其包括：各自连接互联网且通过区块链构造成分布式共享网络的至少一个主节点及若干个副节点。主节点包括：数据接收模块，其用于接收来自外部的源数据；分布式存储模块，其与数据接收模块相连接，用于将源数据进行分布式存储；降维保全模块，其与分布式存储模块相连接，用于将源数据进行降维操作以形成元数据后，再对元数据进行保全操作以形成数据指纹；以及数据存储模块，其与降维保全模块相连接，用于将数据指纹写入区块链中，利用区块链的共识过程进行全网发布。副节点包括：数据共识模块，其用于接收及存储区块链发布的数据指纹以完成区块链的共识过程。
区块数据存储系统及其存储方法检索

[发明专利]一种分布式数据库客户端高效智能存储数据实现方法-CN202310500599.4在审
发明人：俞钺;任鲲鹏;王浩之 -专利权人：上海沄熹科技有限公司
申请日： 2023-05-06 - 公布日： 2023-08-11 - 主分类号： G06F16/22 文献下载
摘要：本发明提供一种分布式数据库客户端高效智能存储数据实现方法，属于计算机科学种的分布式数据库领域，本发明针对客户端到服务端进行大批量数据通信效率的问题，采用共享内存的方式，对服务端的多种数据进行快速，高效的取出同时客户端可以把用户输入的不同类型的数据进行自定义的转换，通过共享内存存入数据，以此实现了客户端到服务端高性能、高可靠性、高并发、高效存储管理的交互通信。
一种分布式数据库客户端高效智能存储数据实现方法

[发明专利]一种基于星际文件系统的分布式协同查询处理系统-CN202111538821.7在审
发明人：徐跃东;丁博文 -专利权人：复旦大学
申请日： 2021-12-15 - 公布日： 2022-04-12 - 主分类号： G06F16/242 文献下载
摘要：本发明属于分布式数据处理技术领域，具体为一种基于星际文件系统的分布式协同查询处理系统。本发明系统为一个Minerva，由三个协作组件组成：数据管理工具Qri、分布式查询引擎Drill和存储后端IPFS；Minerva的每个用户运行一个本地节点，诸多Minerva节点形成一个对等网络；在本地存储中具有特定数据集的用户是该数据集的提供者，接受网络中其他用户对该数据集的查询；Minerva支持对数据分布式的读操作和写操作；Drill支持自定义SQL函数；本发明系统优点：数据集的服务、检索、更新和分发以分布式进行，存储成本低；拥有相同数据集的用户通过协作共享计算资源来加速处理
一种基于星际文件系统分布式协同查询处理系统

[发明专利]一种分布式文件系统的元数据信息同步方法及系统-CN202011517958.X有效
发明人：陆居福;雷宝龙;郭海龙;葛以踊;陈鹏;彭晖;刘彤;孙卫芳;高原;孙云枫;王勇;管荑;马强;李慧聪;马晓红;耿玉杰;李娜 -专利权人：国电南瑞科技股份有限公司;国电南瑞南京控制系统有限公司;南瑞集团有限公司;国网电力科学研究院有限公司;国网山东省电力公司;国网山东省电力公司电力科学研究院;国家电网有限公司
申请日： 2020-12-21 - 公布日： 2022-09-30 - 主分类号： G06F16/178 文献下载
摘要：本发明公开了一种分布式文件系统的元数据信息同步方法及系统，包括主节点、备节点和分布式协调管理器。本发明巧妙的利用协调管理器，让其充当共享存储系统的作用，将元数据信息同步分为全量同步和增量同步，全量同步只在满足备节点首次启动或者新增或者主备节点的版本号差值大于分布式协调管理器上所存储的元数据操作日志数时发生
一种分布式文件系统数据信息同步方法系统

[发明专利]一种分类分级健身健康大数据共享系统及方法-CN202111609681.8有效
发明人：李明慧;薛静锋;王勇;刘振岩;张继;周志雄 -专利权人：北京理工大学;首都体育学院
申请日： 2021-12-24 - 公布日： 2023-06-27 - 主分类号： H04L67/12 文献下载
摘要：本发明提供一种分类分级健身健康大数据共享系统及方法，所述系统包括用户管理模块、数据管理模块、访问控制模块、数据共享模块、区块链、分布式文件系统；所述用户管理模块用于管理用户；所述数据管理模块用于根据数据敏感程度等级，采用不同加密等级进行加密；所述访问控制模块管理数据拥有者产生的个人数据的访问策略，同时实现所述个人数据的访问控制，所述数据共享模块用于对所述数据访问者进行权限验证；所述区块链接用于存储访问控制策略及作为访问控制服务器；所述分布式文件系统用于存储加密后的个人数据。本发明的系统基于区块链进行了从数据存储到数据共享的构建与优化，在保证数据分类分级隐私保护的同时实现了访问控制记录的可审计。
一种分类分级健身健康数据共享系统方法

[发明专利]一种分布式存储系统及其文件共享方法-CN201210246680.6有效
发明人：周可;李春花;李坦;刘相文;陈杰;申爱花 -专利权人：华中科技大学
申请日： 2012-07-17 - 公布日： 2012-12-12 - 主分类号： H04L29/06 文献下载
摘要：一种分布式存储系统及其文件共享方法，属于计算机存储和信息安全技术领域，解决现有安全存储系统密钥管理复杂、加密文件共享开销过大的问题。本发明的分布式存储系统，包括客户端、服务器、安全管理器和密钥服务器，建立在支持POSIX接口的操作系统上，客户端通过局域网分别连接安全管理器和服务器，服务器通过局域网分别连接安全管理器和密钥服务器。本发明设置专用的密钥服务器管理密钥，安全管理器只管理文件密钥号，避免将文件密钥直接或间接暴露给共享用户带来的安全缺陷和巨大的文件重加密开销，提高了系统的安全性和整体性能，有效解决了密钥管理复杂、加密文件共享负载过大的问题，适用于构建大规模高性能的安全存储系统。
一种分布式存储系统及其文件共享方法