“分布式数据源”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果7403391个，建议您升级VIP下载更多相关专利

[发明专利]大数据分布式存储方法、装置、电子设备、存储介质-CN201911297666.7有效
发明人：董延峰 -专利权人：江苏满运软件科技有限公司
申请日： 2019-12-17 - 公布日： 2022-09-02 - 主分类号： G06F16/27 文献下载
摘要：本发明提供一种大数据分布式存储方法、装置、电子设备、存储介质，大数据分布式存储方法包括：接收第一用户于用户交互界面输入的待储存数据源及该待储存数据源的存储地址；利用storm接入所述第一用户输入的待储存数据源，并消费待储存数据源的数据，将经消费的所述待储存数据源的数据写入大数据集群的分布式文件系统；以及所述分布式文件系统根据该待储存数据源的存储地址将所写入的待储存数据源的数据储存至大数据集群中。本发明提供的方法及装置在大数据储存过程中不存在缓存，从而实现实时的大数据分布式存储。
数据分布式存储方法装置电子设备介质

[发明专利]数据同步方法、装置、设备及存储介质-CN202111399158.7在审
发明人：史鹏飞;熊承鹏;林攀学;胡建宇;陈飞 -专利权人：深信服科技股份有限公司
申请日： 2021-11-23 - 公布日： 2022-02-11 - 主分类号： G06F16/27 文献下载
摘要：本发明属于计算机领域，公开了一种数据同步方法、装置、设备及存储介质。该方法包括获取待同步数据源的数据源信息；根据数据源信息确定数据源类型；在数据源类型为分布式消息数据源时，获取待同步数据源对应的配置信息；从待同步数据源中拉取待同步数据，并根据配置信息将待同步数据写入至目标数据库由于本发明是在数据源类型为分布式消息数据源时，从待同步数据源中拉取待同步数据，并根据配置信息将待同步数据写入至目标数据库。相对于现有的分布式消息数据源只能支持流式同步即每接收到一个数据，立即作出处理的方式，本发明上述方式能够使分布式消息数据源支持批量的离线同步。
数据同步方法装置设备存储介质

[发明专利]一种分布式数据源的查询与更新方法-CN201010273362.X无效
发明人：袁立言 -专利权人：上海实方软件有限公司
申请日： 2010-09-03 - 公布日： 2012-03-21 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种分布式数据源的查询与更新方法，它是基于关系-XML双模数据库的分布式数据源查询更新的方法，针对目前数据库处理XML数据的局限性，基于关系-XML双模数据库的查询与更新接口，提供一种可处理分布式数据源的方法其利用关系-XML双模数据库的查询与更新接口，拓展数据存储的功能为可处理分布式数据源，来无缝处理关系与XML数据。该发明不必将XML转化为关系模式，同时该接口可以处理异构数据源，又进一步拓展为分布式数据源，该方法符合SQL和XQUERY等标准，从而便于计算机进行处理。
一种分布式数据源查询更新方法

[发明专利]访问分布式数据库的方法、数据源代理装置及应用服务器-CN201510851922.8在审
发明人：张科 -专利权人：深圳市金蝶友商电子商务服务有限公司
申请日： 2015-11-27 - 公布日： 2016-03-30 - 主分类号： G06F17/30 文献下载
摘要：本发明实施例公开了一种访问分布式数据库的方法、数据源代理装置及应用服务器，能够灵活动态地设置分布式数据源。本发明实施例方法包括：数据源代理接收数据库访问请求，通过数据源查询服务获取数据库访问请求对应的用户标识，再确定用户标识对应的底层数据源的标识，并返回底层数据源的标识对应的底层数据源的链接。因此，在应用服务器访问分布式数据库时，并不是显式的设置底层数据源，而是通过数据源代理进行访问，从而针对不同的用户，可以返回不同的底层数据源产生的链接，达到分布式访问的目的，从而能够灵活动态地设置数据源，
访问分布式数据库方法数据源代理装置应用服务器

[发明专利]数据集群化处理的方法、装置及设备-CN201710263207.1有效
发明人：王卉;雷中杰;樊炼;林洁;胡莉;李林;许佳;徐庆;张欣;黄璐;薛超 -专利权人：中国移动通信集团湖北有限公司;中国移动通信集团公司
申请日： 2017-04-20 - 公布日： 2021-04-23 - 主分类号： G06F9/50 文献下载
摘要：本发明实施例公开了一种数据集群化处理的方法、装置及设备。该方法包括：接收到数据源的访问请求，基于数据源的数据特性确定数据源对应的加锁类型；加锁类型为分布式锁，根据数据源的存储信息分配处理数据源的分布式服务器和处理数据源的应用进程；依据分布式服务器的加锁目录检测应用进程当前是否空闲；应用进程当前空闲，通过应用进程对数据源进行处理。本发明实施例能够降低在账务数据管理、调整，程序发布等方面的复杂度。
数据集群处理方法装置设备

[发明专利]监控数据的处理方法及装置-CN201611132449.9有效
发明人：费永军 -专利权人：上海壹账通金融科技有限公司
申请日： 2016-12-09 - 公布日： 2018-03-16 - 主分类号： G06F9/54 文献下载
摘要：本发明涉及一种监控数据的处理方法及装置。上述方法，包括采集目标数据源的监控数据；将所述监控数据写入分布式发布订阅消息系统；通过消费机从所述分布式发布订阅消息系统读取所述监控数据；使所述消费机获取所述监控数据中的目标数据源标识；使所述消费机根据所述目标数据源标识获取与所述目标数据源对应的分布式时序数据库，所述分布式时序数据库为单机版本；通过所述消费机将所述监控数据发送至所述对应的分布式时序数据库中进行存储。上述监控数据的处理方法及装置，保证了分布式时序数据库集群的稳定性及高可用性。
监控数据处理方法装置

[发明专利]数据处理方法、装置及系统-CN201611028577.9有效
发明人：李伟 -专利权人：阿里巴巴集团控股有限公司
申请日： 2016-11-18 - 公布日： 2021-04-20 - 主分类号： G06F21/62 文献下载
摘要：本方案实施例提供了一种数据处理方法、装置及系统。一方面，本方案实施例中，管理节点获取并向客户端发送指定文件的标识信息，指定文件用于存储客户端所请求的数据源在分布式系统中的存储路径和用户对数据源的操作权限，这样，客户端可以向分布式系统发送该标识信息和数据操作信息，分布式系统进而可以根据标识信息，找到数据源和用户对数据源的操作权限，根据数据操作信息和用户对数据源的操作权限，对数据源执行操作。本方案实施例提供的技术方案用以解决现有技术中分布式系统的安全性和可靠性比较低的问题。
数据处理方法装置系统

[发明专利]用于从分布式数据源中捕获变更数据以供异构目标使用的系统和方法-CN201880007751.2在审
发明人： S·瓦苏德万;L·哈严托;S·R·科尔宾 -专利权人：甲骨文国际公司
申请日： 2018-09-28 - 公布日： 2019-09-17 - 主分类号： G06F16/23 文献下载
摘要：根据实施例，本文描述的是用于从分布式数据源系统(例如分布式数据库或分布式数据流)捕获变更数据以及准备规范格式输出，以供一个或多个异构目标(例如数据库或消息队列)使用的系统和方法。变更数据捕获系统能够包括对诸如分布式源拓扑感知、初始加载、重复数据删除和恢复之类的特征的支持。本文描述的系统和方法的技术目的包括确定和向一个或多个目标计算机系统传送对分布式数据源处的数据执行的变更，该分布式数据源包括跨多个节点的大量数据。
分布式数据源变更数据异构捕获分布式数据库分布式数据流重复数据删除捕获系统多个目标分布式源格式输出目标使用数据执行拓扑感知消息队列计算机系统加载数据库传送变更恢复

[发明专利]分布式数据管理系统及其数据访问方法-CN201610195136.1在审
发明人：王浩波 -专利权人：乐视控股（北京）有限公司;乐视电子商务（北京）有限公司
申请日： 2016-03-30 - 公布日： 2016-08-24 - 主分类号： G06F17/30 文献下载
摘要：本发明提供一种分布式数据管理系统及其数据访问方法。所述分布式数据管理系统包括至少两个数据源，所述方法包括：响应于数据访问请求，获取活动数据源的信息，基于所述活动数据源处理所述数据访问请求，并且发送所述数据访问请求的处理结果；响应于数据源更新指令，将新的批量数据导入当前未被标识为活动数据源的另一数据源，并且将所述另一数据源标识为当前的活动数据源。本发明的分布式数据管理系统能够在不影响用户对系统进行数据访问的情况下，进行较高频率的数据更新，为用户提供最新的数据信息，提高用户的使用体验。
分布式数据管理系统及其数据访问方法

[发明专利]基于同构型分布式数据库一体化CRUD操控适配解析器的方法-CN201910340262.5在审
发明人：陈晴;朱洲森;梁静;苟乐怡 -专利权人：四川师范大学
申请日： 2019-04-25 - 公布日： 2019-07-26 - 主分类号： G06F16/242 文献下载
摘要：本发明公开了一种基于同构型分布式数据库一体化CRUD操控适配解析器的方法，包括以下步骤：S1、配置分布式数据库系统，该分布式数据库系统由主数据源和多个数据源节点构成；S2、通过适配解析器拦截调用方传来的字符串，解析CRUD的关联数据源和定向SQL；S3、根据解析结果获取所要连接的数据源，与对应的主数据源或数据源节点连接，定向执行相关命令；S4、将定向数据源执行的CRUD运行结果经由适配器合并规范后返回调用方本发明将获得的CRUD操作语句，经过适配解析器路由到分布式数据库系统的主数据源或其下的数据源节点，对于单个分片关键字或多个相同分片关键字的CRUD操作，可直接与对应的数据源节点相连接，有效减轻了主数据源的运行压力，缓解了主数据源的运行压力。
主数据源数据源节点解析器适配分布式数据库系统分布式数据库运行压力操控构型调用关联数据源单个分片定向数据解析结果运行结果一体化适配器数据源字符串路由语句解析拦截合并返回缓解配置

[发明专利]多数据源的分布式处理方法、装置、设备、介质和程序产品-CN202210131356.3在审
发明人：朱李悦;王毅;钟慰 -专利权人：中国工商银行股份有限公司
申请日： 2022-02-11 - 公布日： 2022-05-13 - 主分类号： G06F9/50 文献下载
摘要：本公开提供了一种多数据源的分布式处理的方法，可以应用于大数据技术领域。该多数据源的分布式处理方法包括：获取第一用户请求，所述第一用户请求包括任务代码；根据所述任务代码，采用不同的数据抽取逻辑对对应的数据源进行数据抽取，得到指定形式的待加工数据；对所述待加工数据进行分布式数据加工，得到计算结果；以及将所述计算结果写回原数据源。本公开还提供了一种多数据源的装置、设备、介质和程序产品。
多数分布式处理方法装置设备介质程序产品

[发明专利]基于分布式集群的数据同步方法以及装置-CN201810900342.7在审
发明人：刘林;胡秀松 -专利权人：菜鸟智能物流控股有限公司
申请日： 2018-08-09 - 公布日： 2020-03-06 - 主分类号： G06F16/27 文献下载
摘要：本申请公开了一种基于分布式集群的数据同步方法，包括：获取从数据源同步数据的数据同步配置；将待处理任务按照任务划分维度划分为至少一个任务分片；将所述任务分片分配到分布式集群中的节点上执行；按照所述数据同步配置从所述数据源同步执行所述任务分片所需的待同步数据所述基于分布式集群的数据同步方法，通过对待处理任务进行划分，将划分后获得的细粒度的任务分片分配到分布式集群中的节点上进行执行，更加高效的利用分布式集群的计算资源，业务响应更加及时，并在此基础上将数据源的数据同步至分布式集群，提升了数据访问的实时性。
基于分布式集群数据同步方法以及装置

[发明专利]一种分布式数据节点的相互协作方法-CN201910416099.6在审
发明人：吴毅坚;王欣;朱扬勇 -专利权人：复旦大学
申请日： 2019-05-19 - 公布日： 2019-09-06 - 主分类号： H04L29/08 文献下载
摘要：本发明属于开放数据的多数据源交互技术领域，具体为一种分布式数据节点的相互协作方法。本发明通过引入计算任务，在开放数据源外封装一个分布式任务控制服务接口，一方面允许用户编写计算任务实现数据分析处理，另一方面用户可以分布式任务控制接口实现对各数据源计算任务的控制，从而实现在保证数据源安全的前提下，进行数据共享访问，提高数据的并行处理能力，提高效率。
数据源分布式数据任务控制数据分析处理数据共享访问并行处理多数据源服务接口交互技术接口实现任务实现外封装协作开放引入安全保证

[发明专利]基于TCPDUMP和分布式消息队列实现的数据热度采集方法和系统-CN202310574610.1在审
发明人：毛肖瑶;原攀峰;陈廷梁;陈廷权 -专利权人：浙江数新网络有限公司
申请日： 2023-05-19 - 公布日： 2023-08-22 - 主分类号： H04L67/10 文献下载
摘要：本发明公开一种基于TCPDUMP和分布式消息队列实现的数据热度采集方法，属于数据库技术领域；该方法包括：创建数据源；通过TCPDUMP组件截取发送至数据源的SQL脚本并进行脚本组装，得到组装脚本；将组装脚本发送到分布式消息队列；根据分布式消息队列中的组装脚本，对数据源进行数据热度采集。本发明还公开一种基于TCPDUMP和分布式消息队列实现的数据热度采集方法。本发明保证了系统在大数据量的时候也能保持稳定运行。
基于 tcpdump 分布式消息队列实现数据热度采集方法系统

[发明专利]一种分布式模型聚合计算系统及方法-CN202110749577.2有效
发明人：王萍;周成;李辉;王瑞成;党李鹏 -专利权人：四川新网银行股份有限公司
申请日： 2021-07-02 - 公布日： 2023-06-09 - 主分类号： G06F18/2321 文献下载
摘要：本发明属于数据处理技术领域，尤其涉及一种分布式模型聚合计算模块及方法。业务模块、分布式模型聚合计算模块、决策模块三个模块组成。首先，业务模块发起调用请求。其次，分布式模型聚合计算模块对调用的模型进行计算，对于数据源相同的模型集，在分布式的聚合计算框架下先聚合模型数据源，再进行分布式计算聚合模型结果；对于数据源不同的模型集，分别进行分布式的计算，并行计算模型出参信息通过分布式的模型聚合计算系统，最大化的减少了系统交互次数，提升了模型运算的效率。
一种分布式模型聚合计算系统方法

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
下一页»
尾页
共 100000 条