“海量数据”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果2470981个，建议您升级VIP下载更多相关专利

[发明专利]基于云计算的海量数据访问处理系统-CN201310260309.X在审
发明人：姜啸宇;朱烨东 -专利权人：北京中科金财科技股份有限公司
申请日： 2013-06-27 - 公布日： 2013-10-23 - 主分类号： G06F17/30 文献下载
摘要：本发明提出了一种基于云计算的海量数据访问处理系统，包括：海量数据采集模块；海量数据智能加工处理模块；海量数据存储管理模块；海量数据服务模块；海量数据处理过程监控模块。所述海量数据处理模块从各类海量数据源收集海量数据到数据处理中心，对所收集的各类海量数据进行格式检查和标准化处理。本发明的有益效果如下：可有效解决海量数据加工处理、海量数据共享服务、监控系统与海量数据处理平台的协作问题，解决了统一数据访问、数据一致性保障和数据安全管理等核心问题，同时针对海量数据的访问从性能方面进行了优化；实现海量数据处理与移动电子商务的无缝融合。
基于计算海量数据访问处理系统

[发明专利]一种海量数据分析系统及方法-CN201910347462.3在审
发明人：潘锋 -专利权人：广州宏算信息科技有限公司
申请日： 2019-04-28 - 公布日： 2019-08-09 - 主分类号： G06F16/25 文献下载
摘要：本发明公开了一种海量数据分析系统及方法，涉及海量数据技术领域。包括海量数据采集单元以及海量数据加工处理单元，海量数据采集单元的输出端电连接有海量数据加工处理单元的输入端，海量数据采集单元的输出端电连接有海量数据加工处理单元内部海量数据获取模块的输入端。该海量数据分析系统及方法，可有效解决海量数据加工处理、海量数据共享服务与海量数据处理平台的协作问题，解决了统一数据访问、数据一致性保障和数据安全管理等核心问题，同时针对海量数据的访问从性能方面进行了优化，可实现对海量数据进行备份、入库、提取以及结构化管理等操作，大大提高了工作效率，而且投入成本较低，具有很好的市场推广价值。
海量数据海量数据采集海量数据分析加工处理单元输出端电连接输入端海量数据处理数据安全管理数据共享服务结构化管理数据一致性工作效率核心问题获取模块市场推广数据访问性能方面有效解决备份入库协作优化访问统一

[发明专利]一种海量矢量切片数据云存储方法及系统-CN201610939884.6有效
发明人：马潇;王景朝;费香泽;王宪 -专利权人：中国电力科学研究院;国家电网公司;国网安徽省电力公司
申请日： 2016-10-25 - 公布日： 2022-04-01 - 主分类号： G06F16/182 文献下载
摘要：本发明公开了一种用于海量矢量切片数据的云存储方法，所述方法包括：建立分布式文件系统目录树文件；建立与分布式文件系统目录树对应的所有元数据节点；将分布式文件系统中同一级目录下的海量矢量切片数据进行聚合，生成海量矢量切片数据包；将所述海量矢量切片数据包存储于所述元数据节点中；为所述海量矢量切片数据建立索引，所述海量矢量切片数据通过索引建立关联，形成网状结构的海量矢量切片数据的数据索引表；所述索引表用于记录所述海量矢量切片数据在所述海量矢量切片数据包中的路径；通过所述海量矢量切片数据包索引表提供所述海量矢量切片数据索引服务。
一种海量矢量切片数据存储方法系统

[发明专利]海量数据精准实时线损全量统计的方法、系统及存储介质-CN202210728321.8在审
发明人：章姝俊;赵扉;胡程平;叶炯;陈鼎;薛龙江 -专利权人：国网浙江省电力有限公司嘉兴供电公司;国网浙江省电力有限公司平湖市供电公司
申请日： 2022-06-24 - 公布日： 2022-12-30 - 主分类号： G06F16/2455 文献下载
摘要：本发明涉及配电网多维数据融合的技术领域，特别是涉及一种海量数据精准实时线损全量统计的方法、系统及存储介质，其能够实现对海量数据的分段实时计算，实现对全链条的线损穿透分析；包括以下步骤：S1、建立海量数据计算模型：响应于海量数据表的统计需求，通过海量数据表相应的查询专用语言建立海量数据计算模型；S2、获取离线统计数据和实时统计数据：海量数据计算模型将查询专用语言映射为海量数据表的字段，并对海量数据表的字段进行离线统计和实时统计，分别得到离线统计数据和实时统计数据；S3、将离线统计数据和实时统计数据进行汇总，得到海量数据全量统计结果；S4、将得到的海量数据全量数据统计结果进行数据存储落库。
海量数据精准实时线损全量统计方法系统存储介质

[发明专利]快速实现海量数据准实时全量统计的方法、装置及系统-CN201810507709.9有效
发明人：王野 -专利权人：杭州有赞科技有限公司
申请日： 2018-05-24 - 公布日： 2021-01-05 - 主分类号： G06F16/2458 文献下载
摘要：本发明公开了一种快速实现海量数据准实时全量统计的方法，包括以下步骤：响应于海量数据表的统计需求，通过海量数据表相应的查询专用语言建立海量数据计算模型；海量数据计算模型将查询专用语言映射为海量数据表的字段，并对海量数据表的字段进行离线统计和实时统计，分别得到离线统计数据和实时统计数据；将离线统计数据和实时统计数据进行汇总，得到海量数据全量统计结果。本发明对海量数据进行实时统计和离线统计，能规避离线海量数据计算的性能问题，另外由于离线数据可以按需求随时重建，本发明还增加了数据统计的容错性和自恢复性；即能够灵活的承接各种统计需求，历史数据的统计和错误数据的清洗及高性能的保证
快速实现海量数据实时统计方法装置系统

[发明专利]一种数据库海量数据比对的方法-CN200710077553.7有效
发明人：朱文琦;郑杰 -专利权人：中兴通讯股份有限公司
申请日： 2007-11-29 - 公布日： 2008-08-06 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种数据库海量数据比对的方法，应用于数据库领域，其包括步骤：从数据库中导出表数据文件；对所述表数据文件进行分片排序，生成海量数据排序文件；将所述海量数据排序文件中的主表海量数据排序文件与备表海量数据排序文件进行比对本发明方法只需遍历一次主、备表海量数据排列文件就能得到比对结果，并且能够高效地完成海量数据的主、备数据库之间的数据检查，从而大大提高了数据库间海量数据的比对效率。
一种数据库海量数据方法

[发明专利]一种多源海量数据处理系统及方法-CN201810074821.8有效
发明人：周康;余河金;夏晨俊;刘利民;王平喜;徐长军;郑新标;焦国云 -专利权人：朗新科技集团股份有限公司
申请日： 2018-01-25 - 公布日： 2020-10-16 - 主分类号： G06F16/25 文献下载
摘要：本发明实施例提供一种多源海量数据处理系统及方法，所述系统包括计算模块和任务管理模块，其中：所述计算模块用于接收多源海量数据，并调取数据接收服务解析所述多源海量数据；所述多源海量数据是根据预先在所述任务管理模块中配置的任务所产生的开源数据；所述计算模块若接收到外界选择的预设模型的确认动作，将解析后的多源海量数据输入所述预设模型，以供分析所述预设模型的输出结果。本发明实施例提供的多源海量数据处理系统及方法，通过调取数据接收服务解析多源海量数据，将解析后的多源海量数据输入预设模型，并根据预设模型的输出结果分析多源海量数据，不仅使企业系统高效兼容多源海量数据，还能够有效利用该多源海量数据进行数据分析
一种海量数据处理系统方法

[发明专利]一种海量点数据聚合渲染方法、装置、设备及存储介质-CN201910597869.1有效
发明人：陈迟;陈奇毅;刘伟;张少文 -专利权人：佳都新太科技股份有限公司
申请日： 2019-07-04 - 公布日： 2021-04-20 - 主分类号： G06F16/29 文献下载
摘要：本申请实施例公开了一种海量点数据聚合渲染方法、装置、设备及存储介质。所述方法包括：创建海量聚合点数据索引，所述海量聚合点数据索引根据地图比例尺的不同级别创建；对海量点数据进行多层点数据聚合，所述多层点数据聚合对应所述海量聚合点数据索引进行分层构建聚合点数据；基于客户端数据加载请求，利用对应的所述海量聚合点数据索引查询相应的聚合点数据并返回至所述客户端进行聚合点数据渲染。本申请实施例提供的技术方案，根据比例尺的不同级别创建海量聚合点数据索引，基于不同的索引对海量点数据进行分层点数据聚合，使得海量点数据能够根据不同的地图比例尺级别进行高效渲染。
一种海量数据聚合渲染方法装置设备存储介质

[发明专利]一种海量不确定XML数据存储方法-CN201910644221.5在审
发明人：刘健;龚蕾蕾;张蕾 -专利权人：哈尔滨工业大学
申请日： 2019-07-17 - 公布日： 2019-10-01 - 主分类号： G06F16/81 文献下载
摘要：本发明公开了一种海量不确定XML数据存储方法，包括以下步骤：A、抽取海量不确定XML数据；B、构建基于列数据库的海量不确定XML数据表示模型；C、实现基于不确定列数据库的海量不确定XML数据存储；本发明通过识别不确定XML文档中数据的多粒度不确定性，研究基于列数据库的不确定XML数据表示方法；本发明研究面向海量不确定XML数据的存储模型，包括研究模式(XMLDTD/Schema)已知情况下的海量不确定XML数据存储方法，以及模式未知情况下的海量不确定XML数据存储方法，本发明开发面向海量不确定XML数据的表示和映射存储方法，从而解决海量不确定XML数据难于管理的问题。
存储数据库表示模型不确定性存储模型映射存储构建研究抽取开发管理

[发明专利]一种海量数据的清洗方法和系统-CN201610959853.7有效
发明人：张素香;庞九凤;高德荃;张东;曹津平;李莉敏;李国春;王乾坤;徐慧明 -专利权人：国家电网公司信息通信分公司;国家电网公司
申请日： 2016-11-03 - 公布日： 2019-10-11 - 主分类号： G06F16/215 文献下载
摘要：本发明公开一种海量数据的清洗方法和系统，涉及数据处理技术领域，以提高数据清洗的速度和效率。所述海量数据的清洗方法包括：根据预设数据块个数N，将映射归约并行计算框架内映射函数的个数设置为N，将归约函数的个数设为1；利用映射归约并行计算框架内N个映射函数将海量数据分成N个数据块，对每个数据块中的数据进行清洗，得到多个清洗的数据块；利用归约函数整合多个清洗的数据块，得到整合数据；对整合数据进行清洗，完成海量数据的清洗。所述海量数据的清洗系统包括上述海量数据的清洗方法。本发明提供的海量数据的清洗方法用于海量数据清洗。
一种海量数据清洗方法系统

[发明专利]一种海量并发性雷达数据存储方法-CN201910812960.0在审
发明人：王家勇;吴磊;胡斌;李鑫;郭强;张国林;宋小亮 -专利权人：安徽四创电子股份有限公司
申请日： 2019-08-30 - 公布日： 2020-01-24 - 主分类号： G06F16/25 文献下载
摘要：本发明涉及一种海量并发性雷达数据存储方法，包括如下步骤：将雷达设备前端与服务端Netty数据接收服务之间建立自定义协议通信，进行海量数据通信；由雷达设备前端处采集并获取到海量并发性雷达数据；通过服务端Netty数据接收服务将采集到的海量并发性雷达数据推送至Kafka的消息队列中；通过数据采集和抽取方法获取到所述Kafka的消息队列中的海量并发性雷达数据，并将海量并发性雷达数据转存到ElasticSearch的数据库中本发明能够将海量的并发性雷达数据连续的存储至数据库，提高了对海量的并发性雷达数据的处理能力。
雷达数据海量并发雷达设备数据接收消息队列并发性服务端数据库存储海量数据通信采集自定义协议数据采集前端处推送转存抽取服务通信

[发明专利]一种实现海量数据离线分析的方法-CN201410814611.X在审
发明人：潘森;周爱华;朱力鹏;饶伟;黄进;蔡皓 -专利权人：国家电网公司;中国电力科学研究院;国网山东省电力公司
申请日： 2014-12-24 - 公布日： 2016-07-20 - 主分类号： G06F17/30 文献下载
摘要：本发明提出一种实现海量数据离线分析的方法，所述方法包括(1)采集海量电力数据；(2)对海量电力数据预处理；(3)离线分析海量电力数据；(4)分析结果展示。通过本发明海量数据离线分析方法，可实现不同时空、不同业务、不同场景的电力数据资源的集中存储，统一管理，共享共用；通过对所存储的海量历史数据的分析和挖掘为管理层进行电力决策提供科学合理的依据。
一种实现海量数据离线分析方法

[发明专利]一种全脑数据的存储方法、系统、电子设备及存储介质-CN202110581589.9在审
发明人：张越一;周洋;孙晓艳 -专利权人：中国科学技术大学
申请日： 2021-05-26 - 公布日： 2021-08-13 - 主分类号： G06F16/182 文献下载
摘要：本公开提供了一种全脑数据的存储方法，包括：获取原始数据集、标注数据集及标签数据集；将各数据集进行预处理，分别得到海量的原始图片数据、标注图片数据及标签图片数据；将海量的原始图片数据、标注图片数据及标签图片数据进行下采样分级处理，得到多个不同级别的海量原始图片数据、海量标注图片数据及海量标签图片数据；将多个不同级别的海量原始图片数据、海量标注图片数据及海量标签图片数据分别存储至分布式存储系统目录树中，包括：发起数据存储请求，并根据节点信息选取一主数据存储节点；将各图片数据依次存储至该主数据存储节点和其他数据存储节点，并将存储结果输出至客户端。本公开还提供了一种全脑数据的存储系统、电子设备及介质。
一种数据存储方法系统电子设备介质

[发明专利]一种海量数据智能处理系统-CN201310261572.0在审
发明人：姜啸宇;朱烨东 -专利权人：北京中科金财科技股份有限公司
申请日： 2013-06-27 - 公布日： 2013-10-23 - 主分类号： G06F17/30 文献下载
摘要：本发明提出了一种海量数据智能处理系统，解决了现有技术中无法对海量数据进行有效处理的问题。该系统包括存储装置，与存储装置连接；数据存储应用装置，用于存储系统海量数据应用服务，与存储装置连接；数据集群装置，用于管理存储的海量数据，并对存储的海量数据进行转储或清除操作，与存储装置连接；公共管理应用集群装置，用于与外部用户进行信息交换、控制海量数据中转，并为海量数据的传输提供接口，与存储装置连接。本发明所述的海量数据智能处理系统，能够有效的实现外部用户与系统的交流，并且在有效交流的同时进行有效的数据处理。
一种海量数据智能处理系统

[发明专利]一种处理海量数据的方法及系统-CN200710030253.3无效
发明人：徐蜀中;胡建华 -专利权人：广东威创日新电子有限公司
申请日： 2007-09-14 - 公布日： 2008-02-20 - 主分类号： H04L1/00 文献下载
摘要：本发明提供一种处理海量数据的方法及系统，当读取海量数据文件时，按照预定的数值范围读取数据，所述数值范围为每次读取的数据的范围；将每次读取的数据进行保存，并记录所述每次读取的数据的定位信息；当客户端发送指令获取所存储的海量数据文件时，根据所述指令中的标识信息查找所需要的海量数据文件，按照预定规则传输所述海量数据文件中的数据。通过本发明可以实现海量数据的异地传输。
一种处理海量数据方法系统

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
下一页»
尾页
共 100000 条