“海量数据存储”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果3373592个，建议您升级VIP下载更多相关专利

[发明专利]面向海量DEM数据的高精度河道洪水淹没区生成方法-CN201210244846.0有效
发明人：沈定涛;张煜;谭德宝;张治中;叶松;黄俊;芦云峰 -专利权人：长江水利委员会长江科学院
申请日： 2012-07-16 - 公布日： 2012-12-26 - 主分类号： G06Q50/06 文献下载
摘要：一种面向海量DEM数据的高精度河道洪水淹没区生成方法，其针对海量DEM数据进行条带划分，并将条带中栅格行上连续多个淹没单元进行游程压缩存储，以降低数据量，最后采用压缩单元边界追踪方法提取淹没范围，从而实现了复杂地形条件下的淹没区生成本发明将传统淹没源种子点填充方法改为栅格压缩存储和栅格边界追踪计算，使得较小的内存配置处理了较大的栅格数据量，同时避免了种子点填充法中的大量递归判断，提升了计算速度。本发明充分运用了数字地形分析和数据压缩存储技术，避免了种子填充法进行海量DEM数据淹没分析产生的问题，较好的解决了河湖复杂地形环境下的连通域分析，实现大范围、高精度河湖洪水淹没区的生成。
面向海量 dem 数据高精度河道洪水淹没生成方法

[发明专利]融合实时计算与离线计算的铁道配电网海量信息处理方法-CN201810208708.4在审
发明人：屈志坚;彭翔;周锐霖 -专利权人：华东交通大学
申请日： 2018-03-14 - 公布日： 2019-10-08 - 主分类号： G06F16/182 文献下载
摘要：本发明公开了融合实时计算与离线计算的铁道配电网海量信息处理方法，其步骤包括铁道配电网海量监测数据接入、监测数据实时处理、离线数据分析和处理结果分布式存储，铁道配电网海量监测数据接入时，在Linux操作系统的计算机集群中安装用于连接铁道配电网监测信息源的分布式发布订阅消息系统，将海量监测数据快速高效地接入分布式集群中。本发明在执行海量监测数据处理任务的时候，可根据实际处理需求选择性地对数据进行单独实时处理、单独离线数据分析或同时进行实时计算与离线计算，能满足不同场合的处理需求，提升铁道配电网监控系统的灵活性和处理效率
配电网监测数据离线计算实时计算海量信息处理处理需求离线数据实时处理配电网监控系统监测数据处理分布式存储分布式发布分布式集群计算机集群处理效率订阅消息监测信息融合分析

[发明专利]一种针对海量流式向量数据的动态聚档方法、系统及终端-CN202210641173.6在审
发明人：吴志雄;章振增;黄文峰;谢清河;于宗富 -专利权人：南威软件股份有限公司
申请日： 2022-06-07 - 公布日： 2022-10-11 - 主分类号： G06V10/762 文献下载
摘要：本发明属于数据处理技术领域，公开了一种针对海量流式向量数据的动态聚档方法、系统及终端，所述针对海量流式向量数据的动态聚档方法包括：利用Vearch在高维向量上进行距离计算，其并在流处理过程中动态自行的增加新的监控视频对象，基于增加的新的监控视频对象，对海量图像数据进行归档。本发明借助Vearch可以在高维向量上完成快速距离计算，其次系统可以支持在流处理过程中动态自行的增加新的对象，最后本方案可以极大减少向量之间的比较次数，减少系统的整体计算量、数据存储量，实时高效的对海量数据进行归档
一种针对海量向量数据动态方法系统终端

[发明专利]一种海量小文件的处理方法及系统-CN201510108811.8有效
发明人：莫德寿;张哲;雷喜青;陈意 -专利权人：深圳市连用科技有限公司
申请日： 2015-03-12 - 公布日： 2018-11-20 - 主分类号： G06F17/30 文献下载
摘要：本发明适用于数据处理技术领域，提供了一种海量小文件的处理方法及系统，所述方法包括：在文件处理功能启动后，将大文件头部结构信息以及大文件数据存储区内的小文件存储结构信息以链表的方式缓存到内存中；在检测到文件存储时，判断待存储的文件的大小是否小于预设值；若是，将所述待存储的文件合并成大文件进行存储，并更新所述内存中的链表信息。通过本发明，可有效提高海量小文件存储以及检索的效率。
一种海量文件处理方法系统

[发明专利]基于色谱分析的样品确定方法、装置、存储介质及服务器-CN202210058076.4有效
发明人：王东强;张慧 -专利权人：华谱科仪（北京）科技有限公司
申请日： 2022-01-19 - 公布日： 2022-04-08 - 主分类号： G01N30/02 文献下载
摘要：本申请实施例提供一种基于色谱分析的样品确定方法、装置、存储介质及服务器。通过在样品服务器中预先建立样品色谱数据存储集合以存储海量样品对应的色谱数据，在需要查找预设要求的样品信息时，先获取预设要求的样品对应的标准色谱数据，对标准色谱数据进行特征色谱数据识别，得到第一特征色谱数据，并进一步确认第二特征色谱数据，通过第二特征色谱数据在样品色谱数据存储集合中匹配对应的目标色谱数据，进而确定对应的样品信息，发送至查询终端。如此，在海量的色谱数据中查找到匹配的色谱数据，并以此确定到对应的样品，快速准确。
基于色谱分析样品确定方法装置存储介质服务器

[发明专利]一种基于消息队列的海量用户行为数据采集方法与系统-CN201510036709.1在审
发明人：余敬龙 -专利权人：广东能龙教育股份有限公司
申请日： 2015-01-23 - 公布日： 2015-04-29 - 主分类号： H04L12/24 文献下载
摘要：本发明公开了一种基于消息队列的海量用户行为数据采集系统，包括：日志拦截模块，用于用户行为数据的过滤及预处理；消息队列系统，用户行为数据包的中转、分发；用户行为处理器模块，用于实时用户行为数据的处理、结果反馈及原始数据的批量存储本发明提供的基于消息队列的用户行为数据采集方法与系统，把消息队列引入到海量的用户行为数据采集中，充分利用消息队列：数据传输高效、数据吞吐量大、横向扩展性好等特点用于海量的用户行为数据采集，提高了数据采集实时性及数据采集效率，特别是互联网海量的用户行为采集提供了稳定、高效及实时性好的解决方案。
一种基于消息队列海量用户行为数据采集方法系统

[发明专利]海量数据同步系统及方法-CN201110098457.7无效
发明人：植晶晶 -专利权人：阿里巴巴集团控股有限公司
申请日： 2011-04-20 - 公布日： 2012-10-24 - 主分类号： G06F17/30 文献下载
摘要：一种海量数据同步系统及方法，该同步系统包括：增量数据输入接口，从该资源系统的增量数据接口接收来自该资源系统的变化后数据的增量数据；全量数据输入接口，调用该目标系统的全量数据接口并接收来自该目标系统中的全量数据标识码；存储模块，将所接收的增量数据和全量数据标识码存储在该存储模块中；过滤器模块，基于全量数据标识码而对所述增量数据进行数据过滤，将与全量数据标识码对应的增量数据作为过滤后数据；以及数据输出接口，将所述过滤后数据作为同步数据提交至该目标系统的同步数据接口，并由该目标系统存储其中。本发明可以对海量数据进行高效、可靠、快速的同步。
海量数据同步系统方法

[发明专利]一种新型大数据存储方法-CN201911103257.9在审
发明人：冯报安;杨晶生 -专利权人：上海麦克风文化传媒有限公司
申请日： 2019-11-12 - 公布日： 2020-03-17 - 主分类号： G06F16/21 文献下载
摘要：本发明属于大数据存储技术领域，尤其是涉及一种新型大数据存储方法，包括以下步骤：选用优秀的数据库工具；编写优良的程序代码；对海量数据进行分区操作；建立广泛的索引，建立缓存机制；加大虚拟内存，分批处理；使用数据仓库和多维数据库存储；使用采样数据，进行数据挖掘，海量数据关联存储。本发明提出将数据类型分成热数据、温数据和冷数据三种，并且针对三种不同类型的数据进行分类存储，针对不同的使用场景运用不同的技术和解决方案，提升业务性能和降低计算时间以及硬件成本，并且在针对不同数据时，运用不同种类的数据库，进而能够对复杂的数据进行分类处理，有助于数据的存储和分析处理。
一种新型数据存储方法

[发明专利]采用分布式大数据架构实现图像JPEG编码的方法-CN201510238551.6在审
发明人：戴鸿君;于治楼 -专利权人：浪潮集团有限公司
申请日： 2015-05-12 - 公布日： 2015-08-19 - 主分类号： H04N19/625 文献下载
摘要：本发明公开一种采用分布式大数据架构实现图像JPEG编码的方法，涉及大数据领域，首先将海量图像数据传入分布式集群，然后对存入分布式集群的图像执行DCT基压缩编码步骤：FDCT、量化、熵编码、压缩图像数据，最后，将DCT基压缩编码步骤中各个步骤的数据存储到分布式数据库中。通过本发明，避免了传统行式数据库中读写数据缓慢，同时可实现海量图像数据的压缩，解决了传统系统对海量图像数据编码遇到的问题，实现了数据的持久化。
采用分布式数据架构实现图像 jpeg 编码方法

[发明专利]磁光云一体化光盘海量存储阵列机-CN201410476298.3有效
发明人：王昱人 -专利权人：深圳市爱思拓信息存储技术有限公司
申请日： 2014-09-17 - 公布日： 2017-04-05 - 主分类号： G11B33/04 文献下载
摘要：本发明公开了一种磁光云一体化光盘海量存储阵列机，包括与云存储网络中心连接的云存储服务器，还包括与云存储服务器连接的电脑主机，所述的电脑主机还与用于读取或存储数据的光驱组件连接；还包括与电脑主机连接的光电控制箱本发明采用与电脑主机连接的光盘库提供海量的存储空间；电脑主机与云存储服务器的连接，光盘库为云存储服务器提供海量的数据存储空间。
磁光云一体化光盘海量存储阵列

[实用新型]磁光云一体化光盘海量存储阵列机-CN201420534416.7有效
发明人：王昱人 -专利权人：深圳市爱思拓信息存储技术有限公司
申请日： 2014-09-17 - 公布日： 2015-01-28 - 主分类号： G11B33/04 文献下载
摘要：本实用新型公开了一种磁光云一体化光盘海量存储阵列机，包括与云存储网络中心连接的云存储服务器，还包括与云存储服务器连接的电脑主机，所述的电脑主机还与用于读取或存储数据的光驱组件连接；还包括与电脑主机连接的光电控制箱本实用新型采用与电脑主机连接的光盘库提供海量的存储空间；电脑主机与云存储服务器的连接，光盘库为云存储服务器提供海量的数据存储空间。
磁光云一体化光盘海量存储阵列

[发明专利]一种优化集群存储网络资源配置的方法-CN201110260455.3有效
发明人：刘希猛;葛峰 -专利权人：浪潮电子信息产业股份有限公司
申请日： 2011-09-05 - 公布日： 2011-12-21 - 主分类号： H04L29/08 文献下载
摘要：本发明涉及一种计算机应用技术,具体地说是一种优化集群存储网络资源配置的方法。应用于集群网络存储系统的开发测试、应用部署中。集群网络存储系统中,针对某些高性能数据处理领域,需要经常存储、访问海量数据文件,同时运行并行程序对海量数据进行处理,如:高能物理实验中的数据处理程序、流媒体文件的存储与访问等。集群网络存储系统的特点是底层存储设备节点多、网络数据访问量大，目前部署集群网络存储系统时，需综合考虑系统的需求容量、性能、规模等参数。同时，开发测试过程中，合理分配节点数量、合理利用网络带宽是降低集群网络存储系统成本的重要途径。
一种优化集群存储网络资源配置方法

[实用新型]中央空调的海量实时数据服务平台-CN201520686743.9有效
发明人：钱志强 -专利权人：深圳万城节能股份有限公司
申请日： 2015-09-07 - 公布日： 2016-03-02 - 主分类号： G05B19/042 文献下载
摘要：本实用新型提供一种中央空调的海量实时数据服务平台。所述中央空调的海量实时数据服务平台包括依次相连的实时数据发送模块、实时数据存储与检索模块以及实时数据接收模块；所述实时数据发送模块包括订阅管理单元、数据整合与返回单元；所述实时数据存储与检索模块包括数据缓存存储单元、数据高效检索单元；所述实时数据接收模块包括CIM建模单元、数据运算单元以及数据接收接口单元；所述实时数据存储与检索模块中的数据高效检索单元与所述实时数据发送模块中的数据整合与返回单元连接；所述实时数据接收模块中的CIM建模单元与所述实时数据发送模块中的订阅管理单元连接。
中央空调海量实时数据服务平台

[发明专利]存储系统的有序列举数据方法、装置、设备及存储介质-CN202310575885.7在审
发明人：冯晓明;刘超 -专利权人：济南浪潮数据技术有限公司
申请日： 2023-05-19 - 公布日： 2023-08-08 - 主分类号： G06F16/22 文献下载
摘要：本发明公开了一种存储系统的有序列举数据方法、装置、设备及计算机可读存储介质，涉及数据存储技术领域，该方法包括：获取存储系统的当前列举分片序列；根据当前列举分片序列，从目标分片中读取目标未列举数据；若当前列举分片序列中存在未列举数据，则根据当前列举分片序列中的未列举数据，更新当前列举分片序列；若当前列举分片序列中不存在未列举数据，则确定存储系统的数据列举完成；本发明能够在存储系统的数据读取过程中对数据进行有序排列，方便客户使用，不需要将海量数据读取出来之后再进行排序整理，从而能够在海量数据的情况下，以较少的内存开销和计算开销，实现存储系统的有序列举数据，提升用户体验。
存储系统有序列举数据方法装置设备存储介质

[发明专利]一种电力信息大数据的采集和存储方法-CN201510109843.X有效
发明人：杨建华;白顺明;魏庆海;高春成;肖达强;刘定宜;樊爱军;陶力;代勇;方印;史述红;王蕾;李守保;王清波;丁鹏;袁明珠;任东明;刘杰;赵显;谭翔;汪涛;袁晓鹏;张雪 -专利权人：华中电网有限公司;国家电网公司;北京科东电力控制系统有限责任公司
申请日： 2015-03-13 - 公布日： 2018-11-06 - 主分类号： G06F17/30 文献下载
摘要：本发明属于电力信息大数据采集存储领域。涉及一种电力信息大数据采集存储方法，解决电力信息大数据采集和存储过程的问题。所述方法包括数据采集、数据存储管理以及数据分析三个过程。本发明的有益效果在于：本发明提出了一种电力信息大数据的采集存储方法，能够很好的解决由于电力用户基数大，信息量大，业务系统响应速度慢，用户等待耗时长的问题。同时，针对基与电力数据的交易系统产生的海量信息，本方法比传统数据库能更好地完成数据的扩展和分析功能。并且能够采集、存储并处理海量网络媒体数据，更好地了解行业动态，在操作过程中，本方法的存储方法具有高效地查询功能，在数据量激增的同时能够快速完成检索。
一种电力信息数据采集存储方法