“海量文件”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果240632个，建议您升级VIP下载更多相关专利

[发明专利]一种海量教育文件关联存储方法-CN201810496005.6在审
发明人：曹晟;毕丙伟;邹杰成;王靖;梅亚双;陈泽东 -专利权人：电子科技大学
申请日： 2018-05-22 - 公布日： 2018-10-16 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种海量教育文件关联存储方法，包括四个部分，分别是海量教育文件的归并、海量教育文件关联方法中局部索引确定、海量教育文件的缓存与预取和海量教育文件碎片的整理。本发明包括针对数量大、关联多、类型广的教育资源小文件的存储步骤，可有效提升存储空间的利用率，方便易用且成本更低，对海量教育文件的关联存储领域具有充分性、必要性和高效性，可广泛应用于海量小文件存储领域。
文件关联教育存储缓存海量小文件存储步骤存储空间存储领域关联存储教育资源局部索引文件碎片充分性高效性小文件预取归并关联应用

[发明专利]一种数据库海量数据比对的方法-CN200710077553.7有效
发明人：朱文琦;郑杰 -专利权人：中兴通讯股份有限公司
申请日： 2007-11-29 - 公布日： 2008-08-06 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种数据库海量数据比对的方法，应用于数据库领域，其包括步骤：从数据库中导出表数据文件；对所述表数据文件进行分片排序，生成海量数据排序文件；将所述海量数据排序文件中的主表海量数据排序文件与备表海量数据排序文件进行比对，生成表异常记录文件。本发明方法只需遍历一次主、备表海量数据排列文件就能得到比对结果，并且能够高效地完成海量数据的主、备数据库之间的数据检查，从而大大提高了数据库间海量数据的比对效率。
一种数据库海量数据方法

[发明专利]海量文件防盗链和装置-CN201610857714.3有效
发明人：庄一嵘;陈戈;梁洁;薛沛林;李江崴;王朝晖 -专利权人：中国电信股份有限公司
申请日： 2016-09-28 - 公布日： 2020-09-08 - 主分类号： H04L29/08 文献下载
摘要：本发明公开一种海量文件防盗链和装置。该方法包括：获取海量目标文件的统一资源定位符URL；根据海量目标文件的URL生成特征向量值；根据所述特征向量值生成令牌Token值，以便海量文件URL使用Token值进行生成和验证。本发明通过将海量文件URL路径按照一定规则进行“投影”，将海量的文件路径投影到特定向量值上，从而有效解决了生成一个token值服务海量文件验证下载的技术问题，提高了Token认证效率。
海量文件防盗装置

[发明专利]存储方法及系统-CN201510971664.7在审
发明人：谭祥爽;王慧 -专利权人：曙光信息产业（北京）有限公司
申请日： 2015-12-22 - 公布日： 2016-06-01 - 主分类号： G06F17/30 文献下载
摘要：本发明提出了一种存储方法及系统，该存储方法用于存储海量遥感影像，包括：接收海量遥感影像文件；根据四叉树索引，将海量遥感影像文件分割为多个子遥感影像文件并记录子遥感影像文件对应的第一元数据信息；存储多个子遥感影像文件以及第一元数据信息本发明基于四叉树索引将海量遥感影像文件分割成多个小文件，并将多个小文件进行存储，从而实现了对海量遥感影像文件的存储与管理，同时大大提高了对海量遥感影像文件的查询效率以及对局部影像的定位能力。
存储方法系统

[发明专利]海量小文件的分布式存储方法和系统-CN201810918747.3有效
发明人：唐鹏;谢彬;解维;居晓清;张楠;侯亮 -专利权人：华东计算技术研究所（中国电子科技集团公司第三十二研究所）
申请日： 2018-08-13 - 公布日： 2020-07-24 - 主分类号： G06F16/182 文献下载
摘要：本发明提供海量小文件的分布式存储方法和系统，包括将物理磁盘通过逻辑分区形成多个虚拟磁盘；根据海量小文件的文件命名规则进行分类，创建目录索引树；根据文件命名规则解析所存储的海量小文件的文件名，获取其在目录索引树中的存储位置，存储海量小文件，对应的存储目录记为原始目录，并对海量小文件进行冗余存储，对应的存储目录记为冗余目录；当出现所述原始目录、所述冗余目录两者中的文件数据不一致时，触发数据同步与恢复操作。本发明针对海量小文件的分布式存储，在存储大量小文件时通过建立索引及文件名定位，实现在海量数据中迅速定位信息，在可靠性上利用数据冗余来保证，机制简单，容错性强，在保证正确性的同时减少元数据存储空间。
海量文件分布式存储方法系统

[发明专利]一种海量文件的存储方法及系统-CN200610061328.X有效
发明人：余祥鑫;杨海松;程凯;朱静轩 -专利权人：腾讯科技（深圳）有限公司
申请日： 2006-06-23 - 公布日： 2007-11-28 - 主分类号： G06F17/30 文献下载
摘要：本发明适用于数据处理领域，提供了一种海量文件的存储方法及系统。所述方法包括以下步骤：将所述海量文件的文件相关控制信息组织成以文件对象为存储单元连接起来的第一层链表；将所述海量文件的数据块相关控制信息组织成以数据块对象为存储单元连接起来的第二层链表；将所述海量文件的文件服务器相关控制信息组织成以文件服务器对象为存储单元连接起来的第三层链表；所述第一层链表、第二层链表和第三层链表以层递的形式关联为三层链表式数据存储结构，与所述海量文件的数据块形成映射关系。本发明通过构建一个海量文件存储系统，并运用海量文件存储方法，从而在实现海量文件存储的同时提高了搜索引擎对海量文件进行各项操作的执行效率。
一种海量文件存储方法系统

[发明专利]对海量数据文件进行传输处理的装置及方法-CN200910242363.5无效
发明人：吴绵顺;王涛;钱锋;孙雨辰;佘俊胜 -专利权人：中国工商银行股份有限公司
申请日： 2009-12-09 - 公布日： 2010-06-02 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种对海量数据文件进行传输处理的装置，包括代理客户端、代理服务器和核心主机，其中：代理客户端用于收集海量数据文件，并将业务处理请求和收集的海量数据文件传输给代理服务器；代理服务器用于接收代理客户端发送过来的业务处理请求和海量数据文件，对客户端发送的业务请求进行分类和解析，向核心主机发起海量数据文件处理请求，并且接收处理结果，将结果反馈给代理客户端；核心主机用于接收代理服务器发起的海量数据文件处理请求，对接收的海量数据文件进行批量处理本发明公开了一种对海量数据文件进行传输处理的方法。利用本发明，解决了目前对海量数据文件进行传输处理时效率低的问题。
海量数据文件进行传输处理装置方法

[实用新型]对海量数据文件进行传输处理的装置-CN200920277781.3有效
发明人：吴绵顺;王涛;钱锋;孙雨辰;佘俊胜 -专利权人：中国工商银行股份有限公司
申请日： 2009-12-09 - 公布日： 2010-09-22 - 主分类号： H04L29/08 文献下载
摘要：本实用新型公开了一种对海量数据文件进行传输处理的装置，包括代理客户端、代理服务器和核心主机，其中：代理客户端用于收集海量数据文件，并将业务处理请求和收集的海量数据文件传输给代理服务器；代理服务器用于接收代理客户端发送过来的业务处理请求和海量数据文件，对客户端发送的业务请求进行分类和解析，向核心主机发起海量数据文件处理请求，并且接收处理结果，将结果反馈给代理客户端；核心主机用于接收代理服务器发起的海量数据文件处理请求，对接收的海量数据文件进行批量处理利用本实用新型，解决了目前对海量数据文件进行传输处理时效率低的问题。
海量数据文件进行传输处理装置

[发明专利]一种海量矢量切片数据云存储方法及系统-CN201610939884.6有效
发明人：马潇;王景朝;费香泽;王宪 -专利权人：中国电力科学研究院;国家电网公司;国网安徽省电力公司
申请日： 2016-10-25 - 公布日： 2022-04-01 - 主分类号： G06F16/182 文献下载
摘要：本发明公开了一种用于海量矢量切片数据的云存储方法，所述方法包括：建立分布式文件系统目录树文件；建立与分布式文件系统目录树对应的所有元数据节点；将分布式文件系统中同一级目录下的海量矢量切片数据进行聚合，生成海量矢量切片数据包；将所述海量矢量切片数据包存储于所述元数据节点中；为所述海量矢量切片数据建立索引，所述海量矢量切片数据通过索引建立关联，形成网状结构的海量矢量切片数据的数据索引表；所述索引表用于记录所述海量矢量切片数据在所述海量矢量切片数据包中的路径；通过所述海量矢量切片数据包索引表提供所述海量矢量切片数据索引服务。
一种海量矢量切片数据存储方法系统

[发明专利]一种海量数据的比对方法及系统-CN201710390393.5有效
发明人：温小根 -专利权人：北京思特奇信息技术股份有限公司
申请日： 2017-05-27 - 公布日： 2020-10-02 - 主分类号： G06F16/2458 文献下载
摘要：本发明涉及一种海量数据的比对方法及系统，该方法包括以下步骤：获取待比对的海量数据文件；根据预存的快速排序算法对所述海量数据文件进行排序处理，得到多个子数据文件；对多个所述子数据文件进行数据的一致性比对。本发明提供的一种海量数据的比对方法及系统，通过将海量数据文件分成多个子数据文件，分别对多个子数据文件进行比对，有效的解决了目前单一机器I/O有限，无法进行多线程比对的现象，可以提高数据的比对效率。
一种海量数据方法系统

[发明专利]一种处理海量数据的方法及系统-CN200710030253.3无效
发明人：徐蜀中;胡建华 -专利权人：广东威创日新电子有限公司
申请日： 2007-09-14 - 公布日： 2008-02-20 - 主分类号： H04L1/00 文献下载
摘要：本发明提供一种处理海量数据的方法及系统，当读取海量数据文件时，按照预定的数值范围读取数据，所述数值范围为每次读取的数据的范围；将每次读取的数据进行保存，并记录所述每次读取的数据的定位信息；当客户端发送指令获取所存储的海量数据文件时，根据所述指令中的标识信息查找所需要的海量数据文件，按照预定规则传输所述海量数据文件中的数据。通过本发明可以实现海量数据的异地传输。
一种处理海量数据方法系统

[发明专利]一种基于NoSQL的海量航空物流小文件存储结构及其存取方法-CN201610481858.3在审
发明人：丁建立;郑峰弓;李永华;李国;王怀超 -专利权人：中国民航大学
申请日： 2016-06-23 - 公布日： 2016-09-28 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种基于NoSQL的海量航空物流小文件存储结构及其存取方法，其中基于NoSQL的海量航空物流小文件存储结构包括数据缓存区、数据活跃区和数据永久区；基于NoSQL的海量航空物流小文件存储结构的文件存取方法包括文件存储、文件访问和文件永久化处理三个过程；该基于NoSQL的海量航空物流小文件存储结构及其存取方法设计多级存储机制，并采用文件的预取机制，有效提高了小文件的存取效率，显著地降低了集群NameNode的内存消耗
一种基于 nosql 海量航空物流文件存储结构及其存取方法

[发明专利]一种基于主从分布式文件系统的海量小文件存储方法-CN201310009182.4有效
发明人：王蕾;何连跃;徐叶;李姗姗;戴华东;吴庆波;丁滟;黄辰林;付松龄 -专利权人：中国人民解放军国防科学技术大学
申请日： 2013-01-10 - 公布日： 2013-04-03 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种基于主从分布式文件系统的海量小文件存储方法，目的是解决主从分布式文件系统存储海量小文件产生的问题。技术方案是先部署并初始化海量小文件存储系统，然后客户端的SmallFileAPI根据从键盘接受的指令对小文件进行创建或读取。系统创建小文件时，SmallFileAPI根据从客户端获得的小文件路径新建小文件的数据文件，并写入小文件数据，同时在数据结点上创建小文件索引；系统读取小文件时，根据小文件路径获取其父目录对应的数据结点信息，并向其中任一数据结点发送索引请求，最后根据索引信息从数据文件中读取小文件数据。采用本发明可以解决海量小文件存储元数据庞大的问题，提高海量小文件存储系统写效率，且可保证系统的可靠性。
一种基于主从分布式文件系统海量文件存储方法

[发明专利]海量小文件备份方法与云存储网关-CN201410143295.8在审
发明人：王海燚;区洪辉;杨柳;庄一嵘 -专利权人：中国电信股份有限公司
申请日： 2014-04-09 - 公布日： 2015-10-14 - 主分类号： G06F17/30 文献下载
摘要：本公开涉及一种海量小文件备份方法与云存储网关。该方法包括自用户接口接收用户待上传的文件；对用户待上传的文件进行分析，判断待上传的文件是否满足预先设定的海量小文件合并策略；如果满足，则对这些待上传的文件进行合并，并根据这些待上传文件建立索引文件；将合并后的文件上传至云存储本公开提升了海量小文件的备份效率。
海量文件备份方法存储网关

[发明专利]基于流水线架构的海量文件指导型预取并行处理加速方法-CN201310202556.4有效
发明人：刘轶;刘弢;师明;王庆全;高飞 -专利权人：北京航空航天大学
申请日： 2013-05-28 - 公布日： 2013-08-28 - 主分类号： G06F9/38 文献下载
摘要：本发明公开了一种基于流水线架构的海量文件指导型预取并行处理加速方法，该加速方法包括应用程序依据海量文件的预取信息，使用进程从外部存储器提取预取文件到内存缓冲区的步骤；进程对预取文件进行分阶段计算的步骤；本发明的加速方法基于流水线架构，采用指导型预取对海量文件进行提前处理，并且将海量文件的计算过程分为多个阶段，使其在多个阶段并行进行，提高了系统的执行效率。在数据预取阶段，本发明采用了指导型预取，将海量文件的预取行为置于应用程序的控制之下，使其更准确、更有预见性地进行预取，从而提高了海量文件预取和处理的效率。
基于流水线架构海量文件指导型预取并行处理加速方法

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
下一页»
尾页
共 100000 条