“小文件”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果227294个，建议您升级VIP下载更多相关专利

[发明专利]一种小文件快速检查方法、装置、电子设备及存储介质-CN202111537229.5在审
发明人：胡艳军;左慧 -专利权人：北京鼎普科技股份有限公司
申请日： 2021-12-15 - 公布日： 2022-03-22 - 主分类号： G06F21/80 文献下载
摘要：本申请公开了一种小文件快速检查方法、装置、电子设备及存储介质。该方法首先遍历目标检查目录下的所有文件，对遍历到的每个文件进行文件大小查询得到至少一个小文件，记录存放所有小文件的数据块号；在遍历完所有文件后，对存放小文件的数据块进行排序，按磁盘物理扇区的顺序读取所有小文件的数据块中的数据到内存；对内存中的数据进行检查，最后，存在违规数据时，通过数据块号查找该数据块对应的文件名，并进行报警。可以看出，本申请通过对大量存放小文件的数据块进行聚合、排序，按物理扇区的顺序读取数据，以减少磁盘寻道时间，提高文件检查效率。
一种文件快速检查方法装置电子设备存储介质

[发明专利]一种小文件存储方法、装置及计算机设备-CN202011573934.6在审
发明人：苏国忠;潘家铭;吴火城 -专利权人：华录光存储研究院（大连）有限公司
申请日： 2020-12-25 - 公布日： 2021-03-30 - 主分类号： G06F16/13 文献下载
摘要：本发明公开了一种小文件存储方法、装置及计算机设备，其中，该方法包括如下步骤：对待刻录的多个小文件进行分组，得到多个文件段，每一个文件段包括至少2个小文件；分别对每一个文件段中的小文件进行合并，得到多个合并文件；加载预设刻录脚本将所述多个合并文件刻录到刻录设备中。本发明实施例通过将至少2个小文件合并为一个合并文件进行刻录，减少了索引节点元数据，减少了存储操作，提高了文件存储速度，也提高了文件系统处理效率以及运行速度。
一种文件存储方法装置计算机设备

[发明专利]数据传输方法及数据传输装置-CN201610474349.8在审
发明人：魏泽涛 -专利权人：乐视控股（北京）有限公司;乐视网信息技术（北京）股份有限公司
申请日： 2016-06-24 - 公布日： 2016-09-21 - 主分类号： H04L29/06 文献下载
摘要：本发明属于通信及电子技术领域，公开了一种数据传输方法及数据传输系统，包括：对待传输的小文件进行顺序编号；将编号后的所述待传输的小文件按照预置协议格式进行组装；通过数据传输通道发送组装后生成的文件；根据接收的确认信息，获取未接收到的小文件编号，重新通过数据传输通道发送未接收到的小文件。本发明通过将待传输的小文件进行编号，按照预置协议格式进行组装后发送至接收方设备，接收方设备根据接收到的文件按照预置协议格式进行拆分后得到小文件，解决了现有技术在文件传输过程中频繁建立连接的问题，同时将小文件进行顺序编号后用动态拼接方式进行传输
数据传输方法装置

[发明专利]一种端到端小文件归集传输和存储的一体化系统及方法-CN202211172818.2有效
发明人：张颖 -专利权人：创云融达信息技术（天津）股份有限公司
申请日： 2022-09-26 - 公布日： 2023-03-24 - 主分类号： G06F16/172 文献下载
摘要：本发明公开了一种端到端小文件归集传输和存储的一体化系统及方法，其涉及小文件保存保护和备份技术领域。该系统包括：依次通讯连接的客户端归集系统、跨网络传输复制系统和目标端存储系统。本发明通过在笔记本、台式机、应用服务器的源端的开始将需要传输的小文件归集重构为大文件，同时在传输和最后的保存存储过程中都保持大文件形式，实现端到端的传输、保存、备份，整体过程无需重新拆解为小文件，理想条件下对小文件传输、保存、备份的效率可提升10倍以上，大幅度缩短传输保存的时间，且在目标端存储保存的归集重构的大文件在保持小文件原格式实体数据内容的同时可用于小文件在线读取访问。
一种端到端小文件传输存储一体化系统方法

[发明专利]海量小文件分级存储方法及系统-CN201410290165.7在审
发明人：毛祺;谢朝阳;童晓渝;李学慧;丁星;武静 -专利权人：中电科华云信息技术有限公司
申请日： 2014-06-24 - 公布日： 2014-10-29 - 主分类号： G06F12/08 文献下载
摘要：本发明提供了一种海量小文件分级存储方法，包括如下创建一级存储池和二级存储池；合并海量小文件形成一个大文件；存储所述大文件至一级存储池，当所述大文件在设定时间内未进行读写操作，则迁移该大文件至二级存储池。当客户端请求访问某小文件时，首先判断该小文件所在的大文件存放的存储池；若所述大文件存放于一级存储池，则通过索引文件截取出该小文件并发送给客户端；若所述大文件存放于二级存储池，则首先通过索引文件解码出该小文件发送给客户端并把所述大文件迁移至一级存储池本发明提高了分布式文件系统处理海量小文件的效率，减少了存储空间；本发明通过分级存储进一步降低了存储成本。
海量文件分级存储方法系统

[发明专利]大文件分片串并行上传方法及系统-CN202211106397.3在审
发明人：杨骁鹏 -专利权人：方正株式（武汉）科技开发有限公司
申请日： 2022-09-12 - 公布日： 2023-02-03 - 主分类号： H04L67/06 文献下载
摘要：本发明公开了一种大文件分片串并行上传方法及系统，其方法包括以下步骤：控制客户端将待上传大文件切割成多个小文件切片；开启多个Promise处理链，每个Promise处理链同时各发送一个异步AJAX请求，每个异步AJAX请求从文件切片队列中各获取一个小文件切片，并同时并行上传获取的小文件切片至服务器、以完成一轮并行上传，重复每一轮并行上传、直至文件切片队列中的所有小文件切片上传完成；当一轮并行上传成功后，新一轮的每个异步AJAX请求从文件切片队列中串行获取下一个小文件切片；控制服务器对所有小文件进行切片合并，获取合并大文件；因此既保证多个小文件切片上传处理之间并发执行，又能保证这些处理各自完成后的重发、补充下一切片是串行的
文件分片并行上传方法系统

[发明专利]一种基于NoSQL的海量航空物流小文件存储结构及其存取方法-CN201610481858.3在审
发明人：丁建立;郑峰弓;李永华;李国;王怀超 -专利权人：中国民航大学
申请日： 2016-06-23 - 公布日： 2016-09-28 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种基于NoSQL的海量航空物流小文件存储结构及其存取方法，其中基于NoSQL的海量航空物流小文件存储结构包括数据缓存区、数据活跃区和数据永久区；基于NoSQL的海量航空物流小文件存储结构的文件存取方法包括文件存储、文件访问和文件永久化处理三个过程；该基于NoSQL的海量航空物流小文件存储结构及其存取方法设计多级存储机制，并采用文件的预取机制，有效提高了小文件的存取效率，显著地降低了集群NameNode的内存消耗
一种基于 nosql 海量航空物流文件存储结构及其存取方法

[发明专利]一种文件处理方法、装置、设备及介质-CN202210727055.7在审
发明人：高矗;马彬 -专利权人：济南浪潮数据技术有限公司
申请日： 2022-06-24 - 公布日： 2022-10-14 - 主分类号： G06F16/16 文献下载
摘要：本申请公开了一种文件处理方法、装置、设备及介质，涉及计算机技术领域，包括：基于预设的聚合属性参数将若干个小文件聚合为大文件；向分布式文件系统中的名称节点发送文件写入请求，并在接收到名称节点返回的数据节点信息后，将大文件写入相应的数据节点；基于目标小文件的聚合属性参数向名称节点发送文件读取请求，并在接收到名称节点返回的数据节点信息后，向相应的数据节点发送文件读取请求，以便在接收到数据节点返回的目标小文件后，将目标小文件保存至本地可见，本申请将若干个小文件聚合为大文件，使得分布式文件系统中的名称节点无需对每个小文件的元数据信息进行保存，只需要对聚合后大文件的属性参数进行保存，减少了内存使用。
一种文件处理方法装置设备介质

[发明专利]基于HADOOP的小文件存储方法及其装置-CN202110129271.7在审
发明人：洪金磊;扈晓 -专利权人：西藏宁算科技集团有限公司
申请日： 2021-01-29 - 公布日： 2021-05-28 - 主分类号： G06F16/172 文献下载
摘要：本申请公开了一种基于HADOOP的小文件存储方法及其装置，包括以下步骤：步骤S100：分析待上传文件的类型和字节数；步骤S200：在服务器上设置临时存储区，判断临时存储区内小文件队列的总字节数是否大于128MB；步骤S300：通过NameNode在Hadoop系统各数据块中根据文件类型命名多个文件目录，通过NameNode在Hadoop系统数据块中获取分配空间位置，上传合并的多个小文件队列时根据各小文件类型，分别归并到预设分类文件目录下。该方法通过在一个hdfs文件中按一定的规则放入多个小文件，改善了小文件存储的读写效率慢和空间占用大的问题。
基于 hadoop 文件存储方法及其装置

[发明专利]一种海量非结构化数据文件分布式颗粒化的存储方法-CN202010368335.4在审
发明人：鲁建华;李耀;田骏;石龙 -专利权人：武汉众邦银行股份有限公司
申请日： 2020-04-30 - 公布日： 2020-07-14 - 主分类号： G06F16/182 文献下载
摘要：本发明涉及数据存储技术领域，具体的提供了一种海量非结构化数据文件分布式颗粒化的存储方法。主旨在于解决解决现有分布式存在如存在分割后的部分数据丢失，则会造成整个文件无法读取。主要方案包括，将需要存储的数据文件按照固定大小切割成N等份小文件，并记录数据文件的每个切割点；将切割后的颗粒化小文件拷贝成Y副本，分散存储至服务器集群中，并记录每个颗粒化小文件在服务器集群中的位置；将每个颗粒化小文件在服务器集群中的位置、数据文件的每个切割点信息汇总形成存储信息元数据，存储信息元数据提供快速索引；将每个颗粒化小文件根据步骤1中记录的切割点进行拼接，如当前节点的颗粒化小文件丢失，则由下一个切割点的小文件补位。
一种海量结构数据文件分布式颗粒存储方法

[发明专利]分布式文件系统及其小文件访问方法-CN201310289242.2有效
发明人：邹同亮;缪敬 -专利权人：南京中兴软件有限责任公司
申请日： 2013-07-10 - 公布日： 2018-07-06 - 主分类号： G06F3/06 文献下载
摘要：本发明公开了一种分布式文件系统及其小文件访问方法。本发明的分布式文件系统小文件访问方法包括：定义文件访问预处理接口；当接收到文件访问指令时，根据该文件访问指令的类型调用对应的文件访问预处理接口获取文件访问预处理信息；调用与所述文件预处理接口对应的标准文件访问处理接口根据所述预处理信息进行访问处理本发明的分布式文件系统及其小文件访问方法能够提升件系统小文件访问性能。
小文件分布式文件系统访问文件访问指令预处理接口预处理信息访问处理调用文件预处理标准文件定义文件访问性能获取文件文件访问提升件

[发明专利]解决针对磁盘空间不足导致升级失败的软件升级方法-CN201711193219.8在审
发明人：郑才君 -专利权人：四川长虹电器股份有限公司
申请日： 2017-11-24 - 公布日： 2018-03-20 - 主分类号： G06F9/445 文献下载
摘要：本发明解决了设备在解压升级包的过程中，升级包和解压后的升级文件大小之和很容易超过系统可用空间，一旦磁盘空间有限，就会出现解压失败导致系统软件升级不成功的问题，提出了一种解决针对磁盘空间不足导致升级失败的软件升级方法，其技术方案可概括为对制作好的升级文件进行切割，切割成多个小文件，同时对切割后的小文件进行编号；对切割后的多个小文件整体打包压缩，生成最终的升级包；将升级包中的第一个小文件提取出来；按照当前升级小文件的偏移地址，使用提取出来的小文件进行升级；一直到完成剩余小文件的升级，从而完成整个系统的升级。
解决针对磁盘空间不足导致升级失败软件方法

[发明专利]一种云存储中小文件的合并方法及装置-CN201710352406.X在审
发明人：任洪亮 -专利权人：郑州云海信息技术有限公司
申请日： 2017-05-18 - 公布日： 2017-09-15 - 主分类号： G06F9/50 文献下载
摘要：本发明公开了一种云存储中小文件的合并方法及装置，该方法包括接收SFQ发送的队列满信号；通过系统负载预测算法计算系统的负载；判断负载是否小于第一阈值；若否，则将当前时刻的SFQ存储的小文件的索引号存储至对应的一个BQ；若是，则合并SFQ存储的索引号对应的小文件，或合并SFQ和全部BQ各自存储的索引号对应的小文件；本发明通过当负载小于第一阈值时，合并SFQ存储的索引号对应的小文件，或合并SFQ和全部BQ各自存储的索引号对应的小文件，可以在系统负载不高的情况下，利用序列文件技术将SFQ或每个BQ存储的全部索引号各自对应的小文件合并成一个大文件，实现了系统的负载均衡并提高了系统性能。
一种存储中小文件合并方法装置

[发明专利]一种小文件的合并方法、装置、设备及可读存储介质-CN201810331806.7在审
发明人：王鑫 -专利权人：郑州云海信息技术有限公司
申请日： 2018-04-13 - 公布日： 2018-09-28 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种小文件的合并方法，当获取的小文件的数量达到预设的第一阈值时，可以通过判断系统的负载值是否小于预设的负载阈值来判断系统的工作状态。当系统的负载值小于负载阈值时，意味着系统当前执行的业务并不会消耗很多资源，此时整个系统还有余力来将获取的小文件进行合并，此时将获取的小文件合并并不会对系统中正在执行的业务造成影响。通过对系统负载值大小的判断可以有效避免在合并小文件时对系统中正在执行的业务造成影响。本发明还公开了一种小文件的合并装置、一种小文件的合并设备及一种计算机可读存储介质，同样具有上述有益效果。
小文件合并判断系统阈值时预设计算机可读存储介质可读存储介质合并设备合并装置系统负载消耗

[发明专利]一种大文件烧录的方法及相关装置-CN201210574589.7无效
发明人：黎国强 -专利权人：深圳瑞高信息技术有限公司
申请日： 2012-12-26 - 公布日： 2013-04-17 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种大文件烧录的方法，包括：包括：将待传输的大文件分割为多个小文件，所述多个小文件的数据长度之和为所述大文件的数据长度；将所述小文件传送给客户机，以通过所述客户机对所述小文件进行文件烧录。采用本发明，具有提升文件传输、烧录的速度，使得大文件的烧录变得更方便、快捷的优点。
一种文件方法相关装置