“大文件”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果227294个，建议您升级VIP下载更多相关专利

[发明专利]一种基于Hadoop的海量小文件处理方法和设备-CN202010313667.2在审
发明人：谢翔;王光勤 -专利权人：北京京安佳新技术有限公司
申请日： 2020-04-20 - 公布日： 2020-08-14 - 主分类号： G06F16/13 文献下载
摘要：本发明公开了一种基于Hadoop的海量小文件处理方法和设备，该方法包括：根据文件合并请求和预设合并路径获取与文件合并请求对应的大文件和索引文件，所述文件合并请求是在所述预设合并路径中小文件的数量达到预设的阈值时触发的；根据所述小文件和所述大文件确定所述小文件在所述索引文件中的索引信息，根据所述小文件的预设压缩方式确定所述小文件在所述大文件中的压缩信息；根据所述索引信息和所述压缩信息对所述小文件进行合并，通过本申请的技术方案，能够简化文件合并过程以及提高处理小文件的检索效率。
一种基于 hadoop 海量文件处理方法设备

[发明专利]一种基于分段的哈夫曼动态压缩及解压大文件的方法-CN202010492510.0在审
发明人：程敏;何文强;鲍康胜;樊高雁;谢飞;储修杰 -专利权人：合肥师范学院;合肥市第六中学
申请日： 2020-06-03 - 公布日： 2020-08-07 - 主分类号： H03M7/40 文献下载
摘要：本发明公开了一种基于分段的哈夫曼动态压缩及解压大文件的方法，涉及文件压缩处理技术领域，该方法针对较大文件进行压缩传输时传统静态和动态哈夫曼编码算法压缩耗时都较长的技术问题，通过将文件拆分，在不影响哈夫曼树构建的情况下分段输出编码后数据该方法相比较现有技术，能够明显减少静态和动态哈夫曼编码压缩大文件时耗时过长的技术问题。
一种基于分段哈夫曼动态压缩解压文件方法

[发明专利]分布式文件系统的数据管理方法和装置-CN201510980463.3有效
发明人：蔡俊 -专利权人：深信服科技股份有限公司
申请日： 2015-12-23 - 公布日： 2019-03-26 - 主分类号： G06F16/182 文献下载
摘要：本发明提出了一种分布式文件系统的数据管理方法，该方法包括：接收文件创建请求，获取请求创建的文件信息；根据文件信息确定文件的大小类别；若文件为小文件，则在本地文件系统中为小文件分配空间；若文件为大文件，则将大文件进行拆分，并为拆分后的子文件创建逻辑卷以存储子文件，记录子文件对应的逻辑卷信息，将记录的逻辑卷信息存储到本地文件系统。通过只将小文件数据和大文件的元数据信息存储在本地文件系统，其他文件数据存储在逻辑卷中，这样不仅避免了单个文件突破单个本地文件系统的问题，当需要重启时，由于本地文件系统自检的数据量较小，缩短了校验的时间。
分布式文件系统数据管理方法装置

[发明专利]基于数据特征码的大文件比对方法以及比对系统-CN201610106195.7有效
发明人：张工厂 -专利权人：中国银联股份有限公司
申请日： 2016-02-26 - 公布日： 2019-08-13 - 主分类号： G06F16/215 文献下载
摘要：本发明涉及基于数据特征码的大文件比对方法及其比对系统。本发明的方法包括下述步骤：特征码提取比对步骤，对大文件提取数据特征码，按照所述数据特征码生成特征码文件，比对所述特征码文件是否一致；文件拆分步骤，在所述特征码文件的比对结果为一致的情况下，基于上述特征码文件将所述大文件进行拆分以生成拆分后的N个子文件；子文件比对步骤，并发对所述N个子文件进行比对；以及结果合并步骤，将所述子文件比对步骤的比对结果进行合并。
基于数据特征文件方法以及系统

[发明专利]一种文件创建和访问的方法及其系统-CN201110239019.8无效
发明人：张克东;王羲桀;江少明 -专利权人：深圳市快播科技有限公司
申请日： 2011-08-19 - 公布日： 2013-03-06 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种文件创建和访问的方法及其系统，其中文件创建的方法，包括以下步骤：创建第一文件，第一文件用于存储待下载文件；获取待下载文件的末尾数据；判断待下载文件是否为大文件，若否，则将待下载文件依序写入第一文件；若待下载文件为大文件，则创建临时文件，并将末尾数据写入临时文件，再顺序下载待下载文件到第一文件，在下载到末尾数据时，可直接合并临时文件中的数据，可同时删除临时文件。本发明在创建大文件的过程中，可以快速访问该文件，减少用户等待的时间。
一种文件创建访问方法及其系统

[发明专利]一种泵出测井方式的大文件回放算法及系统、装置-CN202110959006.1在审
发明人：李纪祥;曾耀祖;王旭;张兰;张静;冯艳萍;白步平;姜启书;吴立峰 -专利权人：河北环鼎石油设备有限责任公司
申请日： 2021-08-20 - 公布日： 2021-11-30 - 主分类号： G06F16/245 文献下载
摘要：本发明提供一种泵出测井方式的大文件回放算法及系统、装置，所述大文件回放算法包括以下步骤：利用数据字典原理，将原仪器记录文件拆分为两部分：数据字典文件、索引文件；所述索引文件替代所述原仪器记录文件与地面记录文件参与时深匹配的运算；根据所述索引文件的索引从所述数据字典文件中将测井数据抽出参与生成测井曲线数据的运算。本发明大文件回放算法与传统算法相比至少节省了几百倍的内存占用率，不但极大地提升了回放算法的速度，还解决了原有算法导致的闪退问题，提升了软件稳定性。
一种测井方式文件回放算法系统装置

[发明专利]一种基于FTP协议实现超大文件多线程断点上传的方法-CN201310347968.7无效
发明人：吴一民 -专利权人：华南理工大学
申请日： 2013-08-09 - 公布日： 2013-12-11 - 主分类号： H04L29/08 文献下载
摘要：本发明公开了一种基于FTP协议实现超大文件多线程断点上传的方法，包括下述步骤：S1、FTP客户端建立多线程连接，实现文件的多线程上传；S2、将文件划分成多个块，分配给不同的线程上传，当某个线程上传完一个文件块后，再分配新的文件块给该线程；S3、利用多线程并发上传每个文件块尚未上传的部分，避免了再次上传已传输的数据部分的操作；S4、FTP客户端另外建立一个线程，专门用于实时记录临时配置文件信息。本发明适用于超大文件的FTP上传服务，通过多线程并发上传的方法，能够有效缩短上传超大文件到FTP服务器所需的时间；通过断点上传的方法，避免再次上传已传输的数据部分，减少了传输量，进一步节省了上传超大文件到
一种基于 ftp 协议实现超大文件多线程断点上传方法

[发明专利]一种用于实时通讯的大数据可靠传输方法-CN202110041905.3有效
发明人：孔福;周杰;孙林;马光远;张金涛;胡乐乐 -专利权人：北京机电工程总体设计部
申请日： 2021-01-13 - 公布日： 2023-03-21 - 主分类号： H04L67/06 文献下载
摘要：该方法主要针对需要在实时通讯环境下传输文件时，各已知方法无法同时保证交互简单、传输可靠、速度快和传输超大文件的问题。通过建立用于文件传输的交互机制，传输质量保障机制、文件传输交互协议，采用实时校验，快速反馈方式，既保证了文件传输的正确性，又保证了文件传输的效率，具备大文件传输和并行传输优点。本方法交互简单，易于实现，适用广泛，满足有操作系统和无操作系统运行环境下的大文件的快速传输需求。
一种用于实时通讯数据可靠传输方法

[发明专利]一种防止文件碎片化的文件存储系统-CN201810519947.1在审
发明人：戴瑾 -专利权人：上海磁宇信息科技有限公司
申请日： 2018-05-28 - 公布日： 2019-12-24 - 主分类号： G06F16/18 文献下载
摘要：本发明公开了一种防止文件碎片化的文件存储系统，包括：第一存储器、第二存储器以及主控制单元；第一存储器为采用整块读写的非易失性存储器；执行大文件的写入操作时，先将大文件的数据连续保存至第二存储器中，当第二存储器中保存的大文件的数据量达到一个存储块的容量时，将这些第一批数据转存至第一存储器的第一存储块中；大文件剩下的数据继续保存至第二存储器中，当数据量再次达到一个存储块的容量时，将这些第二批数据转存至第一存储器的第二存储块中，直到大文件的数据全部存入第一存储器中本发明大大降低了文件碎片化的可能性；降低NAND的擦写次数，延长产品寿命；也会使得NAND在长期使用后，持续保持高性能。
存储器大文件第二存储器存储数据转存文件碎片数据量保存非易失性存储器文件存储系统主控制单元产品寿命写入操作擦写读写整块

[发明专利]基于单向数据导入设备下的超大文件回传-CN202010764672.5在审
发明人：薛虎;童瀛;肖景元;钟宁 -专利权人：南京科讯次元信息科技有限公司
申请日： 2020-08-03 - 公布日： 2020-10-02 - 主分类号： H04L29/06 文献下载
摘要：本发明公开了基于单向数据导入设备下的超大文件回传，利用一次一密对文件消息加密技术，对加密密码用公私钥加密技术，实现文件和消息的加密传输；通过分片加密回传，方便实现了文件的断点续传，并且提高了大文件的回传效率
基于单向数据导入设备超大文件

[发明专利]文件处理方法、装置及系统-CN201410632216.X有效
发明人：陈伟 -专利权人：华为数字技术（苏州）有限公司
申请日： 2014-11-11 - 公布日： 2019-07-23 - 主分类号： H04L29/08 文献下载
摘要：本发明公开了一种文件处理的方法、装置及系统，属于通信领域。所述方法应用于移动接入网关MAG，包括：在所述MAG的上行接口拥塞时，将数据量大于第一数据值的大文件按照第二数据值分割为依次排布的多个小文件；下载所述多个小文件对应的文件数据；按照所述多个小文件的文件顺序，将所述多个小文件对应的文件数据组成大文件对应的文件数据。本发明解决了文件数据传输的效率低，用户体验差的问题，实现了在原有小文件正常传输的情况下，提高了大文件数据传输的效率，提升了用户体验的效果，本发明用于文件的处理。
文件处理方法装置系统

[发明专利]大文件快传技术-CN201110174141.1无效
发明人：方定庚;娄宏跃 -专利权人：上海安达通信息安全技术股份有限公司
申请日： 2011-06-27 - 公布日： 2013-01-02 - 主分类号： H04L1/18 文献下载
摘要：本发明涉及大文件快传技术，包含：文件分块技术、文件压缩技术、多点互传技术、传输协议优化技术，还包括文件续传技术，所述文件续传技术，支持网络中断、主机重启和手动暂停后的断点续传，支持接收文件校检错误后自动重传，还包括并行文件传输机制，所述并行文件传输机制利用多任务多用户多文件并行传送提高文件传输效率，还包括利用企业现有带宽，在不影响企业现有网络业务的基础上，可以充分利用空闲带宽进行文件加速传输。采用本技术方案，文件传输快速、使用简单、安全可靠和方便。在传输大于10M大文件时比普通文件传输方式快3～10倍，在远距离传输大文件时效果非常明显。
文件传技

[发明专利]一种利用线程处理大文件的方法、处理装置及计算设备-CN202210111799.6在审
发明人：宋彦伟 -专利权人：统信软件技术有限公司
申请日： 2022-01-26 - 公布日： 2022-05-17 - 主分类号： G06F9/48 文献下载
摘要：本发明公开了一种利用线程处理大文件的方法、处理装置及计算设备，其中，方法在操作系统中执行，包括步骤：每次从所述文件中读取预定块大小的数据集，并启动一个第一线程来解析所述预定块大小的数据集以得到感兴趣字段根据本发明的技术方案，能实现更加合理地利用多线程来处理大文件数据，在保证系统稳定运行的情况下提高对大文件数据的读取和处理效率，提升了处理大文件的性能。
一种利用线程处理文件方法装置计算设备

[发明专利]一种文件处理方法及装置-CN201810218145.7有效
发明人：罗建林;方礼蓉;刘畅 -专利权人：中国银行股份有限公司
申请日： 2018-03-16 - 公布日： 2022-01-28 - 主分类号： G06F16/14 文献下载
摘要：本发明公开了一种文件的处理方法及装置，在GPFS磁盘中，按照不同的表单维度，将账单信息存储为表单文件，并且，该表单文件为存储有大量账单信息的大文件；当用户在对账户的账单信息进行查询时，从表单文件中截取出子文件并组合后生成下载文件这样，由于每个表单文件都为大文件，提高了文件处理的性能，进而缩短了用户对文件进行查询的时间。
一种文件处理方法装置

[实用新型]一种行政管理教学学习用文件夹-CN201420460559.8有效
发明人：杨春燕 -专利权人：杨春燕
申请日： 2014-08-15 - 公布日： 2014-12-31 - 主分类号： B42F9/00 文献下载
摘要：本实用新型公开了一种学习用品，特别公开了一种行政管理教学学习用文件夹。该一种行政管理教学学习用文件夹，包括文件夹，小工具收纳袋，其特征是：文件夹中部设有文件夹中缝，文件夹中缝内设有大文件夹子，大文件夹子上端设有文件袋卡条，文件袋卡条内装有若干个文件袋文件夹靠近大文件夹子一侧设有A4纸对齐框，大文件夹子另一侧的文件夹上设有LED灯座，LED灯座上设有若干个纽扣电池，小文件夹夹板一侧设有若干个笔套，笔套一侧设有表袋，表袋一侧设有记事薄袋与卡袋，卡袋一侧设有小工具收纳袋，小工具收纳袋一侧设有子磁条
一种行政管理教学习用文件夹