“大文件”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果227294个，建议您升级VIP下载更多相关专利

[发明专利]基于时间序列预测的海量小文件存储性能优化方法及系统-CN201911291844.5有效
发明人：曾令仿;张爱乐;程倩雅;程稳;李弘南;方圣卿;杨霖;施展;冯丹 -专利权人：华中科技大学
申请日： 2019-12-16 - 公布日： 2021-01-01 - 主分类号： G06F3/06 文献下载
摘要：本发明公开了一种基于时间序列预测的海量小文件存储性能优化方法，属于信息存储领域，包括：收集带有时间信息的历史文件访问记录，得到数据集；将数据集预处理为离散的时间序列数据后，使用时间窗口在其上滚动产生训练数据集合时刻的数据为输入数据，并以t+1时刻的数据为标签数据；基于循环神经网络建立时间序列预测模型，并利用由训练数据集合划分得到的训练集、验证集和测试集依次进行训练、验证与测试，从而得到目标模型；利用目标模型预测文件大小的变化趋势，以识别出其中的大文件和小文件；将大文件直接存储，将小文件基于时间序列聚合后存储。本发明能够优化海量小文件在分布式存储系统中的存储性能。
基于时间序列预测海量文件存储性能优化方法系统

[发明专利]一种安全的跨网络隔离装置通信方法-CN201110152860.3无效
发明人：刘红军;荆铭;延峰;张永庆;马强;张道霖;贾久龙;管荑 -专利权人：山东电力集团公司;积成电子股份有限公司
申请日： 2011-06-09 - 公布日： 2011-11-02 - 主分类号： H04L1/00 文献下载
摘要：一种安全的跨网络隔离装置通信方法，包括：1)检测文件大小，如果文件小于9kB，2)文件拆分成块，将文件按9kB大小拆分成若干块；3)将文件或文件块打包成帧；4)建立基于socket的网络连接，将上述帧按帧编号发送至接收端2.对于大文件的传输，解决了由于一帧数据错误造成整个大文件都要重传的问题，提高了通信效率。3.实现了数据按帧自动重传和补传的功能。
一种安全网络隔离装置通信方法

[发明专利]一种边缘弱网环境大文件可靠下载的方法和系统-CN202211529711.9在审
发明人：安雨顺;阮伟标;陈珊珊;魏文 -专利权人：天翼云科技有限公司
申请日： 2022-11-30 - 公布日： 2023-04-07 - 主分类号： H04L67/56 文献下载
摘要：本申请提供了一种边缘弱网环境大文件可靠下载的方法和系统，该方法有代理端的分片、并发下载以及合并这三个关键点，代理端的分片是将客户端请求的大文件分片并进行编号；通过线程池并发下载所有的分片，分片下载失败时进行一定次数的重试本申请通过在文件分块、多线程下载的基础上与代理集成，提供稳定的文件传输，能有效的避免因网络波动、服务端传输限制导致的传输中断问题。
一种边缘环境文件可靠下载方法系统

[发明专利]一种基于Hadoop的海事局船检大数据分布式存储系统-CN202210147679.1在审
发明人：邓酩;谢刚;侯立宪;刘超;柳庆龙 -专利权人：桂林理工大学
申请日： 2022-02-17 - 公布日： 2022-05-27 - 主分类号： G06F16/172 文献下载
摘要：包括首先对海事局船检平台数据特征进行分析，通过在客户端与NameNode中间增加一个部门节点，优化HDFS处理海量小文件时表现出的性能低下的问题；其次，在该节点中实现对小文件的合并时，设立了小文件预处理模块和预取模块；同时对热点数据合并的后的大文件元数据信息进行缓存，达到对小文件的访问流程进行优化，缓解NameNode节点压力；小文件预处理模块和预取模块工作的同时，对热点数据合并的后的大文件元数据信息进行缓存，达到对小文件的访问流程进行优化本发明解决了传统的HDFS在存储海量小文件时通常表现出性能低下的问题，针对海事局海量数据文件小的特性，更加方便文件存储。
一种基于 hadoop 海事局船检大数据分布式存储系统

[实用新型]一种新型文件夹-CN201620351434.0有效
发明人：陈昌声 -专利权人：陈昌声
申请日： 2016-04-25 - 公布日： 2016-09-28 - 主分类号： B42F9/00 文献下载
摘要：本实用新型公开了一种新型文件夹，它包括文件夹左夹板、文件夹中缝、文件夹右夹板、文件袋卡条、大文件夹子、A4纸对齐框、边条、母磁条、长条形固定带、按扣、电子表、U盘袋、笔袋、子磁条；本实用新型设置有三个不同大小的文件袋，可以根据需要装入不同大小规格的书本、学习材料等，并且由于设置有长条形固定带，可以防止文件袋里的书本、学习材料等掉出；由于设置有U盘保管袋，便于保管U盘，方便使用；由于设置笔袋，便于保管笔；由于设置有电子表，便于查看时间；由于设置了大文件夹子，同时配合使用A4纸对齐框以及边条，对于我们规范整齐放置文件巨大的作用，另外文件夹左右夹板通过母子磁条合起，简单便捷。
一种新型文件夹

[发明专利]一种应用于长期演进系统的跨层编解码方法-CN201410402021.6有效
发明人：姜明;杨海涛;赵春明;黄鹤;梁霄 -专利权人：东南大学
申请日： 2014-08-14 - 公布日： 2018-07-27 - 主分类号： H04L1/00 文献下载
摘要：一本发明公开了一种长期演进通信系统的跨层编解码方法，通过结合物理层的信道编码和媒体接入控制层的数字喷泉码，提高大文件的传输可靠性。本发明提供的编码方法能够在兼容LTE标准方案的条件下，提高系统传输的可靠性，降低大文件传输失败的概率。
一种应用于长期演进系统跨层编解码方法

[发明专利]一种基于全用户态QUIC协议的大文件传输方法-CN202310073863.0有效
发明人：郑烇;张淼;李嘉巍;陈双武;杨坚;杨锋 -专利权人：合肥综合性国家科学中心人工智能研究院（安徽省人工智能实验室）
申请日： 2023-02-07 - 公布日： 2023-04-18 - 主分类号： H04L67/06 文献下载
摘要：本发明涉及计算机网络技术领域，公开了一种基于全用户态QUIC协议的大文件传输方法，从操作系统底层数据包收发架构出发，通过使用DPDK框架，轮询获取网卡收到的数据包，并将数据包交给用户空间内的协议栈进行解析，再通过libevent事件通知库将解析后的报文向上传递给应用层，达到了旁路内核的效果，实现了全用户态的QUIC协议，加速大文件传输过程。
一种基于用户 quic 协议文件传输方法

[发明专利]大文件多点分发系统-CN201010534421.4有效
发明人：杨凡;刘宾;周福;蒋建平 -专利权人：北京云快线软件服务有限公司;北京世纪互联工程技术服务有限公司
申请日： 2010-11-05 - 公布日： 2011-02-16 - 主分类号： H04L29/08 文献下载
摘要：本申请公开了一种大文件多点分发系统，包括：客户端、中心服务器、上传服务器及若干任务处理服务器；当客户端需要上传文件时，客户端向中心服务器发送文件上传请求，中心服务器接收到上传请求后，为客户端确定目标任务处理服务器，客户端将需要上传的文件通过上传服务器上传至中心服务器或目标任务处理服务器；当客户端需要下载文件时，客户端向中心服务器发送文件下载请求，中心服务器接收到下载请求后，分发下载任务至任务处理服务器，中心服务器或任务处理服务器将客户端需要下载的文件发送至客户端；有效避免了文件只能从中心服务器下载或上传导致中心服务器性能降低或死机的问题。
文件多点分发系统

[发明专利]大文件的有效管理-CN02818424.6有效
发明人：马克·萨克;理查德·鲁夫;库尔特·埃弗森 -专利权人： EMC公司
申请日： 2002-09-20 - 公布日： 2004-12-22 - 主分类号： G06F17/30 文献下载
摘要：一种对象管理系统，包括一个配置成保存一个对象(72)的计算机系统，其中所述对象可以是一个文件。
文件有效管理

[发明专利]一种文件传输系统及其方法-CN202011364674.1在审
发明人：肖伟 -专利权人：上海爱数信息技术股份有限公司
申请日： 2020-11-27 - 公布日： 2021-03-19 - 主分类号： H04L29/08 文献下载
摘要：本发明涉及一种文件传输系统及其方法，该系统包括传输源端和传输目的端，所述传输源端和传输目的端相互通信连接，所述传输源端用于创建小文件队列、大文件队列以及发送数据队列，用于启动多线程任务、发送指定数据包给传输目的端与现有技术相比，本发明通过创建不同的安全队列，结合小文件合并数据包、多线程并发任务以及大文件后传数据的方式，能够大大提高文件传输速度、降低传输时间，适用于海量文件传输场景。
一种文件传输系统及其方法

[发明专利]基于分布式存储图像处理方法、系统、设备及介质-CN202210529580.8在审
发明人：林杰 -专利权人：重庆紫光华山智安科技有限公司
申请日： 2022-05-16 - 公布日： 2022-09-20 - 主分类号： G06F16/182 文献下载
摘要：本申请提出了一种基于分布式存储图像处理方法、系统、设备及介质，适用于图像处理领域，该方法通过获取图像设备采集的场景图像、以及场景图像内的目标图像；对场景图像进行解析处理，确定场景图像的结构化数据与图像数据；将多个场景图像中图像数据聚合存储为大文件进行分布式存储，生成大文件唯一的文件标识；根据场景图像的图像名称与文件标识的对应关系，结合目标图像在场景图像内图像数据的区域信息以及图像数据的源标识确定场景图像的文件标识，通过在场景图像的文件标识内增加区域信息来存储目标图像；通过在文件标识里添加区域信息存储目标图像，避免了重复图像的存储，极大提高了图像存储空间利用率。
基于分布式存储图像处理方法系统设备介质

[发明专利]一种基于H5和java的大文件分片上传方法、设备及介质-CN202310041931.5在审
发明人：袁俊伟 -专利权人：浪潮通用软件有限公司
申请日： 2023-01-12 - 公布日： 2023-05-09 - 主分类号： H04L67/06 文献下载
摘要：本发明公开了一种基于H5和java的大文件分片上传方法、设备及介质，属于计算机技术领域，用于解决现有的大文件上传组件查找引用困难，需要多次客户端与服务端的匹配，上传失败后需要全部重新上传并且难以保证再次上传的成功率方法包括：根据JS脚本以及H5语言，将文档元素进行组件的控件展示封装，得到上传展示界面；通过上传展示界面，根据预设定值，将待上传文件进行文件切片，并生成上传请求信息；根据上传请求信息，将分片文件进行分片存储，并将存储结果发送给上传展示界面所对应的客户端中；根据客户端的存储结果，将分片文件进行文件合并，得到合并结果。
一种基于 h5 java 文件分片上传方法设备介质

[发明专利]基于Hadoop的饮用水海量数据存储管理方法和系统-CN201810787118.1有效
发明人：王卫星;杨伟志;林泽鑫;殷惠莉;姜晟;余杰平;黄仲强;姜冰 -专利权人：华南农业大学
申请日： 2018-07-16 - 公布日： 2021-11-26 - 主分类号： G06F16/21 文献下载
摘要：，将区域服务器中的实时属性数据迁移Kafka集群中，并进行数据清洗，将清洗后的实时属性数据存入Hadoop集群中；将Hadoop集群中的实时属性数据根据属性进行第二次分类，将分类后的实时属性数据合并成大文件并生成索引文件；将合并后的大文件和索引文件存入Hadoop集群中。本发明对小文件的实时属性数据根据产生地域、时间后先做一次分类，然后再根据数据的元素类型再做一次分类，最后进行合并存储，这样大大减少了内存的消耗，提高了平台的性能。
基于 hadoop 饮用水海量数据存储管理方法系统

[发明专利]一种基于大范围扫描的词典优化方法-CN202011309180.3在审
发明人：母延年 -专利权人：南京好鱼科技有限公司
申请日： 2020-11-20 - 公布日： 2021-01-26 - 主分类号： G06F16/31 文献下载
摘要：本发明涉及大数据处理技术领域的基于大范围扫描的词典优化方法，具体包括首先设定一个固定筛选阀值，将tim词典中对应的doc文件小于该阀值的词全部筛选出来，而大于该阀值的doclist进行保留；每间隔固定周期就将所有词的doclist进行小文件合并处理同时根据各个文件位置偏移量进行记录doclist所属的分区信息；将每个文件对应的分区偏移量信息记录在大文件的尾部，在每次获取所需文件时进行读取文件尾部位置信息来获得所有doclist的偏移量；合并大文件放入一个kv系统里面，kv系统进行快速读取，将随机目录的小文件进行合并后避免大量的随机磁盘数据输入或输出处理；本发明能够提供一种消耗计算资源少、处理速度快且对文件损耗低的基于大范围扫描的词典优化方法
一种基于范围扫描词典优化方法

[发明专利]一种待清理数据识别方法、装置及电子设备-CN201510536577.9有效
发明人：于情情;阮昕 -专利权人：北京金山安全软件有限公司
申请日： 2015-08-27 - 公布日： 2018-09-11 - 主分类号： G06F17/30 文献下载
摘要：该方法包括：扫描位于存储空间内的文件和文件夹；获得所扫描到的文件的数据量大小和第一类特征信息，文件夹的第二类特征信息；将文件夹中第二类特征信息满足预设文件夹特征信息的文件夹确定为运营文件夹；将运营文件夹中的不满足预设常规垃圾判断条件的文件夹确定为中间文件夹；基于所包含文件的数据量大小，确定每一中间文件夹是否为待清理文件夹；将运营文件夹以外的数据量大小超过第一预定数据量阈值且第一类特征信息不符合预设文件特征信息的文件确定为待清理文件；将待清理文件和待清理文件夹确定为待清理数据通过本方案可以有效识别存储空间内的待清理的大文件和大文件夹。
一种清理数据识别方法装置电子设备