[发明专利]基于HDFS的故障推送系统在审
| 申请号： | 201910721100.6 | 申请日： | 2019-08-06 |
| 公开（公告）号： | CN110633259A | 公开（公告）日： | 2019-12-31 |
| 发明（设计）人： | 周洁;胡牧;杨志;刘铭;张琦 | 申请（专利权）人： | 南京南瑞信息通信科技有限公司 |
| 主分类号： | G06F16/182 | 分类号： | G06F16/182;G06Q10/06;G06Q10/00;G06Q50/06 |
| 代理公司： | 61225 西安毅联专利代理有限公司 | 代理人： | 杨燕珠 |
| 地址： | 211106 江苏*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供了基于HDFS的故障推送系统，应用于输变电设备，包括：数据信息采集模块，实时采集输变电设备、气象信息、交通路况、维修人员数据；存储模块，将上述数据信息采集模块采集的数据分为结构化和非结构化数据，对应存储于分布式文件系统HDFS中；分区模块，在所述HDFS存储节点上创建新的数据块，根据得到的HDFS存储节点的信息，向对应HDFS存储节点发送数据进行存储；调度模块，各模块在系统调度模块的协调下运作，实现信息在各模块之间的调度、流转；分析模块，对存储的数据设定安全阈值和警戒阈值，根据安全阈值和警戒阈值的不同，生成不同维度的故障的预警、跟踪及处理机制。本发明能迅速建立故障数据处理机制，更好实现故障处理。 | ||
| 搜索关键词： | 存储节点 数据信息采集模块 输变电设备 存储 警戒 分布式文件系统 非结构化数据 故障数据处理 系统调度模块 处理机制 存储模块 调度模块 分区模块 分析模块 故障处理 交通路况 气象信息 人员数据 实时采集 数据设定 推送系统 结构化 数据块 流转 维度 预警 采集 安全 调度 跟踪 维修 创建 运作 应用 协调 | ||
【主权项】：
1.基于HDFS的故障推送系统，应用于输变电设备，其特征在于，包括：/n数据信息采集模块，实时采集输变电设备、气象信息、交通路况、维修人员数据；/n存储模块，将上述数据信息采集模块采集的数据分为结构化和非结构化数据，对应存储于分布式文件系统HDFS中；/n分区模块，在所述HDFS存储节点上创建新的数据块，根据得到的HDFS存储节点的信息，向对应HDFS存储节点发送数据进行存储；/n调度模块，各模块在系统调度模块的协调下运作，实现信息在各模块之间的调度、流转；/n分析模块，对存储的数据设定安全阈值和警戒阈值，根据安全阈值和警戒阈值的不同，生成不同维度的故障的预警、跟踪及处理机制。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于南京南瑞信息通信科技有限公司，未经南京南瑞信息通信科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910721100.6/，转载请声明来源钻瓜专利网。
- 同类专利
- 用于文件管理系统的方法及装置-201910913343.X
- 张永飞 - 贝壳技术有限公司
- 2019-09-25 - 2020-02-14 - G06F16/182
- 本发明实施例提供一种用于文件管理系统的方法及装置，属于计算机技术领域。所述方法包括：获取备件信息，所述备件信息包括备件材料和与所述备件材料相关联的第一业务标识；判断是否已存在与所述第一业务标识相关联的第一业务流程；以及如果已存在所述第一业务流程，则根据所述第一业务流程存储所述备件材料。文件管理系统可以自动存储备件材料，如此，可以减少人工操作，并相应的减少由于人工操作带来的错误。
- 一种知识图谱的存储系统及方法-201911047867.1
- 张昭;钱学斌 - 北京明略软件系统有限公司
- 2019-10-30 - 2020-02-14 - G06F16/182
- 本申请涉及存储技术领域，尤其涉及一种知识图谱的存储系统及方法。本申请中的知识图谱的存储系统包括计算引擎和分布式文件存储数据库，通过计算引擎对获取的与目标业务对应的多个实体的实体数据进行计算，可以生成目标业务对应的知识图谱，其中，实体数据包括多个实体中每个实体的属性数据和关系数据，并通过分布式文件存储数据库将知识图谱进行存储。采用上述方式，本申请通过计算引擎进行知识图谱的计算，通过分布式文件存储数据库对知识图谱进行存储，实现了知识图谱的计算和存储的分离，可以提升数据计算、存储、检索的效率。
- 大数据的分布式存储系统-201910111342.3
- 周雪妍;林泽鸿 - 哈尔滨学院
- 2019-02-12 - 2020-02-14 - G06F16/182
- 本发明公开了一种大数据的分布式存储系统，该大数据的分布式存储系统包括名字服务节点、任务派发节点和数据服务节点，任务派发节点接收客户端发送的数据读写命令，并将接收到的数据读写命令、访问信息以及文件的全局路径信息发送至名字服务节点；名字服务节点根据访问信息和全局路径信息从对应的树结构中获取数据服务节点对应的访问信息，并向数据服务节点发送读写操作命令；数据服务节点根据读写操作命令读或者写存储在对应数据服务节点上的文件数据，并将执行结果数据返回至任务派发节点，由任务派发节点将执行结果数据返回至对应的客户端，解决了对大数据的分布式存储系统中的任意数据的快速读写问题，提高了数据读写效率，节约了时间。
- 一种数据节点的分配方法、设备及介质-201910893298.6
- 张东东;朱永芳 - 苏州浪潮智能科技有限公司
- 2019-09-20 - 2020-02-11 - G06F16/182
- 本发明公开了一种数据节点的分配方法，包括以下步骤：接收客户端的上传数据请求，并获取各个数据节点的负载使用信息；根据所述负载使用信息以及其中每个指标的对应负载权衡系数计算所述数据节点的综合评价值；以及选取本地机架上综合评价值最高的数据节点作为第一副本放置节点，选取非本地机架上综合评价值最高的若干数据节点作为其他副本放置节点。本发明还公开了一种计算机设备和可读存储介质。本发明提出的数据节点的分配方法、设备及介质可以通过综合考虑各个数据节点的负载使用信息，选取最优的存放副本的数据节点，从而实现负载均衡，提高集群系统的性能。
- 移动终端文件管理方法和系统-201610605492.6
- 张杰;黄威;杨少军 - 北京奇虎科技有限公司;奇智软件(北京)有限公司
- 2016-07-27 - 2020-02-11 - G06F16/182
- 本发明提供一种移动终端文件管理方法和系统，所述方法包括：调试桥adb服务器接收网页web服务器发送的文件管理请求；根据所述文件管理请求生成对应的adb命令，并发送至移动终端，以对移动终端中的文件进行相应地处理；接收所述移动终端返回的处理结果并回传给所述web服务器，由所述web服务器将所述处理结果通过浏览器通知用户；其中，所述web服务器发送的文件管理请求是由用户通过浏览器发送的文件管理请求。利用上述技术方案，可通过网页对移动终端的文件进行管理，并支持远程管理。
- 分布式搜索系统、索引分发方法及存储介质-201910894717.8
- 张桂贤;赵朝兴;项肖华;张俊浩;张弓;王仲远 - 北京三快在线科技有限公司
- 2019-09-20 - 2020-02-07 - G06F16/182
- 本申请实施例公开了一种分布式搜索系统、索引分发方法及存储介质，该系统包括：分布式索引构建平台，用于构建索引，将索引分片存储在索引存储集群，将资源描述信息写入到状态存储集群，索引分片包括多个文件块；索引存储集群；状态存储集群；主控集群，用于发送索引下载指令到状态存储集群；搜索集群，包括多个搜索节点，多个搜索节点组成对等网络，若搜索节点监听到索引下载指令，则确定要下载的索引分片及文件块，若至少两个其他搜索节点有文件块，则搜索节点确定至少两个其他搜索节点中的一个搜索节点为文件块的下载源，并从下载源下载文件块。本申请实施例提高了索引分发速度，提高了搜索服务的稳定性。
- 配置HDFS文件系统下用户权限的方法及装置-201911012194.6
- 徐辉 - 京东方科技集团股份有限公司
- 2019-10-23 - 2020-02-07 - G06F16/182
- 本发明涉及一种配置HDFS文件系统下用户权限的方法及装置。该方法包括：响应于选取操作，在HDFS文件系统中选取待配置权限的目标对象；响应于ACL权限命令，将所述目标对象的用户权限配置为所述ACL权限命令对应的目标权限；所述目标权限包括以下一种：可读可写、可读不可写和不可读不可写。本实施例中通过对目标对象(例如测试级用户、训练级用户、算法级用户以及超级用户)的用户权限进行配置，可以使目标对象使用同一个HDFS文件系统，满足各目标对象对数据访问权限的多样化需求，可以避免出现相互之间数据保存异常、遗失或者处理错误的文件异常风险，有利于提升数据安全和提升管理效率。
- 基于Ceph的RBD数据存储方法、系统、服务器及存储介质-201911030323.4
- 龚立义;谢俊 - 柏科数据技术(深圳)股份有限公司
- 2019-10-28 - 2020-02-07 - G06F16/182
- 本发明实施例公开了一种基于Ceph的RBD数据存储方法、系统、服务器及存储介质。所述方法包括：获取RBD块数据；对所述RBD块数据按照第一顺序进行拆分，以得到多个RBD子数据；将所述多个RBD子数据按照第二顺序进行存储到至少一个存储池。本发明通过对Ceph分布式集群文件系统中RBD设备提供安全保护，达到了分布式集群文件系统发生故障时，数据不会丢失并能及时的恢复数据的技术效果。
- 一种确保MapReduce的数据输入分片包含完整记录的方法与系统-201511011527.5
- 武志学;赵阳;田盛 - 成都国腾实业集团有限公司
- 2015-12-30 - 2020-02-07 - G06F16/182
- 本发明公开了一种确保MapReduce的数据输入分片包含完整记录的方法与系统，其方法包括以下步骤：S1.在HDFS系统中创建存储文件；S2.向HDFS系统的客户端进行数据输入，并对输入的每条数据进行描述；S3.HDFS系统的客户端依次接收数据中的每条数据记录，并进行数据包构建，将在进行第n个数据包构建时，每进行一条数据记录的接收，均判断当前接收的数据记录能否完整保存于当前数据包中；S4.HDFS系统的服务器端将接收到的数据包构建成数据块，并将数据块写入存储文件中。提供一种确保MapReduce的数据输入分片包含完整记录的方法与系统，避免了在进行数据处理的时候，需要跨数据片读取数据的情况，保证了数据处理本地化，从而大大提高了系统处理的效率。
- 一种基于分布式文件系统的数据对象删除方法及装置-201610880093.0
- 张延良 - 苏州浪潮智能科技有限公司
- 2016-10-09 - 2020-02-07 - G06F16/182
- 本发明公开了一种基于分布式文件系统的数据对象删除方法及装置。该方法应用于分布式文件系统的客户端，分布式文件系统包含业务目录和回收站目录，回收站目录中的数据对象的文件名中均携带设定标记，包括以下步骤：接收第一用户针对第一数据对象的删除指令；确定第一数据对象是否携带设定标记；如果是，则在回收站目录中删除第一数据对象；如果否，则将第一数据对象从业务目录移动至回收站目录中，并在第一数据对象的文件名中添加设定标记。这样，回收站目录为用户提供了一道屏障，当用户在删除业务目录中的数据对象时，是将数据对象移动至回收站目录中，以便用户发现是误删除操作时，能够从回收站目录恢复该数据对象。
- 一种基于分布式系统的数据质量提高方法及系统-201910969243.9
- 孙涛;刘秀源;郭爱章 - 齐鲁工业大学
- 2019-10-12 - 2020-01-31 - G06F16/182
- 本公开提出了一种基于分布式系统的数据质量提高方法及系统，包括：获取各数据源的数据并进行加载至分布式文件系统；分布式文件系统对已加载的数据进行预处理，预处理过程主要包括填充不完整的字段和合并重复记录；对待清洗的数据进行数据清洗；在数据清洗结束后，通过已构建数据质量评估模型，进行数据质量评估。本公开经过数据清洗，数据格式不一致的问题、数据记录重复的问题、数据中字段缺少的问题都得到有效的处理，该数据清洗方法清洗了大部分错误数据，极大提高了数据质量。
- 应用于分布式文件系统的任务调度方法和设备-201410535260.9
- 贾士博;岳银亮 - 华为技术有限公司;中国科学院计算技术研究所
- 2014-10-11 - 2020-01-31 - G06F16/182
- 本发明实施例提供一种应用于分布式文件系统的任务调度方法和设备，包括：元数据节点获取待处理的任务对应的数据块的标识，并根据该数据块的标识获取该数据块的待读取副本的存储信息，然后，向待读取副本所在的数据节点发送预取指令，以将该数据块从该数据节点的HDD中预取到SSD中，在预取成功后，元数据节点将所该数据块的元数据添加到预取数据成功表，后续在调度该任务时，元数据节点根据该数据块的元数据直接从SSD中读取该数据块。本发明中，由于在Map Reduce中元数据节点预先知道有哪些待处理的任务，以及这些任务对应的数据块的标识，因此，元数据节点能够准确的将将要处理的数据块预先从HDD中读取到SSD中，提高了缓存的命中率。
- 分布式文件系统及其文件元信息管理方法-201510342104.5
- 段兵 - 阿里巴巴集团控股有限公司
- 2015-06-18 - 2020-01-31 - G06F16/182
- 本申请供公开一种分布式文件系统及其文件元信息管理方法，其中所述方法包括：所述主控节点接收到所述客户端发送的创建文件元信息请求后，生成文件的一级索引标识信息，其中，一级索引标识信息在系统内部全局唯一；所述数据节点接收到所述客户端发送的创建文件元信息请求后，根据所述一级索引标识信息分配文件的二级索引标识信息，其中，二级索引标识信息在一级索引内部全局唯一；所述客户端根据所述一级索引标识信息和二级索引标识信息生成文件名；所述数据节点存储文件元信息，其包括：一级索引标识信息、二级索引标识信息以及文件名。通过本申请解决了文件元信息集中存储在主控节点而易导致的单点故障问题。
- 一种分布式元数据管理方法及系统-201611247844.1
- 郭晓凤 - 郭晓凤
- 2016-12-29 - 2020-01-31 - G06F16/182
- 本发明公开了一种分布式元数据管理方法及系统，涉及元数据管理技术领域。该方法及系统，通过使用元数据分布时的静态负载均衡和系统运行中的动态负载均衡两种策略，提高了元数据服务资源的利用率，保证了系统的负载均衡，提高了系统的可扩展性；另外，通过使用基于目录重定向表格的元数据延迟移动方案解决了重命名操作会引起的元数据大量移动问题，保证了系统效率的稳定。
- 数据管理方法、设备和系统-201610825463.0
- 刘佳楠;江露 - 北京百度网讯科技有限公司
- 2016-09-14 - 2020-01-21 - G06F16/182
- 本发明公开了数据管理方法、设备和系统，所述方法包括：主设备获取更新信息，以Log的方式写入NFS，以便在写入成功后，从设备通过tail日志的方式，根据更新信息更新本地内存，另外，写入成功，主设备根据更新信息更新本地内存。应用本发明所述方案，能够提高系统的稳定性和可扩展性等。
- 一种基于弹性分布式数据集的Stage划分方法和终端-201610741110.2
- 彭磊;党李飞;崔鑫;梁殿鹏 - 华为技术有限公司
- 2016-08-26 - 2020-01-21 - G06F16/182
- 本发明实施例提供一种基于弹性分布式数据集的Stage划分方法和终端，涉及大数据领域，能够缩短Spark作业的执行时间。其方法为：首先，终端创建应用程序的RDD的有向无环图DAG；接着终端对DAG中的RDD划分Stage，并在任一子RDD同时存在宽依赖和窄依赖时，将子RDD、与子RDD存在宽依赖的父RDD和与子RDD存在窄依赖的父RDD划分至不同的Stage；而后终端并行执行与子RDD存在宽依赖的父RDD和与子RDD存在窄依赖的父RDD对应的任务后，执行子RDD对应的任务。本发明实施例应用于内存计算中对基于RDD的Stage进行划分和执行。
- 访问文件的方法和装置-201610053459.7
- 沈灿泉 - 华为技术有限公司
- 2016-01-26 - 2020-01-17 - G06F16/182
- 本发明公开了一种访问文件的方法和装置，该方法包括：确定文件系统处于网络分割状态，该文件系统运行在多个主机上，该网络分割状态指示该文件系统被划分为至少两个分区，该至少两个分区之间的网络是不通的；接收第一文件的访问请求；获取该访问请求对应的第一主机标识；确定该第一主机标识与该文件系统中为该第一文件预配置的第二主机标识一致；访问该第一文件。本发明实施例的访问文件的方法和装置，能够提高网络发生分割时访问集群文件系统的可靠性。
- 分布式文件系统存储管理方法、装置、设备及存储介质-201910877103.9
- 杨朔;牛勇刚 - 济南浪潮数据技术有限公司
- 2019-09-17 - 2020-01-14 - G06F16/182
- 本发明公开了一种分布式文件系统存储管理方法，通过获取目标文件的访问热度信息，并根据访问热度信息对目标文件进行热度文件判别，当判定目标文件为热度文件时，将热度文件添加至预设高性能存储区。该方法可以实时的检测文件热度特性，区分数据访问的冷热状态，并将用户经常访问的数据存储到高性能存储区，预设的高性能存储区相对于其他存储空间的请求响应速度更优，从而可以提升频繁接受文件请求的热度文件的响应速度，相对实现在有限的资源条件下提高系统性能的目的。本发明还提供了一种分布式文件系统存储管理装置、设备及可读存储介质，具有上述有益效果。
- 一种均衡分布的文件存储方法及系统-201510682385.9
- 廖冬生 - TCL集团股份有限公司
- 2015-10-21 - 2020-01-14 - G06F16/182
- 本发明公开一种均衡分布的文件存储方法及系统。方法包括步骤：A、根据上传的目标文件的文件信息、以及上传信息组织成编码，然后以所述编码生成所述目标文件在服务器的唯一的存储名称；B、对所述存储名称进行加密生成加密值，截取所述加密值的一部分字符作为其所属存储目录的目录名称，根据所述目录名称将所述目标文件存储于相应所述存储目录下。通过本发明可将上传的文件均匀地分布在存储目录下，且不会错误地覆盖其他现有的文件。同时还能提供方便快速的文件访问。
- 基于高带宽存储系统的数据同步方法-201710337773.2
- 许荣福 - 成都优孚达信息技术有限公司
- 2017-05-15 - 2020-01-14 - G06F16/182
- 本发明提供了一种基于高带宽存储系统的数据同步方法，该方法包括：将簇封装成定长数据段，执行纠删码算法生成多个编码对象，分散到不同节点上存储；当收到文件读取请求后，解析文件标识符查询相应文件的簇列表，然后查询出其所属的对象的标识符和编码对象组的标识符，一并存储到专门的结构；根据该结构中信息读取各簇的数据；查找到对象所存放的位置，然后通过簇标识符在该对象的簇索引内进行查找，找到该簇在对象内的偏移地址和长度，最后读取区间的数据；按照所述结构中指定的顺序拼装成原始文件。本发明提出了一种基于高带宽存储系统的数据同步方法，实现了高性能、低功耗的SSD与高带宽容灾分布式存储架构的有机结合。
- 副本平衡方法、装置、存储介质及电子设备-201910909624.8
- 樊美钦 - 新华三大数据技术有限公司
- 2019-09-25 - 2020-01-10 - G06F16/182
- 本申请提出一种副本平衡方法、装置、存储介质及电子设备。通过针对每一备份数据，确定备份数据的副本是否全部存储于第一机架的节点上，若是，在至少一个第二机架的节点上存储备份数据的副本，以调整其副本分布，进而达到副本平衡的效果。当副本平衡后，在机架搬迁时，可以整体搬迁某一个机架，从而可以提升搬迁的效率。
- 分布式文件系统目录配额方法、系统、装置及存储介质-201910936880.6
- 李旭东 - 北京浪潮数据技术有限公司
- 2019-09-29 - 2020-01-10 - G06F16/182
- 本申请公开了一种分布式文件系统目录配额方法、系统、装置及计算机可读存储介质，包括：接收业务处理指令；判断本地目录的配额余量是否满足处理与业务处理指令对应的业务的余量要求；若不满足，则发送配额申请信息至元数据服务器；若满足，则处理业务，判断距上一次上报本地目录的配额余量期间，本地目录的累计配额使用量是否满足预设上报条件；若满足，则上报本地目录当前的配额余量至元数据服务器；本申请在处理业务前主动判定本地目录的配额余量是否能够满足处理业务要求，若不满足，则向元数据服务器申请配额，确保不会出现业务处理后出现超额的情况，同时，仅在满足预设的上报条件时才上报，减少广播次数，提高广播效率。
- 单证生成方法、系统、计算机设备和计算机可读存储介质-201910841583.3
- 李依洁;刘元勋;吴波 - 平安普惠企业管理有限公司
- 2019-09-06 - 2020-01-07 - G06F16/182
- 本发明公开了一种单证生成方法，应用于分布式系统，该分布式系统包括管理装置、存储装置和处理装置，管理装置用于维护单证模板，并在维护完成后将单证模板上传至存储装置，该方法包括：管理装置响应于用户发送单证生成请求，获取单证生成请求中携带的单证编号和用户的用户标识；管理装置从存储装置中下载与单证编号关联的单证模板；管理装置将用户标识和单证编号发送至处理装置；处理装置基于单证编号确定参数名称，并基于用户标识确定参数名称对应的参数值；处理装置将参数名称和参数值返回管理装置；管理装置确定参数名称在单证模板中的参数填写位置，并将参数值填充在单证模板的参数填写位置处，以生成单证。
- 文件处理方法、装置及分布式文件系统-201610791705.9
- 郭军;徐飞明;杨伟贤 - 北京小米移动软件有限公司
- 2016-08-31 - 2020-01-07 - G06F16/182
- 本公开是关于一种文件处理方法、装置及分布式文件系统，属于互联网技术领域。所述方法包括：向数据节点发送数据块创建请求，并返回所述数据块的元数据信息；当接收到所述元数据信息时，分配数据块标识；向所述主节点发送所述数据块标识和所述元数据信息，所述主节点用于建立所述数据块标识和所述元数据信息之间的映射关系。本公开通过在主节点中建立映射关系，在客户端读取或者写入文件时根据该映射关系能够获取数据块的元数据信息，以确定数据块的位置，进而根据数据块的位置进行文件读取或者写入，无需存储文件的元数据信息，可存储的文件量不会受限于主节点的存储容量，提高了扩展性。
- 一种基于区块链技术的个人档案存储技术-201810676566.4
- 吴杰庄 - 杰峯信息科技(中山)有限公司
- 2018-06-27 - 2020-01-03 - G06F16/182
- 本发明公开了一种基于区块链技术的个人档案存储技术，包括区块链个人档案建立模块、区块链个人档案共识机制和区块链个人档案数据存储模块；本发明同时实现个人档案的真实性、可查询、不可篡改、不可伪造；且能够将操作数据、原数据与电子档案本身的信息数据动态地融合成一个整体。有效地解决了目前电子档案管理中存在的操作数据、原数据与电子档案本身的信息数据相分离的问题。维护了电子档案的完整性。本发明平台是基于区块链技术，具有很好的保护用户信息的安全性。还能够提供安全的存储和传输数据环境。
- 分布式绘图方法及装置-201910807325.3
- 路智钦 - 北京浪潮数据技术有限公司
- 2019-08-29 - 2020-01-03 - G06F16/182
- 本申请提供的分布式绘图方法及装置，获取多个数据文件，并将多个数据文件存储至多个计算机节点，使每个计算机节点存储至少一个数据文件，其中，多个数据文件是对数据集进行切分得到的文件。同时，使每个计算机节点依据自身存储的数据文件，生成数据文件的绘图数据，最后，触发每个计算机节点执行绘图数据，从而得到数据集的整体绘图。因为，每个计算机节存储的数据文件为数据集中的一部分文件，所以每个计算机节点对自身存储的数据文件进行处理得到绘图数据并执行绘图数据时不会出现计算机内存不足而导致绘图生成效率低的情况，所以本申请提供的方法，对于数据量大的数据集，可以快速的生成该数据集的绘图。
- 文件副本存储方法、装置、可读存储介质及电子设备-201910932198.X
- 黎佳 - 重庆紫光华山智安科技有限公司
- 2019-09-29 - 2020-01-03 - G06F16/182
- 本发明的实施例提供了一种文件副本存储方法、装置、可读存储介质及电子设备，所述方法包括：基于多个存储节点的存储ID和每个存储节点的评价系数，获得目标ID；存储ID与所述评价系数对应，目标ID为每个存储节点的评价系数中最优评价系数对应的存储ID，存储节点的评价系数表征存储节点对目标文件的副本的存储性能；将目标文件的副本存储至目标ID对应的存储节点。通过获得评价系数中最优评价系数对应的存储ID作为目标ID，将文件的副本存储在目标ID对应的存储节点中，实现将副本存储于对该副本的存储性能最强的存储节点，提高了存储系统的数据负载均衡性，提高了存储系统的数据存储性能。
- 基于HDFS的故障推送系统-201910721100.6
- 周洁;胡牧;杨志;刘铭;张琦 - 南京南瑞信息通信科技有限公司
- 2019-08-06 - 2019-12-31 - G06F16/182
- 本发明提供了基于HDFS的故障推送系统，应用于输变电设备，包括：数据信息采集模块，实时采集输变电设备、气象信息、交通路况、维修人员数据；存储模块，将上述数据信息采集模块采集的数据分为结构化和非结构化数据，对应存储于分布式文件系统HDFS中；分区模块，在所述HDFS存储节点上创建新的数据块，根据得到的HDFS存储节点的信息，向对应HDFS存储节点发送数据进行存储；调度模块，各模块在系统调度模块的协调下运作，实现信息在各模块之间的调度、流转；分析模块，对存储的数据设定安全阈值和警戒阈值，根据安全阈值和警戒阈值的不同，生成不同维度的故障的预警、跟踪及处理机制。本发明能迅速建立故障数据处理机制，更好实现故障处理。
- 一种图片存储方法、图片查询方法及装置-201910822015.9
- 张海涛;卢亿雷 - 恩亿科(北京)数据科技有限公司
- 2019-09-02 - 2019-12-31 - G06F16/182
- 本申请涉及数据存储技术领域，尤其涉及一种图片存储方法、图片查询方法及装置。其中，图片存储方法包括：从分布式文件系统中读取至少一个图片文件，将读取到的至少一个图片文件中的每个图片文件依次发送给分布式存储系统，通过分布式存储系统，将至少一个图片文件合并成至少一个第一存储文件，将至少一个第一存储文件写入分布式文件系统，并删除分布式文件系统中的至少一个图片文件。本申请实施例中，通过分布式存储系统将从分布式文件系统中读取的大量图片文件进行合并得到多个第一存储文件，并将多个存储文件重新写入分布式文件系统中的各个存储单元中，可以提高分布式文件系统的存储单元空间的利用率，减少分布式文件系统的存储单元的占用率。
- 一种云系统集成和存储系统及方法-201910890132.9
- 王玲;陈淑君;孔爱娣 - 南京信同诚信息技术有限公司
- 2019-09-20 - 2019-12-27 - G06F16/182
- 本发明公开了一种云系统集成和存储系统及方法，包括用于采集数据的采集节点和用于对采集数据储存的云系统，所述云系统包括总数据和数据处理模块，所述总数据包括数据储存模块和数据交互模块，所述数据储存模块用于将采集节点采集的数据信息分类储存至总数据库内。该云系统集成和存储系统及方法中，通过数据清洗模块，提高储存数据的完整性，通过数据分类模块，减少数据储存时的运行负载，同时提高数据储存效率。
- 专利分类
