[发明专利]一种基于数据字典的分布式数据统一访问方法在审
申请号: | 201610115426.0 | 申请日: | 2016-03-01 |
公开(公告)号: | CN107147683A | 公开(公告)日: | 2017-09-08 |
发明(设计)人: | 王治华;庄卫金;孙名扬;柳津;陈宏福;王艳;张鸿;梁卢鸿;黄龙达;于芳;苏凡;张永刚;徐攀;沈豪栋 | 申请(专利权)人: | 中国电力科学研究院;国家电网公司;国网上海市电力公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京安博达知识产权代理有限公司11271 | 代理人: | 徐国文 |
地址: | 100192 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 字典 分布式 统一 访问 方法 | ||
技术领域
本发明涉及一种电力系统调度自动化领域,具体涉及一种基于数据字典的分布式数据统一访问方法。
背景技术
现有的智能电网调度技术支持系统具有良好的横向集成、纵向贯通能力,能够充分满足目前调度机构各专业的需要,随着电力改革的不断深入和跨大区互联电网的快速发展,确定了未来电网紧密耦合,调度系统全局广域、动态一体化的趋势。现有系统中数据的可见性限于各调度区内,采用集中式单机访问的方式,通过主/备服务器对区域内提供数据访问服务。如此,带来一些问题:1、数据访问受限:数据只能在调度区内可见,无法在全网范围内互联共享,如要实现跨区数据访问只能从数据源重新接收原始数据后重新处理;2、单点故障隐患:数据服务主机只是一台服务器,虽然备机随时待命,但集中式的数据管理机制存在先天不足,仍然存在单点故障隐患;3、易成为性能瓶颈:集中式处理方式水平扩展能力弱,性能提升成本高,当数据访问量突增时,极易成为系统性能瓶颈点,影响实时运行业务系统。
发明内容
为解决上述现有技术中的不足,本发明的目的是提供一种基于数据字典的分布式数据统一访问方法,重新整合已有数据资源,通过数据字典技术,将全网各调度区的数据访问服务互联共享,实现了数据的统一访问和高效利用,为全网分析与计算、全局调度计划和控制决策提供支撑和保障,也为海量数据的分布式处理提供基础,进一步提升了广域系统整体性的处理能力。
本发明的目的是采用下述技术方案实现的:
本发明提供一种基于数据字典的分布式数据统一访问方法,其改进之处在于,所述方法包括下述步骤:
(1)生成带有数据资源特征的数据字典,集成局域网内存储在多机上的数据,实现单个区域内数据访问;
(2)设计单个区域内数据访问服务之间的协作机制,根据数据字典分发非本区域访问请求至正确的外区访问服务;
(3)统一接收数据访问请求,集中解析,并行分发以及分布式处理后一次性返回结果;
(4)部署多个独立并行工作的数据访问服务,优化客户端侧的访问主机,设计系统负载均衡机制。
进一步地,所述步骤(1)中,所述数据字典由每个数据实体生成,用于记录数据标识与数据位置的对应关系;
数据资源是以数据字典的形式组织管理,数据和数据访问服务互相分离,部署在多台不同的数据服务器上,数据分散存储于多台服务器;
数据访问服务汇集子区内所有数据服务器上的数据字典,用于记录数据存储的数据服务器节点名和物理位置;
单个区域内数据访问依据数据字典的分布式数据访问服务。
进一步地,所述步骤(2)中,数据访问服务之间相互协作实现数据访问服务功能,处理数据遵循本地处理,异地转发的原则,根据数据字典转发非本区域的访问请求至正确的外区访问服务。
进一步地,所述步骤(3)中,数据访问服务支持接收来自全网的访问请求,根据数据字典集中解析,将单个数据请求中具有相同数据位置的数据分量分离出来独立操作,分解为多个面向不同区域的处理线程,并行分发数据请求,待线程处理全部返回后统一整合线程结果,形成最终结果并返回客户端,整个过程全都由应用程序完成,无需人为介入;数据访问服务之前功能相同,地位平等,客户端优先使用本区域的数据访问服务。
进一步地,所述步骤(4)中,在单个区域内数据访问服务是多个独立工作的节点组成,相互协作统一对外提供数据服务;客户端侧访问数据和访问服务的主机根据负载实时调整。
与最接近的现有技术相比,本发明提供的技术方案具有的优异效果是:
本发明基于数据字典,设计了一种分布式数据统一访问方法,使得数据资源在全网范围内互联共享,不再局限于传统的各调度区内,提高了数据资源利用率,方便了电网实时数据的统一访问和高效共享。另外,基于数据字典的分布式数据统一访问技术,支持数据的分布式存储和访问,可以极大提高数据访问速度,为实现海量数据处理提供了基础,为电网调度和大运行提供有力的技术支撑和保障,具有很好的推广价值。
附图说明
图1是本发明提供的基于数据字典的分布式数据统一访问方法的技术架构图。
具体实施方式
下面结合附图对本发明的具体实施方式作进一步的详细说明。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电力科学研究院;国家电网公司;国网上海市电力公司,未经中国电力科学研究院;国家电网公司;国网上海市电力公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610115426.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于物联网的远程终端监控装置
- 下一篇:一种车辆监控方法及设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置