[发明专利]大数据背景下基于乐观锁机制实现主数据版本管理的系统及方法

说明书

本发明涉及一种大数据背景下基于乐观锁机制实现主数据版本管理的系统，包括乐观锁初始化模块；版本比对执行模块根据乐观锁机制在执行主数据更新操作时对主数据版本进行比对；冲突处理策略池用于将比对结果匹配相应的冲突处理策略；冲突处理模块用于将处理策略针对产生的主数据版本冲突按照匹配策略进行处理。本发明还涉及一种利用该系统在大数据背景下基于乐观锁机制实现主数据版本管理的方法。采用了该系统及方法，解决了大数据背景下主数据在多节点部署或者多线程执行等高并发环境下更新冲突的问题，从而减轻了主数据版本维护的工作量，实现了主数据版本精细化管理，提高了主数据更新的并发性，为企业及政府部门主数据实施及应用奠定了良好的基础。

技术领域

本发明涉及数据管理领域，尤其涉及主数据版本管理领域，具体是指一种大数据背景下基于乐观锁机制实现主数据版本管理的系统及方法。

背景技术

随着我国信息化建设的不断发展，企业及政府部门信息化建设的不断深入，所建设的业务系统越来越多，因此随之产生的数据库也越来越多，逐渐形成了大数据的环境背景。这些数据互相交叉融合，造成了针对同一业务多套系统在提供数据来源，但是数据的格式类型又不尽相同，造成了数据无法共享，信息孤岛问题突出，同时数据的一致性，权威性也受到严重的挑战，影响了企业及政府部门正常业务开展和决策分析。

主数据作为企业或政府部门的核心数据资产，对信息化建设起到至关重要的作用，主数据通常是那些基础的、变动不频繁且被广泛使用的数据。主数据对于解决业务数据存在的多来源，不统一的问题起到了很好的作用，将核心业务数据识别为主数据后通过主数据平台统一管理，统一维护，然后再提供给其他系统使用，通过这样的方式提高了数据的使用率，保证了数据的统一。

但是，对于数据而言，其本身是会发生变化的，特别是在大数据背景下，这样变化的几率更大。虽然作为主数据而言这种变化通常是不频繁的，但是主数据一旦发生变化，即表示其版本更新了，这就需要通过版本管理解决主数据版本更新之间的冲突。特别是在多节点部署或者多线程执行等高并发的环境下，会导致同一份主数据被施加不同的修改，从而产生冲突。

针对主数据的版本管理，现有技术通常是通过每行设置主数据的状态及版本进行管理。

首先，定义不同的数据状态：如“编辑”状态、“生效”状态、“停用”状态、“作废”状态等，不同的应用场景定义的数据状态存在差别，但是都大同小异。

其次，定义管理规则，针对主数据的“新增”、“发布”、“修订”、“停用”、“作废”等操作定义不同的管理规则，如当新增主数据时，则将数据状态置为编辑，并且存入临时表；数据编辑完成，发布后，则将临时表数据迁移至正式表；当数据重新修订后，则将修订后的数据存入正式表，修订前的数据存入历史表。

最后，定义主数据版本更新规则，针对主数据不同的操作定义不同的主数据版本更新规则，如新增主数据时主数据版本置为1，编辑主数据时主数据版本加1，停用及作废主数据版本不变。

现有技术实现了主数据版本在单一环境下的管理需求，但是无法满足多节点部署或者多线程执行的环境下主数据版本精细化管理需求。

现有技术基本上能满足单一环境下主数据版本管理的需求，但是对于多节点部署或者多线程执行的环境下，目前的主数据版本管理技术存在明显的不足。同时，现有技术无法提供冲突策略的管理，不利于主数据版本管理功能的拓展。

在多节点部署或者多线程执行等高并发环境下，同一个时间可能有多个线程更新相同主数据，从而产生冲突，现有的技术对于这样的冲突未提供有效的解决策略，不能满足高并发场景下的应用需求，最终会造成主数据更新丢失、脏读或者幻读，造成主数据版本的混乱，从而影响其他系统对于主数据的使用。

如主数据表(MDM_TABLE)包含下列字段及内容，分别表示有三个不同的主数据字段值及数据版本：