[发明专利]一种基于共享数据平台的数据处理方法

说明书

技术领域

本发明涉及数据处理技术领域，更具体地说，特别涉及一种基于共享数据平台的数据处理方法。

背景技术

随着计算机技术和校园网络的发展，高校信息化管理也有了很大的发展，包括诸如：教务管理系统、学生缴费管理系统、图书管理系统和针对教职工用户的院内信息管理系统等，这些系统有学校自行开发的、也有其他软件厂商开发的商业软件，在经过学校数年的运行，各个系统均已经积累了宝贵的数据资源。但是由于现有的各个应用系统运行在不同的环境中、同时使用了不同的数据库、且彼此之间没有数据访问接口，导致无法自行实现数据交换，使得各个系统彼此独立运行，形成了一个个信息孤岛。在随着学校发展的同时，新的需求不断提出，而“信息孤岛”所引发的矛盾日益突出，严重的制约了学校的信息化建设。故此，非常有必要设计一种数据处理方法。

发明内容

本发明的目的在于针对现有技术存在各个系统独立运行、且各系统的数据资源不能共享的技术问题，提供一种基于共享数据平台的数据处理方法。

为了达到上述目的，本发明采用的技术方案如下：

一种基于共享数据平台的数据处理方法，该方法包括采用数据交换中心处理器对源数据库中的数据进行抽取、清洗并加载到目标共享数据库中的步骤，以及采用数据交换中心处理器对目标共享数据库中的数据订阅到源数据库的步骤；

所述数据交换中心处理器对源数据库中的数据的抽取、清洗并加载到目标共享数据库中的步骤具体包括：

S1、数据交换中心处理器连接源数据库；

S2、数据交换中心处理器抽取源数据库中的源数据；

S3、数据交换中心处理器根据CELTS-34高等学校管理信息标准转换该源数据；

S4、数据交换中心处理器将转换后的数据写入目标共享数据库；

所述数据交换中心处理器对目标共享数据库中的数据订阅步骤具体包括：数据交换中心处理器将目标共享数据库中的数据按照使用数据的要求转换成应用系统的数据存储格式后加载到源数据库中。

优选的，所述步骤S2中的数据交换中心处理器对源数据库中的源数据的抽取为全量抽取，即数据交换中心处理器将源数据库里的源数据读取后按照规定格式写入到目标共享数据库中。

优选的，所述步骤S2中的数据交换中心处理器对源数据库中的源数据的抽取为增量抽取，即数据交换中心处理器获取源数据库里的源数据中发生改变的数据后按照规定格式写入到目标共享数据库中。

优选的，所述增量抽取采用扫描时间截数据法，具体为：数据交换中心处理器对源数据库中含有更新时间的数据源，通过对比上次更新时间来判断新增的数据，并将该新增的数据读取后按照固定格式写入到目标共享数据库中。

优选的，所述增量抽取采用触发器和数据的复制法，具体为：数据交换中心处理器在源数据库中数据源的表上建立一触发器，并将发生改变的记录保存到一临时表上，然后再从临时表上定期抽取数据，并将该数据按照固定格式写入到目标共享数据库中。

优选的，所述增量抽取采用日志对比法，具体为：数据交换中心处理器通过对源数据库的日志文件分析并获取增量数据，再将该数据按照固定格式写入到目标共享数据库中。

优选的，所述增量抽取采用全表对比法，具体为：数据交换中心处理器通过将源数据库与目标共享数据库的记录逐条对比判断发生变化的数据，再将该数据按照固定格式写入到目标共享数据库中。

优选的，所述数据交换中心处理器对源数据库中的源数据的抽取采用定期自动抽取或手工抽取。

优选的，所述目标共享数据库包括：

用于保存统一用户认证登录所需的用户名、密码以及原有应用系统中的用户、密码和系统名称的用户角色信息集；

用于保存学生学籍信息的学生信息集；

用于保存教职工的职工号、专业、学历、职称以及职务信息的教职工信息集；

用于保存学生选课记录、教师教学任务、课程表信息、学生成绩信息以及调停课信息的教学信息集；

用于保存教师的论文发表信息、项目信息以及获奖信息的科研信息集；

以及用于保存学生学费缴纳信息的财务信息集。

与现有技术相比，本发明的优点在于：本发明将各个独立运行的系统进行连接、实现了各个独立运行的系统的数据资源的共享，解决了信息孤岛的问题，同时还具有建设周期短、开发成本低等优点。

附图说明

下面结合附图和实施例对本发明作进一步说明。

图1是本发明所述基于共享数据平台的数据处理方法的流程图。