[发明专利]一种财务数据转换成评估数据规范化的方法

权利要求书

1.一种财务数据转换成评估数据规范化的方法，包括以下步骤：

S1、接收待转换的excel模板数据文件；

S2、读取接收到的模板文件中的数据，利用匹配规则引擎针对每行数据的内容，进行表头行和具体数据行的分类；

S3、利用匹配规则引擎针对表头行的内容，进行字段含义的匹配，用来对应标准模板中的预设评估所需字段；

S4、利用匹配规则引擎针对数据行的内容，进行科目编号、科目名称的匹配，用来对应评估模板所需字段；

S5、根据匹配到的字段，进行多种数据格式单位的处理；

S6、匹配结果在浏览器web页面进行展示，可进行人为调整；

S7、将最终匹配完毕的数据进行数据库持久化存储，用以提供导出评估数据模板；

其中，所述待转换的excel模板数据文件支持xls以及xlsx格式类型；

所述待转换的excel模板数据文件支持主流的财务软件系统导出的余额表、明细账、资产台账，不同的字段名称以及格式；

所述匹配规则引擎，通过读取的导入数据前两行的内容来确定该模板是一行标题还是两行标题，用以区分标题和具体数据；

针对表头行的内容，根据预设的匹配资源库进行匹配，包括精确匹配以及模糊匹配；

针对数据行的内容，进行科目编号、科目名称的匹配，用来对应评估模板所需字段；

所述匹配到的字段格式处理包括科目编号、科目名称以及涉及到的金额等字段，以达到统一格式处理；

所述页面展示，人为干预调整匹配关系，可以进行匹配引擎的升级完善；

根据匹配完成的结果，进行格式化数据的存储，并通过业务逻辑导出提供评估使用的数据模板。

2.如权利要求1所述方法，其特征在于，所述S2涉及的利用匹配规则引擎，针对表头行和具体数据行的分类操作通过以下步骤实现：

S2.1、根据解析的导入数据前两行内容，来适配是单行表头还是双行表头；

S2.2、单行表头，第一行各个列的数据内容都是针对属性的描述文字；

S2.3、双行表头，第一行同单行表头，第二行科目编号和科目名称列内容必定为空(根据excel合并单元格处理)；

S3涉及的利用匹配规则引擎，针对表头行的内容，进行字段含义的匹配，用来对应标准模板中的预设评估所需字段，通过以下步骤实现：

S3.1、根据表头每个单元格的内容，通过不断完善的预设匹配池中进行精确匹配；

S3.2、匹配到的标题列用自定义规范化的标识code进行标注；

S3.3、将数据组装成规范化的数据结构进行后续使用；

S4涉及的利用匹配规则引擎，针对数据行的内容，进行科目编号、科目名称的匹配，用来对应评估模板所需字段，通过以下步骤实现：

S4.1、科目编号列进行层级处理，从一级科目进行逐级匹配，区分出来每个科目的父级科目和子集科目；

S4.2、科目名称列根据匹配到的一级科目进行子集科目的逐级匹配；

S4.3、科目名称列根据匹配到的一级科目的科目编号重新执行科目编号的匹配规则进行第三次匹配。

3.如权利要求1所述方法，其特征在于，所述S2、S3、S4涉及的匹配规则引擎通过Hbase+Storm+Spark组合完成：

利用Hbase，将非结构化的自动匹配、手动匹配日志文件数据进行实时存储，为后续模板适配计算提供高效的读写性能；

利用分布式流计算引擎Storm，对每个节点实现一个基本的计算过程，数据项在互相连接的网络节点中流进流出，动态处理实时大量生成的自动解析数据日志以及人为干预处理日志，及时的对导入的模板进行适配解析，进行模板适配自学习，不断完善扩充支持的模板类型；

再利用Spark，先汇聚不同任务生成的批量数据，然后进行数据全集的全面计算处理，进行模板解析适配的整体完善；

在保证了用户每次导入任务实时准确处理的同时，又及时的对模板适配进行了扩充完善，不断提升自动识别和转换率。