[发明专利]一种应用于海量标签化实体数据存储的工具和方法

摘要

本发明公开了一种应用于海量标签化实体数据存储的工具和方法，属于海量数据存储、标签数据存储领域。该工具包括标签元数据模块、实体标签数据模块和统一存取API模块。用户输入用户名密码和请求，统一存取API模块根据用户名和密码，访问标签元数据模块并读取标签的元数据，按用户请求对元数据进行包装，转换成数据层的数据格式，传输到数据层的对应接口对标签数据执行操作，实体标签数据模块根据统一存取API模块发出的请求执行相应的操作，并对数据做持久化处理。同时实体标签数据模块将处理结果返回给统一存取API模块，统一存取API模块将数据进行包装按照规定格式返回到工具界面。本发明具有高针对性，可扩展性及持久性，支撑更高层次的业务需求。

主权项

1.一种应用于海量标签化实体数据存储的工具，其特征在于，分布在互联网业务中，具体包括标签元数据模块、实体标签数据模块和统一存取API模块；互联网业务包括展现层，业务层和数据层；展现层为工具界面，标签元数据模块和统一存取API模块分布在业务层；实体标签数据模块分布在数据层；统一存取API模块作为桥梁连接展现层和数据层，同时还连接同层的标签元数据模块；用户通过工具界面输入用户名密码和请求，统一存取API模块根据用户名和密码，访问标签元数据模块并读取标签的元数据，按用户请求对元数据进行包装，转换成数据层的数据格式，传输到数据层的对应接口对标签数据执行操作，实体标签数据模块负责对标签数据进行增、删、改和查操作，根据统一存取API模块发出的请求执行相应的操作，从StoreServer中对数据进行操作，并对数据做持久化处理；同时将处理结果返回给统一存取API模块，统一存取API模块将数据进行包装按照规定格式返回到工具界面；统一存取API模块对标签元数据模块的元数据和实体标签数据模块的处理结果分别进行封装，并对客户端开放接口；标签元数据模块主要存储标签定义信息，以及标签名称到底层存储字段的映射信息；实体标签数据模块将所有的实体数据，根据索引按一定的数据结构存储于Elasticsearch中，在Elasticsearch中创建唯一的Index，存储该对象类别下的所有实体数据；在Index中，type0总是存储最新版本的标签数据，且动态地创建typeN用于存储完整的历史版本，N>＝1。