[发明专利]管理数据摄取

摘要

一种用于管理数据摄取的方法、系统和计算机程序产品。该系统包括用于摄取原始数据的可插拔架构信道服务(例如，推送/拉取信道服务)。该系统还包括用于将所摄取的原始数据转换成公共格式(诸如例如键值对)的可插拔架构格式化器(102)。该系统还包括具有允许消费者定义所摄取的数据集合上的多个实体的功能的EAV存储(103)。因此，数据可被摄取而没有数据损失，无需定义提取逻辑，并且无需定义存储模式。

主权项

一种在计算机系统处的用于管理数据摄取的方法，所述方法包括：接收来自数据源的原始数据，所述原始数据采用原始数据格式；摄取采用所述原始数据格式的所述原始数据，摄取所述原始数据包括使用可插拔信道适配器，所述可插拔信道适配器被配置用于与所述数据源相关联的访问机制和安全上下文；使用被配置成理解所述原始数据格式的格式化插件将所述原始数据格式化成经格式化数据，所述经格式化数据采用包括键值对在内的公共格式；将所述经格式化数据存储在实体属性值存储中，所述实体属性值存储包括从一个或多个其他原始数据格式被格式化成所述公共格式的其他数据。