“数据仓库系统”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果6270543个，建议您升级VIP下载更多相关专利

[发明专利]一种基于数据仓库模型的数据处理方法及装置-CN202310545863.6在审
发明人：彭友斌;袁俊飞;陈凯旋 -专利权人：广州飞狮数字科技有限公司
申请日： 2023-05-15 - 公布日： 2023-07-07 - 主分类号： G06F16/28 文献下载
摘要：本申请提供一种基于数据仓库模型的数据处理方法及装置，该基于数据仓库模型的数据处理方法包括：获取待处理逻辑表；获取数据仓库模型，其中，数据仓库模型分为ODS原始数据层、DWD明细数据层、DWS汇总数据层以及ADS应用数据层；将待处理逻辑表输入数据仓库模型，得到输出数据。本申请在逻辑表提交后即生成对应智能黑盒调度任务，自动化生产数据，大大提升数据处理的效率。
一种基于数据仓库模型数据处理方法装置

[发明专利]一种基于电网数据仓库模型的自动构建多维模型方法-CN202211092517.9在审
发明人：梁盈威;杨漾;冯歆尧;刘明伟;朱泰鹏;潘定 -专利权人：广东电网有限责任公司
申请日： 2022-09-08 - 公布日： 2022-11-04 - 主分类号： G06F16/28 文献下载
摘要：本发明公开了一种基于电网数据仓库模型的自动构建多维模型方法，该方法包括下述步骤：基于DV建模方法构建电网数据仓库模型；将电网数据仓库模型的中心点或链接表合并入附属表，保留原模型的关系，形成用户视图；将用户视图映射到电网数据仓库模型，形成第一映射表；将电网数据仓库模型按照DV模型的演化方式转换为半维度模型，构建由电网数据仓库模型映射到半维度模型的第二映射表；将多维模型用户视图映射到半维度模型，形成多维模型用户视图和第三映射表。本发明利用电网业务的特征和操纵映射运算规则，从DV数据仓库模型自动构建多维数据模型，达到高效、高质量、跨区域地构建数据模型。
一种基于电网数据仓库模型自动构建多维方法

[发明专利]构建数据仓库表级别血缘关系的方法及装置-CN202010819732.9有效
发明人：刘世超;姚登科;王君 -专利权人：北京斗米优聘科技发展有限公司
申请日： 2020-08-14 - 公布日： 2021-08-17 - 主分类号： G06F16/28 文献下载
摘要：本公开提供了一种构建数据仓库表级别血缘关系的方法及装置，该方法包括对所述数据仓库的数据处理代码进行采集识别，获取所述数据处理代码所涉及的用于操作所述数据仓库的语句；解析用于操作所述数据仓库的语句中所引用到的表，确定所述表之间的依赖和被依赖关系，以构建表级别血缘关系，解决了相关技术中构建数据仓库表级别血缘关系慢、构建数据仓库表级别血缘关系不准确、需要人工干预的问题，具有能够以自动化和低耦合的方式进行采集、解析和存储数据仓库
构建数据仓库级别血缘关系方法装置

[发明专利]基于数据仓库进行大数据处理的方法以及装置-CN201610393576.8有效
发明人：瞿红卫;王啸;叶恺;闫钊 -专利权人：阿里巴巴集团控股有限公司
申请日： 2016-06-06 - 公布日： 2020-04-28 - 主分类号： G06F16/25 文献下载
摘要：本申请公开了一种基于数据仓库进行大数据处理的方法以及装置。其中方法包括：分别创建针对第一处理系统和第二处理系统的第一任务和第二任务；分别获取第一任务和第二任务对应的第一文件数据和第二文件数据，并分别将第一文件数据和第二文件数据发送至数据仓库中；基于数据仓库对发送至数据仓库中的第一文件数据和第二文件数据进行处理实现了高效、可靠的对批处理文件中存在的大量无序分布的数据进行核对处理的目的。
基于数据仓库进行数据处理方法以及装置

[发明专利]一种基于区块链的大数据仓库系统及数据存储方法-CN202210074295.1在审
发明人：陈昌杰;陈磊 -专利权人：中国福利会国际和平妇幼保健院
申请日： 2022-01-21 - 公布日： 2022-05-06 - 主分类号： G06F16/25 文献下载
摘要：本发明涉及数据库存储技术领域，具体涉及一种基于区块链的大数据仓库系统及数据存储方法，包括：采集端，采集端连接一外部的生产设备，采集端获取生产设备中的生产数据，并在生产数据发生变动时生成修改记录；存储区块链，存储区块链连接采集端，存储区块链接收并存储自采集端发出的修改记录；至少一个数据仓库，数据仓库连接存储区块链，存储区块链向数据仓库发送修改记录。本发明的有益效果在于：通过设置存储区块链接收修改记录并向数据仓库中推送数据，避免了现有技术中通过相关工具对变更数据进行捕获、推送导致推送过程稳定性差、故障后无法自动恢复等问题。实现了更好的数据存储稳定性和容错率，降低了维护成本。
一种基于区块数据仓库系统数据存储方法

[发明专利]一种智能用户体验信息收集系统-CN202210372671.5在审
发明人：黄华围 -专利权人：深圳市墨默交互科技有限公司
申请日： 2022-04-11 - 公布日： 2022-07-29 - 主分类号： G06F16/26 文献下载
摘要：本发明公开了一种智能用户体验信息收集系统，包括日志收集模块、消息引擎模块、数据仓库模块与数据可视化模块；所述日志收集模块包括拦截器配置、多线程日志收集与日志收集模块的实现；所述消息引擎模块包括消息引擎模块配置优化与消息引擎模块的实现；所述数据仓库模块包括数据仓库架构设计、数据仓库模块设计与数据仓库分层设计。本发明提出了一种基于Flume的分布式日志收集模块,该模块具有可扩展性，多线程和分布式的特点，解决了收集实时分布式日志数据的问题，除此之外，与以往不同的是，在数据收集之后立即进行数据过滤清洗，过滤脏数据，减少了不必要的数据传输，降低了数据传输的成本。
一种智能用户体验信息收集系统

[发明专利]广播电视决策支持系统及其构造方法-CN201310272008.9有效
发明人：柴剑平;殷复莲;覃垚;张韬政;高雅;江茜 -专利权人：中国传媒大学
申请日： 2013-07-01 - 公布日： 2017-02-08 - 主分类号： G06F17/00 文献下载
摘要：为了填补广播电视决策支持系统构造方法空白的问题，本发明提供一种广播电视决策支持系统及构造方法，该方法包括构造接入层、业务层和数据层。构造数据层包括构造数据库、模型库、方法库和知识库；构造包括对数据库、模型库以及方法库进行管理的管理系统的第一主体；构造包括数据仓库和联机分析处理系统的第二主体；构造包括对知识库管理的管理系统和数据挖掘系统的第三主体；将从数据仓库提取的综合信息、联机分析处理系统从数据仓库提取的分析信息和数据挖掘系统从数据库和数据仓库中挖掘的知识信息组成决策信息来构造决策信息库；将这三个主体彼此进行连接；将接入层通过业务层与数据层交互
广播电视决策支持系统及其构造方法

[发明专利]一种信息处理方法、装置及设备-CN201910707956.8在审
发明人：黄锦鸿;张敏;杨怀新 -专利权人：腾讯科技（深圳）有限公司
申请日： 2019-08-01 - 公布日： 2020-05-19 - 主分类号： G06F16/215 文献下载
摘要：本发明实施例提供了一种信息处理方法、装置及设备；该方法包括：获取数据仓库构建需求；根据数据仓库构建需求，从数据源中萃取待萃取数据；依据预设转置责任链，对待萃取数据进行转置处理；预设转置责任链指用于对待萃取数据进行转置处理的流处理模式；将转置后的待萃取数据存储至预设表中，得到数据仓库；预设表指数据仓库中用于存储数据的表结构；当获取到数据分析请求时，响应数据分析请求，依据数据仓库进行数据分析，得到数据分析结果。通过本发明实施例，能够降低构建数据仓库的复杂度。
一种信息处理方法装置设备

[发明专利]一种基于内存的数据获取方法和设备-CN202110621899.9在审
发明人：刘睿民 -专利权人：威讯柏睿数据科技（北京）有限公司
申请日： 2021-06-04 - 公布日： 2021-08-13 - 主分类号： G06F16/2453 文献下载
摘要：本发明公开了一种基于内存的数据获取方法和设备，应用于包括数据仓库和设置于内存中的热数据库的系统中，该方法包括：接收用户发送的数据访问请求；根据所述数据访问请求从所述热数据库中获取数据查询结果，所述热数据库中存储有热数据，所述热数据是根据所述数据仓库中各数据页的访问频次从所述数据仓库提取的；根据所述数据查询结果获取目标数据，从而提高了自助分析业务系统中的数据获取速度。
一种基于内存数据获取方法设备

[发明专利]一种可视化的数仓建模方法及系统-CN202011542971.0在审
发明人：杨强强;骆乐乐;朱文佳;罗达志 -专利权人：安徽百诚慧通科技有限公司
申请日： 2020-12-22 - 公布日： 2021-03-26 - 主分类号： G06F16/21 文献下载
摘要：本发明公开了一种可视化的数仓建模方法及系统，属于数据建模技术领域。本发明的方法为：先构建web端，将web端与hive数据仓库连接；然后在web端构建模型目录，具体地，在web端构建一级目录和二级目录，一级目录对应展示hive数据仓库，二级目录对应展示hive数据仓库中不同的业务领域或者应用领域再根据模型目录构建表，并对构建的表配置数据质量预警规则；之后根据模型目录和表构建表清单。本发明的系统包括hive数据仓库和web端，hive数据仓库通过连接池与web端连接。本发明克服了现有技术中，数仓建模过程复杂且管理不便的不足，本发明可以实现数仓建模的可视化，并且可以简化数仓建模过程，大大降低了数仓的管理难度，进而可以对数据进行快速管理。
一种可视化建模方法系统

[发明专利]一种数据处理方法、装置、电子设备和存储介质-CN202311219266.0在审
发明人：张金良;甘富贵;蒋正华 -专利权人：太平金融科技服务（上海）有限公司
申请日： 2023-09-21 - 公布日： 2023-10-27 - 主分类号： G06F16/28 文献下载
摘要：本申请公开了一种数据处理方法、装置、电子设备和存储介质。具体包括：获取当前大数据平台的全局数据地图和数据仓库变更信息；根据数据仓库变更信息，确定数据仓库变更信息对应的数据处理链路；根据全局数据地图和数据处理链路，判断数据仓库变更信息是否存在风险；根据判断结果，将发生变更的数据仓库作业上线。本申请实施例的技术方案提高了数据处理的效率和准确性。
一种数据处理方法装置电子设备存储介质

[发明专利]数据存储方法、装置、计算机设备及存储介质-CN202010025819.9在审
发明人：周霞;申志彬;李如先 -专利权人：深圳前海环融联易信息科技服务有限公司
申请日： 2020-01-10 - 公布日： 2020-05-29 - 主分类号： G06F16/22 文献下载
摘要：本发明实施例公开了一种数据存储方法、装置、计算机设备及存储介质。所述方法包括：将数据以avro存储格式储存到数据仓库的数据基础层中；将数据以textfile存储格式储存到数据仓库的基础指标层中；将数据以textfile存储格式储存到数据仓库的应用层中。通过实施本发明实施例的方法可根据数据仓库各层的数据的特点以不同的格式对数据仓库各层的数据进行存储，从而极大地提高了数据仓库各层的数据获取的便利性，进而提高了获取数据的效率以及降低了服务器的功耗。
数据存储方法装置计算机设备介质

[发明专利]一种元数据处理方法及装置-CN202011555579.X在审
发明人：徐伟平;何林强 -专利权人：浙江大华技术股份有限公司
申请日： 2020-12-24 - 公布日： 2021-04-16 - 主分类号： G06F16/22 文献下载
摘要：本发明提供了一种元数据处理方法及装置，其中，该方法包括：获取数据中台待执行的SQL语句；按照预先设置的解析顺序解析所述SQL语句，得到所述SQL语句对应的元数据信息；将该元数据信息更新到数据仓库之外的存储介质中，可以解决相关技术中在数据仓库中面对日益增多的元数据时，如何能准确且及时的获取到数据仓库的元数据信息的问题，通过SQL解析来前置维护数据仓库的元数据信息，元数据信息存储在数据仓库之外的存储介质中，减少数据仓库的压力，提高了元数据信息的获取效率。
一种数据处理方法装置

[发明专利]一种用于科技服务的大数据实验系统-CN202211030785.8在审
发明人：费敏锐;李晨辉;周文举;徐昱琳;王海宽;易开祥;吕泽昊;沈赟怡 -专利权人：上海大学
申请日： 2022-08-26 - 公布日： 2022-11-08 - 主分类号： G06F16/22 文献下载
摘要：本发明涉及一种用于科技服务的大数据实验系统，包括数据导入模块、数据清洗模块、数据仓库建设模块、数据关联分析模块。其中数据导入模块包括将用户对科技服务平台的行为日志及业务数据库导入分布式文件存储系统；数据清洗模块包括对分布式文件存储系统的数据进行提取、转换及加载处理；数据仓库建设模块包括基于事实表和维度表的关系建立星形模型，并对数据仓库进行分层处理；数据关联分析模块包括对数据仓库采取高效的关联处理技术，满足联机分析处理(OLAP)中多维度、高关联数据分析操作。本发明贯穿科技服务平台中的数据采集、清洗、存储、分析等数据治理全生命周期，对于科技服务平台大规模数据OLAP生产环境中满足亚秒级分析查询要求。
一种用于科技服务数据实验系统

[发明专利]一种基于位图存储的数据查询方法、系统、设备及介质-CN202310094807.5在审
发明人：麦俊豪 -专利权人：天翼爱音乐文化科技有限公司
申请日： 2023-01-19 - 公布日： 2023-04-25 - 主分类号： G06F16/22 文献下载
摘要：本发明公开了一种基于位图存储的数据查询方法、系统、设备及介质，其中，方法包括：获取业务数据；根据聚类函数对所述业务数据进行位图构建处理，得到位图数据；根据业务过程对所述位图数据进行模型构建处理，得到位图数据仓库；根据访问请求对所述位图数据仓库进行位图查询处理，得到数据查询结果。本发明实施例使用位图存储数据，再将位图存储关键指标于数据仓库，通过数据仓库进行数据查询，能够快速、高效地查询得到目标数据，提高了数据查询的效率，可广泛应用于大数据技术领域。
一种基于位图存储数据查询方法系统设备介质