“物流数据”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果2548363个，建议您升级VIP下载更多相关专利

[发明专利]一种数据排重方法与装置、数据清洗方法与装置-CN201510930372.9在审
发明人：侯大勇;李青海;简宋全;邹立斌;许飞月 -专利权人：广州精点计算机科技有限公司
申请日： 2015-12-11 - 公布日： 2016-05-04 - 主分类号： G06F17/30 文献下载
摘要：本发明为一种数据排重方法与装置、数据清洗方法与装置，所述数据排重方法包括：步骤a，从数据源中抽取待处理数据；步骤b，对所述待处理数据根据约束条件进行清洗；步骤c，确定所述待处理数据的数据正确的属性列；步骤d，根据数据正确的所述属性列建立树形结构，并将所述待处理数据流入对应的分支节点中；步骤e，对每个所述分支节点内的所述待处理数据分别进行排重；所述装置包括与各个步骤相对应的数据抽取单元、数据清洗单元、数据确定单元、树形结构建立单元和数据排重单元；另包括所述数据清洗方法及装置。这样，大大减少了需要对比的所述待处理数据的数量，极大地提高了数据排重和数据清洗的效率，提高了数据排重的准确性。
一种数据方法装置清洗

[发明专利]一种智慧城市中大数据关联关系的表示方法-CN201510980631.9在审
发明人：蒲菊华;王元宏;陈虞君;熊璋;吕卫锋 -专利权人：北京航空航天大学
申请日： 2015-12-23 - 公布日： 2016-04-20 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种智慧城市中大数据关联关系的表示方法，该方法利用数据关系的传递性，在满足关系传递约束的条件下，将部分间接数据关系转化为直接数据关系，提高数据对变化的响应速度。在数据关系图中，一些数据关系能够在多个数据之间实现传递，传递开始的第一个数据称为初始数据，传递到达的最后一个数据称为终点数据。本发明提出一种采用数据关系网的关联关系表示方法，定义了基本数据关系和多阶段数据关系，利用数据关系的传递机制，将传递关系转化为直接关系，发现了潜在的数据关联，并且降低了数据更新的传播时延，加快了数据关系图对动态变化的响应速度，从而升了活化数据的工作效率。
一种智慧城市数据关联关系表示方法

[发明专利]用户行为分析的方法-CN201510797227.8在审
发明人：滕娜娜;杜科;唐军;梁敏;罗弦;漆尧;唐永瑞 -专利权人：四川长虹电器股份有限公司
申请日： 2015-11-18 - 公布日： 2016-03-23 - 主分类号： G06F17/30 文献下载
摘要：本发明涉及信息技术领域，提供一种用户行为分析的方法，获取用户行为数据，并对用户进行分析，将分析结果展示给商家。本方法包括：采集用户的行为数据，并上传给数据处理系统；数据处理系统对上传的行为数据进行处理；周期性地从数据处理系统中抽取数据，并存储到数据仓库系统；依据数据仓库系统中的存储数据确定用户的行为分析维度，并依据所述行为分析维度在数据库管理系统中建立数据库模型；从数据仓库系统中抽取出目标数据，对目标数据进行清洗和转换，将清洗和转换后的数据进行汇总分析，并将汇总分析后的结果数据加载到数据库管理系统的对应数据表中；将所述结果数据进行各类图形展示。
用户行为分析方法

[发明专利]一种基于Spark大数据框架离线实时处理数据的方法-CN201810593494.7在审
发明人：柯峰;梁烜彰 -专利权人：华南理工大学
申请日： 2018-06-11 - 公布日： 2018-11-23 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种基于Spark大数据框架离线实时处理数据的方法，包括以下步骤：通过Flume从数据源采集数据；将采集到的离线数据上传到离线模块中HDFS分布式文件系统上；将实时数据上传到实时模块中的Kafka集群上；Spark对HDFS上的数据进行预处理；Spark Streaming对Kafka集群上的数据进行预处理；将预处理过的离线数据导入到Hive数据仓库中；将预处理过的实时数据导入到Mysql数据库中；在Hive数据仓库中开发分析离线数据将结果传到前端网页实现数据可视化；在Mysql数据库中将实时数据传到前端网页实现数据可视化。本发明为数据处理业务提供了高效的计算服务和可靠的存储系统，可以满足多种数据处理的需求。
预处理离线数据实时数据离线数据可视化实时处理数据仓库大数据集群网页分布式文件系统数据处理业务数据源采集存储系统计算服务实时模块数据处理采集分析开发

[发明专利]异构平台的大数据融合方法、电子设备、存储介质及系统-CN201810484553.7在审
发明人：吴勇;张青松;刘定文;李强 -专利权人：湖北九州云仓科技发展有限公司
申请日： 2018-05-20 - 公布日： 2018-11-06 - 主分类号： G06F17/30 文献下载
摘要：本发明提供异构平台的大数据融合方法，包括步骤：获取用户配置的文件信息，文件信息包括源端编码、目标端编码、地址、数据交互频率、数据映射关系；通过数据同步工具抽取源端数据库的数据，获得抽取数据，将源端的文件系统和抽取数据进行日志格式化存储，生成源端数据；实时监听源端数据的变化，获取变化数据，将变化数据发送至消息队列组件；订阅消息队列组件的主题信息，对变化数据进行解析，根据配置文件将变化数据转换为目标端存储格式对应的数据；根据目标端的数据源将变化数据同步到目标端系统本发明还涉及一种电子设备、存储介质、异构平台的大数据融合系统。本发明实现同构或异构平台间快速高效的数据同步及数据转换服务。
变化数据异构平台大数据抽取数据存储介质电子设备文件信息目标端数据同步工具数据转换服务目标端系统日志格式化源端数据库存储格式订阅消息队列组件配置文件融合系统实时监听数据交互数据同步数据映射文件系统消息队列用户配置源端数据主题信息生成源数据源融合同构源端抽取解析存储发送转换

[发明专利]报表显示系统、方法、计算机设备及存储介质-CN201810437284.9在审
发明人：许四平 -专利权人：中国平安人寿保险股份有限公司
申请日： 2018-05-09 - 公布日： 2018-10-12 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了报表显示系统、方法、计算机设备及存储介质，该系统包括：依次相连的数据处理模块、数据存储模块、负载均衡模块和数据可视化展示模块；数据处理模块，用于监测数据库中的数据，并将数据库中的新增数据写入数据存储模块；数据可视化展示模块，用于根据接收的数据显示请求获取基础模板文件，并向负载均衡模块发送数据访问请求；负载均衡模块，用于根据接收的数据访问请求通过http协议调用数据存储模块的接口，并将在数据存储模块中查询到的数据返回至数据可视化展示模块；数据可视化展示模块，用于将基础模板文件与基于数据访问请求返回的数据合并成完整的报表并进行显示，以解决高并发生产报表以及炫酷的页面展示的问题。
数据可视化展示模块负载均衡模块报表显示系统数据处理模块数据存储模块数据访问请求计算机设备存储介质存储模块基础模板数据写入数据监测数据库调用数据访问请求请求获取数据返回数据合并数据显示页面展示依次相连并发数据库查询返回生产

[发明专利]磁盘清理方法和磁盘清理装置-CN201810502266.4在审
发明人：王新宇 -专利权人：中国联合网络通信集团有限公司
申请日： 2018-05-23 - 公布日： 2018-10-16 - 主分类号： G06F12/02 文献下载
摘要：所述磁盘的存储空间划分为多个数据块；所述磁盘清理方法包括：从待移动数据块之前的其它存储数据未满的数据块中查询是否存在可用数据块，该可用数据块的可用容量大于或等于待移动数据块的已用容量且在可用容量大于或等于待移动数据块的已用容量的数据块中该可用数据块的可用容量最小，其中，待移动数据块为最后一个存储数据未满且存储数据不为空的数据块；若查询出存在可用数据块，将待移动数据块中的数据移动至可用数据块中存储。本发明中可批量移动数据，提高了数据移动的效率，从而提高了磁盘碎片清理的速度。
磁盘可用数据块移动数据块数据块存储数据可用容量清理装置数据移动查询磁盘碎片存储空间移动数据存储

[发明专利]电力调度自动化系统中电网模型与实时数据解耦方法-CN201810674689.4在审
发明人：唐元合;杨建平;王治华;孙世明;苏大威;徐春雷;赵家庆;刘海洋;陈宏福;吴海伟;盛振明;韩肖 -专利权人：国电南瑞科技股份有限公司;国网上海市电力公司;国家电网有限公司;国网江苏省电力有限公司;国网江苏省电力有限公司苏州供电分公司;国电南瑞南京控制系统有限公司;南瑞集团有限公司
申请日： 2018-06-26 - 公布日： 2018-12-21 - 主分类号： G06F17/30 文献下载
摘要：本发明涉及一种电力调度自动化系统中电网模型与数据解耦方法，包括：（1）对电网设备数据结构分类出模型数据与实时数据；（2）对于模型数据，使用关系型数据库进行存储；（3）对于实时数据，使用键值型缓存数据库进行存储，通过测量唯一标识到缓存数据库中对实时数据进行存；（4）在数据访问层，对模型数据与实时数据分别提供不同的数据访问接口；在业务逻辑层，需要自行分析存取数据的类型，调用不同的数据访问接口；本发明实现了对电力调度自动化系统中模型数据与实时数据的分别处理，将设备数据结构拆分为两个部分，并根据各部分的特点选择适当的存储方式，降低了二者的耦合度，提高了数据存储与访问的效率。
实时数据模型数据电力调度自动化系统数据访问接口缓存数据库电网模型存储关系型数据库设备数据结构数据访问层业务逻辑层存储方式存取数据电网设备数据存储数据结构数据解耦特点选择唯一标识耦合度解耦调用测量分类访问分析

[发明专利]一种收集web用户体验数据的方法和系统-CN201810841813.1在审
发明人：杨程;李雪刚;朱巧芬;余谭杰;胡军 -专利权人：武汉禾木林科技有限公司
申请日： 2018-07-27 - 公布日： 2018-12-18 - 主分类号： G06F17/30 文献下载
摘要：本发明涉及通信技术领域，尤其是一种收集web用户体验数据系统，所述总控制模块还电性连接有数据捕捉模块以及数据采集模块，且数据采集模块电性连接有数据收集模块，所述数据捕捉模块以及数据收集模块均连接在web端上，从而能够对用户体验数据进行收集，所述总控制模块还电性连接有数据过滤模块、数据暂存模块以及数据统计模块，且数据采集模块电性连接在数据过滤模块上，数据过滤模块电性连接于数据暂存模块，且数据暂存模块电性连接在数据统计模块上，从而能够对用户体验数据进行过滤、暂时储存以及统计，所述总控制模块还电性连接有系统登录单元。本发明能够对用户体验数据进行收集，并储存至数据库内，以备工作人员查阅。
电性连接数据采集模块数据过滤模块用户体验数据总控制模块数据暂存数据收集模块数据统计模块数据捕捉通信技术领域储存数据系统系统登录过滤数据库统计

[发明专利]一种校园数据分类管理系统-CN201810835947.2在审
发明人：张翔;方雪明;吴权 -专利权人：浙江华畅信息科技有限公司
申请日： 2018-07-26 - 公布日： 2018-12-25 - 主分类号： G06F21/62 文献下载
摘要：本发明涉及数据管理技术领域，尤其是一种校园数据分类管理系统，多个所述数据采集子端能够定期对其所产生的数据进行实时采集，并实时通过无线传输模块将数据远程传输至数据收发模块内，所述中央处理器还电性连接有显示单元、操作模块、供电单元、数据处理模块、数据分类模块以及数据库，当数据接收模块接收远程数据后，将数据实时传输至数据处理模块内，并能够将数据实时显示在显示单元上，然后利用操作模块对数据进行必要的处理，在经过初步处理后，再次将数据传输至数据分类模块，并根据数据的类型、所在部门或者是班级进行分类。本发明能够对不同部门的数据进行综合采集，并进行统一管理，在管理时，能够对数据进行有效分类。
数据处理模块数据分类模块操作模块管理系统数据分类数据管理技术数据接收模块数据实时传输数据收发模块数据远程传输无线传输模块中央处理器初步处理电性连接供电单元实时采集实时显示数据采集数据传输统一管理有效分类远程数据校园子端数据库采集分类管理

[发明专利]一种政策法规收集分析系统-CN201810849121.1在审
发明人：刘强;余安霞 -专利权人：安徽赛迪信息技术有限公司
申请日： 2018-07-28 - 公布日： 2018-12-07 - 主分类号： G06F17/30 文献下载
摘要：本发明属于收集分析系统技术领域，具体涉及一种政策法规收集分析系统，包括数据分类系统、数据检索系统和数据库，所述数据分类系统包括数据采集模块、数据处理模块、数据传输模块、数据提取模块、对比匹配模块和数据导入模块，所述数据库包括N个不同类的数据库，所述数据检索系统包括数据输入装置、检索分析模块、数据输出模块和显示器，所述数据采集模块输出端与数据处理模块输入端连接，所述数据处理模块输出端与数据传输模块输出端连接，所述数据提取模块输出端与对比匹配模块输入端连接，克服了现有技术的不足，对政策法规进行收集后根据发布部门、有限期限和重要性进行分类，分别储存在子数据库中，方便后期的管理和文件检索。
收集分析系统数据处理模块政策法规输出端数据采集模块数据传输模块数据分类系统数据检索系统数据提取模块输入端连接数据库匹配模块数据导入模块数据输出模块数据输入装置输出端连接分析模块文件检索子数据库显示器检索储存分类期限发布管理

[发明专利]一种大数据的智能采集方法及系统-CN201810654781.4在审
发明人：唐国伟 -专利权人：深圳云之家网络有限公司
申请日： 2018-06-22 - 公布日： 2018-11-16 - 主分类号： G06F17/30 文献下载
摘要：本发明实施例公开了一种大数据的智能采集方法及系统，用于实现大数据的智能采集。本发明实施例方法包括：将源数据库与目标数据库的对应关系维护至配置管理；获取源数据库中的第一数据，所述第一数据包括表信息和字段信息；将所述第一数据维护至所述配置管理；根据所述配置管理将所述源数据库中的第二数据导入至所述目标数据库，所述第二数据为与所述第一数据对应的表数据和字段数据。因此，通过自动识别和感知源数据库中的第一数据，即表信息和字段信息，并将这些信息维护到配置管理中，采集的数据按字段顺序组装，导入到目标数据库中，从而实现大数据的智能采集。
第一数据配置管理智能采集大数据目标数据库源数据库字段信息表信息关系维护顺序组装信息维护自动识别字段数据表数据获取源字段感知数据库采集维护

[发明专利]用于车辆监控系统的数据管理系统及数据管理方法-CN201210591943.7在审
发明人：邹清全;刘奋;吕成浩 -专利权人：上海汽车集团股份有限公司
申请日： 2012-12-31 - 公布日： 2014-07-09 - 主分类号： G06F3/06 文献下载
摘要：本发明提供一种用于车辆监控系统的数据管理系统，包括通信服务器、关系数据库服务器及客户端服务器，通信服务器、关系数据库服务器及客户端服务器与数据管理模块连接，数据管理模块还与一内存数据库模块连接，客户端服务器与内存数据库模块、关系数据库服务器连接。该数据管理系统的数据管理模块可将实时监控数据存储到内存数据模块内，客户端服务器可直接访问内存数据模块来读取相应的监控数据，与数据写入关系数据库再从关系数据库中读出的方式相比，简化了数据读取的流程，从而有效提高数据的读取速度，大大提高监控数据的实时性。
用于车辆监控系统数据管理方法

[发明专利]一种跨数据中心抽取数据的方法及设备-CN201310688157.3在审
发明人：廖广锦;卢海强;陈宗芳 -专利权人：远光软件股份有限公司
申请日： 2013-12-16 - 公布日： 2014-04-23 - 主分类号： G06Q10/06 文献下载
摘要：一种跨数据中心抽取数据的方法及设备，由主管用户统一设置基础体系，将基础体系发布给下级用户，下级用户在基础体系下进行细化以及业务数据处理操作；数据抽取步骤包括：数据类型选择步骤，主管用户根据业务需求，选择需要抽取的数据类型及报表类型；数据区域选择步骤，选择需要抽取的数据所在单位或者区域；数据业务时间选择步骤，选择业务时间段；数据抽取执行步骤，主管用户连接下级用户的区域数据中心，直接对数据进行抽取；数据转化步骤，主管用户获得抽取的数据后，根据主管用户的基础体系对数据进行转化汇总，生成主管用户的数据。本发明使集团企业可跨数据中心主动抽取数据，确保集团随时查看各子企业的数据，避免出现数据不完整的情况。
一种数据中心抽取数据方法设备

[发明专利]一种数据管理方法、装置和计算机可读存储介质-CN201811124135.3在审
发明人：李俊山 -专利权人：郑州云海信息技术有限公司
申请日： 2018-09-26 - 公布日： 2019-02-15 - 主分类号： G06F16/215 文献下载
摘要：本发明实施例公开了一种数据管理方法、装置和计算机可读存储介质，对接收到的数据按照预设规则进行排序，得到初始数据集；从初始数据集中读取预设长度的数据队列；将确定出的数据队列中的冗余数据从初始数据集中删除，以得到目标数据集；判断目标数据集中是否存在未经去重处理的数据；若是，则依据数据队列的数据重复总次数和数据总条数以及设置的队列长度上限值和队列长度下限值，确定出队列长度；将该队列长度作为预设长度，将目标数据集作为初始数据集，重新执行从初始数据集中读取预设长度的数据队列的步骤，直至目标数据集中不存在未经去重处理的数据，则结束操作。
目标数据数据队列预设初始数据去重队列计算机可读存储介质数据管理读取初始数据集队列长度上限长度下限动态调整冗余数据数据重复预设规则重新执行总条数排序删除