“数据清洗”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果3248418个，建议您升级VIP下载更多相关专利

[发明专利]一种参数配置方法和设备-CN201810385919.5有效
发明人：邵明路;王蕊;王衎;宋哲;张雨晴 -专利权人：中移（苏州）软件技术有限公司;中国移动通信集团有限公司
申请日： 2018-04-26 - 公布日： 2021-08-13 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种参数配置方法和设备，用以实现处理批量SPARK数据清洗任务时参数配置问题。本发明实施例确定接收到的SPARK数据清洗任务的数据量以及SPARK数据清洗任务对应的SPARK数据清洗程序中包含的至少一个原子操作，根据基准数据和期望执行时间训练出不同原子操作基准参数数值，再根据基准参数数值、SPARK数据清洗任务的数据量以及SPARK数据清洗程序中的至少一个原子操作，确定SPARK数据清洗任务的基本资源配置参数。通过SPARK数据清洗程序中包含的原子操作，训练出不同原子操作的参数配置，再根据组成不同SPARK数据清洗程序的至少一个原子操作的参数配置，确定不同SPARK数据清洗任务的参数配置，因此处理批量SPARK数据清洗任务时，参数可以自动配置，从而提高了SPARK的性能。
一种参数配置方法设备

[发明专利]应用于大数据挖掘和业务分析的数据清洗方法及云服务器-CN202110165617.9有效
发明人：高云 -专利权人：北京数字一百信息技术有限公司
申请日： 2021-02-06 - 公布日： 2021-09-17 - 主分类号： G06F16/215 文献下载
摘要：本申请公开的应用于大数据挖掘和业务分析的数据清洗方法及云服务器，在对待清洗业务数据进行业务数据清洗时，能够结合业务数据挖掘信息实现，并且待清洗业务数据是对应的特定的数据交互场景的，因此在进行数据清洗过程中，能够考虑业务数据挖掘信息所对应的不同业务交互状态的用户业务需求信息，也就是说，在进行业务数据清洗时，能够充分考虑业务服务端的实际业务需求，这样一来，一方面可以提高数据清洗的准确性，避免遗留一些噪声数据或者脏数据，另一方面可以减少数据清洗的错误率，避免将一些重要的数据进行误清洗。如此，能够实现业务数据的快速、可靠清洗，从而确保清洗结果尽可能与业务服务端的大数据挖掘需求和业务分析需求匹配。
应用于数据挖掘业务分析清洗方法服务器

[发明专利]一种隧道吸尘清洗车的远程监控方法及系统-CN201810865480.6有效
发明人：叶洪伟;杨小凡;段晓;邵加鼎;邸广杰;刘建勤;时洪光 -专利权人：中车山东机车车辆有限公司
申请日： 2018-08-01 - 公布日： 2020-09-29 - 主分类号： G05B19/406 文献下载
摘要：本发明公开了一种隧道吸尘清洗车的远程监控方法及系统，在隧道吸尘清洗车作业时，获取隧道吸尘清洗车的吸尘清洗作业数据、作业速度数据和作业图像信息，并将其依次通过传输设备和云数据架构上传至远程控制平台；远程控制平台接收隧道吸尘清洗车的吸尘清洗作业数据、作业速度数据和作业图像信息，解析作业图像信息；远程控制平台根据解析后的作业图像信息、作业速度数据和天窗时间计算最佳作业速度数据；在隧道吸尘清洗车作业中出现故障时，根据解析后的作业图像信息、吸尘清洗作业数据计算最佳吸尘清洗作业数据；并通过云数据架构和传输设备传输至隧道吸尘清洗车；隧道吸尘清洗车接收最佳作业速度和最佳吸尘清洗作业数据，并按此数据作业运行。
一种隧道吸尘洗车远程监控方法系统

[发明专利]数据上传方法、装置、设备及计算机存储介质-CN202211697602.8在审
发明人：孙叠;温开虎;姚杰 -专利权人：上海汽车工业（集团）有限公司;上海汽车集团股份有限公司
申请日： 2022-12-28 - 公布日： 2023-06-23 - 主分类号： H04W4/44 文献下载
摘要：本申请公开了一种数据上传方法、装置、设备及计算机存储介质。可响应于用户的操作，与存储设备建立第一通讯连接。基于该第一通讯连接，获取该存储设备存储的目标数据。再根据预设的数据清洗算法，对该目标数据进行数据清洗，得到清洗数据。最后，通过预设的与云端服务器的第二通讯连接，将该清洗数据上传至云端服务器。根据本申请实施例，能够将进行数据清洗后的清洗数据上传至云端服务器。该清洗数据是基于数据清洗算法对采集到的目标数据进行数据清洗后得到的，可剔除该目标数据包含的重复数据、无效数据，减轻该云端服务器的存储压力，提高上传效率。
数据上传方法装置设备计算机存储介质

[发明专利]数据处理方法、装置及其电子设备-CN202210304567.2在审
发明人：柳絮;张勇;李欣潼 -专利权人：广东铭太信息科技有限公司
申请日： 2022-03-21 - 公布日： 2022-06-28 - 主分类号： G06F16/25 文献下载
摘要：本发明公开一种数据处理方法、装置及其电子设备，方法包括任务创建模块，用于根据接收到的执行参数信息创建数据清洗任务存储；和数据清洗模块，用于为创建的数据清洗任务关联待清洗的数据报表，并根据所述数据清洗任务对关联的所述数据报表进行清洗入库，获得相应的清洗结果数据。根据本发明提供的方案，解决了现有技术中的缺乏一种数据清洗效果良好的数据清洗方法来对仅可以通过原非结构呈现的预算审查报表进行数据处理的技术问题。
数据处理方法装置及其电子设备

[发明专利]一种面向在线水质、水动力监测数据的滚动数据清洗方法-CN202310700773.X在审
发明人：张海平;宋辰煜;崔婧嫄;瞿尧;崔亚飞;张晟 -专利权人：同济大学
申请日： 2023-06-14 - 公布日： 2023-08-29 - 主分类号： G06F18/24 文献下载
摘要：本发明涉及一种面向在线水质、水动力监测数据的滚动数据清洗方法，包括以下步骤：获取在线监测的历史及当天的水质、水动力数据，并根据数据类型将获取到的数据进行分类整理；针对每种类型的监测数据，挖掘异常数据特征，对数据进行预处理并判断能否满足第一清洗策略要求；若满足第一清洗策略要求，则使用优化后的STL时序分解清洗与密度聚类法对进行数据清洗，并用时序分解后的趋势分量与周期分量之和对异常数据进行重构，否则使用均值清洗法进行数据清洗；对清洗结果按清洗策略进行标注，上传至数据库中。与现有技术相比，本发明考虑了在线监测数据和异常数据的特性，通过两种清洗策略协同的方式，提高了数据质量并保障了监测数据的完整性。
一种面向在线水质动力监测数据滚动清洗方法

[发明专利]助力控制方法及清洗机-CN202210501031.X有效
发明人：柳志康;徐伟;陈至灵;李幸;吴任迪;周德化;蒋洪彬;王远 -专利权人：添可智能科技有限公司
申请日： 2022-05-09 - 公布日： 2023-09-01 - 主分类号： A47L11/40 文献下载
摘要：本发明实施例提供了一种助力控制方法及清洗机，所述方法应用于清洗机，包括：获取所述清洗机中的第一数据和第二数据，其中，所述第一数据和所述第二数据是不同类型的数据；通过所述第一数据和所述第二数据，确定所述清洗机的运动趋势；利用所述运动趋势，确定所述清洗机的助力方向；按照所述助力方向控制所述清洗机提供助力。通过获取清洗机中不同类型的第一数据和第二数据，由第一数据和第二数据，确定清洗机的运动趋势，利用运动趋势，确定清洗机的助力方向，按照助力方向控制清洗机提供助力，可以让用户更省力的使用清洗机，提高用户体验。
助力控制方法清洗

[发明专利]一种数据清洗加工方法及系统-CN201811532167.7在审
发明人：王乐;张辉 -专利权人：浪潮软件集团有限公司
申请日： 2018-12-14 - 公布日： 2019-04-26 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种数据清洗加工方法及系统，属于数据处理技术领域。本发明的数据清洗加工方法，该方法首先建立数据模型与数据清洗加工规则之间的关系图谱，利用所述关系图谱完成原始数据到标准化的清洗加工结果数据全自动化处理，完成数据清洗加工。该发明的数据清洗加工方法能够提高清洗加工规则的运行效能，更大程度的提升清洗加工规则的复用程度，具有很好的推广应用价值。
数据清洗加工加工方法及系统清洗图谱数据处理技术加工结果全自动化数据模型原始数据运行效能复用标准化

[发明专利]一种固定资产投资项目数据清洗方法及终端-CN202010882078.6在审
发明人：张美跃;黄君;范章华 -专利权人：恒瑞通（福建）信息技术有限公司
申请日： 2020-08-28 - 公布日： 2020-11-20 - 主分类号： G06F16/215 文献下载
摘要：本发明涉及一种固定资产投资项目数据清洗方法及终端，将原始数据通过数据装载的方式装载至第一数据库中得到装载数据，所述数据装载的方式包括基本装载、追加装载和合并装载，按照所述第一数据库格式对所述装载数据进行格式转化处理得到待清洗数据；根据预设规则对所述待清洗数据进行清洗过滤处理得到清洗数据，根据完整性规则、唯一性规则、一致性规则、合法性规则和权威性规则对所述清洗数据进行校验，若校验成功，则将所述清洗数据保存至第一数据库中。格式转化后避免格式杂乱，便于后续的数据清洗；另外，校验成功的清洗数据才能够保存至第一数据库中，保证存入第一数据库中的清洗数据满足要求，从而能够减少数据质量问题。
一种固定资产投资项目数据清洗方法终端

[发明专利]音频数据的清洗方法、装置、电子设备以及存储介质-CN202210237461.5在审
发明人：黄润乾;陈东鹏 -专利权人：深圳市声扬科技有限公司
申请日： 2022-03-11 - 公布日： 2023-09-19 - 主分类号： G10L17/02 文献下载
摘要：本申请公开了一种音频数据的清洗方法、装置、电子设备以及存储介质，涉及音频数据技术领域。该方法包括：获取待清洗音频数据，获取待清洗音频数据的音频信息，从多个音频处理算法中选择与音频信息对应的目标音频处理算法，以及基于目标音频处理算法对待清洗音频数据进行清洗处理，从待清洗音频数据中筛选出目标音频数据，从而可以根据音频数据的音频信息确定对音频数据进行处理的音频处理算法，实现自动对音频数据进行清洗，提高音频数据清洗的效率，并提高音频数据清洗的准确。
音频数据清洗方法装置电子设备以及存储介质

[发明专利]基于人工智能的短信数据清洗方法-CN201710588622.4在审
发明人：武明根;吴强生;叶强 -专利权人：安徽一拓通信科技集团股份有限公司
申请日： 2017-07-19 - 公布日： 2017-12-12 - 主分类号： G06F17/30 文献下载
摘要：本发明公开了一种基于人工智能的短信数据清洗方法，包括以下步骤构建人工智能的短信数据清洗系统；采集所需的短信数据，并对其进行识别，将同一领域的短信数据进行合并；预先设定比较规则，并将同一领域的短信数据逐条读取，与预先设定的比较规则进行比较，从而筛选得到问题数据；将得到的问题数据进行汇总，清洗；对清洗完毕的问题数据进行再确认，将确认无误的清洗数据进行储存。本发明通过构建人工智能的短信数据清洗系统，利用系统完成对短信数据的采集、识别、分类、比较；对错误数据的汇总、清洗及对清洗数据的储存；其清洗流程简单、清洗效率高、准确率高，基于人工智能，避免了人工投入及辅助，清洗投入小，成本低，值得推广。
基于人工智能短信数据清洗方法

[发明专利]一种基于贝叶斯算法的住户用电数据清洗方法-CN201910039302.2在审
发明人：陈小强 -专利权人：江苏圣通电力新能源科技有限公司
申请日： 2019-01-16 - 公布日： 2019-05-28 - 主分类号： G06F16/215 文献下载
摘要：本发明涉及数据清洗相关技术领域，具体为一种基于贝叶斯算法的住户用电数据清洗方法。包括数据采集，规则定义、数据清洗，结果验证和数据替换，该基于贝叶斯算法的住户用电数据清洗方法利用定义清洗规则，根据住户用电数据不同的错误类型制定不同的清洗规则，同时，清洗规则包括非法值、空值、不一致数据以及相似重复数据的检测和处理，采用近邻排序算法SNM，该算法可以对相似数据进行有效重复值清洗的工作，提高效率。
清洗用电数据算法贝叶斯住户数据清洗错误类型结果验证排序算法数据采集数据替换重复数据不一致检测重复非法制定

[发明专利]一种数据清洗方法及设备-CN201510920989.2有效
发明人：王立伟 -专利权人：阿里巴巴集团控股有限公司
申请日： 2015-12-11 - 公布日： 2020-08-04 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种数据清洗方法及设备。在预先设置指标统计维护任务表以及指标清洗代码模板的情况下，当到达同步时刻时根据当前状态为有效的指标统计维护任务表以及指标清洗代码模板配置数据清洗任务，并对数据清洗任务进行运行测试，仅在数据清洗任务运行测试成功时才根据指标统计维护任务表以及指标清洗代码模板进行调度配置，以及将数据清洗任务发布至生产环境，以使数据仓库进行数据清洗。从而能够自动地执行数据清洗任务，减少数据仓库开发人员的工作量，提升了数据开发效率。
一种数据清洗方法设备

[发明专利]一种数据清洗方法及装置-CN202210837118.4在审
发明人：安西平;徐辉 -专利权人：生命奇点（北京）科技有限公司
申请日： 2022-07-15 - 公布日： 2022-11-25 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种数据清洗方法及装置。其中，方法包括：从至少一个数据源获取待清洗的原始数据；根据预先配置的清洗规则以及预先发布的清洗任务，对所述原始数据进行数据清洗，剔除所述原始数据中的异常数据；对数据清洗后的原始数据进行存储，对所剔除的异常数据进行汇总并缓存
一种数据清洗方法装置

[发明专利]数据清洗方法及装置-CN201710552485.9在审
发明人：唐锐;秦锋剑 -专利权人：小草数语（北京）科技有限公司
申请日： 2017-07-07 - 公布日： 2017-10-10 - 主分类号： G06F17/30 文献下载
摘要：本发明提出一种数据清洗方法及装置，其中，方法包括对待清洗的第一数据进行结构化处理，得到结构化的目标数据；所述目标数据中包括需要清洗的数据字段；确定各数据字段对应的属性以及从属于各属性的清洗规则；利用从属于各属性的清洗规则形成清洗规则集；基于所述清洗规则集对所述目标数据进行清洗。通过本方法，能够实现数据的自动清洗，降低数据清洗的工作量和人工参与度，提高方法的复用性，解决现有技术中工作量大、人工参与度和主观性高、不规范的问题。
数据清洗方法装置

首页
«上一页
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
下一页»
尾页
共 100000 条