[发明专利]数据特征提取方法、装置、计算机设备以及存储介质在审

专利信息
申请号: 201910036799.2 申请日: 2019-01-15
公开(公告)号: CN111435356A 公开(公告)日: 2020-07-21
发明(设计)人: 胡健超 申请(专利权)人: 杭州海康威视数字技术股份有限公司
主分类号: G06F16/25 分类号: G06F16/25;G06F9/54;G06F9/50
代理公司: 北京三高永信知识产权代理有限责任公司 11138 代理人: 李珂珂
地址: 310051 浙*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 特征 提取 方法 装置 计算机 设备 以及 存储 介质
【说明书】:

本申请公开了一种数据特征提取方法、装置、计算机设备以及存储介质,属于物联网技术领域。所述方法通过将直接获取的数据流中的各个数据输入至少一个目标模型中,得到至少一个目标特征,基于该至少一个目标模型,从而可以直接实现数据的特征提取,而不必通过使用流计算引擎来实现数据的特征提取,也就无需对流计算引擎各个接口进行二次开发,从而技术人员无需学习Flink流计算引擎,进而降低了技术人员的学习和开发成本。

技术领域

本申请涉及物联网技术领域,特别涉及一种数据特征提取方法、装置、计算机设备以及存储介质。

背景技术

随着物联网在生活中的广泛应用,产生了大量的物联网数据,而技术人员可以提取该物联网数据的特征,并基于提取的特征对该物联网数据进行分析,来发现消费者的消费方向,从而为企业提供一个正确的发展方向,以促进企业的发展。

目前,物联网数据进行特征提取可以是以下过程:Flink流计算引擎是一个开源的流处理框架,其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能,基于上述功能,技术人员再对物联网数据进行特征提取时,需要对Flink流计算引擎的各类接口进行二次开发,以实现对物联网数据的特征提取。

在上述过程中,技术人员需要对Flink流计算引擎进行二次开发后,才能提取物联网数据的特征,而技术人员必须先学习Flink流计算引擎,才能对Flink流计算引擎进行二次开发,那么,为了在Flink流计算引擎上实现物联网数据的特征提取,该技术人员需要大量的时间来学习和开发Flink流计算引擎,从而导致技术人员学习和开发的成本较高。

发明内容

本申请实施例提供了一种数据特征提取方法、装置、计算机设备以及存储介质,能够解决对物联网数据进行特征提取时技术人员学习成本高的问题。所述技术方案如下:

第一方面,提供了一种数据特征提取方法,所述方法包括:

从开源流处理平台中获取数据流,将该数据流中的各个数据存储至数据队列中,每个数据携带类型标识,所述类型标识用于指示数据类型;

按照该数据队列中的存储顺序,从该数据队列中获取待进行特征提取的数据;

每获取到一个数据时,基于该数据的类型标识,获取至少一个目标模型,该类型标识对应至少一个目标模型;

将该数据输入至该至少一个目标模型中,得到至少一个第一特征,一个第一特征与一个目标模型对应。

可选地,将该数据输入至该至少一个目标模型中,得到至少一个第一特征,包括:

根据该数据的类型标识,对数据库中该至少一个目标模型的第二特征进行加锁,该第二特征为上一次模型运算过程中所产生的特征;

将该数据以及每个第二特征输入至对应的目标模型,得到至少一个第一特征;

将该至少一个第一特征存储在该数据库中;

释放该数据库中每个第二特征的锁。

可选地,该方法还包括:

当从该数据库中获取不到该至少一个目标模型的第二特征时,持续获取该至少一个目标模型的第二特征;

当在预设次数内获取到该至少一个目标模型的第二特征时,将该数据以及每个第二特征输入至对应的目标模型,得到至少一个第一特征,当在预设次数内获取不到该至少一个目标模型的第二特征时,丢弃该数据,获取该数据队列中的下一个数据。

可选地,将该至少一个第一特征存储在所述数据库中,包括:

通过封装接口,根据数据输出接口的输出协议,封装该至少一个第一特征;

通过该数据输出接口,将该至少一个第一特征存储在数据库中。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视数字技术股份有限公司,未经杭州海康威视数字技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910036799.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top