[发明专利]一种人体动作识别方法和智能电视

说明书

本申请提供了一种人体动作识别方法和智能电视，该人体动作识别方法包括以下步骤：通过摄像头采集包含人物的图像；采用OpenPose算法从每一帧图像中检测人体骨架位置；通过滑动窗口汇总前N帧图像的骨架数据；对骨架数据进行特征提取；将特征输入分类器得到动作识别结果。本申请通过摄像头采集到的图像，能够识别人体骨骼和人体动作，从而实现智能电视的人机体感互动。该方法的识别准确度高，不容易丢失。

技术领域

本发明涉及人机交互技术，尤其涉及一种人体动作识别方法和智能电视。

背景技术

随着科学技术的发展，电视迎来了智能化浪潮。智能电视企业的技术研发水平不断提高，促使智能电视行业市场规模持续增长。智能电视已不只是一种放映工具，更是享受生活和获得综合服务的智能平台。随着5G、大数据、AI等技术的发展，虚拟与现实结合似乎成为一种势不可挡的趋势，通过现有的智能电视设备实现人机互动，将为用户带来更多的娱乐和学习体验，也为智能电视应用开发商提供一种全新的制作工具。

目前通过动作识别实现人机交互的技术主要通过微软公司生产的一款名为Kinect的硬件设备，但是该设备于2014年10月已宣布停产。而且该设备存在识别准确度低，易丢失和定位不准确的问题。

发明内容

本发明的目的在于提供一种基于摄像头的、识别准确度高的人体动作识别方法和智能电视。

以下给出一个或多个方面的简要概述以提供对这些方面的基本理解。此概述不是所有构想到的方面的详尽综览，并且既非旨在指认出所有方面的关键性或决定性要素亦非试图界定任何或所有方面的范围。其唯一的目的是要以简化形式给出一个或多个方面的一些概念以为稍后给出的更加详细的描述之序。

根据本发明的一方面，提供了一种人体动作识别方法，包括以下步骤：

通过摄像头采集包含人物的图像；

采用OpenPose算法从每一帧图像中检测人体骨架位置；

通过滑动窗口汇总前N帧图像的骨架数据；

对骨架数据进行特征提取；

将特征输入分类器得到动作识别结果。

在一实施例中，所述摄像头为智能电视本身的摄像头或加装在智能电视上的网络摄像头。

在一实施例中，所述摄像头采集的图像分辨率为320像素×240像素。

在一实施例中，所述滑动窗口沿视频的时间维度逐帧滑动，并为每个视频输出标签。

在一实施例中，所述分类器中预设有20个动作类别和557个动作样本。

在一实施例中，所述对骨架数据进行特征提取，包括：

通过跟踪算法从RGB视频中提取人体骨架信息；

选择包含骨架中相对准确的姿态的帧制作一系列信息帧；

基于信息帧中的人体姿态形成人体姿态流，基于与对象相关的人体姿态形成对象相关姿态流；

通过GCN网络将人体姿态流于对象相关姿态流进行融合。

根据本发明的另一方面，提供了一种智能电视，包括摄像头和主机，所述主机包括存储器和处理器；

所述存储器，用于存储计算机程序；

所述处理器，用于当执行所述计算机程序时，实现上述任一项所述的人体动作识别方法。

在一实施例中，所述计算机程序基于Unity3D引擎开发。

在一实施例中，所述计算机程序中集成有人机互动内容。