[发明专利]手势控制终端的交互方法及装置

说明书

技术领域

本发明涉及到通信技术领域，特别涉及到一种手势控制终端的交互方法及装置。

背景技术

随着智能时代的到来，遥控系统也越来越智能。当前对终端进行远程遥控的模式主要有以下几种：1、红外终端远程遥控器；2、类似鼠标的遥控器输入；3、采用手写板的遥控器手写输入。以上几种远程遥控模式都需要用户使用外部设备以输入遥控信号，例如：用户需要使用遥控器，首先要找到遥控器。

现在已经出现一种通过手势控制技术，其可以达到遥控器的控制功能。手势控制技术的特点是用户通过操作者的手部动作(例如，挥手)来控制终端设备，来达到例如切换终端频道，调节音量等功能，从而省去了用户寻找遥控器来进行操作的过程，用户在摄像头前面挥挥手即可实现对终端的控制，从而将用户从对遥控器的依赖中解放出来。

但是现有技术中存在的手势控制技术，经常出现用户手势识别出错甚至是识别到的不是用户对终端控制的手势动作。

发明内容

本发明的主要目的为提供一种手势控制终端的交互方法，旨在实现终端更准确的识别到用户的控制手势，提高用户体验。

本发明还提出一种手势控制终端的交互装置，旨在实现终端更准确的识别到用户的控制手势，提高用户体验。

一种手势控制终端的交互方法，该方法包括：在侦测到手势控制指令时，控制终端内置的摄像头获取用户的图像帧；对获取的图像帧进行手势解析以确定图像帧中含有手势；在含有手势的图像帧中确定人体的头及/或肩的局部特征；比对确定的人体的头及/或肩的局部特征与预存的特定人员的头及/或肩的局部特征，以确定与特定人员对应的含有手势的图像帧；根据确定的与特定人员对应的含有手势的图像帧中的手势确定对终端进行控制的控制信号，并根据确定的控制信号对终端进行控制。

优选地，所述根据确定的与特定人员对应的含有手势的图像帧中的手势确定对终端进行控制的控制指令，并根据确定的控制指令对终端进行控制的步骤包括：实时获取与特定人员对应的含有手势的图像帧，运用多目标跟踪法根据实时获取与特定人员对应的含有手势的图像帧建立当前的手势的运动轨迹；将当前手势的运动轨迹与预设的轨迹库中的轨迹进行匹配；当当前手势的运动轨迹与预设的轨迹库中的轨迹匹配时，根据匹配的预设的轨迹库中的轨迹确定对终端进行控制的控制信号；根据确定的控制信号对终端进行控制。

优选地，所述对获取的图像帧进行手势解析以确定含有手势的图像帧的步骤之前还包括：将通过终端内置的摄像头获取的用户图像帧去除噪点，并进行大小的调整。

优选地，该方法还包括：当当前的手势的运动轨迹与预设的轨迹库中的轨迹不匹配时，产生告警信息。

优选地，所述控制终端内置的摄像头获取用户图像帧的步骤之前还包括：当侦测并接收到手势控制终端的指令时，判断终端内置的摄像头是否被占用；及当终端内置的摄像头被占用时，暂停摄像头当前任务并调用摄像头。

一种手势控制终端的交互装置，该交互装置包括：图像获取模块，用于侦测到手势控制指令时，控制终端内置的摄像头获取用户的图像帧；手势区分模块，用于对获取的图像帧进行手势解析以确定图像帧中含有手势；手势处理模块，用于在含有手势的图像帧中确定人体的头及/或肩的局部特征；及比对确定的人体的头及/或肩的局部特征与预存的特定人员的头及/或肩的局部特征，以确定与特定人员对应的含有手势的图像帧；手势控制模块，用于根据确定的与特定人员对应的含有手势的图像帧中的手势确定对终端进行控制的控制信号，并根据确定的控制信号对终端进行控制。

优选地，所述图像获取模块还用于实时获取与特定人员对应的含有手势的图像帧；所述手势处理模块还用于运用多目标跟踪法根据实时获取与特定人员对应的含有手势的图像帧建立当前的手势的运动轨迹；及将当前手势的运动轨迹与预设的轨迹库中的轨迹进行匹配；所述手势控制模块还用于当当前手势的运动轨迹与预设的轨迹库中的轨迹匹配时，根据匹配的预设的轨迹库中的轨迹确定对终端进行控制的控制信号，并根据确定的控制信号对终端进行控制。

优选地，该交互装置还包括：图像处理模块，用于将通过终端内置的摄像头获取的用户图像帧去除噪点，并进行大小的调整。

优选地，该装置还包括：告警模块，用于当当前的手势的运动轨迹与预设的轨迹库中的轨迹不匹配时，产生告警信息。

优选地，所述图像获取模块还用于当侦测并接收到手势控制终端的指令时，判断终端内置的摄像头是否被占用；及当终端内置的摄像头被占用时，暂停摄像头当前任务并调用摄像头。