[发明专利]一种基于人脸识别和行为识别的视频制作方法及系统

说明书

技术领域

本发明属于人脸识别及行为识别领域，具体涉及一种基于人脸识别和行为识别的视频制作方法及系统。

背景技术

人脸识别是指利用分析比较人脸视觉特征信息，用以进行身份鉴别的计算机技术。目前属于比较热门的计算机技术研究领域，其应用在生活中也越来越广泛，包括数码相机人脸自动对焦、笑脸快门技术、公安刑侦破案、门禁系统、摄像监视系统和身份辨识等方面。

行为识别指人体行为分析技术，它有着广泛的应用背景,如智能监控、人机交互、运动员辅助训练、视频编码等。近年来,在这些应用的驱动之下,行为分析已经成为图像分析、心理学、神经生理学等相关领域的研究热点。常见的应用有视频的目标跟踪、检测和监控异常行为等。

在日常生活中，多媒体为我们的生活带来了许多便利与乐趣。在人们观看视频的时候，希望自己也能成功视频中的人物，以带来身临其境的体验。比如说，KTV是现代人闲余时间常去的娱乐场所，它不仅可以打发空余时间，更成为人们提升团队感情，休闲娱乐的地方。假设KTV能够拥有新的功能，使歌唱者不仅可以传统地看着屏幕MV唱歌，还可以使歌曲视频中动态播放歌唱者的行为，这样将给用户带来一种全新的乐趣。

目前存在一些视频角色互换的技术，在申请号为201110086617.6的专利中，公开了一种角色互动的视频播放方法，包括：步骤一、对准备播放的视频图像进行人脸检测,获得人脸区域；步骤二、对人脸区域进行姿态估计,获得姿态参数；步骤三、根据姿态参数,从数据库中查找匹配的观众人脸图像作为匹配图像；步骤四、用匹配图像替换人脸区域,获得新的视频图像。上述方法首先需要从数据库中查找观众人脸图像后，再与视频中的人脸图像互换。存在如下问题：一方面替换后的观众人脸表情会比较僵硬，观众体验不够生动；另一方面，仅将人脸进行角色互换，观众的肢体语言并没有融合到视频情境中，没有真正身临其境的感觉。

鉴于上述原因，本发明提供一种基于人脸识别和行为识别的视频制作方法及系统，以达到视频中可动态播放观众人脸和行为的效果。

发明内容

本发明提供一种基于人脸识别和行为识别的视频制作方法，包括以下步骤：

S1、摄像头拍摄观众画面并将画面传送给识别器，所述识别器识别出画面中的人脸，并判断连续识别到人脸的时间是否达到预设时间；

S2、若是，识别器通知图像处理器开始进行观众行为识别，同时识别器将识别到的人脸图像发送给所述图像处理器；

S3、图像处理器将视频中的人脸替换为已接收的人脸图像，并将视频中人物行为替换为已识别的观众行为，并将替换后的新视频发送至服务器保存。

优选的，在步骤S1中，若识别器判断连续识别到人脸的时间没有达到预设时间，则识别器不向图像处理器发送通知，也不将自身识别到的人脸图像发送给所述图像处理器。

优选的，在步骤S1中，识别器判断连续识别到人脸的时间是否达到预设时间，其中所述人脸为正脸。

优选的，步骤S3还包括：服务器还接收录音器提供的音频，并将所述音频与新视频合并保存。

优选的，本方法还包括步骤S4：观众通过客户端点播服务器合并保存的音频及新视频，服务器将所述合并保存的音频及新视频发送给客户端，由客户端播放。

本发明还提供一种基于人脸识别和行为识别的视频制作系统，包括摄像头、识别器、图像处理器及服务器，所述摄像头连接识别器，所述识别器连接图像处理器，所述图像处理器连接服务器。

优选的，所述系统还包括录音器，所述录音器与服务器连接。

优选的，所述摄像头、识别器、图像处理器及录音器内置在视频制作系统中。

根据本发明提供的基于人脸识别和行为识别的视频制作方法及系统，当识别器识别出观众人脸，并判断连续识别到人脸的时间达到预设时间时，图像处理器根据识别器的通知开始进行观众行为识别，避免了捕捉人脸持续时间短对系统造成的资源浪费。同时，图像处理器将视频中的人脸替换为识别器提供的人脸图像，并将视频中人物行为替换为已识别的观众行为，由此，实现了观众人脸和肢体行为与视频中的角色互换，给观众带来了良好的互动体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明较佳实施例提供的基于人脸识别和行为识别的视频制作方法流程图；