[发明专利]基于异常声音和图像事件驱动的智能服务机器人及方法

摘要

本发明公开了一种基于异常声音和图像事件驱动的智能服务机器人及处理方法，包括移动机器人单元、声音和图像传感器、声音和图像事件控制单元以及远程客户端，声音和图像传感器设置在移动机器人单元上，并通过接口与声音和图像事件控制单元相连，声音和图像事件控制单元安装在移动机器人单元上并通过接口与移动机器人单元连接，声音和图像事件控制单元通过网络与远程客户端通信，当智能服务机器人听到或者看到有异常的事件时，则导航到事件发生的地点，融合声音和图像进一步识别该事件并根据识别结果做相应处理。本发明避免了摄像头一直拍摄人员特别是家庭环境所造成的隐私泄露以及不舒服感；大大降低了功耗，提高了效率。

主权项

1.一种基于异常声音和图像事件驱动的智能服务机器人的处理方法，其特征在于在正常情况下，智能服务机器人停在原处或者在指定区域移动，当听到或者看到有异常的事件时，则导航到事件发生的地点，融合声音和图像进一步识别该事件并根据识别结果做相应处理；/n具体步骤如下：/n1)正常情况下，移动机器人单元(1)停在原处或者在指定区域移动；/n2)同时声音和图像事件控制单元(3)通过声音和图像传感器(2)获取声音和图像信息；/n3)若声音和图像事件控制单元(3)识别到声音和图像异常事件，则定位事件发生的位置；/n4)声音和图像事件控制单元(3)控制移动机器人单元(1)导航到事件发生位置；/n5)声音和图像事件控制单元(3)融合声音和图像进一步识别该事件；/n6)若判断为异常事件，则声音和图像事件控制单元(3)发送事件预警信息给远程客户端(12)；/n7)若判断为正常事件，则返回到步骤1)；/n所述声音和图像事件控制单元(3)对于异常事件的识别、定位以及导航步骤如下：/n1)移动机器人单元(1)上的声音和图像事件控制单元(3)通过Kinect传感器内部的麦克风阵列(4)获取异常声音信号；/n2)声音和图像事件控制单元(3)中的计算机(9)首先对获取的声音信号进行端点检测、分帧加窗处理，通过倒谱分析提取声音信号的特征梅尔频率倒谱系数，采用支持向量机对特征系数进行分类，得到声音信号的分类结果；/n3)若分类结果为异常事件，声音和图像事件控制单元(3)中的声音和图像采集模块(10)获取麦克风阵列(4)的声音信号数据，计算机(9)对声音信号数据进行分帧加窗处理后，声音信号矩阵和背景噪声矩阵进行广义特征值分解，将分解的噪声特征向量构造空间谱函数，通过求解极大值得到异常事件发生的方位角；/n4)移动机器人单元(1)得到异常事件的方位角后，计算机(9)通过串口通讯模块(11)向控制器(8)发送方位角，控制器(8)调整移动机器人单元(1)向异常事件的发生位置移动；同时控制器(8)根据移动机器人单元(1)的运动距离，结合方位角利用三角测量得到异常事件发生的位置距离；/n5)在移动机器人单元(1)移动过程中，根据障碍检测传感器(7)获取障碍物区域，选择非障碍物区域移动，重复步骤4)，最终移动机器人单元(1)到达异常事件发生位置。/n