[发明专利]交互式智能家庭服务系统及方法有效
申请号: | 201710367540.7 | 申请日: | 2017-05-23 |
公开(公告)号: | CN107065586B | 公开(公告)日: | 2020-02-07 |
发明(设计)人: | 黄凯奇;康运锋;谢元涛;张世渝;姜宇 | 申请(专利权)人: | 中国科学院自动化研究所 |
主分类号: | G05B15/02 | 分类号: | G05B15/02;G05B19/418 |
代理公司: | 11482 北京瀚仁知识产权代理事务所(普通合伙) | 代理人: | 郭文浩;王世超 |
地址: | 100080 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分析服务器 智能化 智能家庭服务系统 视频监控单元 语音交互系统 智能家居系统 交互体验 交互终端 结构连接 模式类别 提升设备 通信数据 用户场景 语音单元 智能分析 智能设备 主动交互 自动感知 自我学习 传统的 整合 听觉 视觉 情景 身份 改造 服务 | ||
1.一种交互式智能家庭服务系统,其特征在于,所述交互式智能家庭服务系统包括:视频监控单元,用于实时自动获取门前或者室内的人员的面部图像、和/或室内物体的图像;语音单元,用于采集室内人员的语音指令和/或发出语音提醒信息;交互终端,与所述语音单元连接,用于推送语音提醒指令到所述语音单元中,使所述语音单元发出对应所述语音提醒指令的语音提醒信息;或者接收所述语音单元采集的语音指令,并将对应指令发送给分析服务器进行对应处理;分析服务器,分别与所述视频监控单元和交互终端连接,用于进行语音交互和视觉感知交互;在进行视觉感知交互时,根据所述门前或者室内的人员的面部图像,进行人脸验证,自动切换模式类别;对室内人体和物体进行智能视频分析,自动生成不同应用场景下的语音提醒指令;在进行语音交互时,根据智能视频分析自动挖掘用户需求,生成相应的语音提醒指令,并通过所述交互终端推送到所述语音单元,或者根据所述交互终端推送的语音指令,进行人脸验证,自动切换模式类别,并生成对应的语音提醒指令;其中,所述模式类别包括安全模式和服务模式;
所述服务模式包括定时提醒、访客提醒、智能寻物、喝水提醒及久坐提醒中至少一项;所述安全模式包括身份认证、入侵提醒、财务守护、异常回放及自我诊断中至少一项。
2.根据权利要求1所述的交互式智能家庭服务系统,其特征在于,所述交互式智能家庭服务系统还包括:传感器单元,所述传感器单元与所述分析服务器连接,用于实时检测与房屋相关的状态信息,并将所述状态信息发送至所述分析服务器,以辅助视频监控单元的智能视频分析,对用户需求进行精准分析。
3.根据权利要求2所述的交互式智能家庭服务系统,其特征在于,传感器单元包括设置于房屋各门窗入口处的门磁传感器、设置于室内且用于检测室内人员的人体传感器、用于检测烟雾的烟雾传感器、用于检测室内气候环境的温湿度传感器以及与家庭内的物件绑定的寻物传感器中至少一项。
4.根据权利要求3所述的交互式智能家庭服务系统,其特征在于,所述寻物传感器连接有语音报警器,用于当用户发出寻找指令以寻找指定物品时,所述语音单元通过交互终端将寻找指令发送至所述分析服务器,所述分析服务器与对应的寻物传感器通信,使与所述寻物传感器连接的语音报警器发出报警信号,以提醒用户。
5.根据权利要求2所述的交互式智能家庭服务系统,其特征在于,所述交互式智能家庭服务系统还包括:智能网关,所述传感器单元通过ZigBee协议接入所述智能网关;路由器,所述智能网关和分析服务器全部连入所述路由器建立的无线局域网,所述分析服务器通过无线网分别与交互终端、视频监控单元和智能网关相连,所述分析服务器通过HTTP协议对所述传感器单元进行通信和控制。
6.根据权利要求1所述的交互式智能家庭服务系统,其特征在于,所述分析服务器还用于当初次使用时,主动进行用户人脸注册,并设置用户的使用权限。
7.根据权利要求6所述的交互式智能家庭服务系统,其特征在于,所述分析服务器还用于在自动对视频监控单元采集到的人脸进行身份认证时,确认所述门前或者室内的人员的身份,并根据所述人员的身份开启或关闭对应的使用权限。
8.根据权利要求1-7中任一项所述的交互式智能家庭服务系统,其特征在于,所述交互式智能家庭服务系统还包括移动终端,用于通过移动终端对室内物体进行拍照和标签,将所拍照的物体图像样本传输到云端,自动更新所述分析服务器中存储的目标检测模型。
9.一种交互式智能家庭服务方法,其特征在于,所述交互式智能家庭服务方法包括:通过视频监控单元实时自动获取门前或者室内的人员的面部图像、和/或室内物体的图像;通过语音单元采集室内人员的语音指令和/或发出语音提醒信息;通过分析服务器进行语音交互和视觉感知交互,在进行视觉感知交互时,根据所述门前或者室内的人员的面部图像,进行人脸验证,自动切换模式类别;对室内人体和物体进行智能视频分析,自动生成不同应用场景下的语音提醒指令;在进行语音交互时,根据智能视频分析自动挖掘用户需求,生成相应的语音提醒指令,并通过交互终端将所述语音提醒指令推送到语音单元中,使所述语音单元发出对应所述语音提醒指令的语音提醒信息;或者根据所述交互终端推送的语音指令,进行人脸验证,切换模式类别,并生成对应的语音提醒指令;其中,所述模式类别包括安全模式和服务模式;
所述服务模式包括定时提醒、访客提醒、智能寻物、喝水提醒及久坐提醒中至少一项;所述安全模式包括身份认证、入侵提醒、财务守护、异常回放及自我诊断中至少一项。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所,未经中国科学院自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710367540.7/1.html,转载请声明来源钻瓜专利网。