[发明专利]一种人员行为的识别方法和系统在审
| 申请号: | 202010350720.6 | 申请日: | 2020-04-28 |
| 公开(公告)号: | CN111666812A | 公开(公告)日: | 2020-09-15 |
| 发明(设计)人: | 刘永辉;代利坚;张力;李毅;陈军晓 | 申请(专利权)人: | 苏宁云计算有限公司 |
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G06F40/30;G10L15/22 |
| 代理公司: | 北京市万慧达律师事务所 11111 | 代理人: | 顾友 |
| 地址: | 210000 江苏省南*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 人员 行为 识别 方法 系统 | ||
1.一种人员行为的识别方法,其特征在于,包括以下步骤:
获得人员的原始行为信息,对所述原始行为信息进行分析处理得到以结构化数据表示的人员行为;所述原始行为信息包括采集得到的语音信息和/或视频信息;
根据预先设置的识别规则,对所述结构化数据进行识别以判断所述人员行为是否违规。
2.根据权利要求1所述的人员行为的识别方法,其特征在于,当所述原始行为信息包括视频信息时,对所述原始行为信息进行分析处理得到的结构化数据包括:提取所述视频信息的视频画面;识别所述视频画面中人员的身份信息和动作信息。
3.根据权利要求2所述的人员行为的识别方法,其特征在于,所述动作信息的识别包括:对所述视频画面抽取图片帧,对所述图片帧进行做差处理,检测所述图片帧变化的部分;通过所述图片帧的变化识别出所述图片帧中的轮廓是否为人体;若是人体,则再对人体的姿势进行识别。
4.根据权利要求3所述的人员行为的识别方法,其特征在于,对人体的姿势进行识别包括:通过所述图片帧得到人体特征图,根据所述人体特征图检测人体的骨骼关节点,利用所述骨骼关节点合成人体的整体骨架,再通过所述整体骨架分析人体的姿态。
5.根据权利要求1所述的人员行为的识别方法,其特征在于,当所述原始行为信息包括语音信息时,对所述原始行为信息进行分析处理得到的结构化数据包括:将所述语音信息进行语音识别得到文字;对所述文字进行语义识别,得到所述文字中的分词结果作为所述结构化数据。
6.一种人员行为的识别系统,其特征在于,包括:
行为采集模块,用于获得人员的原始行为信息,对所述原始行为信息进行分析处理得到以结构化数据表示的人员行为;所述原始行为信息包括采集得到的语音信息和/或视频信息;
识别判断模块,用于根据预先设置的识别规则,对所述结构化数据进行识别以判断所述人员行为是否违规。
7.根据权利要求6所述的人员行为的识别系统,其特征在于,所述行为采集模块包括画面分析单元,当所述原始行为信息包括视频信息时,所述画面分析单元用于提取所述视频信息的视频画面;识别所述视频画面中人员的身份信息和动作信息。
8.根据权利要求7所述的人员行为的识别系统,其特征在于,所述画面分析单元包括有动作识别子单元,所述动作识别子单元用于对所述视频画面抽取图片帧,对所述图片帧进行做差处理,检测所述图片帧变化的部分;通过所述图片帧的变化识别出所述图片帧中的轮廓是否为人体;若是人体,则再对人体的姿势进行识别。
9.根据权利要求7所述的人员行为的识别系统,其特征在于,所述动作识别子单元对人体的姿势进行识别包括:通过所述图片帧得到人体特征图,根据所述人体特征图检测人体的骨骼关节点,利用所述骨骼关节点合成人体的整体骨架,再通过所述整体骨架分析人体的姿态。
10.根据权利要求6所述的人员行为的识别系统,其特征在于,所述行为采集模块还包括语音分析单元,当所述原始行为信息包括语音信息时,所述语音分析单元用于将所述语音信息进行语音识别得到文字;对所述文字进行语义识别,得到所述文字中的分词结果作为所述结构化数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏宁云计算有限公司,未经苏宁云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010350720.6/1.html,转载请声明来源钻瓜专利网。





