[发明专利]一种基于唇动的视频角色识别方法、装置及存储介质

说明书

本发明公开了一种基于唇动的视频角色识别方法、装置及存储介质，可以对与目标视频文件关联的随路数据进行角色面部识别，获取每个角色对应的面部标准图像和第一面部区域信息，并建立角色信息、面部标准图像和第一面部区域信息的关联关系；对所述目标视频文件进行唇动识别，确定发生唇动的面部识别图像和第二面部区域信息；基于随路数据中的识别标识确定识别策略；基于每个角色对应的面部标准图像和第一面部区域信息、所述面部识别图像、所述第二面部区域信息和识别策略进行角色识别，确定角色识别结果。本发明基于发生唇动的面部图像和面部区域信息基于不同的策略进行角色信息的识别，实现满足不同性能要求，不同准确度要求的角色识别。

技术领域

本发明涉及信息处理技术领域，并且更具体地，涉及一种基于唇动的视频角色识别方法、装置及存储介质。

背景技术

近些年，“依法合规”一词在我国商业银行监督管理工作中经常使用。但是，许多人对“合规”概念的理解却是表面化的，有的将“合规”理解为银行及其分支机构的经营管理行为必须符合银行总行制定的规章制度；有的将“合规”简单地理解为就是符合规定，不符合规定就是违规。

传统的银行风险包括信用风险、市场风险、操作风险三大风险，合规风险是基于三大风险之上的更基本的风险。合规风险与银行三大风险既有不同之处，又有紧密联系。其不同之处是：合规风险简单地说是银行做了不该做的事(违法、违规、违德等)而招致的风险或损失。

双录(即录音录像)是银监会的硬性规定，一方面避免信托公司或者三方理财销售人员在跟客户沟通过程中出现虚假承诺、违规保本宣传的现象，另一方面也是对投资者风险承受能力、产品风险认识的再提醒，其初衷仍然是为了保护投资者。

但是由于金融市场是一个具有庞大用户受众群体的市场，任何一家公司都无法通过其自身的专营渠道完成所有金融产品的销售工作，为了提高市场的占有率，几乎所有的行方或保司都会采取自营+合作伙伴分销的方式进行多渠道销售同一个产品，在此合作模式下就面临一个合规问题，即：如果客户是通过自营渠道购买理财或保险产品，是会通过行方或保司的线上系统进行交易，此过程会严格按照合规流程进行录音录像且实时做合规检测。但是合作伙伴的售卖渠道就面临不一样的情况，由于合作伙伴的技术储备及成本问题，无法为客户提供实时的合规记录能力，只能通过线下录像的方式，在交易完成后将视频上传到保司或行方的系统中，这一部分的业务就面临很大的合规风险。

为了解决双录视频合规问题，银保监会要求各金融机构，需要建立相应的离线合规检测系统，通过对双录视频进行全量的合规检测校验，保证双录视频的合法合规。离线质检系统中的检测项分为两大类(视觉识别，语音识别)，其中语音识别类中，有标准话术检测，说话者身份检测，敏感词检测，意图检测等，其中对视频中说话人员角色识别检测实现起来是比较困难的。

因此，需要一种解决质检系统中对视频中说话的人物身份进行识别的方法。

发明内容

为了解决如何实现视频中角色识别的技术问题，提出了本发明。本发明的实施例提供了一种基于唇动的视频角色识别方法、装置及存储介质。

根据本发明实施例的另一个方面，提供了一种基于唇动的视频角色识别方法，所述方法包括：

对与目标视频文件关联的随路数据进行角色面部识别，获取每个角色对应的面部标准图像和第一面部区域信息，并建立角色信息、面部标准图像和第一面部区域信息的关联关系；

对所述目标视频文件进行唇动识别，确定发生唇动的面部识别图像和第二面部区域信息；

基于随路数据中的识别标识确定识别策略；

基于每个角色对应的面部标准图像和第一面部区域信息、所述面部识别图像、所述第二面部区域信息和识别策略进行角色识别，确定角色识别结果。

可选地，其中所述对与目标视频文件关联的随路数据进行角色面部识别，获取每个角色对应的面部标准图像，包括：