[发明专利]信息交互方法、装置、设备和存储介质在审
申请号: | 202310136090.6 | 申请日: | 2023-02-13 |
公开(公告)号: | CN116312537A | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 练婉利;王静媛;孙媛;温连勇;张笑雪;李曼丽 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G10L15/26 | 分类号: | G10L15/26;H04N21/434;H04N21/44 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 孙蕾 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 信息 交互 方法 装置 设备 存储 介质 | ||
1.一种信息交互方法,包括:
响应于目标用户发送的信息交互请求,获取所述信息交互请求中携带的待处理视频;
对所述待处理视频进行解析处理,得到多帧子图像和所述目标用户的语音文本信息;
分别对多帧所述子图像进行特征提取,得到多组特征数据;
基于多组所述特征数据和所述目标用户的语音文本信息,确定与所述信息交互请求相关联的响应结果;
利用预设渲染方法将所述响应结果转换为响应视频,并通过虚拟数字人的方式向所述目标用户展示所述响应视频。
2.根据权利要求1所述的方法,其中,所述对所述待处理视频进行解析处理,得到多帧子图像和所述目标用户的语音文本信息包括:
按照预设提取速率对所述待处理视频进行分帧提取,得到多帧所述子图像;
利用语音提取组件从所述待处理视频中提取所述目标用户的语音信息,并利用语音识别组件将所述语音信息转换为所述语音文本信息。
3.根据权利要求1所述的方法,其中,所述分别对多帧所述子图像进行特征提取,得到多组特征数据包括:
针对多帧所述子图像中的每一帧所述子图像:
基于预设像素坐标从所述子图像中提取到目标像素位置的文本信息,其中,所述文本信息包括元数据、个性化输入数据;
基于所述元数据和所述个性化输入数据,确定所述特征数据。
4.根据权利要求3所述的方法,其中,所述基于多组所述特征数据和所述目标用户的语音文本信息,确定与所述信息交互请求相关联的响应结果包括:
根据多组所述特征数据和所述目标用户的语音文本信息,确定所述目标用户的目标问题;
基于所述目标问题,从数据仓库中查找目标答案;以及
根据所述目标问题和所述目标答案,生成所述响应结果。
5.根据权利要求4所述的方法,还包括:
基于所述目标问题,从所述目标仓库中确定与所述目标问题相似的多个关联问题;
根据所述关联问题和所述目标问题之间的相似度,对多个所述关联问题进行排序,得到排序结果;
将所述排序结果中排在第一数量的关联问题作为目标关联问题;
根据所述目标关联问题,从所述数据仓库中查找目标关联答案;
通过所述虚拟数字人的方式向所述目标用户展示所述目标关联问题和所述目标关联答案。
6.根据权利要求1所述的方法,还包括:
在所述响应视频中配置跳转键;
响应于目标用户点击所述跳转键的操作,直接跳转至与所述信息交互请求相关联的操作界面。
7.根据权利要求1所述的方法,还包括:
在所述响应视频的底部设置输入框,以使得所述目标用户输入信息;
将所述目标用户输入的信息以弹屏的形式进行展示。
8.根据权利要求1所述的方法,还包括:
响应于所述目标用户需要虚拟服务的操作,为所述目标用户配置虚拟服务间;
在所述虚拟服务间中,通过虚拟现实技术实时渲染所述虚拟服务间的背景和所述虚拟数字人。
9.一种信息交互装置,包括:
获取模块,用于响应于目标用户发送的信息交互请求,获取所述信息交互请求中携带的待处理视频;
处理模块,用于对所述待处理视频进行解析处理,得到多帧子图像和所述目标用户的语音文本信息;
提取模块,用于分别对多帧所述子图像进行特征提取,得到多组特征数据;
第一确定模块,用于基于多组所述特征数据和所述目标用户的语音文本信息,确定与所述信息交互请求相关联的响应结果;
转换模块,用于利用预设渲染方法将所述响应结果转换为响应视频,并通过虚拟数字人的方式向所述目标用户展示所述响应视频。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310136090.6/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置