“刘炫鹏”申请（专利权）人搜索_中国专利权人_发明人_技术持有人_科研专家_钻瓜专利网

钻瓜专利网为您找到相关结果54个，建议您升级VIP下载更多相关专利

[发明专利]模型训练、嘴部动作参数获取方法、装置、设备及介质-CN202110452759.3有效
发明人：陈泷翔;刘炫鹏;王鑫宇 -专利权人：深圳追一科技有限公司
申请日： 2021-04-26 - 公布日： 2023-08-22 - 主分类号： G10L21/10 文献下载
摘要：本申请公开了一种嘴部动作驱动模型训练方法、装置、嘴部动作参数获取方法、装置、电子设备及计算机可读存储介质，该训练方法包括：获取多种第一训练数据；将各个类别的第一训练数据分别输入初始模型中对应的输入网络，得到对应的输出值；初始模型包括一个主干网络；基于梯度下降原则，利用输出值调节主干网络，得到目标网络；获取第二训练数据，并基于梯度下降原则，利用第二训练数据训练初始驱动模型，得到嘴部动作驱动模型；综合多个任务，可以使得主干网络在训练过程中学会如何学习，学习各个任务之间的联系，适应各个任务对应的第一训练数据的情况，避免主干网络出现系统性错误，进而避免基于主干网络得到的嘴部动作驱动模型出现系统性错误。
模型训练动作参数获取方法装置设备介质

[发明专利]一种基于VC模型的嘴部动作驱动模型训练方法及组件-CN202110424539.X有效
发明人：陈泷翔;刘炫鹏;王鑫宇;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-04-20 - 公布日： 2023-08-04 - 主分类号： G10L25/57 文献下载
摘要：本申请公开了一种基于VC模型的嘴部动作驱动模型训练方法及组件。本申请使用VC模型调整训练数据的音色参数/语种参数，从而得到特定音色/语种的目标特征，之后以该目标特征作为模型训练数据，从而可训练得到支持特定音色/语种的得到嘴部动作驱动模型，可以降低训练数据的复杂性，减少训练数据量和训练成本，同时还不会影响嘴部动作驱动模型的通用性。相应地，本申请提供的一种基于VC模型的嘴部动作驱动模型训练组件，也同样具有上述技术效果。
一种基于 vc 模型动作驱动训练方法组件

[发明专利]模型训练、嘴部动作参数获取方法、装置、设备及介质-CN202110411264.6有效
发明人：陈泷翔;刘炫鹏;王鑫宇 -专利权人：深圳追一科技有限公司
申请日： 2021-04-16 - 公布日： 2023-06-06 - 主分类号： G06T13/20 文献下载
摘要：本申请公开了一种嘴部动作驱动模型训练方法、装置、嘴部动作参数获取方法、装置、电子设备及计算机可读存储介质，该训练方法包括：获取训练声学特征；将训练声学特征分别输入初始驱动模型和目标模型，得到初始驱动模型对应的第一输出结果和目标模型对应的第二输出结果；基于梯度上升原则，根据第一输出结果和第二输出结果更新目标模型；若目标模型的本轮更新次数达到第一阈值，则基于目标模型和初始驱动模型的性能比对结果更新初始驱动模型；若满足训练完成条件，则将初始驱动模型确定为嘴部动作驱动模型；得到的嘴部动作驱动模型具有较强的识别能力，将待处理音频输入利用上述方式训练得到的嘴部动作驱动模型，可以得到准确率高的嘴部动作参数。
模型训练动作参数获取方法装置设备介质

[发明专利]数据采集系统、方法、装置、电子设备及存储介质-CN202011612014.0有效
发明人：杨国基;常向月;刘致远;陈泷翔;王鑫宇;刘炫鹏 -专利权人：深圳追一科技有限公司
申请日： 2020-12-30 - 公布日： 2022-06-21 - 主分类号： H04N5/247 文献下载
摘要：本申请公开了一种数据采集系统、方法、装置、电子设备及存储介质，涉及电子设备技术领域，该系统包括：相机阵列、移动平台以及控制器。其中，相机阵列环绕拍摄区域设置，且相机阵列中的每个相机的按照预设镜头视角设置；移动平台滑动设置于拍摄区域，用于承载被拍摄对象在拍摄区域移动；控制器分别与相机阵列和移动平台电性连接，用于控制移动平台移动至指定位置以及控制相机阵列中的指定相机进行拍摄，以采集被拍摄对象在指定拍摄角度的图像数据作为数字人数据，本申请能够通过数据采集系统自动采集真人模特在各个拍摄角度的数字人数据，避免了人为采集的繁琐和误差，从而有效提高采集效率。
数据采集系统方法装置电子设备存储介质

[发明专利]图像生成方法、装置、设备及介质-CN202111162305.9在审
发明人：王鑫宇;刘炫鹏;杨国基;刘致远;常向月;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-09-30 - 公布日： 2022-02-25 - 主分类号： G06K9/00 文献下载
摘要：本申请涉及一种图像生成方法、装置、设备及介质，涉及计算机技术领域，该图像生成方法包括：依据获取到的待处理图像信息和所述待处理图像信息对应的参考图像信息，确定目标合成图信息；将所述目标合成图信息输入到预先训练的第一生成器中，得到所述第一生成器输出的初始生成图信息；依据所述初始生成图信息中的嘴区域信息，通过预先训练的第二生成器，生成所述初始生成图信息对应的嘴残差图信息，其中，所述第二生成器是与所述第一生成器联合训练而成的生成器；依据所述嘴残差图信息和所述初始生成图信息，生成所述待处理图像信息对应的目标图像信息。本申请在保证推理速度的前提下提升嘴型的生成效果，进而提升图像整体的生成效果。
图像生成方法装置设备介质

[发明专利]数字人视频生成方法、装置、电子设备及存储介质-CN202111168846.2在审
发明人：王鑫宇;常向月;刘炫鹏;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-09-30 - 公布日： 2022-01-28 - 主分类号： G06F16/783 文献下载
摘要：本发明实施例提供了一种数字人视频生成方法、装置、电子设备及存储介质，所述方法包括：获取目标人物的音频，针对音频中任一音频帧，提取音频帧对应的音频特征，以及获取第一平均人脸3D网格；确定目标人物的样本视频，提取样本视频中目标样本图像的第一人脸姿态参数以及第一背景轮廓线；利用预设解码器，对音频特征、第一人脸姿态参数以及第一平均人脸3D网格进行处理，生成第一人脸3D网格；利用预设视频生成模型，对第一人脸3D网格以及第一背景轮廓线进行处理，生成数字人视频。基于目标人物的音频生成数字人视频，其中引入了第一平均人脸3D网格、目标样本图像的第一人脸姿态参数以及第一背景轮廓线，生成的数字人视频中数字人姿态自然、准确。
数字视频生成方法装置电子设备存储介质

[发明专利]数字人视频生成方法、装置、电子设备和存储介质-CN202111169280.5在审
发明人：王鑫宇;刘炫鹏;常向月;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-09-30 - 公布日： 2022-01-28 - 主分类号： G06F16/783 文献下载
摘要：本公开实施例公开了一种数字人视频生成方法、装置、电子设备和存储介质。上述方法包括：获取目标音频和目标人脸图像；针对上述目标音频中的音频帧，将该音频帧对应的音频帧序列和上述目标人脸图像中的目标区域图像输入至预先训练的端到端模型中，生成与该音频帧相对应的目标图像，其中，该音频帧对应的音频帧序列为上述目标音频中包含该音频帧的连续的音频帧的序列，上述目标区域图像为上述目标人脸图像中除嘴部区域图像之外的区域图像，与该音频帧相对应的目标图像用于指示上述目标人脸图像指示的人员发出该音频帧指示的音频；基于所生成的目标图像，生成数字人视频。本公开实施例可以提高数字人生成的效率。
数字视频生成方法装置电子设备存储介质

[发明专利]图像处理方法、装置、终端设备及计算机可读取存储介质-CN202011632556.4有效
发明人：杨国基;陈泷翔;刘致远;刘炫鹏;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2020-12-31 - 公布日： 2022-01-28 - 主分类号： H04N5/232 文献下载
摘要：本申请公开了一种图像处理方法、装置、终端设备及计算机可读存储介质，涉及计算机视觉技术领域。该图像处理方法应用于终端设备，方法包括：获取待处理的视频图像序列，所述视频图像序列包括多帧视频图像；根据所述终端设备的性能状态，确定插帧策略；根据所述插帧策略，对所述视频图像序列进行插帧处理操作，得到插帧处理后的目标视频图像帧序列。本方法可以较为有效地实现视频插帧。
图像处理方法装置终端设备计算机读取存储介质

[发明专利]基于语音的图像生成方法、装置、设备及介质-CN202111162595.7在审
发明人：王鑫宇;刘炫鹏;常向月;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-09-30 - 公布日： 2022-01-18 - 主分类号： G10L21/10 文献下载
摘要：本申请涉及一种基于语音的图像生成方法、装置、设备及介质，涉及计算机技术领域，该基于语音的图像生成方法包括：获取待处理语音的音频信息，并针对所述音频信息获取目标样本图像；依据所述音频信息，通过预先训练的第一模型，生成目标嘴区域特征信息；依据所述目标嘴区域特征信息和所述目标样本图像，通过预先训练的第二模型，生成所述音频信息对应的目标图像信息，其中，所述第二模型是基于所述第一模型的权重信息训练而成的图像生成器模型。本申请在保证图像生成效果的同时提升图像推理生成效率，解决了现有技术中推理生成数字人图像所存在的推理生成速度慢的问题。
基于语音图像生成方法装置设备介质

[发明专利]动作视频的生成方法、装置、设备及介质-CN202111210723.0在审
发明人：王鑫宇;常向月;刘炫鹏;杨国基;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-10-18 - 公布日： 2022-01-07 - 主分类号： G06F16/783 文献下载
摘要：本申请涉及一种动作视频的生成方法、装置、设备及介质，涉及计算机技术领域，该动作视频的生成方法包括：获取输入信息；依据所述输入信息确定目标动作标签和目标播放时长；依据所述目标播放时长，对所述目标动作标签对应的动作生成视频进行动态调整，直到调整后的动作生成视频的视频帧播放时长与所述目标播放时长相匹配；将调整后的动作生成视频确定为所述输入信息对应的动作视频。本申请实施例实现实时生成与输入信息相匹配的动作视频，以便后续可以根据该输入信息对应的动作视频生成虚拟交互对象的动作姿态视频，满足多模态交互虚拟对象生成需求。
动作视频生成方法装置设备介质

[发明专利]三维人脸模型重建方法、装置、电子设备及存储介质-CN202111210742.3在审
发明人： 刘炫鹏;王鑫宇;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-10-18 - 公布日： 2022-01-07 - 主分类号： G06T17/00 文献下载
摘要：本发明实施例提供了一种三维人脸模型重建方法、装置、电子设备及存储介质，所述方法包括：获取n个视角方向下目标人脸的图像对，其中，图像对包括彩色图像和深度图像；针对任一视角方向下目标人脸的图像对，根据图像对中的彩色图像和深度图像，确定与深度图像对齐的目标彩色图像；将目标彩色图像输入至预先训练好的识别模型，以使识别模型输出与目标彩色图像对应的人脸面部掩码矩阵；利用人脸面部掩码矩阵，对深度图像进行处理得到目标深度图像，将目标深度图像转换为视角方向下目标人脸的人脸点云；根据n个视角方向下目标人脸的人脸点云，确定目标人脸点云，并对目标人脸点云进行曲面重建，得到三维人脸模型。
三维模型重建方法装置电子设备存储介质

[发明专利]三维人脸模型重建方法、装置、电子设备及存储介质-CN202111210763.5在审
发明人： 刘炫鹏;杨国基;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-10-18 - 公布日： 2022-01-07 - 主分类号： G06T17/00 文献下载
摘要：本发明实施例提供了一种三维人脸模型重建方法、装置、电子设备及存储介质，所述方法包括：获取n个视角方向下目标人脸的图像对，其中，图像对包括彩色图像和深度图像；针对任一视角方向下目标人脸的图像对，根据图像对中的彩色图像和深度图像，确定与深度图像对齐的目标彩色图像；确定目标彩色图像中人脸面部区域，并根据人脸面部区域，将目标彩色图像转换为人脸面部掩码矩阵；利用人脸面部掩码矩阵，对深度图像进行处理得到目标深度图像，将目标深度图像转换为视角方向下目标人脸的人脸点云；根据n个视角方向下目标人脸的人脸点云，确定目标人脸点云，并对目标人脸点云进行曲面重建，得到三维人脸模型。
三维模型重建方法装置电子设备存储介质

[发明专利]三维人脸重建方法、装置、设备及介质-CN202111212300.2在审
发明人： 刘炫鹏;王鑫宇;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-10-18 - 公布日： 2022-01-07 - 主分类号： G06T7/33 文献下载
摘要：本申请涉及一种三维人脸重建方法、装置、设备及介质，涉及计算机技术领域，该方法包括：通过双目摄像头设备，采集至少两个视角方向下目标对象的双目图像数据；根据双目图像数据的视差图信息进行转换，得到双目图像数据对应的图像对数据；依据图像对数据进行人脸点云处理，得到目标对象对应的人脸点云数据集；依据人脸点云数据集中的人脸点云数据进行配准处理，得到姿态参考点云数据和人脸转换点云数据；基于预设的人脸基点云数据，对姿态参考点云数据和人脸转换点云数据进行融合处理，得到目标人脸点云数据；依据目人脸点云数据进行曲面重建，得到目标对象对应的三维人脸模型。本申请在满足人三维人脸模型所需的模型精度的同时降低成本。
三维重建方法装置设备介质

[发明专利]一种人脸三维重建方法、装置、电子设备及存储介质-CN202111212302.1在审
发明人： 刘炫鹏;王鑫宇;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-10-18 - 公布日： 2022-01-07 - 主分类号： G06T17/00 文献下载
摘要：本发明涉及一种人脸三维重建方法、装置、电子设备及存储介质，方法包括：获取摄像头采集的建模对象的头部处于不同位姿时的多个深度图像；针对每个深度图像，基于深度图像内各像素点的像素坐标确定三维人脸内多个三维点的点云数据；基于每个深度图像所对应的点云数据及预设的人脸基准点云数据进行点云配准，得到配准点云数据；基于配准点云数据进行曲面重建，得到人脸三维模型。本发明实施例在进行点云配准过程中，加入预设的人脸基准点云数据作为形状参考，极大地减少了形状偏差，实现由低精度的点云数据得到可靠的三维重建精度，可以使用消费级的摄像头阵列无需高精度地同步采集，即可完成可靠的三维人脸重建，降低三维人脸重建难度。
一种三维重建方法装置电子设备存储介质

[发明专利]虚拟对象视频的生成方法、装置、设备及介质-CN202111212304.0在审
发明人：王鑫宇;常向月;刘炫鹏;杨国基;刘致远;刘云峰 -专利权人：深圳追一科技有限公司
申请日： 2021-10-18 - 公布日： 2022-01-07 - 主分类号： G06V40/16 文献下载
摘要：本申请涉及一种虚拟对象视频的生成方法、装置、设备及介质，涉及计算机技术领域，该虚拟对象视频的生成方法包括：获取输入信息；依据所述输入信息生成虚拟对象的脸部关键点信息，并确定所述输入信息对应的目标动作标签和目标播放时长；依据所述目标播放时长和所述目标动作标签对应的动作视频，生成动作视频帧序列；依据所述动作视频帧序列和所述脸部关键点信息，生成所述输入信息对应的虚拟对象视频。本申请提升虚拟对象的生成效果，满足多模态交互虚拟对象生成需求。
虚拟对象视频生成方法装置设备介质

1
2
3
4
下一页»
尾页
共 54 条