欢迎来到知嘟嘟! 联系电话:13095918853 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13095918853
知嘟嘟经纪人
收藏
专利号: 2022107206442
申请人: 北京百度网讯科技有限公司
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2024-02-23
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种虚拟形象生成方法,其特征在于,包括:获取目标图像和目标风格图像;

对所述目标图像执行归一化处理,得到所述目标图像中目标对象的归一化图像,其中,所述目标对象包括头部;

利用深度学习模型处理所述归一化图像,确定所述归一化图像的初始特征;

对所述初始特征进行翻转,得到翻转特征;

将所述初始特征与所述翻转特征进行融合,得到融合特征;

根据所述融合特征,得到所述目标对象的纹理图;

将所述纹理图映射到三维空间,得到输出图像;

确定所述输出图像与所述目标风格图像之间的第一差异值;

利用对比图文预训练模型处理所述输出图像和所述目标风格图像,分别得到输出图像感知特征和目标风格图像感知特征;

确定所述输出图像感知特征与所述目标风格图像感知特征之间的第二差异值;

确定所述输出图像和所述目标风格图像之间的学习感知图像块相似度;

调整所述深度学习模型的参数,使得所述第一差异值、所述第二差异值和所述学习感知图像块相似度收敛,得到目标深度学习模型;

利用所述目标深度学习模型处理所述归一化图像,得到目标纹理图;

将所述目标纹理图映射到所述三维空间,得到目标三维图像;以及对所述目标三维图像进行渲染,得到与所述目标对象相对应的虚拟形象。

2.根据权利要求1所述的方法,其特征在于,所述对所述目标图像执行归一化处理,得到所述目标图像中目标对象的归一化图像包括:对所述目标图像执行仿射变换,得到第一配准图像;

确定所述第一配准图像的处理参数;以及根据所述处理参数,对所述第一配准图像进行处理,得到所述归一化图像。

3.根据权利要求1所述的方法,其特征在于,所述将所述纹理图映射到三维空间,得到输出图像包括:将所述纹理图映射到三维空间,得到三维图像;以及对所述三维图像进行渲染,得到所述输出图像。

4.一种虚拟形象生成装置,其特征在于,包括:获取模块,用于获取目标图像和目标风格图像;

归一化模块,用于对所述目标图像执行归一化处理,得到所述目标图像中目标对象的归一化图像;

确定模块,用于确定所述归一化图像中所述目标对象的纹理图;

映射模块,用于将所述纹理图映射到三维空间,得到输出图像;以及生成模块,用于根据所述输出图像和所述目标风格图像,生成与所述目标对象相对应的虚拟形象,所述确定模块包括:

第二确定子模块,用于利用深度学习模型处理所述归一化图像,确定所述归一化图像的初始特征;

翻转子模块,用于对所述初始特征进行翻转,得到翻转特征;

融合子模块,用于将所述初始特征与所述翻转特征进行融合,得到融合特征;

获得子模块,用于根据所述融合特征,得到所述目标对象的纹理图;

所述生成模块包括:

第三确定子模块,用于确定所述输出图像与所述目标风格图像之间的第一差异值;以及第三处理子模块,用于利用对比图文预训练模型处理所述输出图像和所述目标风格图像,分别得到输出图像感知特征和目标风格图像感知特征;

第五确定子模块,用于确定所述输出图像和所述目标风格图像之间的学习感知图像块相似度;第四确定子模块,用于确定所述输出图像感知特征与所述目标风格图像感知特征之间的第二差异值;

第一调整子模块,用于调整所述深度学习模型的参数,使得所述第一差异值收敛;

第二调整子模块,用于调整所述深度学习模型的参数,使得所述第二差异值收敛;

第三调整子模块,用于执行以下操作:调整所述深度学习模型的参数,使得所述学习感知图像块相似度收敛,得到目标深度学习模型;利用所述目标深度学习模型处理所述归一化图像,得到目标纹理图;将所述目标纹理图映射到所述三维空间,得到目标三维图像;以及对所述目标三维图像进行渲染,得到与所述目标对象相对应的虚拟形象。

5.根据权利要求4所述的装置,其特征在于,所述归一化模块包括:仿射变换子模块,用于对所述目标图像执行仿射变换,得到第一配准图像;

第一确定子模块,用于确定所述第一配准图像的处理参数;以及第一处理子模块,用于根据所述处理参数,对所述第一配准图像进行处理,得到所述归一化图像。

6.根据权利要求4所述的装置,其特征在于,所述映射模块包括:映射子模块,用于将所述纹理图映射到三维空间,得到三维图像;以及渲染子模块,用于对所述三维图像进行渲染,得到所述输出图像。

7.一种电子设备,其特征在于,包括:至少一个处理器;以及

与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至3中任一项所述的方法。

8.一种存储有计算机指令的非瞬时计算机可读存储介质,其特征在于,所述计算机指令用于使所述计算机执行根据权利要求1至3中任一项所述的方法。