利索能及
我要发布
收藏
专利号: 2021111823962
申请人: 北京百度网讯科技有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2025-12-08
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种纹理图生成方法,包括:

从目标面部图像提取目标纹理系数;

根据所述目标纹理系数,执行多轮纹理基底的更新过程,其中,任意的一轮更新过程中包括:将本轮的纹理基底与所述目标纹理系数融合,以得到本轮的纹理图,采用本轮的纹理图进行渲染,以得到本轮的预测渲染图,根据本轮的纹理图进行纹理基底更新,以得到下一轮的纹理基底;

在所述预测渲染图和所述目标面部图像的参考渲染图之间的差异小于阈值的情况下,停止执行所述更新过程;

根据所述目标纹理系数和最后一轮的纹理基底,生成所述目标面部图像的面部纹理图;

其中,所述根据本轮的纹理图进行纹理基底更新,以得到下一轮的纹理基底,包括:对所述本轮的纹理图进行特征提取,以获取所述本轮的纹理图对应的纹理基底;

将所述本轮的纹理图对应的纹理基底,作为所述下一轮的纹理基底。

2.根据权利要求1所述的方法,其中,所述在所述预测渲染图和所述目标面部图像的参考渲染图之间的差异小于阈值的情况下,停止执行所述更新过程,包括:根据所述预测渲染图和所述目标面部图像的参考渲染图之间的差异性,确定损失函数值;

在所述损失函数值小于阈值的情况下,停止执行所述更新过程。

3.根据权利要求1所述的方法,其中,所述根据所述目标纹理系数和最后一轮的纹理基底,生成所述目标面部图像的面部纹理图,包括:对所述目标纹理系数与所述最后一轮的纹理基底进行线性求和,生成所述目标面部图像的面部纹理图。

4.根据权利要求1所述的方法,其中,所述采用本轮的纹理图进行渲染,以得到本轮的预测渲染图,包括:对所述目标面部图像进行面部特征提取,以获取目标面部图像对应的面部关键点;

根据所述面部关键点,确定所述目标面部图像对应的面部形状;

对所述本轮的面部纹理图与所述目标面部图像对应的面部形状进行面部渲染,以得到本轮的预测渲染图。

5.根据权利要求1所述的方法,其中,所述根据所述目标纹理系数,执行多轮纹理基底的更新过程之前,还包括:将所述目标面部图像输入面部纹理系数模型中,以提取初始的纹理系数;

将初始的纹理基底与所述初始的纹理系数融合,以得到初始的纹理图;

采用所述初始的纹理图进行渲染,以得到初始的预测渲染图;

根据所述初始的预测渲染图和所述目标面部图像的参考渲染图之间的差异,对所述面部纹理系数模型进行训练,以使所述初始的预测渲染图和所述目标面部图像的参考渲染图之间的差异最小化。

6.根据权利要求5所述的方法,其中,所述从目标面部图像提取目标纹理系数,包括:获取所述目标面部图像;

将所述目标面部图像输入经过训练的面部纹理系数模型中,以提取所述目标纹理系数。

7.一种纹理图生成装置,包括:

提取模块,用于从目标面部图像提取目标纹理系数;

更新模块,用于根据所述目标纹理系数,执行多轮纹理基底的更新过程,其中,任意的一轮更新过程中包括:将本轮的纹理基底与所述目标纹理系数融合,以得到本轮的纹理图,采用本轮的纹理图进行渲染,以得到本轮的预测渲染图,根据本轮的纹理图进行纹理基底更新,以得到下一轮的纹理基底;

停止模块,用于在所述预测渲染图和所述目标面部图像的参考渲染图之间的差异小于阈值的情况下,停止执行所述更新过程;

生成模块,用于根据所述目标纹理系数和最后一轮的纹理基底,生成所述目标面部图像的面部纹理图;

其中,所述更新模块,用于:

对所述本轮的纹理图进行特征提取,以获取所述本轮的纹理图对应的纹理基底;

将所述本轮的纹理图对应的纹理基底,作为所述下一轮的纹理基底。

8.根据权利要求7所述的装置,其中,所述停止模块,用于:根据所述预测渲染图和所述目标面部图像的参考渲染图之间的差异性,确定损失函数值;

在所述损失函数值小于阈值的情况下,停止执行所述更新过程。

9.根据权利要求7所述的装置,其中,所述生成模块,用于:对所述目标纹理系数与所述最后一轮的纹理基底进行线性求和,生成所述目标面部图像的面部纹理图。

10.根据权利要求7所述的装置,其中,所述更新模块,用于:对所述目标面部图像进行面部特征提取,以获取目标面部图像对应的面部关键点;

根据所述面部关键点,确定所述目标面部图像对应的面部形状;

对所述本轮的面部纹理图与所述目标面部图像对应的面部形状进行面部渲染,以得到本轮的预测渲染图。

11.根据权利要求7所述的装置,其中,所述装置还包括:输入模块,用于将所述目标面部图像输入面部纹理系数模型中,以提取初始的纹理系数;

融合模块,用于将初始的纹理基底与所述初始的纹理系数融合,以得到初始的纹理图;

渲染模块,用于采用所述初始的纹理图进行渲染,以得到初始的预测渲染图;

训练模块,用于根据所述初始的预测渲染图和所述目标面部图像的参考渲染图之间的差异,对所述面部纹理系数模型进行训练,以使所述初始的预测渲染图和所述目标面部图像的参考渲染图之间的差异最小化。

12.根据权利要求11所述的装置,其中,所述提取模块,用于:获取所述目标面部图像;

将所述目标面部图像输入经过训练的面部纹理系数模型中,以提取所述目标纹理系数。

13.一种电子设备,包括:

至少一个处理器;以及

与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1‑6中任一项所述的方法。

14.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1‑6中任一项所述的方法。