利索能及
我要发布
收藏
专利号: 2021108278833
申请人: 北京百度网讯科技有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2025-07-05
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种图像处理方法,包括:基于输入图像,确定关于对象的形状参数、纹理参数和静态皱纹参数;

使用所述形状参数重建关于所述对象的粗重建形状,并使用所述纹理参数计算关于所述对象的粗重建纹理图;

基于所述静态皱纹参数、所述形状参数和所述纹理参数,确定精重建形状和精重建纹理图;以及

基于所述粗重建形状、所述粗重建纹理图、所述精重建形状和所述精重建纹理图执行渲染处理,得到针对所述输入图像的粗重建图像和精重建图像。

2.根据权利要求1所述的方法,其中,所述形状参数包括位姿参数和表情参数,并且所述纹理参数包括光照参数、反照率参数和图像采集装置参数。

3.根据权利要求1所述的方法,其中,所述确定精重建形状和精重建纹理图包括:根据所述静态皱纹参数和所述形状参数,确定关于所述粗重建纹理图的偏移图;

根据所述偏移图和所述粗重建纹理图确定所述精重建纹理图;以及通过对所述粗重建形状进行插值处理并将所述精重建纹理图与经插值处理的粗重建形状相结合来获得所述精重建形状。

4.根据权利要求1所述的方法,其中,所述确定关于对象的形状参数、纹理参数和静态皱纹参数包括:

使用第一卷积神经网络处理所述输入图像以确定所述形状参数和所述纹理参数。

5.根据权利要求4所述的方法,其中,所述确定关于对象的形状参数、纹理参数和静态皱纹参数还包括:

使用第二卷积神经网络处理所述输入图像以确定所述静态皱纹参数。

6.根据权利要求1所述的方法,还包括:在确定所述形状参数和所述纹理参数以及所述静态皱纹参数之前,对所述输入图像执行以下处理中的至少一个:对象识别和图像配准。

7.根据权利要求1所述的方法,其中,所述使用所述形状参数重建关于所述对象的粗重建形状包括:

将所述形状参数输入预定重建模型以获得所述粗重建形状。

8.根据权利要求1所述的方法,其中,所述使用所述纹理参数计算关于所述对象的粗重建纹理图包括:

通过法线贴图来根据所述纹理参数获得所述粗重建纹理图。

9.一种图像处理装置,包括:参数确定模块,用于基于输入图像确定关于对象的形状参数、纹理参数和静态皱纹参数;

粗重建模块,用于使用所述形状参数重建关于所述对象的粗重建形状,并使用所述纹理参数计算关于所述对象的粗重建纹理图;

精重建模块,用于基于所述静态皱纹参数、所述形状参数和所述纹理参数确定精重建形状和精重建纹理图;以及

渲染模块,用于基于所述粗重建形状、所述粗重建纹理图、所述精重建形状和所述精重建纹理图执行渲染处理,得到针对所述输入图像的粗重建图像和精重建图像。

10.根据权利要求9所述的装置,其中,所述精重建模块包括:偏移图确定单元,用于根据所述静态皱纹参数和所述形状参数,确定关于所述粗重建纹理图的偏移图;

精重建纹理图确定单元,用于根据所述偏移图和所述粗重建纹理图确定所述精重建纹理图;以及

精重建形状获得单元,用于通过对所述粗重建形状进行插值处理并将所述精重建纹理图与经插值处理的粗重建形状相结合来获得所述精重建形状。

11.根据权利要求9所述的装置,其中,所述参数确定模块包括:形状和纹理参数确定单元,用于使用第一卷积神经网络处理所述输入图像以确定所述形状参数和所述纹理参数;以及静态皱纹参数确定单元,用于使用第二卷积神经网络处理所述输入图像以确定所述静态皱纹参数。

12.根据权利要求9所述的装置,其中,所述粗重建模块包括:粗重建形状获得单元,用于将所述形状参数输入预定重建模型以获得所述粗重建形状;以及

粗重建纹理图获得单元,用于通过法线贴图来根据所述纹理参数获得所述粗重建纹理图。

13.根据权利要求9所述的装置,还包括:预处理模块,用于在确定所述形状参数和所述纹理参数以及所述静态皱纹参数之前,对所述输入图像执行对象识别和图像配准中的至少一个。

14.一种电子设备,包括:

至少一个处理器;以及

与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行根据权利要求1‑8中任一项所述的方法。

15.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使计算机执行根据权利要求1‑8中任一项所述的方法。

16.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1‑8中任一项所述的方法。