利索能及
我要发布
收藏
专利号: 2021103186337
申请人: 北京市商汤科技开发有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2026-05-07
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种视频处理方法,其特征在于,包括:

获取待处理视频;

对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像;

从所述分割图像中截取目标对象轮廓区域对应的轮廓图像,基于目标特效数据以及所述轮廓图像,生成添加有目标特效的轮廓图像;并基于所述添加有目标特效的轮廓图像,生成所述目标对象的展示数据并利用全息投影方式展示所述展示数据;其中,所述目标特效数据包括文字数据、语音数据、图像数据中的一种或多种。

2.根据权利要求1所述的视频处理方法,其特征在于,所述对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像,包括:在所述待处理视频为实时视频数据的情况下,选择第一神经网络对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像;

在所述待处理视频为离线视频数据的情况下,选择第二神经网络对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像;

其中,所述第一神经网络的运算时间小于所述第二神经网络对应的运算时间。

3.根据权利要求1或2所述的视频处理方法,其特征在于,在对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像之后,还包括:基于所述分割图像、和确定的待替换的目标背景的像素信息,生成对所述分割图像进行背景替换后的目标图像;

展示所述待处理视频中每帧待处理图像对应的所述目标图像。

4.根据权利要求1~3任一所述的视频处理方法,其特征在于,所述基于包含所述待处理图像中目标对象轮廓区域的分割图像,生成所述目标对象的展示数据,包括:识别所述目标对象的脸部在所述分割图像上的位置信息;

根据识别到的所述脸部的位置信息,对所述分割图像中所述目标对象的脸部图像进行调整处理,生成处理后的分割图像,其中所述调整处理包括五官调整处理、颜色调整处理、上妆处理中的至少一种;

基于所述处理后的分割图像,生成所述目标对象的展示数据。

5.一种视频处理装置,其特征在于,包括:

获取模块,用于获取待处理视频;

确定模块,用于对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像;

第一生成模块,用于从所述分割图像中截取目标对象轮廓区域对应的轮廓图像,基于目标特效数据以及所述轮廓图像,生成添加有目标特效的轮廓图像;并基于所述添加有目标特效的轮廓图像,生成所述目标对象的展示数据并利用全息投影方式展示所述展示数据;其中,所述目标特效数据包括文字数据、语音数据、图像数据中的一种或多种。

6.根据权利要求5所述的视频处理装置,其特征在于,所述确定模块,在对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像时,用于:在所述待处理视频为实时视频数据的情况下,选择第一神经网络对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像;

在所述待处理视频为离线视频数据的情况下,选择第二神经网络对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像;

其中,所述第一神经网络的运算时间小于所述第二神经网络对应的运算时间。

7.根据权利要求5或6所述的视频处理装置,其特征在于,在对所述待处理视频中的每帧待处理图像进行图像分割,确定包含所述待处理图像中目标对象轮廓区域的分割图像之后,还包括:第二生成模块,用于:基于所述分割图像、和确定的待替换的目标背景的像素信息,生成对所述分割图像进行背景替换后的目标图像;

展示所述待处理视频中每帧待处理图像对应的所述目标图像。

8.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至4任一所述的视频处理方法的步骤。

9.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至4任一所述的视频处理方法的步骤。