利索能及
我要发布
收藏
专利号: 2021102863354
申请人: 北京市商汤科技开发有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2026-06-16
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种视频处理方法,其特征在于,所述方法包括:获取第一视频的多个第一视频片段的第一特征;

基于多个第二视频与所述第一视频的匹配度,从所述多个第二视频中确定所述第一视频的关联视频,其中,每个第二视频与所述第一视频的匹配度基于以下方式获取:针对所述第一视频的每个第一视频片段,分别确定所述第一视频片段的第一特征与所述第二视频的多个第二视频片段中每个第二视频片段的第二特征之间的第一相似度,所述第一特征与所述第二特征均与动作相关;

基于至少部分所述第一相似度,确定所述第二视频与所述第一视频的匹配度。

2.根据权利要求1所述的方法,其特征在于,所述获取第一视频的多个第一视频片段的第一特征,包括:

采用神经网络对所述多个第一视频片段中的目标第一视频片段进行特征提取,得到所述目标第一视频片段的第一特征;

其中,所述目标第一视频片段基于第一切片率对所述第一视频进行切片得到,用于训练所述神经网络的样本视频片段基于所述第一切片率对样本视频进行切片得到。

3.根据权利要求1或2所述的方法,其特征在于,所述基于至少部分所述第一相似度,确定所述第二视频与所述第一视频的匹配度,包括:从各个所述第一相似度中选取指定数量的目标第一相似度,被选取的任意一个目标第一相似度大于未被选取的第一相似度;

基于所述指定数量的目标第一相似度,确定所述第二视频与所述第一视频的匹配度。

4.根据权利要求1至3任意一项所述的方法,其特征在于,所述基于至少部分所述第一相似度,确定所述第二视频与所述第一视频的匹配度,包括:对至少部分所述第一相似度中的每个第一相似度进行加权平均,得到所述第二视频与所述第一视频的匹配度。

5.根据权利要求4所述的方法,其特征在于,所述多个第二视频的第二视频片段的第二特征预先经过聚类,得到多个类别,其中,每个类别对应至少一个第二特征;所述对至少部分所述第一相似度中的每个第一相似度进行加权平均,得到所述第二视频与所述第一视频的匹配度,包括:

基于第一权重对所述至少部分所述第一相似度中的每个第一相似度进行加权平均,得到加权平均结果;所述第一相似度的第一权重基于所述第一相似度对应的目标第二特征与所述目标第二特征所属类别的类中心的第二相似度确定;

基于第二权重对所述加权平均结果进行加权处理,得到所述第二视频与所述第一视频的匹配度;所述第二权重基于至少部分所述第一相似度中的每个第一相似度对应的目标第二特征与所述目标第二特征所属类别的类中心的第二相似度的平均值确定;

所述第一相似度基于所述第一相似度对应的目标第二特征与第一特征确定。

6.根据权利要求5所述的方法,其特征在于,所述方法还包括:向客户端推送所述关联视频;

在所述关联视频被所述客户端命中的情况下,对所述第一权重和第二权重进行更新。

7.根据权利要求6所述的方法,其特征在于,在通过所述客户端针对所述关联视频执行以下至少任一操作的情况下,确定所述关联视频被所述客户端命中:播放、点赞、转发、评论、收藏、下载、关注。

8.根据权利要求6或7所述的方法,其特征在于,所述对所述第一权重和第二权重进行更新,包括:

对所述第一权重与第一预设常数的和取对数,得到更新后的第一权重;

对所述第二权重取指数,得到指数权重;

对所述指数权重与第二预设常数的和取对数,得到更新后的第二权重。

9.根据权利要求8所述的方法,其特征在于,所述第一权重为从各个所述第一相似度中选取的指定数量的目标第一相似度的权重,被选取的任意一个目标第一相似度大于未被选取的第一相似度。

10.根据权利要求1至9任意一项所述的方法,其特征在于,所述第一视频片段和所述第二视频片段基于多种切片率切片得到,且所述第一视频片段的多种切片率构成的集合为所述第二视频片段的多种切片率构成的集合的子集。

11.一种视频处理装置,其特征在于,所述装置包括:获取模块,用于获取第一视频的多个第一视频片段的第一特征;

第一确定模块,用于基于多个第二视频与所述第一视频的匹配度,从所述多个第二视频中确定所述第一视频的关联视频,其中,每个第二视频与所述第一视频的匹配度基于以下模块获取:

第二确定模块,用于针对所述第一视频的每个第一视频片段,分别确定所述第一视频片段的第一特征与所述第二视频的多个第二视频片段中每个第二视频片段的第二特征之间的第一相似度,所述第一特征与所述第二特征均与动作相关;

第三确定模块,用于基于至少部分所述第一相似度,确定所述第二视频与所述第一视频的匹配度。

12.一种视频处理系统,其特征在于,所述系统包括:客户端,用于获取第一视频,并向服务器发送所述第一视频;以及服务器,用于获取第一视频的多个第一视频片段的第一特征;基于多个第二视频与所述第一视频的匹配度,从所述多个第二视频中确定所述第一视频的关联视频,其中,每个第二视频与所述第一视频的匹配度基于以下方式获取:针对所述第一视频的每个第一视频片段,分别确定所述第一视频片段的第一特征与所述第二视频的多个第二视频片段中每个第二视频片段的第二特征之间的第一相似度,所述第一特征与所述第二特征均与动作相关;

基于至少部分所述第一相似度,确定所述第二视频与所述第一视频的匹配度。

13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至10任意一项所述的方法。

14.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至10任意一项所述的方法。