利索能及
我要发布
收藏
专利号: 2023111249267
申请人: 石家庄铁道大学
专利类型:发明专利
专利状态:已下证
更新日期:2025-12-01
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种片段分割的视频浓缩方法,其特征在于包括以下步骤:

S1:输入视频,获得视频的背景图片和目标管;

S2:逐帧遍历视频,找到每一帧中目标所在像素点,将视频帧划分为密集帧和稀疏帧,公式如下:式中DSi表示视频第i帧属于密集帧还是稀疏帧的判断结果,其中DSi=1表示视频第i帧属于密集帧,DSi=0表示视频第i帧属于稀疏帧;Pi,Ci和Ei分别表示第i帧视频内的目标像素点占视频背景的比例,目标重叠像素点占目标总像素点的比例以及目标像素点占有效区域的比例是否满足成为密集帧的要求,连续的密集帧记作密集片段,连续的稀疏帧记作稀疏片段,有效区域指的是整个视频中有目标经过的地方;

其中,Pi的计算公式为:

式中Pi=1表示视频第i帧内的目标像素点占视频背景的比例满足密集帧的要求,Pi=0表示视频第i帧内的目标像素点占视频背景的比例不满足密集帧的要求;W和H分别表示视频背景的长和宽; 表示视频第i帧目标像素点的数量,公式如下:式中fi[x][y]表示判断视频第i帧像素点(x,y)是否存在目标的结果,fi[x][y]的值为1或者0;fi[x][y]=1表示视频第i帧像素点(x,y)处存在目标,即(x,y)为目标像素点;fi[x][y]=0表示视频第i帧像素点(x,y)处不存在目标;

Ci的计算公式为:

式中Ci=1表示视频第i帧内的目标重叠像素点占目标总像素点的比例满足密集帧的要求,Ci=0表示视频第i帧内的目标重叠像素点占目标总像素点的比例不满足密集帧的要求;Oi[x][y]表示视频第i帧像素点(x,y)处存在目标的个数,Oi[x][y]越大表明视频第i帧像素点(x,y)处目标越多,目标检测框重叠越多;

Ei的计算公式为:

式中Ei=1表示视频第i帧内的目标像素点占有效区域的比例满足密集帧的要求,Ei=0表示视频第i帧内的目标像素点占有效区域的比例不满足密集帧的要求; 表示视频v有效区域的像素点的数量,计算公式如下:v v

式中f[x][y]表示视频v所有帧中在像素点(x,y)是否出现过目标,f [x][y]=1表示在v视频所有帧中像素点(x,y)处出现过目标,则(x,y)为有效区域中的像素点;f [x][y]=0表示在视频所有帧中像素点(x,y)处没有出现过目标,则(x,y)不是有效区域中的像素点;

S3:将视频背景划分为五个区域,依据稀疏片段中目标第一帧所在视频的区域对目标进行方向聚合处理,其中方向聚合指的是对同一个区域进入视频的目标统一进行处理;

S4:以目标检测框最小高度为基础保留目标的交互性,具有交互性的目标会作为一个整体进行浓缩处理,交互性指的是原视频中目标具有交互行为;

S5:对稀疏片段的目标进行优化重排,将重排后的目标与视频背景进行结合,并将结合的结果按照时间顺序与密集片段进行拼接生成最后的浓缩视频。

2.如权利要求1所述的片段分割的视频浓缩方法,其特征在于将视频划分为五个区域,视频背景左下角,左上角,右下角,右上角分别为顶点O,X,Y和Z,其中O作为原点;在视频背景中定义A,B,C和D四个顶点,坐标分别为和 则视频左方区域为顶点OXAB构成的梯形,视频下方

区域为顶点OBCY构成的梯形,视频上方区域为顶点XADZ构成的梯形,视频右方区域为顶点YCDZ构成的梯形,视频中间区域为ABCD构成的矩形。

3.如权利要求1所述的片段分割的视频浓缩方法,其特征在于对稀疏片段中的目标进行方向聚合处理,以目标进入视频第一帧的检测框中心点作为判断点,判断点在哪个区域则目标被定义为从哪个方向进入视频的目标,对同一个方向进入视频的目标在一起进行处理,若用户没有规定目标进入视频的处理顺序,则默认按照左下上右中五个区域的顺序对进入的目标进行处理。