利索能及
我要发布
收藏
专利号: 2018110258588
申请人: 杭州海康威视数字技术股份有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2025-08-05
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种视频摘要生成方法,其特征在于,包括:

接收目标搜索请求,所述目标搜索请求中携带有待搜索目标的特征信息;

搜索与所述待搜索目标的特征信息匹配的第一目标图片信息;其中,所述第一目标图片信息包括第一目标图片和第一目标图片的采集时间;

根据所述第一目标图片信息生成视频摘要。

2.根据权利要求1所述的方法,其特征在于,所述搜索与待搜索目标的特征信息匹配的第一目标图片信息之前,还包括:获取视频源设备的视频数据中的目标图片信息,所述目标图片信息包括目标图片、目标图片的采集时间以及目标图片的属性信息;

将所述目标图片信息保存至图片信息库。

3.根据权利要求2所述的方法,其特征在于,所述获取视频源设备的视频数据中的目标图片信息,包括:接收所述视频源设备发送目标图片信息。

4.根据权利要求2所述的方法,其特征在于,所述获取视频源设备的视频数据中的目标图片信息,包括:接收所述视频源设备发送的目标图片及目标图片的采集时间;

对所述目标图片进行建模,并提取所述目标图片的属性信息。

5.根据权利要求2所述的方法,其特征在于,所述获取视频源设备的视频数据中的目标图片信息,包括:接收所述视频源设备发送的目标图片信息、目标图片的采集时间以及目标图片的第一属性信息;

对所述目标图片进行建模,并提取所述目标图片的第二属性信息;

根据所述目标图片的第一特征信息和所述目标图片的第二属性信息确定所述目标图片的属性信息。

6.根据权利要求2所述的方法,其特征在于,所述获取视频源设备的视频数据中的目标图片信息,包括:对所述视频源设备提供的视频数据进行目标检测,以得到所述视频数据中的目标图片及目标图片的采集时间;

对所述目标图片进行建模,并提取所述目标图片的属性信息。

7.根据权利要求2所述的方法,其特征在于,所述将目标图片信息保存至图片信息库,包括:对于任一视频数据通道的任一目标图片信息,判断所述图片信息库中是否保存有与该目标图片信息包含同一目标的其它目标图片信息;其中,该其它目标图片信息与该目标图片信息来自同一视频数据通道,且该其它目标图片信息包括的采集时间与该目标图片信息中包括的采集时间的差值小于预设时间阈值;

当所述图片信息库中未保存有与该目标图片信息包含同一目标的其它目标图片信息时,将该目标图片信息保存至所述图片信息库;

当所述图片信息库中保存有与该目标图片信息包含同一目标的其它目标图片信息时,拒绝将该目标图片信息保存至所述图片信息库。

8.根据权利要求2或7所述的方法,其特征在于,所述待搜索目标的特征信息包括待搜索目标图片;

所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息,包括:对所述待搜索目标图片进行建模,并提取所述待搜索目标图片的属性信息;

根据所述待搜索目标的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。

9.根据权利要求2或7所述的方法,其特征在于,所述待搜索目标的特征信息包括待搜索目标图片和待搜索目标图片的第一属性信息;

所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息,包括:对所述待搜索目标图片进行建模,并提取所述待搜索目标图片的第二属性信息;

根据所述待搜索目标图片的第一属性信息和所述待搜索目标图片的第二属性信息,确定所述待搜索目标图片的属性信息;

根据所述待搜索目标图片的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。

10.根据权利要求2或7所述的方法,其特征在于,所述目标搜索请求中还携带有搜索时间段范围;

所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息,包括:根据所述搜索时间段范围对所述图片信息库中的目标图片信息进行筛选,以得到采集时间在所述搜索时间段范围内的目标图片信息;

根据所述待搜索目标的特征信息从所述采集时间在所述搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。

11.根据权利要求2或7所述的方法,其特征在于,所述目标搜索请求中还携带有搜索通道号,所述目标图片信息还包括有目标图片的通道号;

所述搜索与所述待搜索目标的特征信息匹配的第一目标图片信息,包括:根据所述搜索通道号对所述图片信息库中的目标图片信息进行筛选,以得到通道号与所述搜索通道号一致的目标图片信息;

根据所述待搜索目标的特征信息从所述通道号与所述搜索通道号一致的目标图片信息中搜索匹配的第一目标图片信息。

12.根据权利要求1所述的方法,其特征在于,所述根据所述第一目标图片信息生成视频摘要,包括:根据按采集时间从早到晚的顺序排序后的所述第一目标图片,生成视频摘要。

13.根据权利要求1或12所述的方法,其特征在于,所述根据所述第一目标图片信息生成视频摘要,包括:对于任一第一目标图片信息,确定该第一目标图片信息对应的目标录像片段;其中,该目标录像片段为该第一目标图片的采集时间之前的第n秒以及该第一目标图片的采集时间之后的第m秒之间的录像数据;

根据各目标录像片段生成视频摘要。

14.根据权利要求13所述的方法,其特征在于,所述对于任一第一目标图片信息,确定该第一目标图片信息对应的目标录像片段,包括:当存在采集时间相同的多条第一目标图片信息时,对于该多条第一目标图片信息中的任一第一目标图片信息,确定该第一目标图片信息对应的录像片段的起始时间点和结束时间点;其中,该起始时间点为该第一目标图片的采集时间之前的第n秒,该结束时间点为该第一目标图片的采集时间之后的第m秒;

搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧,以及是否存在该结束时间的I帧;

若均存在,则丢弃该多条第一目标图片信息中的其余第一目标图片信息,并将该第一目标图片信息对应的录像片段确定为目标录像片段。

15.根据权利要求14所述的方法,其特征在于,所述搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧,以及是否存在该结束时间的I帧之后,还包括:若不存在该起始时间点的I帧,则将该第一目标图片对应的录像片段的起始时间点增加1秒,并重复上述搜索步骤,直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该起始时间点的I帧,或,该第一目标图片对应的录像片段的起始时间点与结束时间点相同;

若不存在该结束时间点的I帧,则将该第一目标图片对应的录像片段的结束时间点减少1秒,并重复上述搜索步骤,直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该结束时间点的I帧,或,该第一目标图片对应的录像片段的起始时间点与结束时间点相同;

确定该多条第一目标图片信息中对应的录像片段的时长最长的第一目标图片信息,将该第一目标图片信息对应的录像片段确定为目标录像片段,并丢弃该多条第一目标图片信息中的其余第一目标图片信息。

16.根据权利要求13所述的方法,其特征在于,所述根据各目标录像片段生成视频摘要,包括:根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤,以去除重复时间的录像数据;

根据过滤后的目标录像片段生成视频摘要。

17.根据权利要求16所述的方法,其特征在于,所述根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤,包括:按照各目标录像片段的起始时间点对各目标录像片段进行排序;

对于相邻的第一目标录像片段和第二目标录像片段,当所述第一目标录像片段的结束时间点大于等于所述第二目标录像片段的起始时间点时,若所述第一目标录像片段和所述第二目标录像片段属于同一视频数据通道,则将所述第一目标录像片段和所述第二目标录像片段合并,合并后的录像片段的起始时间点为所述第一目标录像片段的起始时间点,结束时间点为所述第二目标录像片段的结束时间点;

若所述第一目标录像片段和所述第二目标录像片段属于不同视频数据通道,则以所述第一目标录像片段的结束时间点作为所述第二目标录像片段的起始时间点,或,以所述第二目标片段的起始时间点作为所述第一目标录像片段的结束时间点;

其中,所述第一目标录像片段的起始时间点小于所述第二目标录像片段的起始时间点。

18.一种视频摘要生成装置,其特征在于,包括:

接收单元,用于接收目标搜索请求,所述目标搜索请求中携带有待搜索目标的特征信息;

搜索单元,用于搜索与所述待搜索目标的特征信息匹配的第一目标图片信息;其中,所述第一目标图片信息包括第一目标图片和第一目标图片的采集时间;

处理单元,用于根据所述第一目标图片信息生成视频摘要。

19.根据权利要求18所述的装置,其特征在于,所述装置还包括:获取单元,用于获取视频源设备的视频数据中的目标图片信息,所述目标图片信息包括目标图片、目标图片的采集时间以及目标图片的属性信息;

保存单元,用于将所述目标图片信息保存至图片信息库。

20.根据权利要求19所述的装置,其特征在于,

所述获取单元,具体用于接收所述视频源设备发送目标图片信息。

21.根据权利要求19所述的装置,其特征在于,

所述获取单元,具体用于接收所述视频源设备发送的目标图片及目标图片的采集时间;对所述目标图片进行建模,并提取所述目标图片的属性信息。

22.根据权利要求19所述的装置,其特征在于,

所述获取单元,具体用于接收所述视频源设备发送的目标图片信息、目标图片的采集时间以及目标图片的第一属性信息;对所述目标图片进行建模,并提取所述目标图片的第二属性信息;根据所述目标图片的第一特征信息和所述目标图片的第二属性信息确定所述目标图片的属性信息。

23.根据权利要求19所述的装置,其特征在于,

所述获取单元,具体用于对所述视频源设备提供的视频数据进行目标检测,以得到所述视频数据中的目标图片及目标图片的采集时间;对所述目标图片进行建模,并提取所述目标图片的属性信息。

24.根据权利要求19所述的装置,其特征在于,

所述保存单元,具体用于对于任一视频数据通道的任一目标图片信息,判断所述图片信息库中是否保存有与该目标图片信息包含同一目标的其它目标图片信息;其中,该其它目标图片信息与该目标图片信息来自同一视频数据通道,且该其它目标图片信息包括的采集时间与该目标图片信息中包括的采集时间的差值小于预设时间阈值;

当所述图片信息库中未保存有与该目标图片信息包含同一目标的其它目标图片信息时,将该目标图片信息保存至所述图片信息库;

当所述图片信息库中保存有与该目标图片信息包含同一目标的其它目标图片信息时,拒绝将该目标图片信息保存至所述图片信息库。

25.根据权利要求19或24所述的装置,其特征在于,所述待搜索目标的特征信息包括待搜索目标图片;

所述搜索单元,具体用于对所述待搜索目标图片进行建模,并提取所述待搜索目标图片的属性信息;根据所述待搜索目标的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。

26.根据权利要求19或24所述的装置,其特征在于,所述待搜索目标的特征信息包括待搜索目标图片和待搜索目标图片的第一属性信息;

所述搜索单元,具体用于对所述待搜索目标图片进行建模,并提取所述待搜索目标图片的第二属性信息;根据所述待搜索目标图片的第一属性信息和所述待搜索目标图片的第二属性信息,确定所述待搜索目标图片的属性信息;根据所述待搜索目标图片的属性信息在所述图片信息库中搜索匹配的第一目标图片信息。

27.根据权利要求19或24所述的装置,其特征在于,所述目标搜索请求中还携带有搜索时间段范围;

所述搜索单元,具体用于根据所述搜索时间段范围对所述图片信息库中的目标图片信息进行筛选,以得到采集时间在所述搜索时间段范围内的目标图片信息;

根据所述待搜索目标的特征信息从所述采集时间在所述搜索时间段范围内的目标图片信息中搜索匹配的第一目标图片信息。

28.根据权利要求19或24所述的装置,其特征在于,所述目标搜索请求中还携带有搜索通道号,所述目标图片信息还包括有目标图片的通道号;

所述搜索单元,具体用于根据所述搜索通道号对所述图片信息库中的目标图片信息进行筛选,以得到通道号与所述搜索通道号一致的目标图片信息;

根据所述待搜索目标的特征信息从所述通道号与所述搜索通道号一致的目标图片信息中搜索匹配的第一目标图片信息。

29.根据权利要求18所述的装置,其特征在于,

所述处理单元,具体用于根据按采集时间从早到晚的顺序排序后的所述第一目标图片,生成视频摘要。

30.根据权利要求18或29所述的装置,其特征在于,

所述处理单元,具体用于对于任一第一目标图片信息,确定该第一目标图片信息对应的目标录像片段;其中,该目标录像片段为该第一目标图片的采集时间之前的第n秒以及该第一目标图片的采集时间之后的第m秒之间的录像数据;根据各目标录像片段生成视频摘要。

31.根据权利要求30所述的装置,其特征在于,

所述处理单元,具体用于当存在采集时间相同的多条第一目标图片信息时,对于该多条第一目标图片信息中的任一第一目标图片信息,确定该第一目标图片信息对应的录像片段的起始时间点和结束时间点;其中,该起始时间点为该第一目标图片的采集时间之前的第n秒,该结束时间点为该第一目标图片的采集时间之后的第m秒;搜索该第一目标图片所属的视频数据通道的录像数据中是否存在该起始时间点的I帧,以及是否存在该结束时间的I帧;若均存在,则丢弃该多条第一目标图片信息中的其余第一目标图片信息,并将该第一目标图片信息对应的录像片段确定为目标录像片段。

32.根据权利要求31所述的装置,其特征在于,

所述处理单元,还用于若不存在该起始时间点的I帧,则将该第一目标图片对应的录像片段的起始时间点增加1秒,并重复上述搜索步骤,直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该起始时间点的I帧,或,该第一目标图片对应的录像片段的起始时间点与结束时间点相同;若不存在该结束时间点的I帧,则将该第一目标图片对应的录像片段的结束时间点减少1秒,并重复上述搜索步骤,直至在该第一目标图片所属的视频数据通道的录像数据中搜索到该结束时间点的I帧,或,该第一目标图片对应的录像片段的起始时间点与结束时间点相同;确定该多条第一目标图片信息中对应的录像片段的时长最长的第一目标图片信息,将该第一目标图片信息对应的录像片段确定为目标录像片段,并丢弃该多条第一目标图片信息中的其余第一目标图片信息。

33.根据权利要求30所述的装置,其特征在于,

所述处理单元,具体用于根据各目标录像片段的起始时间点和结束时间点对目标录像片段进行过滤,以去除重复时间的录像数据;根据过滤后的目标录像片段生成视频摘要。

34.根据权利要求33所述的装置,其特征在于,

所述处理单元,具体用于按照各目标录像片段的起始时间点对各目标录像片段进行排序;

对于相邻的第一目标录像片段和第二目标录像片段,当所述第一目标录像片段的结束时间点大于等于所述第二目标录像片段的起始时间点时,若所述第一目标录像片段和所述第二目标录像片段属于同一视频数据通道,则将所述第一目标录像片段和所述第二目标录像片段合并,合并后的录像片段的起始时间点为所述第一目标录像片段的起始时间点,结束时间点为所述第二目标录像片段的结束时间点;

若所述第一目标录像片段和所述第二目标录像片段属于不同视频数据通道,则以所述第一目标录像片段的结束时间点作为所述第二目标录像片段的起始时间点,或,以所述第二目标片段的起始时间点作为所述第一目标录像片段的结束时间点;

其中,所述第一目标录像片段的起始时间点小于所述第二目标录像片段的起始时间点。

35.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;

存储器,用于存放计算机程序;

处理器,用于执行存储器上所存放的程序时,实现权利要求1-17任一项所述的方法步骤。

36.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-17任一项所述的方法步骤。