利索能及
我要发布
收藏
专利号: 202311047214X
申请人: 福建恒吟信息科技有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2026-06-16
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种基于大数据的智慧园区视频监控管理系统,其特征在于,包括:

第一模块,将固定时长的视频进行处理获得帧图像,并对帧图像进行灰度化处理获得视频帧图像;

第二模块,将视频帧图像进行图像分割获得区域图像;

第三模块,基于视频帧图像和区域图像生成顶点图,顶点图包括顶点以及连接顶点的边,顶点包括第一顶点和第二顶点,第一顶点对应视频帧图像,第二顶点对应视频帧图像分割之后的区域图像,第t帧的视频帧图像的第一顶点和第t+1帧的视频帧图像的第一顶点存在边;同一视频帧图像的区域图像的第二顶点之间通过边全连接,第t帧和第t+1帧的视频帧图像中存在的重叠的区域图像对应的第二顶点存在边;对区域图像和视频帧图像进行特征化处理获得对应顶点的顶点矢量;

第四模块,生成训练集,训练集中的视频中均不包含异常行为,将训练集中的视频处理获得的顶点图和顶点矢量输入异常评估模型对异常评估模型进行训练,异常评估模型包括GNN层、逻辑层、第一隐藏层、反卷积层、重构误差计算层,其中GNN层对顶点对应的顶点矢量进行更新,输出顶点第二矢量到逻辑层,逻辑层对第一顶点的顶点第二矢量进行矩阵化处理获得顶点特征,将第一顶点的顶点特征按照其对应的视频帧图像的时间进行排序生成顶点特征序列,然后输入第一隐藏层,输出顶点输出特征序列,反卷积层将顶点输出特征序列的序列单元进行反卷积到与视频帧图像尺寸一致,获得重构图像序列,重构误差计算层计算重构图像序列与视频帧图像的重构误差;

将重构误差作为损失值训练更新异常评估模型的参数;

第五模块,将训练集中的所有训练样本输入异常评估模型获得重构误差,计算所有训练样本的重构误差的最大值作为误差阈值;

第六模块,将待预测的视频处理获得的顶点图和顶点矢量输入异常评估模型,输出待预测的视频的重构误差,如果该重构误差超过误差阈值,则判断待预测的视频内存在异常行为,否则判断待预测的视频内不存在异常行为;

第七模块,视频内不存在异常行为不对视频进行处理,视频内存在异常行为,进行告警操作,提醒负责人注意告警区域的视频,并对告警区域进行人力排查处理。

2.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,图像分割采用SegNet、DeepLab、Mask R‑CNN、U‑Net、Gated SCNN。

3.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,特征化处理的方法为卷积处理,对区域图像进行卷积处理时对其进行边缘填充处理来获得矩阵形式的图像特征。

4.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,k k重构误差计算层的计算公式如下: 其中Dx,y表示y 与x之间的距离,

k k

y表示重构图像序列的第k个序列单元,x表示第k个视频帧图像,N*M表示视频帧图像的尺寸。

5.根据权利要求4所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,Dx,y为欧氏距离或余弦距离,以一个像素值作为一个维度。

6.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,GNN层的计算公式如下:表示第i个节点的顶点第二矢量, 和 分别表示第

i和j个节点的顶点矢量,W表示GNN层的权重参数,表示GNN层的权重矢量,Ni表示与第i个节点直接连接的节点的集合。

7.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,逻辑层对第一顶点的顶点第二矢量进行矩阵化处理获得顶点特征的方法是:将顶点第二矢量截取S个等长矢量,并作为顶点特征的S个行向量。

8.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,第一隐藏层包括CNN层、RNN层、张量层组成,其中CNN层输入一个顶点特征对应的输出一个第一中间特征,第一中间特征的行向量依次拼接生成第二中间特征,RNN层在第t个时间步输入顶点特征序列的第t个序列单元生成的第二中间特征,并输出对应的第三中间特征,第三中间特征输入张量层之后矩阵化获得顶点输出特征。

9.根据权利要求1所述的一种基于大数据的智慧园区视频监控管理系统,其特征在于,反卷积层的计算过程是将输入特征图进行填充,并使用权重进行卷积操作。