利索能及
我要发布
收藏
专利号: 2020105178966
申请人: 杭州云视通互联网科技有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2026-06-16
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种伞具使用行为的检测方法,其特征在于,包括:

获取原始图像数据,基于所述原始图像数据建立伞具数据集;

利用所述伞具数据集,训练目标检测网络;

每隔预设时间段获取一次待测原始图像,将所述待测原始图像输入至所述目标检测网络;

运行所述目标检测网络,输出检测结果;

获取所述检测结果,并依据所述检测结果判定在所述预设时间段内是否出现伞具使用行为。

2.根据权利要求1所述的伞具使用行为的检测方法,其特征在于,所述获取原始图像数据,基于所述原始图像数据建立伞具数据集的步骤,包括:获取原始图像数据;

筛选所述原始图像数据中与伞具使用行为相关的数据信息,作为伞具数据;

建立伞具数据集,将所述伞具数据纳入所述伞具数据集。

3.根据权利要求2所述的伞具使用行为的检测方法,其特征在于,所述与伞具使用行为相关的数据信息包括未使用伞具的机场工作人员数据、未使用伞具的旅客数据、使用伞具的机场工作人员数据、使用伞具的旅客数据、雨伞的样式数据和雨伞的颜色数据中的一种或多种。

4.根据权利要求3所述的伞具使用行为的检测方法,其特征在于,所述利用所述伞具数据集,训练目标检测网络的步骤,包括:对所述伞具数据集中的伞具数据进行信息标注;

选取特征提取网络和检测网络框架,并依据所述特征提取网络和检测网络框架建立目标检测网络;

依据信息标注后的伞具数据,采用迁移学习训练方法对所述目标检测网络进行训练。

5.根据权利要求4所述的伞具使用行为的检测方法,其特征在于,所述运行所述目标检测网络,输出检测结果的步骤,包括:采集所述待测原始图像中所有目标的目标矩形框,生成目标信息矩阵

其中,所述目标信息矩阵由n个元素行组成,每个元素行由五个元素组成,每一个目标具有一个元素行,Obj为目标信息矩阵,n为目标的序号,clsn为目标的类型,xn为目标的目标矩形框左上角坐标点的横坐标,yn为目标的目标矩形框左上角坐标点的纵坐标,wn为目标的目标矩形框在水平方向上的长度,hn为目标的目标矩形框在垂直方向上的长度;n的数值为自然数;

在所述目标信息矩阵中筛选与伞具使用行为相关的数据信息,生成伞具信息矩阵和人员信息矩阵;

将伞具信息矩阵和人员信息矩阵进行匹配,对所述伞具信息矩阵中与人员信息无关的目标的元素行做去除处理,输出经去除处理后的伞具信息矩阵。

6.根据权利要求5所述的伞具使用行为的检测方法,其特征在于,所述在所述目标信息矩阵中筛选与伞具使用行为相关的数据信息,生成伞具信息矩阵和人员信息矩阵的步骤,包括:遍历所述目标信息矩阵中的所有元素,获取每一个目标的目标类型;

创建伞具信息矩阵,将目标类型为伞具的目标的元素行纳入所述伞具信息矩阵其中,Um为伞具信息矩阵,k为目标类型为伞具的目标的序号,xuk为目标类型为伞具的目标的目标矩形框左上角坐标点的横坐标,yuk为目标类型为伞具的目标的目标矩形框左上角坐标点的纵坐标,wuk为目标类型为伞具的目标的目标矩形框在水平方向上的长度,huk为目标类型为伞具的目标的目标矩形框在垂直方向上的长度;k的数值为自然数;

创建人员信息矩阵,将目标类型为人员的目标的元素行纳入所述人员信息矩阵其中,Pe为人员信息矩阵,s为目标类型为人员的目标的序号,xps为目标类型为人员的目标的目标矩形框左上角坐标点的横坐标,yps为目标类型为人员的目标的目标矩形框左上角坐标点的纵坐标,wps为目标类型为人员的目标的目标矩形框在水平方向上的长度,hps为目标类型为人员的目标的目标矩形框在垂直方向上的长度;s的数值为自然数。

7.根据权利要求6所述的伞具使用行为的检测方法,其特征在于,所述将伞具信息矩阵和人员信息矩阵进行匹配,对所述伞具信息矩阵中与人员信息无关的目标的元素行做去除处理,输出经去除处理后的伞具信息矩阵的步骤,包括:选取所述伞具信息矩阵中的一个元素行,作为待匹配元素行;

基于公式1,将所述待匹配元素行与所述人员信息矩阵中的每一个元素行依次进行匹配,依次计算每一次匹配的匹配参数值;

其中,ov为匹配参数值,n为与所述待匹配元素行对应的目标的序号,m为在一次匹配中,与所述人员信息矩阵中元素行对应的目标的序号,xun为与所述待匹配元素行对应的目标的目标矩形框左上角坐标点的横坐标,wun为与所述待匹配元素行对应的目标的目标矩形框在水平方向上的长度,xpm为在一次匹配中,所述人员信息矩阵中元素行对应的目标的目标矩形框在水平方向上的长度,wpm为在一次匹配中,所述人员信息矩阵中元素行对应的目标的目标矩形框在水平方向上的长度;n和m的数值均为自然数;

判断是否存在于某一次匹配过程中,计算得出的匹配参数值大于0.3;

若存在于某一次匹配过程中,计算得出的匹配参数值大于0.3,则将该待匹配元素行作为与人员信息有关的目标的元素行,并在所述伞具信息矩阵中保留该待匹配元素行;

若在所有匹配过程中,计算得出的匹配参数值均小于或等于0.3,则将该待匹配元素行作为与人员信息无关的目标的元素行,在所述伞具信息矩阵中去除该待匹配元素行;

对所述伞具信息矩阵中的每一个元素行均执行前述匹配步骤,输出经去除处理后的伞具信息矩阵。

8.根据权利要求7所述的伞具使用行为的检测方法,其特征在于,所述获取所述检测结果,并依据所述检测结果判定在所述预设时间段内是否出现伞具使用行为的步骤,包括:遍历所述经去除处理后的伞具信息矩阵中的所有元素,获取所述经去除处理后的伞具信息矩阵中所有元素行的行数;

判断所述经去除处理后的伞具信息矩阵中所有元素行的行数是否等于0;

若所述经去除处理后的伞具信息矩阵中所有元素行的行数等于0,则判定在所述预设时间段内未出现伞具使用行为,返回获取原始图像数据的初始步骤;

若所述经去除处理后的伞具信息矩阵中所有元素行的行数不等于0,则判定在所述预设时间段内出现伞具使用行为。

9.根据权利要求8所述的伞具使用行为的检测方法,其特征在于,在获取所述检测结果,并依据所述检测结果判定在所述预设时间段内是否出现伞具使用行为的步骤之后,所述伞具使用行为的检测方法还包括:当判定在所述预设时间段内出现伞具使用行为后,获取所述经去除处理后的伞具信息矩阵中的所有目标,将所有目标均定义为违规目标;

提取每一个违规目标对应的目标信息,将每一个违规目标的目标信息发送至服务器存储。

10.一种伞具使用行为的检测系统,其特征在于,包括:

图像获取装置,用于每隔预设时间段获取一次待测原始图像;

伞具检测装置,与所述图像获取装置通信连接,用于执行如权利要求1-9任一项所述的伞具使用行为的检测方法,以检测所述待测原始图像中的违规目标;

服务器,与所述伞具检测装置通信连接,用于存储所述伞具检测装置发送的所述违规目标的目标信息。