利索能及
我要发布
收藏
专利号: 2024100688123
申请人: 江西科技学院
专利类型:发明专利
专利状态:已下证
更新日期:2025-10-14
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.基于视频帧的多特征感知驾驶疲劳状态检测方法,其特征在于,所述方法包括以下步骤:当检测到车辆启动时,采集主驾驶位的人脸视频,根据主驾驶位的人脸视频确定标定人脸图像;

每间隔设定时间值采集一段主驾驶位的面部视频,对所述面部视频进行视频帧提取得到设定数量的面部图像;

识别所述面部图像的眼部特征和嘴部特征,得到面部分析信息,所述面部分析信息包括眼特征数据和嘴特征数据;

计算标定人脸图像的眼标定数值和嘴标定数值,将面部分析信息与标定人脸图像的眼标定数值和嘴标定数值进行对比,判定面部分析信息是否存在疲劳迹象;

根据所有面部分析信息的疲劳情况,判定驾驶员是否存在疲劳驾驶的风险,当存在时,生成预警信息;

识别所述面部图像的眼部特征和嘴部特征,得到面部分析信息的步骤,具体包括:对眼部特征进行描边确定眼部轮廓,得到眼部轮廓的左右端点,左右端点将眼部轮廓划分为上轮廓和下轮廓,确定上轮廓的中点和下轮廓的中点;

计算得到眼特征数据,眼特征数据的计算公式为: ,其中, 表示眼特征数据的计算值, 表示眼特征数据的基准值, 表示眼部轮廓的左右端点之间的距离, 表示上轮廓中点和下轮廓中点之间的距离;

对嘴部特征进行描边确定嘴唇弧线,得到嘴唇弧线的左右端点,左右端点将嘴唇弧线划分为上弧线和下弧线,确定上弧线的中点和下弧线的中点;

计算得到嘴特征数据,嘴特征数据的计算公式为: ,其中, 表示嘴特征数据的计算值, 表示嘴特征数据的基准值, 表示嘴特征数据项的校正因子,表示嘴唇弧线的左右端点之间的距离, 表示上弧线中点和下弧线中点之间的距离;

根据眼特征数据和嘴特征数据整合得到面部分析信息。

2.根据权利要求1所述的基于视频帧的多特征感知驾驶疲劳状态检测方法,其特征在于,所述根据主驾驶位的人脸视频确定标定人脸图像的步骤,具体包括:将主驾驶位的人脸视频与人脸图像库进行匹配,当匹配成功时,确定相匹配的人脸图像为标定人脸图像;

当匹配失败时,根据主驾驶位的人脸视频确定一个标定人脸图像。

3.根据权利要求1所述的基于视频帧的多特征感知驾驶疲劳状态检测方法,其特征在于,将面部分析信息与标定人脸图像的眼标定数值和嘴标定数值进行对比,判定面部分析信息是否存在疲劳迹象的步骤,具体包括:将眼特征数据的计算值 与眼标定数值 进行对比,当 , 表示眼部疲劳系数,确定对应的面部分析信息存在眼特征项疲劳迹象;

将嘴特征数据的计算值 与嘴标定数值 进行对比,当 , 表示嘴部疲劳系数,确定对应的面部分析信息存在嘴特征项疲劳迹象。

4.根据权利要求3所述的基于视频帧的多特征感知驾驶疲劳状态检测方法,其特征在于,所述根据所有面部分析信息的疲劳情况,判定驾驶员是否存在疲劳驾驶的风险的步骤,具体包括:确定主驾驶位的面部视频对应的一组面部分析信息中存在疲劳迹象的疲劳综合值;

对所述疲劳综合值进行判定,当疲劳综合值大于预设疲劳值时,确定驾驶员存在疲劳驾驶的风险。

5.根据权利要求4所述的基于视频帧的多特征感知驾驶疲劳状态检测方法,其特征在于,确定主驾驶位的面部视频对应的一组面部分析信息中存在疲劳迹象的疲劳综合值的方法包括如下步骤:当判断到面部分析信息存在眼特征项疲劳迹象时,计算得到眼特征项疲劳指数;

当判断到面部分析信息存在嘴特征项疲劳迹象时,计算得到嘴特征项疲劳指数;

根据眼特征项疲劳指数与嘴特征项疲劳指数计算得到疲劳综合值。

6.根据权利要求5所述的基于视频帧的多特征感知驾驶疲劳状态检测方法,其特征在于,眼特征项疲劳指数的计算公式表示为:;

其中, 表示眼特征项疲劳指数, 表示眼特征项疲劳指数的基准值, 表示眼特征项的校正因子;

嘴特征项疲劳指数的计算公式表示为:

其中, 表示嘴特征项疲劳指数, 表示嘴特征项疲劳指数的基准值;

疲劳综合值的计算公式表示为:

其中, 表示疲劳综合值, 表示疲劳综合值的基准值, 表示眼特征项的权重因子, 表示嘴特征项的权重因子。

7.基于视频帧的多特征感知驾驶疲劳状态检测系统,其特征在于,应用权利要求1至6任一项所述的基于视频帧的多特征感知驾驶疲劳状态检测方法,所述系统包括:标定人脸图像模块,用于当检测到车辆启动时,采集主驾驶位的人脸视频,根据主驾驶位的人脸视频确定标定人脸图像;

面部图像采集模块,用于每间隔设定时间值采集一段主驾驶位的面部视频,对所述面部视频进行视频帧提取得到设定数量的面部图像;

面部分析信息模块,用于识别所述面部图像的眼部特征和嘴部特征,得到面部分析信息,所述面部分析信息包括眼特征数据和嘴特征数据;

疲劳迹象判定模块,用于计算标定人脸图像的眼标定数值和嘴标定数值,将面部分析信息与标定人脸图像的眼标定数值和嘴标定数值进行对比,判定面部分析信息是否存在疲劳迹象;

疲劳驾驶判定模块,用于根据所有面部分析信息的疲劳情况,判定驾驶员是否存在疲劳驾驶的风险,当存在时,生成预警信息;

所述面部分析信息模块包括:

眼部轮廓识别单元,用于对眼部特征进行描边确定眼部轮廓,得到眼部轮廓的左右端点,左右端点将眼部轮廓划分为上轮廓和下轮廓,确定上轮廓的中点和下轮廓的中点;

眼特征数据单元,用于计算得到眼特征数据,眼特征数据的计算公式为:,其中, 表示眼特征数据的计算值, 表示眼特征数据的基准值,表示眼部轮廓的左右端点之间的距离, 表示上轮廓中点和下轮廓中点之间的距离;

嘴唇弧线识别单元,用于对嘴部特征进行描边确定嘴唇弧线,得到嘴唇弧线的左右端点,左右端点将嘴唇弧线划分为上弧线和下弧线,确定上弧线的中点和下弧线的中点;

嘴特征数据单元,用于计算得到嘴特征数据,嘴特征数据的计算公式为:,其中, 表示嘴特征数据的计算值, 表示嘴特征数据的基准值,表示嘴特征数据项的校正因子, 表示嘴唇弧线的左右端点之间的距离, 表示上弧线中点和下弧线中点之间的距离;

面部分析信息单元,用于根据眼特征数据和嘴特征数据整合得到面部分析信息。

8.根据权利要求7所述的基于视频帧的多特征感知驾驶疲劳状态检测系统,其特征在于,所述标定人脸图像模块包括:第一标定图像单元,用于将主驾驶位的人脸视频与人脸图像库进行匹配,当匹配成功时,确定相匹配的人脸图像为标定人脸图像;

第二标定图像单元,用于当匹配失败时,根据主驾驶位的人脸视频确定一个标定人脸图像。

9.根据权利要求8所述的基于视频帧的多特征感知驾驶疲劳状态检测系统,其特征在于,所述疲劳迹象判定模块包括:第一疲劳迹象单元,用于将眼特征数据的计算值 与眼标定数值 进行对比,当, 表示眼部疲劳系数,确定对应的面部分析信息存在眼特征项疲劳迹象;

第二疲劳迹象单元,用于将嘴特征数据的计算值 与嘴标定数值 进行对比,当, 表示嘴部疲劳系数,确定对应的面部分析信息存在嘴特征项疲劳迹象。

10.根据权利要求9所述的基于视频帧的多特征感知驾驶疲劳状态检测系统,其特征在于,所述疲劳驾驶判定模块包括:疲劳综合值计算单元,用于确定主驾驶位的面部视频对应的一组面部分析信息中存在疲劳迹象的疲劳综合值;

疲劳综合值判定单元,用于对所述疲劳综合值进行判定,当疲劳综合值大于预设疲劳值时,确定驾驶员存在疲劳驾驶的风险。