利索能及
我要发布
收藏
专利号: 2018102706722
申请人: 宁波大学
专利类型:发明专利
专利状态:已下证
更新日期:2024-11-12
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种移动智能终端拍照摄像处理方法,用于处理所拍摄合法用户图像的闭眼照片,其特征在于,所述移动智能终端拍照摄像处理方法包括如下步骤1至步骤12:步骤1,预先设置第一预设时间段,由所述移动智能终端在第一预设时间段内连续获取其合法用户的多幅具有睁眼状态的面部图像,并由所述多幅具有睁眼状态的面部图像形成针对该移动智能终端合法用户的合法用户面部图像数据库;

其中,所述第一预设时间段标记为T1,所述合法用户面部图像数据库内的面部图像个数为M1幅,所述M1幅面部图像内的第m幅面部图像标记为JPGface,m,1≤m≤M1;

步骤2,所述移动智能终端提取该合法用户面部图像数据库中各幅面部图像内的左眼图像以及对应的右眼图像,形成所述合法用户的左眼图像数据库和右眼眶图像数据库,得到所述合法用户的左眼特征参数集和右眼特征参数集;

其中,所述合法用户的左眼特征参数集包括左眼图像长度值参数、左眼图像宽度值参数、左眼图像面积值参数、左眼图像像素值参数以及左眼瞳孔半径值参数;

所述第m幅合法用户面部图像JPGface,m内的左眼图像记为 左眼图像

长度值参数记为 左眼图像 宽度值参数记为 左眼图像

面积值参数记为 左眼瞳孔半径值参数记为

对应地,所述合法用户的右眼特征参数集包括右眼图像长度值参数、右眼图像宽度值参数、右眼图像面积值参数、右眼图像像素值参数以及右眼瞳孔半径值参数;

所述第m幅合法用户面部图像JPGface,m内的右眼图像记为 右眼图像

长度值参数记为 右眼图像 宽度值参数记为 右眼图像

面积值参数记为 右眼瞳孔半径值参数记为

步骤3,所述移动智能终端根据所得其合法用户的左眼特征参数集和右眼特征参数集,得到针对该合法用户任意面部图像的左眼特征修正参数值和右眼特征修正参数值;

其中,所述合法用户面部图像的左眼特征修正参数值标记为τLeft,所述合法用户面部图像的右眼特征修正参数值标记为τRight:表示数值 与数值 之间的最大值,

表示数值 与数值 之间的最大值;

步骤4,所述移动智能终端在检测到有操作者启动拍照按键且判断当前操作者为其合法用户时,所述移动智能终端启动其摄像头并获取多个当前周围环境的光照强度数据,形成针对当前周围环境的环境光照强度数据库,得到针对当前周围环境光照状态的图像自适应亮度修正参数;否则,所述移动智能终端拒绝启动其摄像头;

其中,所述环境光照强度数据库内的光照强度数据个数标记为M2,所述环境光照强度数据库内的第i个光照强度数据标记为Luxi,1≤i≤M2;所述图像自适应亮度修正参数标记为δ:其中,Lux(min)表示M2个光照强度数据内的最小值,Lux(max)表示M2个光照强度数据内的最大值;

步骤5,所述移动智能终端在得到图像自适应亮度修正参数后,移动智能终端在第一预设时间段内且在当前周围环境下获取其摄像头镜片上的多个湿度数据,形成针对当前周围环境的环境湿度数据库,得到针对当前周围环境湿度状态的图像模糊度校正值;

其中,所述环境湿度数据库内的湿度数据个数标记为M3,所述环境湿度数据库内的第i个湿度数据标记为HUi,1≤j≤M3;所述图像模糊度校正值标记为θ:步骤6,设置第二预设时间段,由所述移动智能终端在第二预设时间段内获取其被合法用户握持时的抖动次数、该移动智能终端在水平方向上的横向累计移动距离值以及该移动智能终端在竖直方向上的纵向累计移动距离值,得到移动智能终端被其合法用户握持时的横向抖动偏移值以及纵向抖动偏移值;

其中,所述第二预设时间段标记为T2,所述移动智能终端在第二预设时间段T2内被合法用户握持时的抖动次数标记为C1,所述移动智能终端的横向累计移动距离值标记为D1,所述移动智能终端的纵向累计移动距离值标记为D2,所述移动智能终端被其合法用户握持时的横向抖动偏移值标记为d1,所述移动智能终端被其合法用户握持时的纵向抖动偏移值标记为d2:步骤7,所述移动智能终端根据其摄像头的固有对焦频率、所得横向抖动偏移值以及纵向抖动偏移值,得到该移动智能终端启动其摄像头时的自适应对焦频率;

其中,所述移动智能终端其摄像头的固有对焦频率标记为f,所述移动智能终端启动其摄像头时的自适应对焦频率标记为F:步骤8,所述移动智能终端在检测到其合法用户启动摄像头时,移动智能终端按照所得自适应对焦频率进行对焦处理且利用其摄像头对镜头前方对象做人像识别检测:当移动智能终端判断摄像头的镜头前方对象仅为人脸的面部区域时,移动智能终端在设定拍照时间内连续获取多帧前方对象图像,形成所拍摄前方对象的前方对象连拍图像库,并得到拍照时刻的周围环境光照强度,转入步骤9;否则,所述移动智能终端获取其合法用户的拍摄按键次数并拍摄与所述拍摄按键次数等数值的多幅前方对象图像,且存储拍摄的所述多幅前方对象图像到该移动智能终端自身的拍照图像数据库内;其中,所述拍照时刻的周围环境光照强度标记为Lux(Camera);

步骤9,所述移动智能终端针对所述前方对象连续图形库内的各帧前方对象图像分别做眼部区域检测,且在成功检测到存在处于睁眼状态的眼部区域时,移动智能终端提取该存在睁眼状态的眼部区域所对应的前方对象图像并存储该前方对象图像至前方对象睁眼状态图像数据库,以供用户调用观察图像;否则,所述移动智能终端转入步骤10;

步骤10,所述移动智能终端接收到其合法用户的闭眼调整修复指令时,该移动智能终端转入步骤11,启动针对所述前方对象图像的闭眼调整修改操作;否则,所述移动智能终端关闭其摄像头;

步骤11,所述移动智能终端根据自动选取或者根据其合法用户指令选取所述前方对象连拍图像库内的一帧前方对象图像作为背景图像,并以步骤1中所述合法用户面部图像数据库内的任一副合法用户面部图像作为修复源图像,利用所述修复源图像调整修复所述背景图像中的闭眼区域,得到更新后的背景图像并显示该更新后的背景图像;其中,利用所述修复源图像调整修复所述背景图像中的闭眼区域过程包括如下步骤a1至步骤a6:步骤a1,所述移动智能终端提取所述修复源图像中的眼部区域图像;其中,所述眼部区域图像包括左眼图像和右眼图像;

步骤a2,所述移动智能终端根据所得图像自适应亮度修正参数、图像模糊度校正值以及步骤8中所述拍照时刻的周围环境光照强度,得到修复当前眼部区域图像时的修复后眼睛图像亮度;其中,所述修复后眼睛图像亮度标记为α:步骤a3,所述移动智能终端检测所述背景图像中的用户闭眼区域,并根据所检测用户闭眼区域调取所述眼部区域图像中对应的眼睛图像:当检测所述用户闭眼区域仅为用户的左眼区域时,所述移动智能终端获取当前右眼区域的右眼图像长度值参数和右眼图像宽度值参数并调取所述眼部区域图像中的左眼图像作为左眼修复源图像后,转入步骤a4;其中,当前右眼区域的右眼图像长度值参数标记为当前右眼区域的右眼图像宽度值参数标记为当检测所述用户闭眼区域仅为用户的右眼区域时,所述移动智能终端获取当前左眼区域的左眼图像长度值参数和左眼图像宽度值参数并调取所述眼部区域图像中的右眼图像作为右眼修复源图像后,转入步骤a5;其中,当前左眼区域的左眼图像长度值参数标记为当前左眼区域的左眼图像宽度值参数标记为步骤a4,所述移动智能终端根据步骤3中所得左眼特征修正参数值和以及步骤a3中所得对应右眼图像长度值参数和右眼图像宽度值参数,调整所述左眼修复源图像的长度参数值和宽度值参数,并以该调整后的左眼修复源图像替换掉背景图像中的左眼图像,得到更新后的所述背景图像,转入步骤a6;

其中,所述调整后左眼修复源图像的长度参数值标记为 所述调整后左眼修复源图像的宽度参数值标记为步骤a5,所述移动智能终端根据步骤3中所得右眼特征修正参数值和以及步骤a3中所得对应左眼图像长度值参数和左眼图像宽度值参数,调整所述右眼修复源图像的长度参数值和宽度值参数,并以该调整后的右眼修复源图像替换掉背景图像中的右眼图像,得到更新后的所述背景图像,转入步骤a6;

其中,所述调整后右眼修复源图像的长度参数值标记为 所述调整后右眼修复源图像的宽度参数值标记为步骤a6,所述移动智能终端以步骤a2中所得修复后眼睛图像亮度显示更新后的所述背景图像。

2.根据权利要求1所述的移动智能终端拍照摄像处理方法,其特征在于,所述第一预设时间段T1大于所述第二预设时间段T2。

3.根据权利要求1所述的移动智能终端拍照摄像处理方法,其特征在于,在步骤1中,所述合法用户面部图像数据库内的图像格式为JPG格式。

4.根据权利要求1~3任一项所述的移动智能终端拍照摄像处理方法,其特征在于,步骤8中所述的设定拍照时间为0.5秒,移动智能终端该设定拍照时间内所连续获取前方对象图像的帧数为5帧。

5.根据权利要求1~3任一项所述的移动智能终端拍照摄像处理方法,其特征在于,所述移动智能终端为智能手机或者平板电脑或者智能穿戴设备。