利索能及
我要发布
收藏
专利号: 2021116659131
申请人: 电子科技大学
专利类型:发明专利
专利状态:已下证
更新日期:2025-12-17
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种人脸遮挡识别方法,其特征在于,所述人脸遮挡识别方法包括:S1:利用依次连接的结构生成器、纹理生成器和第一网络模型对遮挡人脸图像进行修复,得到修复后的人脸图像;

S2:利用第二网络模型对所述修复后的人脸图像进行识别,得到人脸遮挡识别结果;

所述结构生成器包括依次连接的第一输入层、第一封闭卷积层、第一空洞卷积层、第二封闭卷积层、自回归网络和第一输出层;

所述纹理生成器包括依次连接的第二输入层、第三封闭卷积层、第一残差网络、第四封闭卷积层、第二空洞卷积层、第五封闭卷积层、第二残差网络、第六封闭卷积层、第三残差网络、第七封闭卷积层和第二输出层;以及,第三输入层和注意力机制层,所述第三输入层、所述注意力机制层和所述第二残差网络依次连接,所述第二空洞卷积层的输出端还同时与所述注意力机制层连接;

所述第一输出层连接所述第二输入层;

所述第一网络模型为分层网络模型,所述分层网络模型为VQ‑VAE网络模型,所述VQ‑VAE网络模型包括依次连接的输入模块、编码器、解码器和输出模块,所述输入模块连接所述第二输出层,所述输出模块连接所述第二网络模型;

所述编码器包括依次连接的第一卷积层、第一矢量量化层、第二卷积层、第一跳跃卷积层、第三卷积层、第二矢量量化层,所述第一卷积层作为所述编码器的输入层与所述输入模块连接,所述第二矢量量化层作为所述编码器的输出层与所述解码器连接;

所述第二网络模型为识别网络模型,所述识别网络模型为SqueezeNet网络模型。

2.根据权利要求1所述的人脸遮挡识别方法,其特征在于,所述步骤S1包括:S11:利用无遮挡的人脸数据集对所述第一网络模型和原始结构生成器进行训练,得到训练后的第一网络模型和训练后的结构生成器;

S12:在所述无遮挡的人脸数据集中随机抽取部分图像,得到初始样本集;

S13:随机给所述初始样本集中的部分图像上添加遮挡特征,得到遮挡人脸数据集;

S14:利用训练后的结构生成器对所述遮挡人脸数据集进行处理,得到结构特征图像数据集;

S15:利用所述遮挡人脸数据集和所述结构特征图像数据集对纹理生成器进行训练,得到训练后的纹理生成器;

S16:利用所述训练后的纹理生成器对所述结构特征图像数据集进行处理,得到第一人脸修复图像数据集;

S17:将所述第一人脸修复图像数据集输入到所述训练后的第一网络模型中,得到第二人脸修复图像数据集,其中,所述第二人脸修复图像数据集包括修复后的人脸图像。

3.根据权利要求1所述的人脸遮挡识别方法,其特征在于,所述解码器包括第二跳跃卷积层和第四卷积层,所述第二跳跃卷积层作为所述解码器的输入层与所述第二矢量量化层连接,所述第四卷积层作为所述解码器的输出层与所述输出模块连接。

4.根据权利要求2所述的人脸遮挡识别方法,其特征在于,所述步骤S2包括:利用所述无遮挡的人脸数据集对第二网络模型进行训练,得到训练后的第二网络模型;

将所述第二人脸修复图像数据集输入至所述训练后的第二网络模型中,得到识别后的图像集;

将所述识别后的图像集作为所述人脸遮挡识别结果输出。

5.根据权利要求1所述的人脸遮挡识别方法,其特征在于,所述SqueezeNet网络模型包括挤压层和扩充层,所述挤压层连接所述第一网络模型,并且,通过挤压层进行压缩操作之后生成的图像进入扩充层,所述扩充层利用激活函数对所述压缩操作之后生成的图像进行扩充识别。