利索能及
我要发布
收藏
专利号: 2020106800896
申请人: 桂林远望智能通信科技有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2025-04-28
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种动态身份识别数据处理方法,其特征在于,包括如下步骤:从监控摄像头中获得人脸图像和行人图像;

对所述人脸图像进行特征提取,得到人脸特征,并对所述行人图像进行特征提取,得到行人特征;

以所述人脸特征为首部、所述行人特征为尾部的方式将所述人脸特征和所述行人特征进行首尾拼接处理,拼接得到人脸行人融合特征;

根据预设人脸特征库中的人脸特征对所述人脸特征进行人脸特征匹配计算,得到人脸特征匹配结果;

根据预设行人特征库中的行人特征对所述行人特征进行行人特征匹配计算,得到行人特征匹配结果;

根据预设人脸行人融合特征库中的人脸行人融合特征对所述人脸行人融合特征进行融合特征匹配计算,得到人脸行人融合特征匹配结果;

根据所述人脸特征匹配结果、所述行人特征匹配结果和所述人脸行人融合特征匹配结果得到待归一化匹配结果;

对所述待归一化匹配结果进行归一化处理,得到归一化匹配结果;

对所述归一化匹配结果进行贡献度计算,得到匹配结果贡献度;

通过第七式对人脸特征匹配结果贡献值、行人特征匹配结果贡献值、人脸行人融合特征匹配结果贡献值、人脸特征归一化匹配结果、行人特征归一化匹配结果和人脸行人融合特征归一化匹配结果进行识别计算,得到识别结果,所述第七式为:IDoutput=ArgMax(Wf*S′f+Wp*S′p+Wc*S′c),其中,ArgMax为返回最大值下标函数,Wf为人脸特征匹配结果贡献值,Wp为行人特征匹配结果贡献值,Wc为人脸行人融合特征匹配结果贡献值,S'f为人脸特征归一化匹配结果,S'p为行人特征归一化匹配结果,S'c为人脸行人融合特征归一化匹配结果,IDoutput为识别结果;

所述对所述待归一化匹配结果进行归一化处理,得到归一化匹配结果的过程包括:利用分别Z‑score模型分别对所述人脸特征匹配结果、所述行人特征匹配结果和所述人脸行人融合特征匹配结果进行归一化处理,得到归一化匹配结果,具体为:通过第四式对所述人脸特征匹配结果进行人脸特征归一化计算,得到人脸特征归一化匹配结果,所述第四式为:S'f=FZSModel(Sf),

其中,FZSModel([*])为对匹配结果[*]采用Z‑score模型进行归一化的函数表示,S'f为人脸特征归一化匹配结果,Sf为人脸特征匹配结果;

通过第五式对所述行人特征匹配结果进行行人特征归一化计算,得到行人特征归一化匹配结果,所述第五式为:S'p=FZSModel(Sp),

其中,FZSModel([*])为对匹配结果[*]采用Z‑score模型进行归一化的函数表示,S'p为行人特征归一化匹配结果,Sp为行人特征匹配结果;

通过第六式对所述人脸行人融合特征匹配结果进行融合特征归一化计算,得到人脸行人融合特征归一化匹配结果,所述第六式为:S'c=FZSModel(Sc),

其中,FZSModel([*])为对匹配结果[*]采用Z‑score模型进行归一化的函数表示,S'c为人脸行人融合特征归一化匹配结果,Sc为人脸行人融合特征匹配结果;

根据所述人脸特征归一化匹配结果、所述行人特征归一化匹配结果和所述人脸行人融合特征归一化匹配结果得到归一化匹配结果;

所述对所述归一化匹配结果进行贡献度计算,得到匹配结果贡献度的过程包括:通过各模态特征匹配结果贡献度方程组对所述人脸特征归一化匹配结果、所述行人特征归一化匹配结果和所述人脸行人融合特征归一化匹配结果进行贡献度计算,得到人脸特征匹配结果贡献值、行人特征匹配结果贡献值和人脸行人融合特征匹配结果贡献值,所述方程组为:其中,S'mean为多模态特征的归一化后匹配结果均值,Wf为人脸特征匹配结果贡献值,Wp为行人特征匹配结果贡献值,Wc为人脸行人融合特征匹配结果贡献值,S'f为人脸特征归一化匹配结果,S'p为行人特征归一化匹配结果,S'c为人脸行人融合特征归一化匹配结果;

根据所述人脸特征匹配结果贡献值、所述行人特征匹配结果贡献值和所述人脸行人融合特征匹配结果贡献值得到匹配结果贡献度。

2.根据权利要求1所述的动态身份识别数据处理方法,其特征在于,所述对所述人脸图像进行特征提取,得到人脸特征,并对所述行人图像进行特征提取,得到人脸特征和行人特征的过程包括:基于人脸识别模型对所述人脸识别模型进行训练,根据训练好的人脸识别模型对所述人脸图像进行人脸特征提取,得到人脸特征;

基于行人重识别模型对所述行人重识别模型进行训练,根据训练好的行人重识别模型对所述行人图像进行行人特征提取,得到行人特征。

3.根据权利要求1所述的动态身份识别数据处理方法,其特征在于,所述根据预设人脸特征库中的多个特征库人脸特征对所述人脸特征进行人脸特征匹配计算,得到人脸特征匹配结果的过程包括:通过第一式对所述人脸特征和预设的人脸特征库中的多个特征库人脸特征进行人脸特征匹配计算,得到人脸特征匹配结果,所述第一式为:Sf=[cos(f,Fl1),…,cos(f,Fli),…,cos(f,FlN1)],其中,f为人脸特征,Sf为人脸特征匹配结果,Fli为人脸特征库中的第i个特征库人脸特征,N1为人脸特征库中的人脸特征数量。

4.根据权利要求1所述的动态身份识别数据处理方法,其特征在于,所述根据预设行人特征库中的特征库行人特征对所述行人特征进行行人特征匹配计算,得到行人特征匹配结果的过程包括:通过第二式对所述行人特征和预设的行人特征库中的特征库行人特征进行行人特征匹配计算,得到行人特征匹配结果,所述第二式为:Sp=[cos(p,Pl1),…,cos(p,Pli),…,cos(p,PlN2)],其中,p为行人特征,Sp为行人特征匹配结果,Pli为行人特征库中的第i个特征库行人特征,N2为行人特征库中的行人特征数量。

5.根据权利要求1所述的动态身份识别数据处理方法,其特征在于,所述根据预设人脸行人融合特征库中的特征库人脸行人融合特征对所述人脸行人融合特征进行融合特征匹配计算,得到人脸行人融合特征匹配结果的过程包括:通过第三式对所述人脸行人融合特征和预设的人脸行人融合特征库中的特征库人脸行人融合特征进行融合特征匹配计算,得到人脸行人融合特征匹配结果,所述第三式为:Sc=[cos(c,Cl1),…,cos(c,Cli),…,cos(c,ClN3)],其中,c为人脸行人融合特征,Sc为人脸行人融合特征匹配结果,Cli为人脸行人融合特征库中的第i个特征库人脸行人融合特征,N3为人脸行人融合特征库中的人脸行人融合特征数量。

6.一种动态身份识别数据处理系统,其特征在于,包括:

图像获得模块,用于从监控摄像头中获得人脸图像和行人图像;

特征提取模块,用于对所述人脸图像进行特征提取,得到人脸特征,并对所述行人图像进行特征提取,得到行人特征;

特征匹配处理模块,用于以所述人脸特征为首部、所述行人特征为尾部的方式将所述人脸特征和所述行人特征进行首尾拼接处理,拼接得到人脸行人融合特征;

根据预设人脸特征库中的人脸特征对所述人脸特征进行人脸特征匹配计算,得到人脸特征匹配结果;

根据预设行人特征库中的行人特征对所述行人特征进行行人特征匹配计算,得到行人特征匹配结果;

根据预设人脸行人融合特征库中的人脸行人融合特征对所述人脸行人融合特征进行融合特征匹配计算,得到人脸行人融合特征匹配结果;

根据所述人脸特征匹配结果、所述行人特征匹配结果和所述人脸行人融合特征匹配结果得到待归一化匹配结果;

归一化处理模块,用于对所述待归一化匹配结果进行归一化处理,得到归一化匹配结果;

贡献度计算模块,用于对所述归一化匹配结果进行贡献度计算,得到匹配结果贡献度;

识别结果获得模块,用于通过第七式对人脸特征匹配结果贡献值、行人特征匹配结果贡献值、人脸行人融合特征匹配结果贡献值、人脸特征归一化匹配结果、行人特征归一化匹配结果和人脸行人融合特征归一化匹配结果进行识别计算,得到识别结果,所述第七式为:IDoutput=ArgMax(Wf*S′f+Wp*S′p+Wc*S′c),其中,ArgMax为返回最大值下标函数,Wf为人脸特征匹配结果贡献值,Wp为行人特征匹配结果贡献值,Wc为人脸行人融合特征匹配结果贡献值,S'f为人脸特征归一化匹配结果,S'p为行人特征归一化匹配结果,S'c为人脸行人融合特征归一化匹配结果,IDoutput为识别结果;

所述归一化处理模块具体用于:

利用分别Z‑score模型分别对所述人脸特征匹配结果、所述行人特征匹配结果和所述人脸行人融合特征匹配结果进行归一化处理,得到归一化匹配结果,具体为:通过第四式对所述人脸特征匹配结果进行人脸特征归一化计算,得到人脸特征归一化匹配结果,所述第四式为:S'f=FZSModel(Sf),

其中,FZSModel([*])为对匹配结果[*]采用Z‑score模型进行归一化的函数表示,S'f为人脸特征归一化匹配结果,Sf为人脸特征匹配结果;

通过第五式对所述行人特征匹配结果进行行人特征归一化计算,得到行人特征归一化匹配结果,所述第五式为:S'p=FZSModel(Sp),

其中,FZSModel([*])为对匹配结果[*]采用Z‑score模型进行归一化的函数表示,S'p为行人特征归一化匹配结果,Sp为行人特征匹配结果;

通过第六式对所述人脸行人融合特征匹配结果进行融合特征归一化计算,得到人脸行人融合特征归一化匹配结果,所述第六式为:S'c=FZSModel(Sc),

其中,FZSModel([*])为对匹配结果[*]采用Z‑score模型进行归一化的函数表示,S'c为人脸行人融合特征归一化匹配结果,Sc为人脸行人融合特征匹配结果;

根据所述人脸特征归一化匹配结果、所述行人特征归一化匹配结果和所述人脸行人融合特征归一化匹配结果得到归一化匹配结果;

所述贡献度计算模块具体用于:

通过各模态特征匹配结果贡献度方程组对所述人脸特征归一化匹配结果、所述行人特征归一化匹配结果和所述人脸行人融合特征归一化匹配结果进行贡献度计算,得到人脸特征匹配结果贡献值、行人特征匹配结果贡献值和人脸行人融合特征匹配结果贡献值,所述方程组为:其中,S'mean为多模态特征的归一化后匹配结果均值,Wf为人脸特征匹配结果贡献值,Wp为行人特征匹配结果贡献值,Wc为人脸行人融合特征匹配结果贡献值,S'f为人脸特征归一化匹配结果,S'p为行人特征归一化匹配结果,S'c为人脸行人融合特征归一化匹配结果;

根据所述人脸特征匹配结果贡献值、所述行人特征匹配结果贡献值和所述人脸行人融合特征匹配结果贡献值得到匹配结果贡献度。