利索能及
我要发布
收藏
专利号: 2017111807639
申请人: 南京信息工程大学
专利类型:发明专利
专利状态:已下证
更新日期:2025-12-30
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:包括如下步骤:训练阶段:选取对应的Landsat图像和MODIS图像形成Landsat-MODIS图像对,并对Landsat图像进行下采样,得到接近MODIS空间分辨率的LSR Landsat图像,根据Landsat图像、MODIS图像和LSR Landsat图像的组合进行训练,并分别得到非线性映射CNN网络和超分辨率重建CNN网络;

预测阶段:分别选取日期t1和t3的Landsat-MODIS图像对,基于训练阶段得到的非线性映射CNN网络和超分辨率重建CNN网络,预测位于日期t1和t3之间的日期t2的Landsat预测图像。

2.根据权利要求1所述的一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:所述训练阶段具体包括如下步骤:选取Landsat-MODIS图像对:选取对应的Landsat图像和MODIS图像,并对Landsat图像进行下采样,得到接近MODIS空间分辨率的LSR Landsat图像;

训练非线性映射模型:将MODIS图像作为训练集,LSR Landsat图像作为标签,通过非线性映射函数从MODIS图像中学习MODIS图像和LSR Landsat图像的残差,进而训练得到非线性映射CNN网络;

训练超分辨率重建模型:将LSR Landsat图像作为训练集,Landsat图像作为标签,利用LSR Landsat和原始Landsat图像之间的相似性学习残差网络,进而训练得到超分辨率重建CNN网络。

3.根据权利要求2所述的一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:将MODIS图像和LSR Landsat图像分别记为X和Yl,定义真实的残差图像为:R=Yl–X;

在训练非线性映射模型步骤中具体包括如下步骤:

输入MODIS图像,并提取MODIS图像的特征图像;

把MODIS图像的特征图像通过非线性映射函数映射形成残差图像的映射特征图像;

根据残差图像的映射特征图像重新构建残差图像,形成重建的残差图像;

最小化重建的残差图像和真实的残差图像之间的损失,实现训练非线性映射CNN网络。

4.根据权利要求2所述的一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:将训练样本LSR Landsat和Landsat图像记为Yl和Y,定义真实的残差图像为:Rs=Y–Yl,在训练超分辨率重建模型步骤中具体包括如下步骤:输入LSR Landsat图像,并提取LSR Landsat图像的特征图像;

把LSR Landsat图像的特征图像通过非线性映射函数映射形成残差图像的映射特征图像;

根据残差图像的映射特征图像重新构建残差图像,形成重建的残差图像;

最小化重建的残差图像和真实的残差图像之间的损失,实现训练超分辨率重建CNN网络。

5.根据权利要求1所述的一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:所述预测阶段具体包括如下步骤:获取LSR Landsat过渡图像:选取位于日期t1和t3之间的日期t2的MODIS图像,把日期t1、t2、和t3的MODIS图像通过训练阶段得到的非线性映射CNN网络,得到日期t2的LSR Landsat过渡图像,将日期t1、t2、和t3的MODIS图像分别记作:M1,M2,M3;

获取LSR Landsat预测图像:利用日期t2的LSR Landsat过渡图像以及日期t1和t3的Landsat图像下采样得到的LSR Landsat图像得到高通调制等式,结合日期t1和t3的预测数据的加权策略通过高通调制得到日期t2的LSR Landsat预测图像;

获取Landsa过渡图像:将日期t2的LSR Landsat预测图像以及日期t1和t3的LSR Landsat图像输入到训练阶段得到的超分辨率重建CNN网络,得到日期t2的Landsat过渡图像;

获取Landsat预测图像:利用日期t2的Landsat过渡图像以及日期t1和t3的Landsat图像得到高通调制等式,结合日期t1和t3的预测数据的加权策略通过高通调制得到日期t2的Landsat预测图像。

6.根据权利要求5所述的一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:获取LSR Landsa预测图像的步骤包括:把日期t1、t2、和t3的MODIS图像M1,M2,M3通过非线性映射CNN网络映射得到的LSR Landsat过渡图像,记为Til(i=1,2,3);

把经过双三次插值得到的LSR Landsat图像的下采样图像记为 通过高通调制等式进行LSR Landsat过渡图像和日期t1的LSR Landsat图像的融合:而且,高通调制等式还应用到日期t3得到另一个LSR Landsat预测图像:结合日期t1和t3的预测数据采用加权的策略,其中,权重系数的计算下式:得到日期t2的LSR Landsat预测图像:

7.根据权利要求5所述的一种基于深度卷积神经网络的时空卫星图像融合方法,其特征在于:获取Landsat预测图像的步骤包括:把日期t2的LSR Landsat预测图像以及日期t1和t3的LSR Landsat图像输入超分辨率重l建CNN网络得到的日期t2的Landsat过渡图像,记为Ti(i=1,2,3);

通过高通调制等式进行Landsat过渡图像和日期t1的Landsat图像的融合:而且,高通调制等还应用到日期t3得到另一个Landsat预测图像:结合日期t1和t3的预测数据采用加权的策略,其中,权重系数的计算下式:得到日期t2的Landsat预测图像: