一种基于小波引导且考虑物理特性的网络,用于遥感图像的去雾处理

《Expert Systems with Applications》:A wavelet-guided and physics-aware network for remote sensing image dehazing

【字体: 时间:2026年04月15日 来源:Expert Systems with Applications 7.5

编辑推荐:

  针对遥感图像去雾中现有方法泛化能力差、物理可解释性不足的问题,本文提出小波引导与物理感知的去雾网络WPD-Net,通过结合小波频域分解与跨注意力Transformer模块,增强特征融合能力,并引入物理残差模块实现模型泛化与可解释性平衡。

  
张倩曦|高涛|陈婷|文远波|李子琦|梁珊
长安大学信息工程学院,中国西安710064

摘要

现有的基于先验和学习的方法显著提升了图像去雾效果。然而,这些方法通常泛化能力较差,缺乏物理可解释性,尤其是在复杂的遥感雾景中。为了解决这些问题,我们提出了一种基于小波引导和物理感知的去雾网络(WPD-Net),该网络将频域指导和物理模型约束整合到一个统一的学习框架中,从而在保持物理可解释性的同时增强了在复杂遥感场景中的泛化能力。具体来说,我们首先引入了一种基于小波引导的交叉自注意力变换器(WCSAformer),它通过双分支架构对空间-频率表示进行建模,以抑制低频雾蚀并捕捉高频细节。在WCSAformer内部,我们开发了一个小波空间增强模块(WSEB),该模块将特征分解为频率子带,并通过注意力引导的细化来选择性地增强与雾相关的背景特征。同时,我们提出了一种基于小波引导的交叉自注意力模块(WCSAB),用于联合建模空间特征和小波增强特征,实现高效的信息交互。此外,我们设计了一个空间重加权模块(SRM),以自适应地融合双分支输出,平衡局部细节保留和全局一致性。另外,我们提出了一种基于物理感知的残差去雾模块(PRDM),将大气散射模型重新构建成一个可学习的残差结构,从而在复杂雾况下实现物理一致的预测和更好的鲁棒性。广泛的实验表明,我们提出的方法在各种雾况下表现出出色的泛化能力和鲁棒性。

引言

遥感(RS)技术对于地球观测任务变得越来越重要,包括气候预测、城市规划、灾害监测和军事监视(Gao, Li, Wen, Chen, Niu, Liu, 2024a; Gao, Niu, Zhang, Chen, Mei, Jubair, 2023; Ge, Qin, Zhang, Huang, 2025; Wen, Gao, Chen, 2024a)。然而,由于航空和卫星观测涉及的长距离成像和复杂的大气条件,捕获的图像经常受到雾蚀和大气散射的影响而退化。悬浮颗粒如气溶胶和水滴会沿成像路径散射入射光,导致对比度降低、颜色失真和结构细节显著丢失。这种退化不仅降低了视觉质量,还严重影响了后续遥感应用的可靠性。因此,开发专门针对遥感图像的有效去雾技术已成为一个重要的研究问题。
现有的去雾策略大致可以分为两类:传统的基于先验的方法和数据驱动的学习基方法。传统的图像去雾方法主要基于大气散射模型(Narasimhan & Nayar, 2003),该模型将观测到的雾景图像描述为真实场景辐射经过传输介质衰减后的结果加上全球大气光的叠加效应。基于这一模型,提出了许多基于先验的方法,如暗通道先验(DCP)(He, Sun, & Tang, 2010)、颜色衰减先验(Zhu, Mai, & Shao, 2015)和雾线先验(Berman, Treibitz, & Avidan, 2018)。这些方法依赖于手工制作的先验和对场景统计的假设,具有很强的物理可解释性。然而,当处理现实世界遥感图像中的复杂雾分布时,它们的性能往往不尽如人意,因为先验假设经常被违反,导致传输估计错误和明显的视觉伪影。
最近,随着深度学习的快速发展,基于学习的去雾方法通过利用大规模标注的数据集直接学习从雾景图像到清晰图像的映射,取得了显著的成功(Gao, Zhang, Chen, Wen, 2025; Liang, Yang, Jing, 2025a; Liang, Gao, Chen, Zhang, Wang, Li, 2025b; Song, He, Qian, Du, 2023)。最近的研究进一步探索了结合多样化的先验和特征表示来提高去雾的鲁棒性和泛化能力。为了更好地捕捉雾的频率特性,一些方法尝试将频域先验整合到去雾流程中。
例如,FrDiff(Liu, Qi, Pan, Qian, & Yang, 2025a)利用傅里叶先验来对齐雾景和清晰域之间的特征分布,通过强制全局频率约束来提高泛化能力。类似地,FrTrGAN(Dwivedi & Chakraborty, 2025)在GAN框架内利用传输图的频率成分来精细化结构感知的去雾。此外,DCE-Net(Liu, Pang, & Wang, 2025b)通过捕捉特定领域的频率先验的频率感知模块来增强图像细节和语义内容。另外,WDMamba(Sun, Liu, Wang, Zhang, & Wei, 2026)发现雾相关信息主要存在于小波域的低频成分中,并采用粗到细的恢复框架逐步恢复图像细节。这些研究表明,频域和小波基先验可以有效指导去雾过程并显著提高恢复质量。然而,尽管这些方法表现出了良好的性能,但许多现有模型仍然依赖于复杂的深度架构,这些架构表现为黑箱,缺乏足够的可解释性。此外,当处理具有复杂空间结构和大规模雾分布的遥感图像时,它们的泛化能力仍然有限。
在这项工作中,我们提出了一种基于小波引导和物理感知的去雾网络(WPD-Net)。如图1所示,它在去雾性能和计算效率之间实现了理想的平衡,使其在遥感图像去雾任务中具有明显优势。WPD-Net专门设计用于将频域先验和物理可解释的约束整合到一个统一的深度学习框架中,用于遥感图像去雾。它引入了两个核心创新:一个基于小波引导的交叉自注意力变换器(WCSAformer)骨干,用于增强空间-频率表示学习;以及一个基于物理感知的残差去雾模块(PRDM),将大气散射模型嵌入到残差学习结构中。这两个组件共同实现了准确的雾去除和在多种成像条件下的强泛化能力。
为了有效利用频域信息,WCSAformer采用了一种新的空间-频率联合表示策略,由三个紧密集成的模块组成。首先,我们开发了小波空间增强模块(WSEB),它执行离散Haar小波变换,将输入特征分为高频和低频子带。这种设计使网络能够自适应地调节不同的频率成分,在高频子带中增强边缘和细节信息,同时在低频子带中抑制广泛的雾蚀。尽管之前的工作已经整合了频率感知机制,但大多数方法在整个频谱上采用均匀处理,没有选择性强调。相比之下,WSEB允许模型专注于与雾相关的成分,提高了恢复图像的感知质量和结构保真度。同时,我们提出了基于小波引导的交叉自注意力模块(WCSAB),将增强的频率特征整合到全局建模过程中。与仅作用于空间特征的传统自注意力机制不同,WCSAB引入了空间表示和小波增强特征之间的交叉注意力路径,其中注意力计算由频域先验引导。这有助于在特征学习过程中同时考虑空间和频率线索。随后,为了平衡结构保留和感知一致性,我们引入了空间重加权模块(SRM),通过学习到的动态注意力图自适应地融合空间特征和小波增强表示。SRM确保融合的特征有效地整合了高频细节和低频雾成分,形成了WCSAformer架构,实现了高效且可解释的空间-频率特征学习,用于遥感图像去雾。
此外,为了进一步提高模型的泛化能力和物理可解释性,我们引入了基于物理感知的残差去雾模块(PRDM),它将经典的大气散射模型嵌入到一个可学习的残差校正框架中。PRDM不是直接估计清晰图像,而是基于通过轻量级卷积层得到的近似传输和大气光图来预测残差雾成分。然后将这个残差与输入结合,重建去雾后的输出,确保物理一致性,同时保持数据驱动学习的灵活性。通过以残差形式明确建模雾蚀过程,PRDM提供了一种物理约束的细化路径,提高了鲁棒性和结构保真度,特别是在具有复杂雾分布的遥感图像中。
最终,我们在包括合成和真实世界遥感图像在内的九个基准数据集上评估了WPD-Net,这些图像具有不同的雾级别。广泛的实验表明,我们的方法取得了最先进的结果。
总结来说,我们的主要贡献如下:
  • 我们提出了一种基于小波引导和物理感知的去雾网络,将频率先验和物理约束整合到一个统一的框架中。
  • 我们设计了一种基于小波引导的交叉自注意力变换器,通过小波分解、交叉注意力和自适应特征融合来增强空间-频率表示。
  • 我们引入了一种基于物理感知的残差去雾模块,将大气模型重新构建成一个可学习的残差校正路径。
  • 在合成和真实世界基准数据集上的广泛实验证明了我们方法的有效性和泛化能力。
  • 部分摘录

    基于先验的遥感图像去雾

    基于先验的方法通常使用大气散射模型(ASM)(Narasimhan & Nayar, 2003)、暗通道先验(DCP)(He et al., 2010)、雾线先验(Berman et al., 2018)、非局部先验(Berman, Avidan et al., 2016)和颜色衰减先验(Zhu et al., 2015)来重建无雾图像。具体来说,He等人(He et al., 2010)提出了DCP方法,该方法假设在大多数无雾区域中,至少有一个颜色通道的强度非常低。

    提出的方法

    我们的主要目标是开发一个高性能的遥感图像去雾网络,该网络能够有效捕获多尺度特征并结合物理先验来指导恢复过程。为此,我们设计了一个分层编码器-解码器架构,其中包含了两个核心组件:基于小波引导的交叉自注意力变换器(WCSAformer)和基于物理感知的残差去雾模块(PRDM),如图2所示。这些模块共同增强了

    数据集

    我们使用总共九个公开可用的数据集来评估我们提出的网络,每个数据集都是根据其在遥感图像去雾中的特定特征和应用场景选择的。StateHaze1K数据集(Huang, Li, Yang, Sun, & Song, 2020)根据雾强度分为三个子集:薄雾、中等雾和浓雾。每个子集包含400对合成雾景/清晰图像对,其中320对用于训练,35对用于验证,45对用于测试。

    结论

    在这项工作中,我们提出了一种专门为遥感图像恢复设计的小波引导和物理感知的去雾网络。所提出的方法结合了基于小波的空间增强、跨域自注意力和空间重加权机制的骨干架构。此外,还引入了一个基于物理感知的残差去雾模块,将大气散射模型嵌入到一个可学习的残差校正过程中。

    未引用的引用

    缺少引用:图3、图5

    CRediT作者声明

    张倩曦:概念化、方法论、软件、形式分析、调查、数据管理、可视化、写作——原始草稿。
    高涛:监督、项目管理、资金获取、写作——审阅与编辑。
    陈婷:监督、方法论、写作——审阅与编辑。
    文远波:验证、数据管理、调查。
    李子琦:资源管理、数据管理。
    梁珊:资源管理、调查。
    所有作者都已阅读并批准了最终手稿。

    利益冲突声明

    作者声明他们没有已知的财务利益或个人关系可能影响本文报告的工作。
    相关新闻
    生物通微信公众号
    微信
    新浪微博
    • 搜索
    • 国际
    • 国内
    • 人物
    • 产业
    • 热点
    • 科普

    热点排行

      今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

      版权所有 生物通

      Copyright© eBiotrade.com, All Rights Reserved

      联系信箱:

      粤ICP备09063491号