面向自动驾驶点云语义分割的物理启发式域泛化天气增强框架

《International Journal of Applied Earth Observation and Geoinformation》:PhyDAWS: Physically-inspired data augmentation with weather simulation for domain-generalized point cloud segmentation

【字体: 时间:2026年04月08日 来源:International Journal of Applied Earth Observation and Geoinformation 8.6

编辑推荐:

  研究人员提出了一种物理启发式数据增强框架PhyDAWS,以解决自动驾驶场景中LiDAR点云语义分割模型在未见过的恶劣天气条件下性能显著下降的问题。该框架基于LiDAR信号与大气粒子相互作用的物理机制,结合现象学建模与Mie散射理论,在不依赖目标域数据的情况下生

  
研究人员提出了一种物理启发式数据增强框架PhyDAWS,以解决自动驾驶场景中LiDAR点云语义分割模型在未见过的恶劣天气条件下性能显著下降的问题。该框架基于LiDAR信号与大气粒子相互作用的物理机制,结合现象学建模与Mie散射理论,在不依赖目标域数据的情况下生成具有物理真实性的合成天气点云。通过将物理仿真与双视图对比学习相结合,研究人员促使网络学习天气不变特征,从而显著提升模型在雨、雪、雾等复杂环境下的泛化能力。实验结果表明,PhyDAWS在SemanticKITTI到SemanticSTF的真实到真实域迁移任务中实现了38.9%的平均交并比(mIoU),较现有最优方法提升4.1%,并在SynLiDAR到SemanticSTF的合成到真实迁移任务中达到23.7%的mIoU,验证了其在多种天气条件及跨域场景下的有效性。
研究背景与意义
自动驾驶系统的环境感知模块高度依赖LiDAR点云语义分割技术,但现有模型通常在晴朗天气数据上训练,在雨、雪、雾等恶劣天气下性能急剧下降。这种域偏移源于大气粒子对激光信号的散射、衰减和遮挡等物理效应,导致点云密度、强度分布和几何结构发生系统性变化。传统的数据增强方法(如几何变换、随机丢弃点、全局强度缩放等)无法准确模拟这些复杂的物理退化过程,而基于生成对抗网络的方法又需要真实的不良天气数据进行训练,违背了域泛化的基本原则。因此,开发无需目标域数据即可实现恶劣天气鲁棒性的物理启发式增强方法,成为推动自动驾驶系统全天候可靠运行的关键科学问题。该研究发表于《International Journal of Applied Earth Observation and Geoinformation》,为地球观测领域的主动遥感数据增强提供了重要的理论参考。
关键技术方法
研究人员构建了PhyDAWS框架,采用MinkowskiNet作为主干网络,在SemanticKITTI(真实晴朗)和SynLiDAR(合成晴朗)两个源域数据集上进行训练,并在包含雨、雪、雾等多种恶劣天气的SemanticSTF目标域数据集上测试。核心技术包括:(1)现象学天气模拟,分别建模雨的角度依赖遮挡、雪的高度依赖密度变化和雾的距离依赖衰减;(2)Mie-Monte Carlo散射模拟,基于伽马分布的粒子尺寸参数计算消光系数,并通过蒙特卡洛方法模拟随机散射事件;(3)双视图对比学习策略,将原始点云与物理增强后的点云作为正负样本对,利用类别原型记忆库优化特征空间对齐。所有物理参数均依据大气科学文献校准,确保仿真的物理一致性。
研究结果
4.1 数据集
研究采用SemanticKITTI(43,552帧晴朗天气点云)、SynLiDAR(198,396帧合成点云)作为源域,SemanticSTF(2,076帧含雨、雪、雾的点云)作为目标域,严格遵循无目标域标签的域泛化协议。
4.4.1 评估结果:从SemanticKITTI到SemanticSTF
PhyDAWS在所有天气条件下达到38.9% mIoU,较WADG提升4.1%。其中浓雾场景40.2%(提升0.7%),轻雾34.7%(提升2.2%),雨37.7%(提升6.0%),雪33.4%(提升4.0%)。类别级分析显示,摩托车IoU达51.2%(提升18.3%),行人45.3%,建筑物78.5%,验证了物理仿真对不同语义类别的针对性增强效果。
4.4.3 评估结果:从SynLiDAR到SemanticSTF
在更具挑战性的合成到真实迁移任务中,PhyDAWS达到23.7% mIoU,较WADG提升1.8%。雨场景表现最佳(28.2%),雪场景次之(24.4%),表明物理增强能有效桥接合成数据与真实世界的域差距。
4.5 消融研究
移除任一天气类型仿真均导致性能下降(降幅2.1%-2.7%),其中雪模拟对摩托车分割影响最大(IoU下降30.2%)。单独使用现象学仿真(PWS)或Mie散射仿真(MSS)分别获得36.1%和36.3% mIoU,而两者结合提升至38.9%,证实其互补性。组件级消融显示,角度依赖遮挡(ADO)对雨场景最关键,高度依赖密度变化(HDV)对雪场景贡献最大,距离依赖衰减(DDA)主要影响雾场景的远距离物体识别。
讨论与结论
研究人员通过物理一致性分析指出,PhyDAWS将大气物理定律嵌入数据增强过程,使生成的退化模式与真实LiDAR测量机制相符,从而促进网络学习几何与结构不变的表征。该方法在跨区域部署中表现出良好潜力,因大气散射规律具有地理普适性。局限性在于Mie散射假设球形粒子,对冰晶形态复杂的雪场景模拟存在近似误差,且能见度阈值模型未能完全还原极端浓雾的连续衰减梯度。未来可扩展至非球形粒子散射建模及多模态遥感数据融合。
结论
PhyDAWS通过物理启发的天气仿真实现了LiDAR点云语义分割的有效域泛化。研究人员证实,结合现象学与Mie散射的双路径增强能显著提升模型在未见恶劣天气下的鲁棒性,为自动驾驶全天候感知提供了可行的技术路径,同时为地球观测领域的物理驱动数据增强建立了方法论基础。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号