港中文（深圳）是如何让卫星重新"看清"地面的？

2026-07-18 01:27:01 [知识] 来源：盘星资讯网

这项由香港中文大学（深圳）理工学院、港中上海人工智能实验室与西南交通大学地球科学与工程学院联合开展的文深前沿研究，已于2026年7月2日以预印本形式发布在arXiv平台（论文编号：arXiv:2607.02471）。圳何感兴趣的让卫研究者可通过该编号获取完整原文。

卫星每天环绕地球飞行十余圈，星重新利用光学相机捕捉地表动态——从城市扩张到森林变迁，清地再到农田生长。港中然而，文深遥感领域长期面临一个棘手挑战：云层覆盖。圳何全球约60%-70%的让卫地表在任意时刻被云层遮蔽，导致卫星图像中大量区域仅呈现白茫茫的星重新云海，地面信息（森林、清地建筑、港中水体）完全不可见。文深

为此，圳何研究人员提出了“云去除”（Cloud Removal, CR）技术，旨在通过算法“擦除”云层，还原地面真实面貌。这并非简单的图像修图，而是在信息缺失情况下进行高难度的推断。

港中文（深圳）等机构的研究团队发现，现有去云算法存在一个被忽视的隐患：虽然修复后的图像在视觉上令人满意，但在后续机器分析任务（如建筑物识别、土地分类）中表现不佳。即“人眼觉得好，机器觉得错”。针对这一矛盾，团队提出了名为GACR（Geo-Anchored Cloud Removal，地理锚定云去除）的新框架，确保去云图像不仅“好看”，更“好用”。

一、卫星图像中的云：不仅仅是视觉干扰

要理解GACR的价值，需明确云对遥感数据的破坏性影响。

卫星图像是城市规划、生态监测和灾害评估的数据基石，这些应用高度依赖计算机自动识别地物类型。当云层出现时：
* 薄云：地面信息部分保留，算法尚有参考依据。
* 厚云：地面信息彻底封锁，算法需在近乎无线索的情况下“脑补”地面形态。

现有去云算法主要分为两类，均存在局限：

去噪型方法：将云视为叠加噪声，训练神经网络恢复原图。此类方法假设云仅为“轻微干扰”，在厚云导致的“信息彻底缺失”面前往往失效，导致图像模糊、缺乏细节。
生成型方法：以扩散模型（Diffusion Model）为代表，从随机噪点出发“创造”地面样貌。虽然视觉逼真，但缺乏真实数据约束，易产生“语义漂移”（Semantic Drift）。例如，将停车场误生成绿地，或改变建筑走向。这种“视觉合理但地理错误”的现象严重影响了下游分析的准确性。

更根本的问题在于评价指标的错位。传统方法优化PSNR（峰值信噪比）和SSIM（结构相似性），关注像素级差异，却忽略地物类型的保留。这导致高PSNR图像在语义分割任务中准确率可能低于低PSNR图像。

核心矛盾：如何实现去云图像在视觉高保真与语义忠实性之间的统一？

二、两大核心创新：稳住轨迹，守住意义

研究团队提出了一套互补的解决方案，可将去云过程比喻为地图修复师的工作：

1. 观测锚定残差流（OAR-Flow）：解决“从哪里出发”

传统扩散模型从纯随机噪声开始反向推理，如同扔掉破损地图从零重画，丢失了原有残缺但珍贵的信息。

OAR-Flow的创新：
* 锚定起点：不以纯噪声为起点，而是以含云观测图像为锚点，通过更短、更有方向的轨迹抵达清晰图像。
* 自适应调节：
* 薄云区：以含云观测为主导，进行“保守修复”，顺着可见线条描摹。
* 厚云区：注入更多随机扰动，提供“大胆创造”的自由度以填补空白。

技术原理：
定义时间插值公式，中间状态由清晰图像、含云图像和高斯噪声加权构成。神经网络预测“速度场”，由清晰目标引导、含云观测锚定和随机噪声探索三者协同。

效果：相比对比方法EMRDM，OAR-Flow使收敛速度提升约3倍，达到相同图像质量所需的训练步数减少至三分之一。

2. 地理情境先验对齐（GCPA）：解决“语义对不对”

OAR-Flow保证了图像“像”，GCPA则确保地物类型“对”。

核心机制：
* 引入预训练的视觉基础模型（VFM），如DINOv3，提取深层语义特征（如建筑、植被的特征向量）。
* 构建地理情境完整性损失（GCI Loss），计算去云结果与真实无云图像在VFM特征空间中的余弦相似度，强制两者在语义层面保持一致。

关键设计：
用于GCPA的VFM与下游评测使用的编码器完全独立，确保评测公平性，避免“训练与测试同源”导致的偏差。

权重平衡：
总损失函数为OAR-Flow速度匹配损失与GCPA语义损失的加权和。消融实验表明，权重系数λ=0.5时，图像质量与下游任务精度达到最佳平衡。

三、技术底座：Hourglass扩散变换器（HDiT）

GACR选用HDiT（Hourglass Diffusion Transformer）作为骨干网络，相比潜扩散模型，HDiT直接在像素空间重建，更适合需要精确像素级恢复的去云任务。

高效计算：GACR（patch size=2）计算量约为56.05 GFLOPs，远低于MPRNet（548.65 GFLOPs）和EMRDM（166.72 GFLOPs），实现了低算力下的高性能。
Patch Size权衡：patch size=1虽能提升PSNR（约0.5-0.9 dB），但计算量增至4倍。综合考虑效率，主要实验采用patch size=2。
自适应投影器（ADP）：负责将HDiT特征映射至VFM特征空间，以极小开销实现语义对齐。
锚定强度ρ：实验显示，ρ=3时PSNR最优（33.018 dB），过强锚定会限制厚云区的生成能力。

四、全面评测：六大数据集，十二项下游任务

研究团队构建了目前去云领域规模最大、覆盖最广的评测体系：

1. 数据集

公开数据集：CUHKCR-EXT-GZ（薄云为主）和CUHKCR-EXT-CS（厚云为主），源自吉林一号卫星0.5米超高分辨率图像。
自建合成数据集：基于ISPRS Potsdam和Vaihingen，合成薄/厚云版本，确保云形可控且结构一致，实现严格对照。

2. 下游任务（12项）

涵盖四类任务，使用冻结参数的DINOv3作为视觉编码器：
* 土地覆盖分类（CLS）：2个子任务
* 建筑提取（BLD）：2个子任务
* 语义分割（SEG）：4个子任务
* 高度估计（HE）：4个子任务

评测逻辑：先用清晰图像训练下游网络，再将各方法去云结果直接输入固定网络，通过精度变化衡量去云质量，排除训练变量干扰。

3. 对比基线

涵盖CNN（MPRNet）、Transformer（Restormer, AST）、Mamba（MambaIR）、动态滤波（DFCFormer）及扩散模型（EMRDM）等主流方法。

五、实验结果：数字背后的性能跃升

1. 图像重建质量

GACR在六个数据集上全面超越基线：
* CUHKCR-EXT-CS：GACR-SAT/1 PSNR达24.354 dB，优于最强基线EMRDM。
* 厚云场景（Vaihingen-CR-thick）：GACR-SAT/1 PSNR达34.048 dB，比EMRDM（28.979 dB）提升约5.1 dB，验证了观测锚定在信息缺失时的巨大价值。
* SSIM指标：多个数据集达到0.990-0.991的极高水平。