GCD-DDPM:用擴散模型重塑變化檢測,精準捕捉細粒度變化
1. 一眼概覽
GCD-DDPM 提出了一種 基于差分特征引導的去噪擴散概率模型(DDPM) 進行 變化檢測(CD) 的方法,采用 生成式方式 直接生成變化檢測(CD)圖,而非傳統的判別式分類方式。在四個高分辨率遙感數據集上,該方法展現了優越的檢測性能。
2. 核心問題
目前主流變化檢測(CD)方法大多依賴 CNN 或 Transformer 進行判別式特征學習,但它們在 同時捕獲局部細節信息和長距離依賴關系 方面存在局限,導致 變化檢測精度不足,尤其是對于 復雜場景的細粒度變化 無法精準捕捉。本文提出 GCD-DDPM,以生成式方法替代判別式方法,通過 迭代推理過程 逐步 生成高質量變化檢測圖,提高檢測精度并抑制噪聲。
3. 技術亮點
- 生成式變化檢測框架:提出 GCD-DDPM,利用 DDPM 的 去噪生成能力,逐步優化變化檢測結果,相較于判別式方法更能捕捉 微小、復雜和不規則的變化。
- 差分條件編碼器(DCE):設計 DCE 提取多層次的變化信息,并將其引入擴散模型的采樣過程,以精細捕捉變化區域。
- 基于噪聲抑制的語義增強器(NSSE):通過 自適應頻域濾波 降低當前步驟的噪聲,提高變化檢測的魯棒性和準確性。
4. 方法框架
GCD-DDPM 采用 擴散模型的前向去噪和反向恢復過程,在此基礎上引入 DCE 進行差分信息提取,并結合 NSSE 進行噪聲抑制,最終生成精確的變化檢測圖:
- 前向擴散過程:對初始 CD 標簽添加 逐步增強的高斯噪聲。
- 反向去噪過程:通過 神經網絡預測噪聲 并恢復 CD 圖,借助變分推理(VI)進行 自適應校準。
- 差分條件編碼器(DCE):從 變化前后圖像 提取 多層次差分特征,結合 DDPM 的采樣過程 指導 CD 圖生成。
- 噪聲抑制語義增強器(NSSE):采用 頻域自適應濾波 處理 當前步驟的噪聲特征,增強 CD 結果。
5. 實驗結果速覽
GCD-DDPM 在四個高分辨率變化檢測數據集(CDD、WHU-CD、LEVIR-CD、GVLM)上進行評測,與多個先進方法(CNN、Transformer、DDPM 變體)對比,表現優越:
? CDD 數據集(季節性變化檢測):
a. F1-score 提升至 94.93%,IoU 90.56%,超過 DDPM-CD 和 Transformer 方法。
? WHU-CD 數據集(城市建筑變化檢測):
? F1-score 92.54%,IoU 86.52%,精準檢測城市建筑變化。
? LEVIR-CD 數據集(建筑變化檢測):
? F1-score 90.96%,IoU 83.56%,減少小目標遺漏,提高邊界保留能力。
? GVLM 數據集(滑坡檢測):
? F1-score 94.02%,IoU 89.09%,顯著降低噪聲,精準檢測復雜地貌變化。
6. 實用價值與應用
GCD-DDPM 在多個關鍵領域展現潛力:
? 城市發展監測:可用于 建筑物新增/拆除監測,助力 城市規劃和基礎設施建設。
? 自然災害評估:可精準 檢測滑坡、洪水、地震等災害前后的地表變化,為 災害響應 提供決策支持。
? 生態環境監測:用于 森林砍伐、濕地變化、冰川消融等生態環境變化檢測。
? 農業與土地利用分析:可 精準分析農田變化、土地退化,提高 農業管理 水平。
7. 開放問題
- GCD-DDPM 是否可以泛化到其他類型的變化檢測任務,如醫學影像變化檢測?
- 當前 GCD-DDPM 計算量較大,是否可以引入輕量級架構優化推理速度?
- 噪聲抑制語義增強器(NSSE)能否推廣到其他生成模型以提升圖像重建效果?