這項(xiàng)新技術(shù)則提出了一種利用真實(shí)照片和大量合成圖像對(duì)新的三重域平移網(wǎng)絡(luò)。具體來說，他們訓(xùn)練了兩個(gè)變分自編碼器(VAE)，它們分別將舊照片和干凈照片轉(zhuǎn)換為兩個(gè)隱空間。而這兩個(gè)隱空間之間的轉(zhuǎn)換可以通過合成配對(duì)數(shù)據(jù)來學(xué)習(xí)。

由于域間距在緊湊的隱空間中是封閉的，所以這種平移可以很好地被應(yīng)用到真實(shí)的照片上。為了解決在一張老照片中混合的多重降解問題，他們?cè)O(shè)計(jì)了一個(gè)全局分支和一個(gè)局部非局域分支，其針對(duì)的對(duì)象是結(jié)構(gòu)缺陷如劃痕和灰塵點(diǎn)以及噪點(diǎn)和模糊等局域分支。在隱空間中融合兩個(gè)分支能提高從多個(gè)缺陷中恢復(fù)舊照片的能力。該方法在圖像恢復(fù)的視覺質(zhì)量方面優(yōu)于現(xiàn)有的方法。

技術(shù)演示視頻

然而不幸的是，微軟還沒有提供一個(gè)演示網(wǎng)站來測(cè)試這項(xiàng)技術(shù)。