人工智能火到爆,PULSE拯救渣畫質馬賽克秒變高清
原創【51CTO.com原創稿件】馬賽克是什么意思?傳統的馬賽克在影視媒體中多用于遮擋重要的部位,進行模糊化處理。例如視頻中,如果不方便將某人的臉或者其他部位露出,便使用馬賽克這一藝術處理手法將其遮掩起來。
20世紀50年代后,隨著全球電影行業的發展,經常能在電影中出現血腥和色情畫面,人們就開始要求將18歲以下不宜觀看的畫面進行處理,也就是在圖像上覆蓋馬賽克。從此,馬賽克有了新功能,在那些原本高清圖像的某些區域被蓋上厚厚的小方格,形成無法打破的禁區,這也讓無數熱血少年抓耳撓腮,瘋狂的尋找破解之法,只為能看到馬賽克掩蓋下的奇跡。
不管怎么努力,人們怎么樣也找不到破解馬賽克的方法,然而隨著技術的發展,破解馬賽克已經變成了現實。美國杜克大學的幾位研究人員,利用一種PULSE的AI算法,就能夠完全去除馬賽克,并且可以達到打馬賽克前的像素效果。
那么將渣到馬賽克級別的畫面秒變高清是如何做到的呢?PULSE算法可以在幾秒鐘內,就可以把 16x16 像素的低分辨率(Low Resolution)小圖,放大 64 倍,變成 1024 x 1024 像素的高分辨率(High Resolution)圖像,并且會“想象”出一些原本不存在的特征,即使是原本 LR 照片中無法看到的細節,比如毛孔、細紋、睫毛和胡茬等,經過其算法處理后,都能看得一清二楚。但是在拿到一張低分辨率的圖像后,PULSE系統不會慢慢的添加新的細節,而是遍歷AI生成的高分辨率圖像,將這些高分辨率圖像對應的低分辨率圖像與原圖進行對比,找到最接近的那張。例如,將一張打有馬賽克的面部圖片,使用PULSE算法,該算法首先補充面部細節,比如鼻子、嘴巴、眼睛的樣子,然后再打上馬賽克,打過馬賽克的這張圖片與原始圖片進行對比調整,就這樣不斷的迭代,直到與原馬賽克圖一致就算解碼了這張“神秘”的圖片。
原始 LR 圖片和 PULSE 修復后再 donwscale 的 LR 圖片對,使兩者最接近的 HR 圖片,就是修復得到的 HR 圖片。
但是這個技術還有一個缺點,那就是我們得到的圖片去碼部位是由軟件想象出來的,并不一定是原來真正的模樣,有可能存在差異。因此從這張圖被打馬賽克開始,它就變成了另一張圖,再也無法回到最初的美好了。
其實,這項技術的出現有利也有弊,比如說,在圖像清晰化上,讓考古資料變得更有據可依,或像偵探片里那樣,刑警在馬賽克錄像中看不清嫌疑人時,可以生成最接近嫌疑人的樣貌,為茫茫人海抓捕嫌犯提供了強有力的支持;比如在法制節目中遮蓋犯罪嫌疑人的臉,或在影視作品中看到品牌 Logo 被涂抹上模糊的霧面,識別度日益精細的 Google 地圖上,也有許多地方都進行了模糊化和特殊化的馬賽克處理,隱藏了一些軍事秘密。總之如果我們擁有了“去碼”的技術和能力,也要珍惜“有碼”的安穩和權利。
毋庸置疑,現在或未來,我們都需要馬賽克。它會以各種形式出現,但必然不會消失。而 AI 等技術的進步,或許能讓打碼內容越來越逼近真實,但我們可以決定,它是否有必要達到真實。或者,看看它是否能在真正有利的地方進行愛與奉獻。
【51CTO原創稿件,合作站點轉載請注明原文作者和出處為51CTO.com】