MIT用新AI技術讓視頻不再卡頓
視頻的卡頓和低清晰度大大降低了觀眾的觀看體驗,同時也損害了廣告主們的利益。目前,視頻的卡頓和低清晰度都是由于一些特殊的算法造成的,它們將視頻分解成小塊,邊看視頻的同時,它就在一邊加載。如果網絡速度很慢,播放器可能會在接下來的幾秒鐘里播放低分辨率的視頻,以確保你仍然可以不間斷地觀看——因此,就出現了視頻畫面變得模糊的情況。如果你嘗試跳過尚未加載的視頻的部分,這樣的話,畫面就必須停止,以緩沖那些還沒有加載的部分。
近日,MIT計算機科學與人工智能實驗室(CSAIL)的一個研究團隊給出了新的解決方案:他們開發出一個名叫“Pensieve”的AI,它可以挑選***算法,確保流媒體視頻播放時順暢無阻不中斷,回放時讓質量達到***。
與傳統方法相比,CSAIL的方法有一個明顯的不同點:它使用神經網絡而不是嚴格的算法式技術。通過反饋系統神經網絡可以持續學習,尋找優化方法,反饋系統的目標是讓視頻回放變得更流暢,如果是傳統方法,就會設定一套明確規則,緩沖視頻時算法技術會按規則行事。
Pensieve以現有技術作為基礎進行改進,比如ABR技術。YouTube就使用了該技術,簡單來講就是降低視頻質量,確保視頻流暢播放。AI可以根據設備的網絡條件選擇選擇不同的算法,盡可能彌補某一種方法的缺陷。在實驗過程中,CSAIL研究團隊發現視頻以流形式播放時再緩沖減少10-30%,也就是播放時速度比傳統算法快10-30%,畫質提高10-25%。
目前團隊正在測試,看看如何將系統應用于VR視頻,如果想獲得高質量VR體驗需要很高的比特率,Pesieve剛好可以派上用場,改進體驗。