就在昨天，Sora又有全新「神作」炸出了！

兩位Sora作者，Bill Peebles、Tim Brooks紛紛甩出全新圖片。（順便還秀了一把基友情？）

「一只小熊貓和一只巨嘴鳥是最好的朋友，在藍(lán)色時(shí)刻漫步在圣托里尼島」，Peebles稱這個(gè)場(chǎng)景簡(jiǎn)直就和兩人走到OpenAI辦公室的畫面一模一樣。

a red panda and a toucan are best friends taking a stroll through santorini during the blue hour

這個(gè)視頻的連貫性簡(jiǎn)直令人驚呼：在每一幀中，小熊貓和巨嘴鳥的形象始終保持著一致性。

當(dāng)然仔細(xì)看還是有不少破綻。比如小熊貓的腿有時(shí)會(huì)交織在一起，畫面看起來(lái)更像卡通圖像，而不像逼真的現(xiàn)實(shí)世界。

但總的來(lái)說(shuō)，這種視頻質(zhì)量已經(jīng)足以讓我們對(duì)AI視頻的未來(lái)放飛想象。

有網(wǎng)友立刻做出了配音版，貼切的配音一出，視頻更有那個(gè)味兒了！

難怪好萊塢大導(dǎo)Tyler Perry直言，自己在看完Sora制作的視頻后，直接擱置了自己影師工作室8億美元的擴(kuò)建計(jì)劃！

更多「神作」來(lái)襲

這次兩位作者放出的第二批視頻，效果更加逼真、更加炸裂。

網(wǎng)友們接連不斷發(fā)出驚嘆：Sora是怎么做到一次比一次迭代得更好的？

這個(gè)視頻是「一名潛水員發(fā)現(xiàn)了一艘隱藏的未來(lái)沉船，里面有控制論海洋生物和先進(jìn)的外星技術(shù)」。

a scuba diver discovers a hidden futuristic shipwreck, with cybernetic marine life and advanced alien technology

潛水員、海底景觀、沉船外殼、內(nèi)部的外星技術(shù)都生成得十分逼真。

當(dāng)然，這個(gè)場(chǎng)景也不是100%完美。立刻有人發(fā)現(xiàn)破綻——

比如，潛水員沒(méi)有擺動(dòng)腳蹼就能游動(dòng)起來(lái)，也沒(méi)有吐出氣泡。

一位好萊塢電影制片人吐槽說(shuō)：人的動(dòng)作看起來(lái)沒(méi)有靈魂，有些像僵尸。

但對(duì)于不那么挑剔的觀眾，這個(gè)20秒視頻的質(zhì)量已經(jīng)夠了。

有人滿意地說(shuō)：看起來(lái)像《深海迷航》的高分辨率版本

在以往，這個(gè)場(chǎng)景無(wú)疑要耗費(fèi)巨資。而現(xiàn)在，好萊塢大片中燒金的高難度場(chǎng)景，都可以用Sora視頻替代了，AI淘汰影視行業(yè)真不是說(shuō)說(shuō)而已！

這條閃著珠光的銀色鱗片、有著冰藍(lán)的眼睛和象牙龍角、吐出白氣的小白龍，也讓網(wǎng)友們驚呼，太太太震撼了！

Close-up of a majestic white dragon with pearlescent, silver-edged scales, icy blue eyes, elegant ivory horns, and misty breath. Focus on detailed facial features and textured scales, set against a softly blurred background

它的擬人化做得很好，眼睛水汪汪的，傳達(dá)了非常動(dòng)人的情感，仿佛能聽(tīng)懂人話一樣。

《權(quán)力的游戲》中的巨龍，是這樣的。跟它比起來(lái)，小白龍的差距并不太大。

有的網(wǎng)友表示，自己對(duì)這條小白龍愛(ài)不釋手，直接給它配了個(gè)音——

于是一場(chǎng)配音大賽開(kāi)始了。

現(xiàn)實(shí)場(chǎng)景，是給Sora最難的考題。

下面這個(gè)「一個(gè)男人在夏威夷熱帶水域上空定點(diǎn)跳傘，寵物金剛鸚鵡在旁邊飛翔」的視頻，Sora再次交出了讓人印象深刻的答卷。

a man BASE jumping over tropical hawaii waters. His pet macaw flies alongside him

場(chǎng)景如此逼真，直接有人發(fā)問(wèn)：「是真的視頻還是AI做的？」

配上音后是這樣的，就問(wèn)會(huì)有多少人發(fā)現(xiàn)——這并不是真實(shí)的場(chǎng)景？

如果非要找茬，就是金剛鸚鵡的照明不太對(duì)，看起來(lái)像是單獨(dú)做出來(lái)的動(dòng)畫，并不像自然條件下的光照。

定點(diǎn)跳傘的動(dòng)作生成得不夠準(zhǔn)確，降落傘太小。

下面是一只玻璃烏龜，裂縫用金繕工藝修復(fù)，在日落時(shí)分走在黑色的沙灘上。

畫面的一致性很完美，沙子的物理學(xué)特性也完全還原出來(lái)了。

不過(guò)美中不足的是：烏龜似乎只有三條腿？??

也有人發(fā)現(xiàn)「華點(diǎn)」：把沙丘做出崎嶇不平的樣子，是為了讓海龜爬過(guò)沙丘后不會(huì)留下痕跡嗎？

相比之下，Midjourney生成的玻璃烏龜是這樣的，別有一番風(fēng)味。

精美的紙藝世界中的一艘船，海面還有海洋動(dòng)物躍出。

in a beautifully rendered papercraft world, a steamboat travels across a vast ocean with wispy clouds in the sky. vast grassy hills lie in the distant background, and some sealife is visible near the papercraft ocean's surface

黑暗的霓虹燈雨林里，閃耀著奇幻的動(dòng)植物。

a dark neon rainforest aglow with fantastical fauna and animals

不過(guò)對(duì)于這個(gè)視頻，也有人挑刺說(shuō)：「這是我見(jiàn)過(guò)的Sora最差的demo，它不知為什么就生成了矢量動(dòng)畫的風(fēng)格。」

一只戴著眼鏡的貓，出現(xiàn)在20世紀(jì)60年代的諜戰(zhàn)電影中。

cat in glasses in a 1960s spy movie

黃昏時(shí)分，一只巨大的半透明水母優(yōu)雅地飄浮在荒蕪的城市中，還是用35毫米膠片拍攝的超現(xiàn)實(shí)場(chǎng)景。

A surreal scene unfolds as a giant, translucent jellyfish floats gracefully through a deserted cityscape at dusk. The scene is shot on 35mm film

這是一個(gè)精心制作的立體模型：江戶時(shí)代，木結(jié)構(gòu)建筑前，一個(gè)孤獨(dú)的武士慢慢穿過(guò)小鎮(zhèn)。

A meticulously crafted diorama depicting a serene scene from Edo-period Japan. Traditional wooden architecture. A lone samurai, clad in intricate armor, walks slowly through the town

一只戴著護(hù)目鏡的小胖哈巴狗，坐在一輛舊摩托車旁邊的凳子上。

仔細(xì)看可以發(fā)現(xiàn)，狗肚子一呼一吸的樣子，顯得非常真實(shí)。

a small chubby Pug dog in goggles is sitting on a stool next to an old motorcycle

一只棕色邊牧戴著太陽(yáng)鏡，滑著滑板。

a brown and white border collie stands on a skateboard, wearing sunglasses

可怕的事來(lái)了，有人在底下留言稱，棕色邊牧是自己的狗，這個(gè)視頻是自己拍的。

而我們，竟有那么一刻恍惚了：他說(shuō)的究竟是真是假？

總之，網(wǎng)友們迫不及待等待公測(cè)了。

還有人給Sora出了神考題——「一部手機(jī)正在直播進(jìn)入黑洞的過(guò)程」。

網(wǎng)友猜測(cè)：虛幻引擎被用來(lái)生成部分?jǐn)?shù)據(jù)集？

隨著這些視頻被放出，網(wǎng)友們心中的疑問(wèn)也越來(lái)越強(qiáng)烈——

Sora模型究竟是用什么數(shù)據(jù)訓(xùn)練的？

不少網(wǎng)友也覺(jué)得，怎么Sora生成的畫面，看起來(lái)有些似曾相識(shí)？仿佛就是直接用虛幻引擎（Unreal Engine）做出來(lái)的一樣。

隨后，越來(lái)越多人公認(rèn)：Sora訓(xùn)練的數(shù)據(jù)集，應(yīng)該就是用UE產(chǎn)生的。

其實(shí)，在Sora剛誕生時(shí)大佬就紛紛預(yù)測(cè)——Sora是由游戲引擎提供支持的。

Pytorch聯(lián)合創(chuàng)始人Soumith Chintala就這樣認(rèn)為。

數(shù)據(jù)科學(xué)家和機(jī)器學(xué)習(xí)工程師Ralph Brooks也給出了自己的分析：

如果要?jiǎng)?chuàng)建大量不同角度的高清視頻，就需要進(jìn)行模擬。其中，有很多線索讓我相信，UE5在一定程度上就是用來(lái)創(chuàng)建訓(xùn)練數(shù)據(jù)的。

比如這段廣為人知的櫻花漫步視頻中，人物移動(dòng)的方式跟UE5中非常相似。現(xiàn)實(shí)中的人走路是不會(huì)用恒定速度的。

英偉達(dá)高級(jí)科學(xué)家Jim Fan同樣表示，「如果Sora接受過(guò)大量UE5合成數(shù)據(jù)的訓(xùn)練，我不會(huì)感到驚訝的！」

當(dāng)然，它可能沒(méi)有明確調(diào)用UE5，但非常有可能將UE5生成的文本、視頻對(duì)作為合成數(shù)據(jù)，添加到訓(xùn)練集中。

早有預(yù)言帝猜中，Sora的推理管道是用的CLIP底座、文本轉(zhuǎn)3D對(duì)象，和游戲引擎模擬。

果然，「人工訓(xùn)練數(shù)據(jù)耗盡」不會(huì)阻止LLM的發(fā)展，合成數(shù)據(jù)才是AI的未來(lái)！

「精簡(jiǎn)版」體驗(yàn)，就藏在技術(shù)報(bào)告里！

網(wǎng)友們看到這些一代比一代強(qiáng)的demo，已經(jīng)心癢難耐了。

好消息是：雖然Sora還沒(méi)有正式開(kāi)放功能，但在技術(shù)報(bào)告里，已經(jīng)可以小體驗(yàn)一把了！

報(bào)告地址：https://openai.com/research/video-generation-models-as-world-simulators

通過(guò)選擇不同的關(guān)鍵詞，比如人物、衣著、天氣環(huán)境、地理位置等選項(xiàng)，就可以體驗(yàn)Sora生成的不同視頻。

這樣我們就可以看到——a穿著b樣子的衣服，在c地點(diǎn)的d天氣下，愜意地散步。

好萊塢大佬直言很害怕，影視行業(yè)真完蛋了？

這也難怪，好萊塢知名導(dǎo)演、制片人、演員Tyler Perry因?yàn)镾ora，決定擱置自己亞特蘭大工作室耗資8億美元的擴(kuò)建計(jì)劃。

本來(lái)，Perry導(dǎo)演在過(guò)去四年里，一直計(jì)劃斥資8億美元擴(kuò)建自己的工作室，為占地330英畝的土地增加12個(gè)攝影棚。

然而，在2月16日看過(guò)Sora做出的視頻后，他決定撤銷自己的8億美元計(jì)劃，因?yàn)樗臄z的大片中，可能并不需要找取景地，或者搭建實(shí)景了。

「以前，我們只是被告知AI可以做這些事，但是真的看到它做出來(lái)的場(chǎng)景，還是太令人震驚了！」

Perry導(dǎo)演表示，因?yàn)镾ora給自己帶來(lái)的沖擊太過(guò)強(qiáng)烈，8億美元擴(kuò)建計(jì)劃已被無(wú)限期推遲。

現(xiàn)在，拍電影時(shí)再也不需要親自前往拍攝地點(diǎn)了。

不論是想要科羅拉多的雪地場(chǎng)景、月球上的場(chǎng)景，還是山中客廳中拍攝兩個(gè)人的場(chǎng)景，都再也不要搭建真實(shí)布景，只要在辦公室的電腦上，就能完成一切！

而這也就意味著，巨大的變化將波及行業(yè)的每一個(gè)角落，影響到演員、燈光、運(yùn)輸、音效和剪輯等所有從業(yè)者的飯碗。

現(xiàn)在，Perry導(dǎo)演已經(jīng)在兩部電影中的現(xiàn)場(chǎng)拍攝和后期制作中使用了AI，避免了耗費(fèi)數(shù)小時(shí)給演員畫老年妝。

Sora的出現(xiàn)徹底改變了游戲規(guī)則。

在以往，HBO的試播可能需要耗資1500萬(wàn)、2000萬(wàn)乃至3500萬(wàn)美元，而現(xiàn)在，這個(gè)成本低到不可想象。公司顯然會(huì)選擇成本更低的方案。

在不遠(yuǎn)的將來(lái)，很多工作崗位都會(huì)消失。

影視行業(yè)該建立怎樣的安全防護(hù)措施，保住大家的飯碗？