這幾天，GPT-4o 的生圖功能殺瘋了，沒(méi)想到 AI 視頻領(lǐng)域也傳來(lái)了好消息。

就在昨天，AI 初創(chuàng)公司 Runway 發(fā)布了一款號(hào)稱(chēng)是迄今為止最高保真度的 AI 視頻生成模型 ——Gen-4。

該模型在畫(huà)面真實(shí)感、動(dòng)態(tài)流暢度和創(chuàng)作可控性上取得重大進(jìn)步。與上一代 Gen-3 Alpha 版本相比，Gen-4 擅長(zhǎng)生成具有逼真運(yùn)動(dòng)以及主題、對(duì)象和風(fēng)格一致性的高度動(dòng)態(tài)視頻，同時(shí)具備優(yōu)秀的提示遵循能力和一流的全球理解能力。

值得一提的是，使用視覺(jué)參考和文字指令，Gen-4 即可創(chuàng)建具有一致風(fēng)格、主題、位置等的新圖像和視頻，讓故事更具連續(xù)性和控制力。

為了測(cè)試模型的敘事能力，Runway 還整理了一系列短片和音樂(lè)視頻。

比如這則《孤獨(dú)的小火焰》，從分鏡到成片均由 Gen-4 制作完成。

再如下面這個(gè)《紐約是動(dòng)物園》，則展示了 Gen-4 令人印象深刻的視覺(jué)效果功能，將超現(xiàn)實(shí)動(dòng)物帶入紐約的電影場(chǎng)景。

影片中的每個(gè)場(chǎng)景都使用 Gen-4 References 功能將動(dòng)物的真實(shí)圖像與紐約的真實(shí)照片相結(jié)合，然后提示每個(gè)場(chǎng)景的具體動(dòng)作而創(chuàng)建的。

《牛群》是一部短片，講述了一個(gè)年輕人在夜間被牛群追逐的故事。它使用 Gen-4 技術(shù)，僅憑少量圖像參考構(gòu)建出每個(gè)鏡頭中的人物和霧蒙蒙的牛群場(chǎng)景，然后與 Act-One 結(jié)合，將故事串聯(lián)起來(lái)。

《尋回》這部探險(xiǎn)題材動(dòng)畫(huà)短片，從概念設(shè)計(jì)到成片制作僅耗時(shí)一周，Gen-4 憑借其強(qiáng)大的生成能力完整呈現(xiàn)了一群探險(xiǎn)者尋找神秘花朵的故事。

與其他視頻生成模型一樣，Gen-4 也接受了大量視頻示例的訓(xùn)練，以「學(xué)習(xí)」這些視頻中的模式來(lái)生成合成鏡頭。Runway 拒絕透露訓(xùn)練數(shù)據(jù)的來(lái)源，部分原因是擔(dān)心失去競(jìng)爭(zhēng)優(yōu)勢(shì)，但訓(xùn)練細(xì)節(jié)也是與知識(shí)產(chǎn)權(quán)相關(guān)的訴訟的潛在來(lái)源。

例如，Runway 正面臨藝術(shù)家對(duì)其和其他生成 AI 公司的訴訟，指控被告未經(jīng)許可使用受版權(quán)保護(hù)的藝術(shù)品來(lái)訓(xùn)練他們的模型。 Runway 辯稱(chēng)，合理使用原則可以保護(hù)其免受法律影響。目前尚不清楚該公司是否會(huì)勝訴。

不過(guò)，Runway 面臨的風(fēng)險(xiǎn)相當(dāng)高，據(jù)說(shuō)該公司正在籌集新一輪融資，估值將達(dá)到 40 億美元。據(jù) The Information 報(bào)道，Runway 希望在推出視頻生成模型 API 等產(chǎn)品后，今年的年收入能達(dá)到 3 億美元。

無(wú)論針對(duì) Runway 的訴訟結(jié)果如何，生成式 AI 視頻工具都有可能顛覆我們所知的電影和電視行業(yè)。代表好萊塢動(dòng)畫(huà)師和漫畫(huà)家的工會(huì)動(dòng)畫(huà)協(xié)會(huì)委托進(jìn)行的一項(xiàng) 2024 年研究發(fā)現(xiàn)，75% 采用 AI 的電影制作公司在引入該技術(shù)后減少了工作崗位、合并了崗位或取消了崗位。該研究還估計(jì)，到 2026 年，美國(guó)娛樂(lè)業(yè)將有超過(guò) 10 萬(wàn)個(gè)工作崗位受到生成式 AI 的沖擊。

盡管官方聲稱(chēng) Gen-4 圖像轉(zhuǎn)視頻功能已經(jīng)向所有付費(fèi)計(jì)劃和企業(yè)客戶(hù)推出，但有網(wǎng)友表示，Gen-4 可能正在陸續(xù)向付費(fèi)用戶(hù)推送，需要耐心等待。