賈樟柯李少紅都用AI拍電影了,還傳遞經(jīng)驗(yàn):哪個功能最實(shí)用?
AI生成視頻的風(fēng),還是吹到了影視名導(dǎo)的圈子里。
用全球最火的AI視頻工具:快手可靈。
聯(lián)手國內(nèi)最知名的9名影視工作者:李少紅(《大明宮詞》)、賈樟柯(《三峽好人》)、葉錦添(《英雄本色》)、薛曉路(《不要和陌生人說話》)、俞白眉(《戰(zhàn)狼2》)、董潤年(《年會不能停!》)、張吃魚(《獨(dú)行月球》)、王子川(《朱同在三年級丟失了超能力》)、王卯卯(“兔斯基”原創(chuàng)者)。
每人和AIGC創(chuàng)作者打配合,用可靈生成,各AIGC了1部3-5分鐘的電影短片,涵蓋奇幻、志怪、親情、動畫等多種類型。
拋開劇本,咱們來看名導(dǎo)們敢拿出手的AI畫面的風(fēng)格和質(zhì)量。
國漫風(fēng):
科幻風(fēng):
少兒頻道卡通動畫風(fēng):
人物+貓貓狗狗寫實(shí)風(fēng)(?):
賈樟柯的硅基人公路片《麥?zhǔn)铡愤€用可靈的對口型功能,成功讓片子里的人型機(jī)器人說上了山西汾陽話。
港真,這9部純AI短片有的劇本設(shè)計(jì)創(chuàng)意不錯,有的動作流暢度極佳,有的巧妙避開了AI生成真人還是有點(diǎn)“A里A氣”的bug。
但,朋友們,量子位還記得自己是個關(guān)注前沿科技的號(認(rèn)真臉),因此這篇推文想和大家分享的不是片子好不好看、故事有沒有意思、劇本有沒有創(chuàng)意,而是想傳遞一些答案。
一些沖到第一梯隊(duì)影視工作者和AIGC創(chuàng)作者面前貼臉發(fā)問,得到的答案:
- AI視頻迭代至今,是否真的能完成電影敘事?
- AI能不能精準(zhǔn)復(fù)刻人類導(dǎo)演細(xì)膩入微的的鏡頭語言,作用于院線電影?
- 傳統(tǒng)影視工作者完成這些短片,用上AI真的降本了嗎?增效了嗎?
- Sora Pro版開放前,所有AI視頻至多單次生成5s左右,這一前提下用AI完成一部電影短片,需要花多少時間?需要狂抽卡嗎?
- 制作3-5分鐘的短片,AI視頻什么功能最好用?
- ……
(部分內(nèi)容在不改變發(fā)言者原意的基礎(chǔ)上做了書面化整理)
傳統(tǒng)影視從業(yè)者,最想怎么玩AI視頻?
俞白眉:我們最想探索的是AI和動作的結(jié)合,不管是傳統(tǒng)AI視頻里的制作方式、文生圖的方式……其實(shí)我們知道AI的局限,規(guī)定鏡頭運(yùn)動不是AI的強(qiáng)項(xiàng)——雖然它歷史只有一年多,但AI在真人動作上好像表現(xiàn)不是最突出的。
所以我們這次特別想試一試,結(jié)合一些電影制作技巧,然后更多地把AI作為工具,兩者融合,看能不能創(chuàng)造出一些我們以前還沒見過的動作片段。
李少紅:我覺得AI用在影視當(dāng)中,它應(yīng)該能夠幫助創(chuàng)作者的影像打開想象的可能性。
薛曉路:我們在做這個AI短片的時候,是想測試兩方面的問題。
一方面想看AI還原現(xiàn)實(shí)環(huán)境的水平。因?yàn)锳I對于一些虛擬環(huán)境的表達(dá)和建構(gòu)都蠻有它的獨(dú)特優(yōu)勢,但是對于一些現(xiàn)實(shí)環(huán)境真實(shí)度的表達(dá),能夠到什么位置,能夠多大程度是一致的?
另一個測試是對于動物的一致性的表達(dá)、表現(xiàn),它能夠到什么樣的水平。影片里的動物(小貓)不是AI隨機(jī)生成的,我們對動物生成要求非常清晰,是從真實(shí)的生活里,提取了一個寵物的照片和大量的視頻內(nèi)容,然后喂給AI,要求它生成一個跟真貓非常接近的動態(tài)視頻,而且要保持在所有畫面里的一致。
賈樟柯:我希望通過運(yùn)用可靈來探索AI本身現(xiàn)在的可能性。所以我可能不會回避目前在發(fā)展階段中可靈需要完善的一些東西,或者說整個AI技術(shù)面臨的一些挑戰(zhàn)。
我們的(人形機(jī)器人)主角貫穿始終,大家了解AI的應(yīng)該知道它的難度在哪。
用AI,真能省事兒?
許經(jīng)捷(張吃魚合作AIGC創(chuàng)作者):吃魚導(dǎo)演制作的是一部機(jī)甲主題的電影短片,以往需要大制作的酷炫鏡頭,現(xiàn)在通過一部電腦、一個可靈賬號,就秒生成了。
最適合AI制作的當(dāng)屬第38鏡,這是一個機(jī)甲停在機(jī)庫中的大景別俯拍+推進(jìn)的鏡頭,在傳統(tǒng)CG流程中,即便用實(shí)時的UE5,建模、搭景、布光就得花掉兩三天的時間。
如今只需一張圖,就能實(shí)現(xiàn)80%的效果,而且燈光和煙霧氛圍都相當(dāng)自然。
影片中的第22鏡需要緩動圍繞拍攝落在地面上的報紙,是很典型的細(xì)節(jié)鏡頭。我用可靈,只需要簡單的提示詞就能營造很合適的暗調(diào)雨水場景與氛圍;如果走CG流程,雨水和地面反射會有點(diǎn)假;如果走實(shí)拍流程,營造這個小場景也會額外花費(fèi)不少時間——走AI創(chuàng)作就很合適。
陳劉芳(薛曉路合作AIGC創(chuàng)作者):培訓(xùn)動物演員困難,其中培訓(xùn)貓更是一道關(guān)卡,貓主子可不太容易像狗狗一樣乖乖配合。這次薛曉路導(dǎo)演要做一部有貓貓作為主角的片子,其實(shí)是非常適合使用AI來呈現(xiàn)的。
行走、躲在衣柜、和女主互動這些動作細(xì)節(jié)都被AI實(shí)現(xiàn)得很生動、細(xì)節(jié),而且整個“拍攝”過程也是可預(yù)測、可調(diào)控。
尾鰭Vicky(董潤年合作AIGC創(chuàng)作者):要看具體做什么樣的鏡頭,比如那些怪獸橫行的畫面,用傳統(tǒng)拍攝手段去做可能比較難,但借助AI的創(chuàng)造力,就可以較精準(zhǔn)地呈現(xiàn)怪獸由遠(yuǎn)及近、步步逼近的視覺效果,怪獸的動態(tài)效果也可以做到自然流暢。
還有,AI也非常適合想象并完成超現(xiàn)實(shí)的場景。
比如一個鏡頭里,城市遠(yuǎn)處發(fā)生爆炸,隨后一顆隕石騰空而起,像這樣現(xiàn)實(shí)生活中不存在的超現(xiàn)實(shí)場景,可靈能模擬得很好,因?yàn)橐曨l生成的幀率比較高,物體的運(yùn)動軌跡和動態(tài)效果也會顯得比較真實(shí)。
宋東桓(俞白眉合作AIGC創(chuàng)作者):我是有一定的影視制作經(jīng)驗(yàn)的,跟傳統(tǒng)電影制作流程相比,AI制作有一個很大的好處是可以一邊制作一邊修改,制作風(fēng)險降低了很多。
比如,傳統(tǒng)真人影視劇的制作會有一個非常嚴(yán)格的周期,補(bǔ)拍的成本都非常高,春、夏、秋、冬的場景統(tǒng)一,甚至小到一個道具的擺放,都容易穿幫。
但對于AIGC來說,增補(bǔ)一個鏡頭并不會額外增補(bǔ)太多的成本,也可以立馬去做調(diào)整,甚至劇情到了中后期也是可以倒回去做調(diào)整的。依托AIGC衍生出來的影視制作新流程,大大減少了修改的成本與難度。
哪個/些功能最實(shí)用?
許經(jīng)捷:第54鏡,展現(xiàn)機(jī)甲從遠(yuǎn)景蓄力跳至近景的收尾鏡頭,也是很好的AI創(chuàng)作案例。
這樣一個特效鏡頭如果選擇通過CG實(shí)現(xiàn),時間和經(jīng)費(fèi)的消耗都是不菲的,如今通過提示詞+首尾幀就能快速實(shí)現(xiàn),效果還是很震撼的。
艾甜甜(張吃魚合作AIGC創(chuàng)作者):首尾幀、負(fù)向提示詞也是一個很好的提質(zhì)增效工具。
譬如“隧道的燈逐步從近到遠(yuǎn)延伸亮起來”這一鏡頭,如果用原用的AE制作,需要用2D傳統(tǒng)動畫的制作方式逐幀調(diào)整圖片素材蒙版圖層,但現(xiàn)在完全可以通過首尾幀實(shí)現(xiàn),甚至出乎意料地呈現(xiàn)出光感在隧道中影響環(huán)境光的自然效果,很驚艷。
德里克文(李少紅合作AIGC創(chuàng)作者):人物或物體進(jìn)行流暢疊變的鏡頭,其實(shí)是非常適合運(yùn)用AI首尾幀功能實(shí)現(xiàn)的。
例如在《花滿渚》這部短片中,“風(fēng)箏"變?yōu)椤鞍坐潯钡溺R頭,不僅實(shí)現(xiàn)了主體有時空順序及邏輯的順暢變化,背景也能夠同時跟隨“風(fēng)箏”與“白鴿”兩個主體實(shí)現(xiàn)飛翔運(yùn)動,達(dá)到實(shí)拍無法呈現(xiàn)的效果。而如果這個變化過程能夠更加穩(wěn)定,相信可以呈現(xiàn)出更加驚艷的效果。
在人物場景里,通過對AI功能的開發(fā),我還能運(yùn)用可靈AI實(shí)現(xiàn)流暢變裝、一鏡到底、移步換景、自然切鏡等等讓創(chuàng)作者感到驚艷的效果。
AI的運(yùn)鏡技巧/光影/景深等表現(xiàn)如何?
賈樟柯:在每一場戲里面,我們用了傳統(tǒng)的分鏡的方法,正打、反打,包括一些場面調(diào)度、演員之間的走位移動,也使用了非常多的傳統(tǒng)電影的方法,比如說升格、電影的推拉、搖移這些技巧。
溫維斯(王子川合作AIGC創(chuàng)作者):原本提示詞里,只寫了前推運(yùn)鏡,沒有過多的描述,但是可靈AI生成的結(jié)果讓我非常滿意。爆炸效果、鏡頭運(yùn)鏡都恰到好處。
并且在爆炸的瞬間,巧妙地將鏡頭晃動與平搖相結(jié)合,既捕捉到了爆炸的緊張與混亂,又無縫銜接至下一個場景,營造出一種緊張氛圍的延續(xù)與轉(zhuǎn)換,這種運(yùn)鏡技巧,不僅增強(qiáng)了畫面的動態(tài)感也加深了沉浸體驗(yàn)。
Jade Wu(賈樟柯合作AIGC創(chuàng)作者):公路片還蠻適合、也蠻需要用景深和對焦切換來展示空間感與營造場景感的。對焦切換能很巧妙地深化影片的敘事層次與情感表達(dá)。
在生成鏡頭階段,可靈AI給出了“人物-背景”對焦的切換,非常妙。當(dāng)鏡頭聚焦于人物時,你可以清晰地觀察到角色的表情與動作;隨后對焦切換至背景時,華北的遼遠(yuǎn)空曠得以盡情展現(xiàn),增添了濃厚的地域色彩與人文情懷。
AI腦補(bǔ)分鏡/片段效果如何?
Jason(王卯卯合作AIGC創(chuàng)作者):我們的《再見兔子》講述了一個小男孩面對學(xué)業(yè)壓力和焦慮時的心理掙扎。
在制作其中一幀時,我在提示詞里僅輸入“小男孩心情低落時產(chǎn)生的幻覺”。說實(shí)話,就算將這句提示詞給到一個普通人,也未必能想象出具象的場景來體現(xiàn)這種幻覺。
而可靈生成了“四個藍(lán)色小人從小男孩本體中分裂而出”,敘事邏輯、表演張力,乃至元素間漂浮疊加的視覺形式,都與主題完美契合。雖然這一鏡頭最終未采用,但這樣貼切的想象,帶來了超出劇組意料的驚喜。
還有小男孩踩踏樓梯融化的效果出乎意料,令人驚喜。可靈不僅高效完成了原本耗時較長的流體動態(tài)效果,達(dá)到了90%的預(yù)期效果,更令人驚喜的是它對場景的智能理解 - 自然呈現(xiàn)出臺階融化、人物被淹沒及驚慌反應(yīng)的連貫畫面。
從效果呈現(xiàn)來看,我覺得,AI在某種程度上,展現(xiàn)出了獨(dú)特的想象力與創(chuàng)造力。
石碩(葉錦添合作AIGC創(chuàng)作者):AI并非僅作為創(chuàng)意的接收者,它還能給劇組主動提供靈感火花。
我拿到劇本開始做鏡頭測試時,意外生成了一段“月球表面坍塌萎縮”鏡頭。當(dāng)時覺得很是驚喜——AI在表現(xiàn)月球坍塌萎縮時還加入了表面的流動,非常細(xì)致入微,同時鏡頭又跟隨飛船行駛方向有動態(tài)變化,會有乘著飛船近距離觀看身臨其境的感覺。
葉導(dǎo)也非常喜歡這個鏡頭,為了正片用上這個鏡頭特意調(diào)整了劇本。
用AI拍電影初體驗(yàn),什么感受?
葉錦添:一個很有趣的東西,會上癮的。
俞白眉:這個嘗試很艱難,但這個嘗試也很有趣。整個創(chuàng)作的過程一言難盡,結(jié)果我也覺得頂多是差強(qiáng)人意。
但是回頭看,中間有很多趣味,我們也每個人都學(xué)到了很多。
王子川:我反正這次弄完覺得好玩兒。
而且其實(shí)整個的這個過程會比想象中的要順利,因?yàn)槲抑皼]有任何——就是都別說跟AI合作了——就是電腦基礎(chǔ)都很難有,這個反而讓我覺得真的就是很驚喜。
薛曉路:從現(xiàn)在完成的情況來看,我覺得AI還是給了我們很大的驚喜的。但是不得不說,里面還是有一些鏡頭覺得它能有再提升的空間。也因此讓我對AI的未來會充滿了期待。
賈樟柯:整個制作完之后我對AI非常滿意,因?yàn)槲矣X得在人物的連貫性上基本上達(dá)到了滿意程度。
已經(jīng)基本上可以做到讓可靈在生成內(nèi)容的同時,具備明確的空間識別能力。也就是說在生成的過程中,并不會丟失空間層面的信息。我認(rèn)為這恰恰是當(dāng)前AI技術(shù)需要進(jìn)一步完善的方向,同時也是可靈目前表現(xiàn)出非常出色的一點(diǎn)。
王卯卯:這部片子由我在北京的動畫團(tuán)隊(duì)和在海外的AI影視團(tuán)隊(duì)協(xié)作完成。可靈是我們使用過綜合體驗(yàn)最佳,分辨度和動態(tài)表現(xiàn)都最優(yōu)的AI視頻工具。
張吃魚:傳統(tǒng)電影生產(chǎn)流程中,這樣的鏡頭雖然也能實(shí)現(xiàn),但要么耗資巨大進(jìn)行置景,要么通過綠幕后期重新制作。而可靈AI僅靠一個指令就能生成的畫面,準(zhǔn)確性有些超乎想象。
One More Thing
實(shí)話講,所有9位影視工作者能愿意用AI拍短片(哪怕是實(shí)驗(yàn)性的),從一定程度上其實(shí)已經(jīng)表明了幾位的偏向:
接受,或者至少愿意嘗試AI。
但還是想問問,面對強(qiáng)烈沖擊的AI視頻,身處其中是什么感覺?——
李少紅:其實(shí)電影和科技是密不可分的,每一次技術(shù)革命都帶來了新的升級,對影像來講都是一個新的時代的開始。
我們這代導(dǎo)演經(jīng)歷過膠片到數(shù)字時代的改變,而現(xiàn)在的電影從業(yè)者正在經(jīng)歷AI技術(shù)的變革,學(xué)習(xí)如何處理與AI的關(guān)系。“如何讓AI為我們所用”是下一代電影人職業(yè)生涯中注定要與全球電影人共同面臨的問題。
葉錦添:AI正在創(chuàng)造一個再生的天地,在一個復(fù)制的世界中重現(xiàn)全觀的視野、在歷史的長河中不斷出現(xiàn)的現(xiàn)象。多少文學(xué)家、科學(xué)家、哲學(xué)家以各種各樣的詮釋,流傳在我們的意識里。
這些東西將會經(jīng)過AI的整理重現(xiàn)在我們面前,甚至有可能會取代我們真實(shí)的經(jīng)歷。重新回到人的本真,沉著應(yīng)對這種撲面而來的變化。
賈樟柯:我對AI的興趣一直非常濃厚,但是沒有機(jī)會嘗試。一直關(guān)注AI的進(jìn)展也是因?yàn)樗M(jìn)入到行業(yè)之后,引起非常多的討論,包括好萊塢也有非常激烈的反應(yīng)。
就個人而言,我覺得100多年來,電影就是迎接了各種各樣新的技術(shù)的誕生,而且有的新技術(shù)誕生時,有人會覺得它是對傳統(tǒng)電影行業(yè)產(chǎn)生了威脅,有的人會覺得好像會增加成新的工具。不管怎么樣,起起伏伏,電影這門藝術(shù)它一直在吸收、接受新的科技,在往前走,為觀眾創(chuàng)造更多更新的影片,增加了非常多的表現(xiàn)的方法。
我想AI將來一定是電影行業(yè)里一個平等的合作伙伴。導(dǎo)演也好,編劇也好,可能我們都會有一個新的合作者,那就是 AI。未來片頭片尾字幕中,可能會出現(xiàn)某個AI。
最后想強(qiáng)調(diào)一點(diǎn),(這部短片)我們沒有用特技,所有的問題用AI來解決。
王子川:首先我個人對于AI生成視頻的第一個觀感,它很有破壞性。
可能是各種意義上的破壞,感性認(rèn)知上的、對技術(shù)壁壘或者資源壁壘……或者是各種各樣的破壞。它的生成方式也是,它吃各種各樣的素材形成新的形象,那個形象不是真的物質(zhì)世界的形象,是一個綜合符號式的形象。
像我這種在“墻外”(非導(dǎo)演科班)的人,破壞對我來說是潛意識里一定的主題。傳統(tǒng)做影像技術(shù)、氛圍、人為、資源門檻非常非常高,會有各種各樣奇奇怪怪的跟創(chuàng)作毫無關(guān)系的壁壘和無法跨越的鴻溝。
但是有了AI這樣的工具可以幫助創(chuàng)作者,可以快速完成所有的想象和創(chuàng)造,那就是一個“武器”,這個“武器”一定有破壞性,這個破壞性是針對已有建立的某種秩序或者約定俗成的產(chǎn)業(yè)文化破壞。
我不覺得這是一個貶義詞,這是一個對我來說非常有正向力量的詞。