奧特曼和老黃動手了……Luma干的
發布不到2天,那個號稱“下一代”文生視頻的Dream Machine(來自Luma AI),大大大大翻車。
原本宣傳中的效果是這樣的:
效果之驚艷,令人直呼“忘掉Sora”、“影視級水平”,并且Luma也是相當自信地表示“在線免費可玩”。
然而……當網友們紛紛前去嘗鮮之后,得到的結果卻是大跌眼鏡。
例如給Dream Machine“投喂”一張OpenAI的一張合影:
結果它生成的視頻是這樣的:
是的,打起來了,而且人物的畸變也是相當離譜。
網友們也是忍俊不禁,調侃地說道:
我們終于知道去年OpenAI發生了什么。
再“投喂”一張奧特曼、老黃和Brockman的合影:
Dream Machine這次給出的結果是:
沒錯……又打起來了。(Dream Machine好像很暴力的樣子)
雖說Dream Machine生成視頻的效果和劇情有些離譜,但愛整活兒的網友們卻是坐不住了,直接開辟了一個新賽道。
讓表情包“活”起來
或許Dream Machine這種“不走尋常路”的風格,跟表情包的氣質很搭,現在網友們更樂于讓AI“續寫”表情包:
AI讓memes栩栩如生。
Luma的Dream Machine可以當成Meme Machine了。
例如這張非常經典的表情包,在Dream Machine的加持下,后續的故事就譜寫出來了:
然而還有更drama的版本——順手牽羊:
男主角還從一名白人直接變成了三哥……
我們經常用到的“狗頭”表情包,也在Dream Machine之下活了起來:
還有“淡定姐”和“勵志哥”:
不難看出,Dream Machine被網友們吐槽翻車的最大問題,就是在于無法保證視頻內容的連續性。
尤其是在生成人物方面,前后幀直接變人種、變性別的概率比較高。
因此,也有網友建議:
使用Luma最好的方法,就是先用Midjourney這樣的工具生成關鍵圖片,然后再用Luma對其處理。
然而,說到AI翻車,Luma的Dream Machine并不是個例。
SD3開源也秒翻車
前兩天Stable Diffusion 3開源的消息也是讓不少的網友們興奮了一把。
但在親自體驗過后,很多人卻直呼離了大譜。
例如生成一個躺在草地上的女孩,結果“打開方式”是這樣的:
而且不是個例,只要是和人(整體)相關的內容,生成結果都有點掉san。
雖然在生成其它方面SD3的效果還是能讓人滿意,但它和Dream Machine一樣,總是處理不好人類。
有人發現,如果細看“躺在草坪上的女孩”這張圖像,會發現它在局部細節上確實還可以,甚至很棒。
草地上的影子、衣物上反射的光線、頭發的質地……都遵循了物理規律。
但人物整體就不敢恭維了。
不少網友都認為,這就是問題的關鍵。
我認為他們的NSFW過濾器,把所有人類圖像都判定為了NSFW。
這個過濾器全稱是filtering out adult content,作用在于過濾掉不合規的成人內容。
SD2發布時就出現過類似的問題,研究人員發現審查這部分內容可能影響了模型對人體結構的理解。
后面的SD2.1和SDXL版本在這一問題上有所緩解。
這次SD3的翻車,暴露了一個問題:過于嚴格的數據審核,可能誤刪了一些無害的成人圖像,所以現在模型沒法理解人體結構。
總而言之,無論是Dream Machine還是SD3等,AIGC應用工具還需要不斷加強和完善。
不過若是對整活表情包感興趣的小伙伴,現在就可以去試試了:
https://lumalabs.ai/dream-machine