轉自:量子位
釋出不到2天,那個號稱“下一代”文生影片的Dream Machine(來自Luma AI),大大大大翻車。
原本宣傳中的效果是這樣的:
效果之驚豔,令人直呼“忘掉Sora”、“影視級水平”,並且Luma也是相當自信地表示“線上免費可玩”。
然而……當網友們紛紛前去嚐鮮之後,得到的結果卻是大跌眼鏡。
例如給Dream Machine“投餵”一張OpenAI的一張合影:

結果它生成的影片是這樣的:
是的,打起來了,而且人物的畸變也是相當離譜。
網友們也是忍俊不禁,調侃地說道:
我們終於知道去年OpenAI發生了什麼。

再“投餵”一張奧特曼、老黃和Brockman的合影:

Dream Machine這次給出的結果是:
沒錯……又打起來了。
(Dream Machine好像很暴力的樣子)

雖說Dream Machine生成影片的效果和劇情有些離譜,但愛整活兒的網友們卻是坐不住了,直接開闢了一個新賽道。
讓表情包“活”起來
或許Dream Machine這種“不走尋常路”的風格,跟表情包的氣質很搭,現在網友們更樂於讓AI“續寫”表情包:
AI讓memes栩栩如生。Luma的Dream Machine可以當成Meme Machine了。

例如這張非常經典的表情包,在Dream Machine的加持下,後續的故事就譜寫出來了:

然而還有更drama的版本——順手牽羊:

男主角還從一名白人直接變成了三哥……
我們經常用到的“狗頭”表情包,也在Dream Machine之下活了起來:

還有“淡定姐”和“勵志哥”:


不難看出,Dream Machine被網友們吐槽翻車的最大問題,就是在於無法保證影片內容的連續性。
尤其是在生成人物方面,前後幀直接變人種、變性別的機率比較高。
因此,也有網友建議:
使用Luma最好的方法,就是先用Midjourney這樣的工具生成關鍵圖片,然後再用Luma對其處理。
然而,說到AI翻車,Luma的Dream Machine並不是個例。
SD3開源也秒翻車
前兩天Stable Diffusion 3開源的訊息也是讓不少的網友們興奮了一把。
但在親自體驗過後,很多人卻直呼離了大譜。
例如生成一個躺在草地上的女孩,結果“開啟方式”是這樣的:

而且不是個例,只要是和人(整體)相關的內容,生成結果都有點掉san。

雖然在生成其它方面SD3的效果還是能讓人滿意,但它和Dream Machine一樣,總是處理不好人類。
有人發現,如果細看“躺在草坪上的女孩”這張影像,會發現它在區域性細節上確實還可以,甚至很棒。

草地上的影子、衣物上反射的光線、頭髮的質地……都遵循了物理規律。
但人物整體就不敢恭維了。
不少網友都認為,這就是問題的關鍵。
我認為他們的NSFW過濾器,把所有人類影像都判定為了NSFW。
這個過濾器全稱是filtering out adult content,作用在於過濾掉不合規的成人內容。
SD2釋出時就出現過類似的問題,研究人員發現審查這部分內容可能影響了模型對人體結構的理解。
後面的SD2.1和SDXL版本在這一問題上有所緩解。
這次SD3的翻車,暴露了一個問題:過於嚴格的資料稽核,可能誤刪了一些無害的成人影像,所以現在模型沒法理解人體結構。
總而言之,無論是Dream Machine還是SD3等,AIGC應用工具還需要不斷加強和完善。
不過若是對整活表情包感興趣的小夥伴,現在就可以去試試了:
https://lumalabs.ai/dream-machine