奧特曼和老黃動(dòng)手了……Luma干的
發(fā)布不到2天,那個(gè)號(hào)稱“下一代”文生視頻的Dream Machine(來(lái)自Luma AI),大大大大翻車。
原本宣傳中的效果是這樣的:
效果之驚艷,令人直呼“忘掉Sora”、“影視級(jí)水平”,并且Luma也是相當(dāng)自信地表示“在線免費(fèi)可玩”。
然而……當(dāng)網(wǎng)友們紛紛前去嘗鮮之后,得到的結(jié)果卻是大跌眼鏡。
例如給Dream Machine“投喂”一張OpenAI的一張合影:
結(jié)果它生成的視頻是這樣的:
是的,打起來(lái)了,而且人物的畸變也是相當(dāng)離譜。
網(wǎng)友們也是忍俊不禁,調(diào)侃地說(shuō)道:
我們終于知道去年OpenAI發(fā)生了什么。
再“投喂”一張奧特曼、老黃和Brockman的合影:
Dream Machine這次給出的結(jié)果是:
沒錯(cuò)……又打起來(lái)了。(Dream Machine好像很暴力的樣子)
雖說(shuō)Dream Machine生成視頻的效果和劇情有些離譜,但愛整活兒的網(wǎng)友們卻是坐不住了,直接開辟了一個(gè)新賽道。
讓表情包“活”起來(lái)
或許Dream Machine這種“不走尋常路”的風(fēng)格,跟表情包的氣質(zhì)很搭,現(xiàn)在網(wǎng)友們更樂(lè)于讓AI“續(xù)寫”表情包:
AI讓memes栩栩如生。
Luma的Dream Machine可以當(dāng)成Meme Machine了。
例如這張非常經(jīng)典的表情包,在Dream Machine的加持下,后續(xù)的故事就譜寫出來(lái)了:
然而還有更drama的版本——順手牽羊:
男主角還從一名白人直接變成了三哥……
我們經(jīng)常用到的“狗頭”表情包,也在Dream Machine之下活了起來(lái):
還有“淡定姐”和“勵(lì)志哥”:
不難看出,Dream Machine被網(wǎng)友們吐槽翻車的最大問(wèn)題,就是在于無(wú)法保證視頻內(nèi)容的連續(xù)性。
尤其是在生成人物方面,前后幀直接變?nèi)朔N、變性別的概率比較高。
因此,也有網(wǎng)友建議:
使用Luma最好的方法,就是先用Midjourney這樣的工具生成關(guān)鍵圖片,然后再用Luma對(duì)其處理。
然而,說(shuō)到AI翻車,Luma的Dream Machine并不是個(gè)例。
SD3開源也秒翻車
前兩天Stable Diffusion 3開源的消息也是讓不少的網(wǎng)友們興奮了一把。
但在親自體驗(yàn)過(guò)后,很多人卻直呼離了大譜。
例如生成一個(gè)躺在草地上的女孩,結(jié)果“打開方式”是這樣的:
而且不是個(gè)例,只要是和人(整體)相關(guān)的內(nèi)容,生成結(jié)果都有點(diǎn)掉san。
雖然在生成其它方面SD3的效果還是能讓人滿意,但它和Dream Machine一樣,總是處理不好人類。
有人發(fā)現(xiàn),如果細(xì)看“躺在草坪上的女孩”這張圖像,會(huì)發(fā)現(xiàn)它在局部細(xì)節(jié)上確實(shí)還可以,甚至很棒。
草地上的影子、衣物上反射的光線、頭發(fā)的質(zhì)地……都遵循了物理規(guī)律。
但人物整體就不敢恭維了。
不少網(wǎng)友都認(rèn)為,這就是問(wèn)題的關(guān)鍵。
我認(rèn)為他們的NSFW過(guò)濾器,把所有人類圖像都判定為了NSFW。
這個(gè)過(guò)濾器全稱是filtering out adult content,作用在于過(guò)濾掉不合規(guī)的成人內(nèi)容。
SD2發(fā)布時(shí)就出現(xiàn)過(guò)類似的問(wèn)題,研究人員發(fā)現(xiàn)審查這部分內(nèi)容可能影響了模型對(duì)人體結(jié)構(gòu)的理解。
后面的SD2.1和SDXL版本在這一問(wèn)題上有所緩解。
這次SD3的翻車,暴露了一個(gè)問(wèn)題:過(guò)于嚴(yán)格的數(shù)據(jù)審核,可能誤刪了一些無(wú)害的成人圖像,所以現(xiàn)在模型沒法理解人體結(jié)構(gòu)。
總而言之,無(wú)論是Dream Machine還是SD3等,AIGC應(yīng)用工具還需要不斷加強(qiáng)和完善。
不過(guò)若是對(duì)整活表情包感興趣的小伙伴,現(xiàn)在就可以去試試了:
https://lumalabs.ai/dream-machine