二次元狂喜！海螺發(fā)布2D動畫專用視頻生成模型，日漫迪士尼插畫風(fēng)都支持
以后二創(chuàng)動漫更方便了
奇月 發(fā)自 凹非寺
量子位 | 公眾號 QbitAI
MinMax海螺AI新模型，讓2D角色動起來了！
日漫、游戲、插畫等各種風(fēng)格的靜態(tài)人物，都可以絲滑地轉(zhuǎn)變成生動的2D風(fēng)格視頻。
量子位也馬上上手實測了一波——
首先請出今年的頂流悟空先生，輸入下面的prompt（輸入時是英文，此處意譯）：
悟空在波濤洶涌的海面上準(zhǔn)備戰(zhàn)斗，金箍棒閃著金光，衣擺隨風(fēng)被吹動，氣氛緊張
來看看海螺的生成效果：
不得不說，還真有大片里面戰(zhàn)斗即將開場的即視感了！
隨后，我們以經(jīng)典動漫《你的名字》的海報為例，輸入了以下prompt：
男孩和女孩轉(zhuǎn)過身面對對方，表情很觸動，眼中含有淚水，逐漸靠近并最終擁抱在一起。
最終的生成效果真的很贊。
連人物動作的一些停頓感都把握到了。還有AI最不擅長的頭發(fā)問題，視頻中的效果也沒有太多違和感。
最后再來一個抽象的（doge）：
鳴人向哆啦A夢索要草帽，一個女孩拿著草帽和哆啦A夢一起出場，然后柯南在一邊思考。
輸入圖像：
來看看海螺的生成效果。
視頻中把鳴人、哆啦A夢、草帽這幾個要素都自然地組合在了一起，不過因為prompt中柯南用的是conan這個說法，它還沒能完全理解。視頻整體還是非常自然的，可以看到一些衣擺和頭發(fā)的運動都很生動。
Hailuo I2V-01-Live是海螺Image-To-Video系列的最新模型，在生成畫面的流暢性和動作的生動連貫性上有很大提升。
它主要針對穩(wěn)定性和細微表達進行了優(yōu)化，還支持非常豐富的美術(shù)風(fēng)格，可以生成更流暢和精致的作品。
更多網(wǎng)友作品
網(wǎng)友們見狀自然是按捺不住，馬上創(chuàng)作了很多作品。
比如最近超火的《雙城之戰(zhàn)》中的Jinx舉牌：
對比之前的I2V-01模型，人物的動作都順滑了很多，體驗就像是從24幀提升到了60幀。
更復(fù)雜的插畫和水彩風(fēng)格也輕松拿捏了：
再比如知名博主海辛Hyacinth嘗試的中世紀(jì)插畫風(fēng)格：
還有類似經(jīng)典動漫《超時空要塞》風(fēng)格的飛船片段：
自帶鏡頭調(diào)度的經(jīng)典日本動漫風(fēng)格+武士元素：
甚至連水墨風(fēng)格、插畫風(fēng)格、熟悉的迪士尼3D風(fēng)也都可以：
國產(chǎn)AI視頻模型之光
提到MinMax的海螺AI（Hailuo），事實上已經(jīng)在外網(wǎng)的視頻創(chuàng)作社區(qū)里火了很久了，是這一波國產(chǎn)AI視頻模型里面絕對的國產(chǎn)之光！
在Vbench（知名視頻生成模型的測試基準(zhǔn)）的多個維度上，它都名列前茅，尤其是在畫面的生成質(zhì)量維度上，拿下了第3名的好成績。
此前也經(jīng)常被國內(nèi)外網(wǎng)友用來搞一些奇怪的meme或者影視劇二創(chuàng)。
比如惡搞《黑客帝國》：
還有專業(yè)電影導(dǎo)演Dave Clark用海螺生成非常有質(zhì)感的科幻電影片段：
多位網(wǎng)友表示，海螺模型的優(yōu)點主要是生成表情更細膩和動作更流暢方面。
一起看點例子感受一下：
比如下面這個國外爆火的視頻，畫面的女人瞬間就從大笑變成了掩面哭泣，但是變化過程非常自然，看著還很有代入感：
仔細觀察還能看到小姐姐的眼眶的淚光逐漸增加，還有眉頭慢慢皺起的過程，這演技絕對影后級。
生氣、傷心、害怕、驚訝……多種表情都可以快速生成：
再看看下面這個海螺生成的奔跑畫面，作者表示，不僅生成更加自然，而且在角色的一致性控制上也非常完美。
One More Thing
在圖像和視頻生成模型的下半程，海螺專注發(fā)力二次元風(fēng)格，而其他各家公司也都開始主打“風(fēng)格化”、“差異化”
比如Runway的frames功能，可以聯(lián)動修改多個相關(guān)畫面：
還有最近爆火的recraft的復(fù)古膠片風(fēng)圖像：
以及剛剛開源的騰訊混元的寫實主義：
有藝術(shù)家評論道，以后挑模型就像是在挑選不同風(fēng)格的相機品牌一樣了，真的很有趣！
參考鏈接：
[1]https://x.com/Hailuo_AI/status/1863961575574622662
[2]https://huggingface.co/spaces/Vchitect/VBench_Leaderboard
- 打臉！GPT-4o輸出長度8k都勉強，陳丹琦團隊新基準(zhǔn)測試：所有模型輸出都低于標(biāo)稱長度2025-01-15
- 好家伙，海螺直接拍了個AI版的《教父》2025-01-10
- 2025-01-08
- 用大模型吃瓜更智能了！阿里通義實驗室提出新時間線總結(jié)框架2025-01-07
相關(guān)閱讀
GitHub一周2000星！國產(chǎn)統(tǒng)一圖像生成模型神器升級，理解質(zhì)量雙up，還學(xué)會了“反思”
顯著增強上下文理解能力、指令遵循能力和圖像生成質(zhì)量
