世界首部AI創(chuàng)作漫畫正式發(fā)表：StyleGAN神還原《鐵臂阿童木》畫風，繼承手冢治蟲衣缽

十三 2020-04-21 13:02:53 來源：量子位

十三 發(fā)自 凹非寺
量子位 報道 | 公眾號 QbitAI

傳奇的作者打造傳世的作品，但作者逝世了，又該怎么辦？

用AI來“傳宗接代”。

最近，便有團隊利用英偉達的StyleGAN，為已經(jīng)逝世的傳奇漫畫家——手冢治蟲的作品“續(xù)命”。

提到手冢治蟲，你可能會覺得陌生，但提到《鐵臂阿童木》，“大齡”小伙伴們就再熟悉不過了吧？

為了延續(xù)他的作品，來自記憶體制造商KIOXIA的研究人員和藝術(shù)團隊，與日本株式會社聯(lián)手，利用深度學習(StyleGAN)，創(chuàng)造了世界上第一部由AI生成的漫畫——《PHAEDO》。

為了利于生成漫畫角色，團隊分析了手冢先生數(shù)百部漫畫作品，包括《鐵臂阿童木》、《森林大帝》、《怪醫(yī)黑杰克》等等。

《PHAEDO》已經(jīng)在日本《晨間》周刊上發(fā)表。

這部新漫畫，可以說是很好的傳承了手冢先生的衣缽。

讓漫畫之神的作品“傳宗接代”

《PHAEDO》這部漫畫，其實是Kioxia公司一個叫#FutureMemories 01 “TEZUKA 2020”的項目。

項目負責人東原良平(Ryohei Orihara)介紹說：

它是由AI和人類，根據(jù)手冢治蟲的許多記憶創(chuàng)造出一件作品的項目。漫畫這種藝術(shù)表現(xiàn)形式，在世界范圍內(nèi)廣為人知，并且被幾代人所閱讀和喜愛。

為了讓AI學習手冢治蟲作品的特點，研究人員將漫畫人物面部的特征轉(zhuǎn)化為數(shù)據(jù)，分析在不同場景下劇情發(fā)展的情況。

而角色生成階段的核心技術(shù)，就是英偉達的StyleGAN。

而為了生成一個與StyleGAN一起使用的訓練數(shù)據(jù)集，來自公立函館未來大學Mukaiyama教授團隊從手冢先生的作品中收集了超過10000張面部圖像數(shù)據(jù)集，這些圖像可以用來訓練模型。

Mukaiyama表示：

我們還讓計算機學習手冢作品之外的人臉圖像，包括真人的面部圖像，讓它學習通過左右翻轉(zhuǎn)人臉，產(chǎn)生增強的數(shù)據(jù)。

訓練和推理使用多個NVIDIA V100 GPU，以及StyleGAN編寫的cuDNN加速的TensorFlow深度學習框架。

在第一階段，StyleGAN在單一過程中生成了人臉，研究人員說：

我們試圖生成更完整的圖像，其中眼睛、鼻子和嘴巴等細微的細節(jié)都是從輪廓等粗糙的描繪中逐漸生成的。

接下來，團隊決定只使用手冢治蟲漫畫中的女性角色。

最終，團隊利用遷移學習，將數(shù)千個數(shù)據(jù)點整合在一起，實現(xiàn)了類似手冢作品的風格。

通過結(jié)合角色的不同個體特征，研究人員發(fā)現(xiàn)可以創(chuàng)造出從未出現(xiàn)過的角色。這種機制通過調(diào)整結(jié)合時的比例，來讓生成的角色產(chǎn)生變化。

Orihara說，他最初并不相信遷移學習可以做到這一點，畢竟模型內(nèi)部就像“黑箱”一樣，是未知的。

但這就是深度學習非常有趣的原因。

看到角色一個接一個的被創(chuàng)造出來，這個過程是非常有意思的。

作品出來了，發(fā)表又遇到了問題。

最開始，《晨間》周刊的主編Miura是拒絕刊登這部漫畫的，他認為項目過程中有太多的人為干預因素。

但在與團隊多次交涉過后，Miura改變了主意：

我最終意識到，這個項目也可以用來分析人類是如何創(chuàng)作漫畫的，

我想表明，創(chuàng)造一個可以在這些作品中繪制漫畫的AI，本身就是一個人類的創(chuàng)造過程。

關(guān)于手冢治蟲

手冢治蟲(1928年11月3日—1989年2月9日)，本名手冢治，因喜愛昆蟲而取了“手冢治蟲”的筆名。漫畫家、動畫制作人、醫(yī)學博士。

1947年以漫畫《新寶島》奠定了日本漫畫的敘述方式，創(chuàng)立了日本漫畫意識形態(tài)，極大的擴張了新漫畫的表現(xiàn)力。1952年作品《鐵臂阿童木》轟動日本，1953年的《緞帶騎士》則是公認的世界第一部少女漫畫。漫畫作品《火之鳥》至今被普遍認為日本漫畫界最高杰作。

同時，他也是日本第一位導入助手制度與企業(yè)化經(jīng)營的漫畫家。1961年成立“蟲Production動畫部”，翌年以“蟲制作公司”的名義開始活動，日本第一部多集TV動畫《鐵臂阿童木》、第一部彩色多集TV動畫《森林大帝》均誕生于此。1973年蟲制作商事倒閉，欠下三億巨額債務(wù)，仍然不停止漫畫創(chuàng)作活動，同年以作品《怪醫(yī)黑杰克》俘虜全國讀者，創(chuàng)下多項紀錄。

One More Thing

漫畫之神手冢治蟲教我們用科技來描繪夢想的樂趣。同時，他堅持認為，科學不應(yīng)該拋棄人性。

于是，KIOXIA在項目的官網(wǎng)上，還提出了這樣的一個問題：

如果手冢治蟲現(xiàn)在還在世，他眼中(漫畫作品)的未來會是什么樣子呢？

除了他本人，應(yīng)該沒有人能給出精確的答案。

但利用AI，或許能夠為這個問題，提供一個方向。

參考鏈接

AI Helps Create New Manga Reflecting Osamu Tezuka’s Legendary Works

https://tezuka2020.kioxia.com/en-jp/
https://baike.baidu.com/item/%E6%89%8B%E5%86%A2%E6%B2%BB%E8%99%AB/192407?fr=aladdin