日本再度挑戰將漫畫之神手塚治虫與 AI 創作怪醫黑傑克全新故事,利用 GPT-4 與 Stable Diffusion 進行內容創作

2023.06.13 01:58PM
照片中提到了BLACKJACK、501、ANNIVERSARY,包含了動畫片、動畫片、漫畫、文本、藝術

日本漫畫界在 2019 年曾利用 AI 技術學習被譽為漫畫之神的手塚治虫的作品提出「 TEZKUK 2020 」計畫,以 AI x HUMAN 的理念打造一部上下兩集的原創短篇漫畫「裴多」;而在生成式 AI 盛行的今日,由包括慶應大學、手塚製作所、 NEDO (日本新能源產業技術綜合開發機構)等攜手,再度推出「 TEKUK 2023 」的 AI 創作計畫,這次不再是原作作品,而是進一步挑戰經典作品的續作,預計在 2023 年透過此項計畫創作「怪醫黑傑克」的新內容,並在 2023 年秋天於秋田書店的「周刊少年 Champion 」連載,作為歡慶怪醫黑傑克誕生 50 周年的企劃。

在此次的 TEKUK 2023 計畫中,將利用 OpenAI 的 GPT-4 、 Stability AI 的 Stable Diffusion 等生成式 AI 為基礎,學習怪醫黑傑克的內容資訊進行與 AI 的互動創作。

▲此部怪醫黑傑克定位在「新作」而非「續作」、是「研究」而非「連載」,旨在傳達是人與 AI 的研究項目

先前的 TEKUK 2020 計畫的概念是利用 AI 減輕創作者負擔,並作為應對內容市場快速的變化,當時主要是將手塚治虫的漫畫轉為文字後進行劇情創作,並結合 GAN 對抗生成網路與遷徙式學習產生角色,最終的結果是能使人類擬定大綱後,由 AI 填補欠缺的細節並完成故事。不過在當時的技術較難以少量的資料掌握「手塚治虫風格」的角色特徵創造合適的人物,最終仍需由能掌握「手塚治虫風格」特質的專業人士從原案中挑選並進一步完成細節。

此次主導計畫的慶應大學科學技術學部教授栗原聰是在探索 AI 與漫畫內容創作的可能性,他認為創作是源自於點對點的連結產生創作與妄想,他在申請 NEDO 項目時是希冀能探索 AI 能為人類創作力帶來的突破與可能性;在此次的計畫也獲得版權持有者的製作方與手塚治虫遺屬的認同,目前僅廣泛的指出將活用 GPT-4 作為情境生成,與 Stable Diffusion 作為角色產生,但實際的方式並未在發表會提供;但強調此次的作品是屬於「新作」而非「續作」,因為不是由手塚治虫本人參與,而是由 AI 與人類共同創駔的成果。

手塚製作所的代表手塚誠表示,日本人對於 AI 的概念相當的熟悉,包括手塚治虫創作的家喻戶曉的作品「原子小金剛」,就是代表當時手塚治虫對未來世界、機器人與 AI 的遐想,同時也廣泛的深值日本民眾的內心;手塚誠認為 AI 在這三年有顯著的進展,不過此次的目標不是為了跟上 AI 熱潮,而是為了彌補前一次 TEKUK 2020 的「裴多」的缺憾,但至少「裴多」並未被完全排斥。

手塚誠認為「怪醫黑傑克」是相當合適的題材,因為怪醫黑傑克有高達 200 集以上的內容,同時有錯綜複雜的故事,同時也適逢作品誕生 50 周年;但此次並非代表「怪醫黑傑克」要開始進行全新連載,而是宣告一個全新的研究項目,顯示對 AI 結合手塚治虫的研究挑戰願景。團隊認為手塚治虫驚人的工作效率是一般漫畫家不太可能達到的,尤其是現在的漫畫製作環境更為困難,他們希冀能利用 AI 協助漫畫家提升效率,並激盪他們的靈感與改善人類的創作性工作,並非以 AI 取代漫畫家。

在 TEKUK 2023 的計畫當中,他們預計將怪醫黑傑克的故事與敘事結構進行數位化,將由手塚製作所進行場景分割與初步功能分析,慶應大學在進行細節分析、人物分析、與言語行為分析、結構分析與模式提取等,結合統計與拆解後,層層解剖出屬於手塚治虫風格與元素的怪醫黑傑克的敘事特質。

▲ 2020 年的裴多是日本漫畫界首度挑戰以 AI 與人類創作有著手塚治虫風格的原創作品

在建構故事與劇情等基本設定後,即是使 AI 能夠接手產生故事;研究團隊指稱,雖然生成式 AI 能夠產生令一般人驚嘆的文本,不過相較專業作家仍難以成為賣座故事的基礎結構;另外雖然可將故事透過簡單的起承轉合連貫避免失敗,不過也會少了新意,作多就只是個普通的作品,故團隊希望情節之間是以非公式化的奇怪作法進行連貫,據說 GPT-4 框架能夠產生這樣的敘事結構。不過若要實現這樣的內容,作為提供故事大綱的敘事者必須提供大量的敘述給予 GPT-4 ,但一般創作者可能無法一口氣提供這樣複雜的提示,所以在創作的流程是利用人與 GPT 之間不斷的交互方式進行互動創作,利用一來一往的方式逐漸將敘事變的完整以及輸出符合敘述的文本。

在「裴多」的人物創作,是先完成故事大綱後再設法將故事設定描述的人物以 AI 產生符合論述的角色特質備選,最後再挑出符合手塚風格的角色加以潤飾。 TEKUK 2023 則將透過 Stable Diffusion 的圖像生成式 AI 描繪人物設定,可利用文本為條件產生穩定且符合文本描述的角色;在記者會也示範使用 AI 描繪的黑傑克、長大的皮諾可或是讓黑傑克變成胖子等表達方式, Stable Diffusion 也再依循角色設定的框架下呈現符合文本敘述的各種角色特質,甚至也可以產生單張的小場景,例如黑傑克使用智慧手機的畫面等。

手塚誠提到,手塚治虫據稱是日本第一位開啟助手制度的漫畫家,藉由大量的助手分別處理不同領域的細節,加速將他腦中各種故事與想法加以實現,然而助手的工作並非發揮創意,而是將手塚的創意化為作品,而現在的 AI 就扮演著如同助手般的角色,能幫助創作者更快速地完成作品。