TEZUKA2023が制作した『ブラック・ジャック』新作の舞台裏

AIと人のコラボレーションで手塚治虫漫画の“新作”制作に挑む「TEZUKA2023」プロジェクト。その成果である『ブラック・ジャック』新作漫画が秋田書店「週刊少年チャンピオン」52号（11/22日発売号）に、読み切りとして掲載されました。タイトルは「TEZUKA2023 ブラック・ジャック 機械の心臓 – Heartbeat Mark II -」。巻頭カラー、32ページの作品です。

あらすじは以下のとおり。

ピノコを連れて医療とAIの最先端技術が集まる企業を訪れたブラック・ジャックは、CEOから女性患者を診てほしいと依頼を受ける。患者には「AIを活用した完全な機械の心臓」が移植されていたが、完全なはずの心臓に血腫が発生していた。過去に同様の症状である本間血腫を治せなかったトラウマを持つブラック・ジャックは一度手術を断るが、ピノコの「どこからどこまでが人間なのか？」という問いに、この難題に立ち向かう決意をする。

このプロジェクトでは大規模言語モデル（LLM）のGPT-4、テキストから画像を生成するStable Diffusionといった生成AIが活用されています。では、どのように使ったのでしょうか。

クリエイターとAIを仲立ちするインタラクティブプロンプトAIを開発

手塚治虫作品『ブラック・ジャック』は、秋田書店「週刊少年チャンピオン」で1973年11月～1983年10月まで連載された手塚治虫の代表作のひとつです。無免許の天才外科医ブラック・ジャックが活躍する医学ドラマで、当初は短期連載予定でしたが人気を博し、全243話が掲載されました。今年2023年に誕生50年を迎えた今でも人気があります。

「TEZUKA2023」は、2020年に行われた「TEZUKA2020」の後継プロジェクトです。AIと人間のコラボレーションによって手塚漫画の“新作”の制作を目指したプロジェクトで、当時は漫画『ぱいどん』（講談社「週刊モーニング」掲載）を生み出しました。しかしAIの活用はシナリオ作成・キャラクター画像作成いずれにおいても一度だけ、最初だけに止まっていました。

【関連記事】人工知能に作家性を宿らせる方法：栗原聡氏×山野辺一記氏インタビュー（前編）

一方、今回の「TEZUKA2023」は、テキストから画像、または画像から画像を出力できる生成AIをフル活用。さらに、人間による入力とAIによる出力、それを見た人間による再入力といった制作過程を経ることで、AIと人間によるコラボレーションがインタラクティブに、何度も何度も繰り返して行われました。

AIの操作もクリエイター自身が行いました。生成AIから出力を得るにはプロンプトと呼ばれる入力を与える必要があります。生成AIから安定した出力結果を得ながらインタラクティブ性の高いやりとりを行うために、プロジェクトでは共創型AIサポートシステム「インタラクティブプロンプトAI」を開発しました。

これは、プロジェクトの中心メンバーの一人である慶應義塾大学の栗原聡教授らが国立研究開発法人新エネルギー・産業技術総合開発機構（NEDO）事業「人と共に進化する次世代人工知能に関する技術開発事業」の委託業務「インタラクティブなストーリー型コンテンツ創作支援基盤の開発」のなかで開発した技術の活用です。

生成AIとの仲介となるインタラクティブプロンプトAIを使うことにより、ユーザーのスキルに依存せず、安定したプロンプトの成形、コンテンツ特徴の自由な入れこみなどが可能になりました。インタラクティブなやりとりが自由にできる生成AIをクリエイターの創造性サポートツールとして使うことで、人の創造力が大いに発揮できたといいます。

人間と生成AIのあいだに入る「御用聞き」としてのAIを作成

発売前の11月20日にはプロジェクト概要の成果発表会が行われました。会見ではまず、プロジェクトの総合プロデューサーである慶應義塾大学 理工学部教授の栗原聡氏が、「我々はナラティブを必要とする生き物。自分達が作ったツールを使って実際にどんなコンテンツが作れるのかチャレンジした」と趣旨を紹介しました。そして「手塚治虫が存命であれば作ったであろうコンテンツを、AIのサポートを得ながら作成することに挑戦することを通して、人間とAIの共生がどうあるべきかを探り、作品が実際にどの程度一般の人にも受け入れられるのか、フィードバックを頂きたいと考えた」と述べました。

研究成果物の中核は前述のインタラクティブプロンプトAIです。生成AIは生み出されたばかりの技術であり、さまざまな課題がありますが、「一番大きな課題は、我々が入力するプロンプトにある」と考えて、生成AIと人間の間に入る御用聞きを仲介として制作してプロンプト作成を行わせることにしました。そして、それを何度も繰り返すことで、クリエイターの創造魂をくすぐることを目指しました。利用者のリテラシーに依存せず生成AIを使ってもらえるようにする道具を作ることを想定し、実際にどんなプロンプトが入力されるかはユーザーには開示しないことにしました。それによって悪用も防げるといいます。

生命の尊厳や幸福を問いかける『ブラック・ジャック』らしい作品

プロジェクトでは統括ディレクターとして活躍した手塚プロダクション 取締役の手塚眞氏は雑誌を手に取り「このように『チャンピオン』に『ブラック・ジャック』が復活しました。人間とAIが共同作業で完成させることができ、嬉しいしほっとしている」と語りました。『ブラック・ジャック』を選んだ理由は、誰もが知っている漫画であるため多くの人から評価をもらいやすいこと、240話以上のストーリーがあることからデータが豊富であること、キャラクターの位置付けや性格がはっきりしていること、連載50年の記念の年であることなど。手塚眞氏は「たいへん興味深いものができあがった。何より『ブラック・ジャック』らしいなと思ったのは中心テーマが命の尊厳として最初から入っていたことだった」と語りました。

あらすじも紹介され、手塚眞氏はネタバレに気をつけつつも内容について熱く語りました。「非常に現代的なテーマがふくまれている。人間には生まれながらの肉体があるが人工的な臓器で命を助けていくことを繰り返すと、その人は本当に幸せだろうかという問いかけが生まれる。これからの高齢化社会を迎える我々にとっても切実な課題。今後、長寿はどこまで意味があり、どこまでが幸せなのかという問題が出てくる。医学の問題だけではない。AIが社会に入っていくなかで人間の社会が本当にAIにくるまれてしまったときに人間にとって素晴らしいものかどうかという問いかけもふくまれている」と述べ、問題提起がふくまれていること、命や社会に関わっていることの２点があって『ブラック・ジャック』らしい、手塚治虫らしい作品となったと語りました。

シナリオ制作過程

制作過程は以下のとおりです。まず、手塚治虫作品のあらすじを人間がデータ化し、AIに読み込ませる作業をしないといけません。どんなテーマがあり、どんな要素・関係性があるのか、きめ細かい調査作業が必要です。はこだて未来大学 システム情報科学部教授の村井源氏は「ブラック・ジャックを精密に分析し、ブラック・ジャックらしさは何かと発見することをまず第一とした」と語りました。そしてストーリーの流れや要素因子を抽出、数理モデルを作りました。

その過程で、『ブラック・ジャック』は1話完結の短編スタイルでありながら物語の起伏が非常に複雑であり、かつ、さまざまな登場人物の視点から語られる多層的な構造になっていて、読み手側がきちんと読み込まないといけない物語になっていることがわかり、非常にやりがいがあったそうです。

生成AIはパラメーター数の大きなモデルであればあるほど豊かな一般常識を持っていると考えられていますが、今回使われたChatGPT（GPT-4）自体のモデルは既に完成しているもので、そこに新たに追加学習させることはできません。

このプロジェクトでは前述の仲介人工知能にデータをひたすら読み込ませました。『ブラック・ジャック』のストーリー構造やキャラ性格なども仲介AIには入力されており、村井教授らの統計的モデルを中心としたストーリーの型のようなものから、ブラック・ジャック作品っぽいものがアウトプットされるようにしました。そのアウトプットを見て、クリエイターは再び入力を行うことで、さらに内容を洗練させていくことができます。

仲介AIではジャンルやアイデア、登場人物などの指定が可能で、シーンごとの視点変更や登場人物の追加や削除、一部分の修正などが自由に行えます。ある程度クリエイター側の入力を制限することで、逆に安定したツールとすることができたのです。

出力されたシナリオは、ト書やセリフに変換することもできます。「TEZUKA2020」のときには一番最初だけAIを使ったのですが「今回は最初から最後までAIと人間のコラボが可能になった」、少なくともAIが何かしらに貢献できるようになった点が大きな違いです。

このようなシナリオアウトプットを得ると、人間は新たなインスピレーションを得ることができます。そしてそれを再び入力すると、生成AIから新たな出力が得られます。このようにインタラクティブに入出力のサイクルをぐるぐる回すことで、シナリオの完成度を高めていくことができます。実際の作成は、改善点を皆で議論したり、医学監修の意見も入れながら、決めていきました。

5つのチームがAIとやりとりを繰り返してプロットを練った

実際の制作フローについては、手塚プロダクションの石渡正人氏が紹介しました。プロット作成は5つのチームで行われました。テーマもそれぞれ異なり、サスペンス調やヒューマンドラマ的なものなど、色々あったそうです。チームで行うことにした理由は、特定の作家の個性や癖を抑えるため。そして色々な考えを入れながら、異なるジャンルの作品作りを行うことで、AIがどんなものを作ってくれるのかを見るためです。

ディレクターの手塚氏は、チームでトライした理由として「出来レースになってしまうと実験にならない。だから色々なジャンルの人に集まってもらって、多方面からストーリー制作してもらった」と語りました。最終的に選ばれたのは映画監督・林海象氏のプロットでした。「人間とは何か、生命とはどういうことなのか、ブラック・ジャックはそのなかで何ができるのかという問いかけが感じられた」ことが決定の理由だったそうです。

前述のとおり、プロットは何十回もAIとキャッチボールしながら、提案を受け入れたり拒否したりしながら最終完成形を目指しました。通常は70回くらいのやりとりを行ったそうです。そして、どれが一番今回の作品にするのにふさわしいかを議論し、最終的に林海象氏の「機械の心臓」に決定したという流れです。

クリエイターとのやりとり

映画監督・林海象氏は、実際にAIを触りながらプロットを練った経験について語りました。まず最初に、ブラック・ジャックはさまざまな病気を治していますが、治せない病気はあるのかと考えてプロットを作成させたそうです。するとAIが「機械の心臓」というアイデアを提案してきたとのこと。また人工心臓の名前として「HeartBeat Mark II」という言葉を出してきたものもAIです。これには驚いたそうです。こうして最初に林氏が考えたアイデアとAIの発想を混ぜたものとしてプロットが作られていきました。

林氏は「AIはキャッチボールの速度が早い。手塚作品の分析をしているだけではない」と語りました。「違う結末がないかなと言ったらすぐに作ってくる。実際に会話をしていた感じで、感情もわいてくるような気がする。こちらの聞き方次第なんだということがわかった。AIは仲間。非常に楽しかったです」と感想を述べました。

なお林氏自身も手塚治虫の大ファンで、『ブラック・ジャック』は最初から読んでいたそうです。そして今回、雑誌に掲載された漫画を見て「誌面で見ると一番感動する。こんな嬉しいことはない」と語りました。そして、今回やってみて、一番感じたことは「AIの向こうに手塚治虫がいる」ということだったそうです。そのプレッシャーはすごくて、「逆にAIに助けてもらった感覚」があるとのことでした。

秋田書店「週刊少年チャンピオン」編集部からの視点も

今回は漫画掲載が決まっていたため、最初から秋田書店「週刊少年チャンピオン」編集部も参画しました。担当編集者の田中良樹氏は今回のプロットを見たとき「そこに至るまでの感情や心情が足らない。行動原理が不足している」と思ったそうです。AIがまだ苦手としている点なのかもしれません。手塚氏は会見でも「編集の意見はやはりこわい」と苦笑していました。

なお田中氏から見て一番よかった点は「リテイクが何十回もできること」だそうです。「AIには人格も執着もないので、ちょっとうまくいかないときもバッサリ切れる」とのことでした。AI自体については漫画のツールがアナログからデジタルへと広がったように「AIを使って、ちょっと描きやすくなった。『幅が広がった』という捉え方ができるのではないか。漫画家が主役なのは変わらない。アシストとしては今後も活用できそうだと考えた」と語りました。

セリフは人間が書き直し

今回のツールはプロットからト書き、セリフへと変換していくこともできます。今回も最終的に作り上げたシナリオを元にしたト書シナリオを作ったのですが、最終的にはセリフはそのままでは使わなかったそうです。AIが作ったセリフはどうしても説明的なものが多く、それをより漫画として適切なセリフに変更する必要があったとのこと。

これについて手塚眞氏は「映画の撮影現場で脚本のセリフを直すのと似ている」とコメントしました。林氏も「セリフはできるだけ短いほうがいい。でも『説明してくれ』と言われると長くなる」と語りました。

栗原氏は「膨大な知識を入れこむことはできるようになったので、手塚漫画を知ってる人なら『これはおかしい』と指摘することはできる。しかしAIは個々のキャラクターの奥にある背景や心情は作れない。人間でいう感情や感性を創造することは現時点ではできない。AIが得意なところと人間が得意なところは現時点では棲み分けている」と語りました。以上が、シナリオ作成部分の流れです。

Stable Diffusionをベースとした新キャラクター生成

キャラクター画像の作成にも生成AIが使われています。「TEZUKA2020」の頃には生成AIはまだなかったのでGANを使って絵を作り、それを元にキャラクターを作るといった試みが行われました。今回、Stable Diffusionをベースとすることで絵の生成のクオリティは非常に高くなり、表情の豊かさも表現できるようになりました。

画像生成は2段階、2種類の方法で

慶應義塾大学 理工学部特任講師、オムロン サイニックエックス シニアリサーチャーの橋本敦史氏は、実はこれまで漫画の制作に興味を持ったことはなかったそうです。そこでこのプロジェクトに参画するにあたり、複数の人にヒアリングを行ったところ、生成AIを使ってビジュアルをデザインする工程はドラマのキャスティングに近いと考えるようになり、そのメタファーで開発することを決めたと語りました。つまり、最初に「書類選考」を行い、選んだキャラ画像を実際の作品にあてはめてみて「オーディション」をするといった2段階で考えたのです。

画像生成には2種類の方法を使うことができます。テキストの入力からゼロベースで作る方法と、参考画像を取り込んで生成する方法の2種類です。いずれもインタラクティブに条件をつけながら作成していける点は、シナリオ作りのときと同じです。

今回の「機械の心臓」には「マリア」と「川村」という新しいキャラクターが登場します。作成したのはこの二人で、マリアはゼロから作成し、「川村」は写真を取り込んで作成しました。マリアのほうは体の一部を人工臓器化している寝たきりの少女という設定ですので、ロボット生成モデルを組み立てて、幸せ感や笑顔を排除して生成しました。

「川村」のほうは、今回のプロジェクトで林監督のサポートを行った栗原研究室の学生 川村さんの顔写真を取り込んだものです。名前ももちろん、ご本人から許可を得て取ったものです。なおシナリオ作りにおいてキャラクターの名前をつけることはとても重要だそうです。

ユーザーインターフェースに条件を入力すると、10秒足らずの間に膨大な数の画像が生成されます。2020年の『ぱいどん』の頃はランダムに生成された画像の中から、それっぽいものを探していたのですが「今回は欲しい画像ばかりが出てきた。どれを見ても手塚治虫風」だったそうです。

手塚漫画では、主人公にふたつのパターンがあります。患者が主人公なのか、ブラック・ジャック本人が主人公なのかの2パターンです。今回はブラック・ジャックが主人公で、患者はサブキャラですので、脇役としてふさわしい顔つきを手塚眞氏が選びました。「読者に感情移入してほしい、特に目を開けたときのかわいらしさに重点をおいた」そうです。

また、生成画像には額に線があったので、それを額につけたプレートとして発想するなど、さまざまな注文をつけて、何度も何度も描き直してもらったとのことです。

「川村」は前述のとおり慶応義塾大学の川村さんの写真がベースです。スタッフはかっこいい系統の顔を選んでいたのですが、手塚ディレクターはやはり主役ではないこと、そして川村は「大企業のCEOでエリート」という設定なのですが「エリートがエリートっぽいと嫌味なだけ」と考えて、「大企業のトップだけど実は優しいお父さん。だから人間的な顔にしよう」と考えて、愛嬌のある顔となりました。

手塚漫画の脇役は癖があるキャラが多いことから、コミカルな感じで、髪の毛がボサボサという点も生かされて「手塚治虫が脇役に使いそうな顔。少しひょうきんなんだけど人間味のあるキャラクターとして選んだ」とのことでした。

AIコマ生成は参考画像として活用

最後は下書きであるネームの作成、コマ生成です。ここはほぼ人による演出となりました。ただし、ここにもAIのサポートは活かされています。今回の漫画は最終的な絵はすべて人が描いていますが、その参考画像となるコマ生成にAIが使われました。

コマ生成のためには、手塚治虫が描いた『ブラック・ジャック』の単行本からコマを切り出し、セリフを除去。それぞれのコマを言葉で説明してアノテーションをつけました。これを学習データとしてStable Diffusionをファインチューニングすることで、プロンプトからブラック・ジャックとピノコであれば描けるようになりました。

ブラック・ジャックは240話以上ありますが、それでも、キャラの絵のアングルは限られています。生成AIを使うことで、さまざまなアングルでのブラック・ジャック画像を生成することができ、構図や表現の位置関係の参考画像を作ることができるのです。

たとえば、「正面を向いて考えているブラック・ジャック」であるとか、「後ろ姿」といった指定をすれば、そのような画像が出力されるので、それを参考にできるのです。

電気通信大学 人工知能先端研究センター 准教授の稲葉通将氏は「手塚漫画には大胆なコマ割りも多いので、コマを綺麗に切り出すことが難しかった」と振り返りました。大変でしたが「想定したよりも手塚先生らしいものができているのではないか。いまは人数制限もあるし、ピノコとブラック・ジャックしか出せないが、まずはここまできた。もっとはるかに色々なものができるのは間違いない」とのことでした。

AIの性能を引き出すのは人間

最後に、クリエイターとしての感想が紹介されました。手塚眞氏は「AIをさわってもらうところから始めたので、最初はとまどっていたが、1時間くらいさわっているだけで要領がわかってくる。AIとのやりとりもテンポが心地よくなってくる」と紹介しました。ただし、人間の脚本家と仕事するときは最低1日、あるいは3、4日間があって、その間にどちらもじっくり考えて返しますが、AIは即座に返事してくるので「AIのテンポに人間が巻き込まれているようなところはあった」とのことです。

また、やりとりを繰り返すあいだに「親近感がわいてくる」とのことでした。「向こうに脚本家がいて、実際に書いているような、自然と人格を感じてしまう」そうです。そして「AIのほうが感情的なことを言ってくることもある。仕事の良いパートナーになるのではないか」と語りました。

今回の仲介AIのインターフェースを間に入れたことについては、評価しつつも「条件付けができすぎてしまう。AIが自由に出してくるものに、こちらも自由に考えることができるといいのではないか」と述べました。

今回はブラック・ジャックを学習データとしたことにより、いかにもブラック・ジャックっぽいシナリオが出力されてくるAIでしたが、手塚治虫をふくむ実際の漫画家は、過去のさまざまな学習成果の積み重ねから作品を生み出しています。つまり「ブラック・ジャックだけを学習すれば描けるわけではない。もっと広いデータを持たないといけない。これをどのようにデータ化させていくのか。それとインターフェースの問題がある」と問いかけました。

「ここに素晴らしいレーシングカーがある。誰が運転できるのか。完璧なプログラムがあったとしても、きちんと性能を熟知して操作できるのか。AIと接していくなかで、私たちがもっと馴染んでいって、要求を出していく、つまりAIの性能を僕らがもっと引き出してあげることが必要なのではないか」と述べました。

AIは感情表現が苦手という話もありましたが、それについては「苦手というよりはデータの持ち方」ではないかと考えているそうです。「感情、感覚、ニュアンス、間合い、一つのことが起きて、次が起こるまでの感情的な間、この間合いは、まだ見えてこない。感情的な問題や感覚は、人によって違う。人間の感覚をどのように学習していけばいいのか、偏らないようにするにはどうすればいいのか」といったことは今後の課題だと述べました。

AIはツール、ツールは使い方次第

慶應義塾大学の栗原氏はNEDOプロジェクトとしてはまだ来年度が最終年度であり、今後も続くと述べました。そして「AIは優秀な道具。道具は使い方次第。AIの光と影とよく言われるが、光の部分はまだまだ掘り下げられていない。どれだけ光ることができるかは、まだこれから。光のところで少しでも貢献できれば」と語りました。

具体的にわかったこととしては、「人は何かあれば考える」ものなので「燃料を投下するのがAIの役割。燃やすのはクリエイター。クリエイティビティが増えて量産できるようになり、良いものをいっぱい作れることが重要。クリエイターもまだまだ先へいく。人工知能によって効率良く良いものを10倍、20倍と生み出すことができれば」と述べ、今後は「さまざまな人たちとコラボすることで、具体的にもっと良さを見てもらってコンテンツ生成をどんどん活性化させていきたい。良い形でコラボしていきたい」と語りました。

NEDO ロボット・AI 部長の古川善規氏もコメントし、「AIは基本的にはツール。クリエイターに使ってもらったことは有り難い。雑誌に掲載されたからこそこそわかる迫力もある」と語りました。

毎週描いていた手塚治虫は天才

最後に手塚眞氏は「やっと完成させたが、手塚治虫は毎週描いていた。やっぱり天才だな」と語りました。なお手塚治虫であれば「AIは使ったと思う」とのこと。プロジェクトが生み出した漫画が成功したかどうか、その結果の判断は「読者にお任せしたい」とのことでした。

Writer：森山和道