モリカトロン株式会社運営「エンターテインメント×AI」の最新情報をお届けするサイトです。

TAG LIST
CG機械学習CGへの扉ディープラーニング安藤幸央GAN月刊エンタメAIニュース河合律子OpenAI音楽NVIDIAニューラルネットワーク強化学習三宅陽一郎吉本幸記Facebook人工知能学会大内孝子QA敵対的生成ネットワーク自然言語処理キャラクターAIスクウェア・エニックス森川幸人モリカトロンAIラボインタビュールールベースGoogleDeepMindGPT-3シナリオAIと倫理グーグル映画NFTStyleGAN自動生成倫理デバッグゲームプレイAIメタAI深層学習マイクロソフトCEDEC2019アートDALL-E2プロシージャルSIGGRAPH遺伝的アルゴリズムDALL-Eロボットビヘイビア・ツリーCEDEC2021CEDEC2020ゲームAIデジタルツインメタバース不完全情報ゲームVRナビゲーションAINPC畳み込みニューラルネットワークCLIPテキスト画像生成ディープフェイクGDC 2021JSAI2022VFXGDC 2019マルチエージェントCEDEC2022ボードゲーム画像生成ファッション懐ゲーから辿るゲームAI技術史toioCNNAdobeテストプレイモリカトロンUnityAIアート小説鴫原盛之HTN階層型タスクネットワークJSAI2020TensorFlowBERTMicrosoftイベントレポート対話型エージェントStable Diffusion著作権水野勇太アニメーションGenvid TechnologiesガイスターStyleGAN2GTC2022教育ソニーJSAI2021スポーツ研究シムピープルマンガ汎用人工知能マーケティングGDC SummerインタビューバーチャルヒューマンブロックチェーンMidjourneyアストロノーカキャリアNVIDIA OmniverseeスポーツAmazonロボティクスeSportsDQNBLUE PROTOCOLシーマンMinecraftアバターOmniverseUbisoftメタ画像生成AIAlphaZeroTransformerGPT-2AIりんなカメラ環世界中島秀之哲学理化学研究所DARPAドローンシムシティImagenバイアスMCS-AI動的連携モデルモーションキャプチャーTEZUKA2020AI美空ひばり手塚治虫バンダイナムコ研究所スパーシャルAIElectronic ArtsメタデータLEFT 4 DEAD通しプレイOpenAI Five本間翔太CMピクサープラチナエッグイーサリアム作曲ボエダ・ゴティエビッグデータ中嶋謙互Amadeus Codeデータ分析Microsoft AzureMILEナラティブアーケードゲームOmniverse ReplicatorWCCFレコメンドシステムNVIDIA DRIVE SimWORLD CLUB Champion FootballNVIDIA Isaac Simセガ柏田知大軍事サイバーエージェント田邊雅彦トレーディングカードトレカ音声認識PyTorch眞鍋和子バンダイナムコスタジオaibo合成音声Meta齊藤陽介マインクラフトお知らせMagic Leap Oneチャットボットサルでもわかる人工知能VAE3DCGリップシンキングUbisoft La Forge自動運転車ワークショップ知識表現ウォッチドッグス レギオンIGDA秋期GTC2022どうぶつしょうぎEpic Gamesジェイ・コウガミ音楽ストリーミングMITAIロボ「迷キュー」に挑戦野々下裕子徳井直生マシンラーニング5GRival Peakクラウド対話エンジン斎藤由多加リトル・コンピュータ・ピープルコンピューティショナル・フォトグラフィーゴブレット・ゴブラーズ絵画rinnaシミュレーションデジタルヒューマン完全情報ゲーム坂本洋典釜屋憲彦ウェイポイントパス検索対談藤澤仁生物学GTC 2022画像認識SiemensStyleCLIPDeNA長谷洋平masumi toyota宮路洋一OpenSeaGDC 2022TextWorldSIGGRAPH ASIAEarth-2MagentaSFELYZA PencilGTC2021CycleGANデータマイニングNetHackはこだて未来大学キャラクターモーションフェイクニュースエージェントRPGSIGGRAPH 2022AIボイスアクターNVIDIA CanvasGPUALifeZork人工生命オルタナティヴ・マシンサウンドスケープASBS栗原聡ぱいどんテキスト生成不気味の谷ナビゲーションメッシュ松井俊浩ELYZAフルコトELYZA DIGEST3D音声合成西成活裕Apex LegendsELIZA群衆マネジメントNinjaコンピュータRPGライブビジネスアップルタウン物語新型コロナKELDIC周済涛メロディ言語清田陽司ゲームTENTUPLAYサイバネティックスMARVEL Future FightAstro人工知能史タイムラプスEgo4DAI哲学マップバスキア星新一日経イノベーション・ラボStyleGAN-XL敵対的強化学習StyleGAN3階層型強化学習GOSU Data LabGANimatorWANNGOSU Voice AssistantVoLux-GAN竹内将SenpAI.GGProjected GANMobalyticsSelf-Distilled StyleGAN馬淵浩希Cygamesニューラルレンダリング岡島学AWS SagemakerPLATO映像セリア・ホデント形態素解析frame.ioUXAWS LambdaFoodly誤字検出森山和道認知科学中川友紀子ゲームデザインSentencePieceアールティLUMINOUS ENGINELuminous ProductionsBlenderBot 3パターン・ランゲージ竹村也哉Meta AIちょまどマーク・ザッカーバーグGOAPWACULAdobe MAX 2021自動翻訳模倣学習AIライティングOmniverse AvatarAIのべりすとFPSNVIDIA RivaQuillBotマルコフ決定過程NVIDIA MegatronCopysmithNVIDIA MerlinJasperスタンフォード大学NVIDIA Metropolisパラメータ設計テニスバランス調整協調フィルタリング人狼知能テキサス大学AlphaDogfight TrialsAI Messenger VoicebotエージェントシミュレーションOpenAI CodexStarCraft IIHyperStyleMax CooperFuture of Life InstituteRendering with StyleメディアアートIntelDisney類家利直LAIKADisneyリサーチヴィトゲンシュタインRotomationGauGAN論理哲学論考GauGAN2京都芸術大学ドラゴンクエストライバルズ画像言語表現モデル不確定ゲームSIGGRAPH ASIA 2021PromptBaseDota 2モンテカルロ木探索ディズニーリサーチMitsuba2バンダイナムコネクサスソーシャルゲームEmbeddingワイツマン科学研究所ユーザーレビューGTC2020CG衣装mimicNVIDIA MAXINEVRファッションBaidu淡路滋ビデオ会議ArtflowERNIE-ViLGグリムノーツEponym古文書ゴティエ・ボエダ音声クローニング凸版印刷Gautier Boeda階層的クラスタリングGopherAI-OCR画像判定JuliusSIE鑑定ラベル付けTPRGOxia Palus大澤博隆バーチャル・ヒューマン・エージェントtoio SDK for UnityArt RecognitionSFプロトタイピングクーガー田中章愛実況パワフルサッカー石井敦銭起揚NHC 2021桃太郎電鉄茂谷保伯池田利夫桃鉄GDMC新刊案内パワサカマーベル・シネマティック・ユニバースコナミデジタルエンタテインメント成沢理恵MITメディアラボMCU岩倉宏介アベンジャーズPPOマジック・リープDigital DomainMachine Learning Project CanvasMagendaMasquerade2.0国立情報学研究所ノンファンジブルトークンDDSPフェイシャルキャプチャー石川冬樹サッカーモリカトロン開発者インタビュースパコン里井大輝Kaggle宮本茂則スーパーコンピュータバスケットボール山田暉松岡 聡Assassin’s Creed OriginsAI会話ジェネレーターTSUBAME 1.0Sea of ThievesTSUBAME 2.0GEMS COMPANYmonoAI technologyLSTMABCIモリカトロンAIソリューション富岳初音ミクOculusコード生成AISociety 5.0転移学習テストAlphaCode夏の電脳甲子園Baldur's Gate 3Codeforces座談会Candy Crush Saga自己増強型AItext-to-imageSIGGRAPH ASIA 2020COLMAPtext-to-3DADOPNVIDIA GET3DデバッギングBigGANGANverse3DDreamFusionMaterialGANRNNグランツーリスモSPORTAI絵師ReBeLグランツーリスモ・ソフィーUGCGTソフィーPGCVolvoFIAグランツーリスモチャンピオンシップStability AINovelAIRival PrakDGX A100NovelAI DiffusionVTuberユービーアイソフトWebcam VTuberモーションデータ星新一賞北尾まどかHALO市場分析ポーズ推定将棋メタルギアソリッドVフォートナイトメッシュ生成FSMメルセデス・ベンツRobloxMagic Leapナップサック問題Live NationEpyllion汎用言語モデルWeb3.0マシュー・ボールAIOpsムーアの法則SpotifyスマートコントラクトReplica StudioAWSamuseChitrakarQosmoAdobe MAX 2022巡回セールスマン問題Adobe MAXジョルダン曲線メディアAdobe ResearchMuZero政治Galacticaクラウドゲーミングがんばれ森川君2号pixiv和田洋一リアリティ番組映像解析Stadiaジョンソン裕子セキュリティMILEsNightCafe東芝デジタルソリューションズインタラクティブ・ストリーミングLuis RuizSATLYS 映像解析AIインタラクティブ・メディアポケモン3DスキャンCodexPFN 3D Scanシーマン人工知能研究所東京工業大学Ludo博報堂Preferred NetworksラップPFN 4D ScanSIGGRAPH 2019ArtEmisZ世代DreamUpAIラッパーシステムDeviantArtARWaifu DiffusionGROVERプラスリンクス ~キミと繋がる想い~元素法典FAIRSTCNovel AIチート検出Style Transfer ConversationOpen AIオンラインカジノRCPMicrosoft DesignerアップルRealFlowRinna Character PlatformイラストiPhoneCALADeep FluidsSoul MachinesMeInGameAmeliaAIGraphブレイン・コンピュータ・インタフェースバーチャルキャラクターBCIGateboxLearning from VideoANIMAK予期知能逢妻ヒカリセコムユクスキュルバーチャル警備システムカント損保ジャパン上原利之ドラゴンクエストエージェントアーキテクチャアッパーグラウンドPAIROCTOPATH TRAVELER西木康智OCTOPATH TRAVELER 大陸の覇者アルスエレクトロニカ2019品質保証StyleRigAutodesk逆転オセロニアBentley Systemsワールドシミュレーター奥村エルネスト純いただきストリートH100齋藤精一大森田不可止COBOL高橋智隆DGX H100ロボユニザナックDGX SuperPOD泉幸典仁井谷正充クラウドコンピューティングロボコレ2019Instant NeRFartonomousbitGANsぎゅわんぶらあ自己中心派Azure Machine Learning意思決定モデル脱出ゲームHybrid Reward Architectureコミュニティ管理ウロチョロスSuper PhoenixSNSProject Malmoオンラインゲーム気候変動Project PaidiaProject Lookoutマックス・プランク気象研究所Watch Forビョルン・スティーブンスBing気象モデルLEFT ALIVE気象シミュレーション長谷川誠ジミ・ヘンドリックス環境問題Baby Xカート・コバーンエコロジーロバート・ダウニー・Jr.エイミー・ワインハウスSDGsYouTubeダフト・パンクメモリスタGlenn MarshallThe Age of A.I.Story2Hallucination音声変換レコメンデーションJukebox松尾豊Veap JapanEAPテンセントSIFT福井千春DCGAN医療MOBADANNCEメンタルケア人事ハーバード大学Edgar Handy研修デューク大学Netflixmynet.aiローグライクゲーム東京大学東京理科大学人工音声NeurIPS 2021産業技術総合研究所リザバーコンピューティングプレイ動画ヒップホップソニーマーケティングサイレント映画もじぱNBA環境音暗号通貨現代アートFUZZLEAlteration粒子群最適化法進化差分法オープンワールド群知能下川大樹AIFAウィル・ライト高津芳希P2E大石真史BEiTStyleGAN-NADAレベルデザインDETRゲームエンジンSporeUnreal Engineデノイズ南カリフォルニア大学Unity for Industry画像処理SentropyGLIDECPUDiscordAvatarCLIPSynthetic DataCALMプログラミングサム・アルトマンソースコード生成LaMDAGMAIシチズンデベロッパーSonanticTRPGGitHubCohereウィザードリィMCN-AI連携モデルマジック:ザ・ギャザリングAI DungeonUrzas.ai介護西川善司並木幸介Kikiサムライスピリッツ森寅嘉Zoetic AIゼビウスSIGGRAPH 2021ペットストリートファイター半導体Digital Dream LabsTopaz Video Enhance AICozmoDLSSタカラトミー山野辺一記NetEaseLOVOT大里飛鳥DynamixyzMOFLINRomiU-Netミクシィ13フェイズ構造アドベンチャーゲームユニロボットADVユニボXLandGatoAGI手塚眞DEATH STRANDINGマルチモーダルEric Johnson汎用強化学習AIデザインOculus Questコジマプロダクションロンドン芸術大学生体情報デシマエンジンGoogle BrainインディーゲームSound Control写真高橋ミレイSYNTH SUPER照明Maxim PeterKarl SimsJoshua RomoffArtnomeハイパースケープICONATE山崎陽斗深層強化学習立木創太松原仁浜中雅俊ミライ小町武田英明テスラ福井健策GameGANパックマンTesla BotNEDOTesla AI DayWikipediaソサエティ5.0SphereSIGGRAPH 2020バズグラフXaver 1000ニュースタンテキ養蜂東芝BeewiseDIB-R倉田宜典フィンテック投資韻律射影MILIZE広告韻律転移三菱UFJ信託銀行

パックマンだけではない。GANを使ったゲーム開発事例を紹介

2020.6.26ゲーム

パックマンだけではない。GANを使ったゲーム開発事例を紹介

実在しない人物の顔やオブジェクトに関するフォトリアルな画像を生成する技術であるGAN(Generative Adversarial Network:敵対的生成ネットワーク)は、その革新性が文字通り一目瞭然なために瞬く間に注目されるようになりました。最近ではGANの派生技術が次々と発明され、そうした技術はゲーム開発にも活用されています。この記事では、GANを使ったゲーム開発事例を紹介します。

ゲーププレイを見てゲームをコピー

大手GPUメーカーのNVIDIAは5月22日、アクションゲーム『パックマン』(1980年、ナムコ)の生誕40周年を記念して、GANを使って同ゲームを完全再現したことを発表しました。完全再現には、GameGANと命名された技術が使われました。

パックマンを再現するにあたっては、まずGameGANが模倣する学習データとして5万エピソード分のプレイ動画を用意しました。同技術はプレイ動画からステージの構造やパックマンなどの挙動を学習して、ゲームの仕様を特定していきます。この特定するプロセスを繰り返すと、最終的にゲームを完全再現できるようなるわけです。再現課程において注目すべきなのは、事前にソースコードとゲームの仕様が同技術に与えられていないというところです。

GameGANは、学習を通して動かない背景と動くキャラクターを区別できるようになります。それゆえ、ゲームの完全再現に成功すると、背景を他のものに差し替えて新たなゲームステージを生成することもできます。この技術を使えば、コーディングすることなく新規ゲームステージを生成することが可能となるのです。

GameGANの応用範囲は、ゲームだけに留まりません。将来的には、ロボットや自律自動車の制御に活用できると考えられています。例えば、自律走行車に搭載されたカメラから撮影した動画を学習データとして、この自律走行車を制御するAIモデルを開発することができます。

もっとも、GameGANにはルールを間違って学習する可能性があるので注意が必要です。ゲームメディアPolygonのパックマン再現を報じた記事によると、再現されたパックマンはプレイがうまくなりすぎて死なないために「パックマンは死ぬことがある」というルールを学習しなかったとのこと。同技術を現実世界の機械制御に応用する場合には、学ぶべきルールを学習したかどうかを検証する必要があるでしょう。

GANを使ってオープンワールドを構築

現代の大作RPGでは、オープンワールドと呼ばれるプレイヤーが自由に行動できる広大なマップが用意されていることが魅力のひとつとなっています。このオープンワールドの開発には、大規模なゲームスタジオであっても4〜5年を要するとも言われています。フリーランスのデータサイエンティストでありながらAI技術をゲーム開発に応用するアイデアについてMediumに投稿し続けているChintan Trivedi氏は、オープンワールド構築にGANを活用する試みに関する記事を投稿しました。

Trivedi氏が活用したのは、2018年にMITとNVIDIAの共同研究チームが発表したvid2vidというGANの派生技術です。この技術は、任意の動画を学習すると、その動画とそっくりな動画を生成できるというものです。同技術を使えば、用意した動画からオープンワールドの景観が生成できます。白紙の状態からオブジェクトを作り込んでオープンワールドを構築する方法と比較すると、同技術による景観の生成には多大な開発コスト削減が期待できそうです。

しかし、vid2vidの活用には大きな制約があります。オープンワールドでは時間の経過や天候の変化により、景観が暗くなったり晴れから雨に変わったりします。こうした景観の属性的な変化をvid2vidで再現しようとすると、属性ごとに学習する動画を用意しなければならないのです。こうしたvid2vidの制約を改善して開発された技術が、2019年にカリフォルニア大学バークレー校の研究者らによって発表されました。条件付き暗黙的最尤推定法(Conditional IMLE)と呼ばれる技術を使えば、単一の動画から属性の異なるそっくりな動画を生成できるのです。

Trivedi氏は、アクションゲーム『グランド・セフト・オートV』(2013年、ロックスター・ゲームス)から抽出した景観を学習データとして用意して条件付き暗黙的最尤推定法を使ってみたところ、予想通り同ゲームにそっくりな景観を昼夜の変化にいたるまで再現できました。こうして同技術を活用すれば、実写映像や過去のゲームの動画を流用して新たなオープンワールドが構築できることが実証されました。実証結果を受けて、10年以内にはAI技術を使ったオープンワールド開発が実用化されるだろう、と同氏は予想しています。

シェーディングもGANで実行

GANの活用事例はオープンワールド構築だけではありません。ゲームグラフィックデザイナーのYgor Rebouças Serpa氏は、ゲームキャラクター制作にGANを活用した自身の経験についてまとめた記事をMediumに投稿しました。同氏は2020年12月にリリース予定の2D格闘ゲーム『Trajes Fatais: Suits of Fate』(Onanim Studio)のキャラクター制作に関わっています。同ゲームは、レトロなピクセルアートで造形されたキャラクターが登場することが特徴となっています。このキャラクターの造形にGANを活用したのです。

ピクセルアートによる2Dキャラクターを制作するには、一般にデザイナーがラフなスケッチを描いた後に線で構成されたラインアートを作り、そのラインアートに立体的な陰影処理をほどこす「シェーディング」と細部に彩色する「リージョン」処理を行います。Serpa氏が関わった業務では、シェーディングとリージョン処理にGANを活用しました。使ったGANは、簡単な線画からリアルな彩色をほどこすことができるpix2pixです(pix2pixによる画像生成を確認できるデモページはこちら)。

シェーディングとリージョン処理のそれぞれにpix2pixを活用したところ、シェーディングに関しては人間のアーティストが彩色した場合と遜色のない出力結果が得られました。リージョン処理に関しては、複雑なデザインのキャラクターでは線からはみ出した色が目立ってしまい、実用には耐えられない結果となりました。

以上のような結果を受けてシェーディングにpix2pixを導入してキャラクター制作に導入したところ、人手でおこなった場合にはひとつのラインアートにつき平均して20~30分の作業時間を要するのに対して、同技術活用時には10~30分でした。従来ではラフスケッチからリージョン処理までに合計1時間かかっていたので10分の時間短縮、つまりは15%程度の作業効率化が実現したのでした。

pix2pixは2017年に発表された技術です。現在GANの派生技術に関する研究はさかんに行われているので、リージョン処理を人間と同等に実行できる技術は遠くない将来に現れるのではないか、とSerpa氏は予想しています。

以上のようにGANの派生技術を活用すると、ゲーム開発の効率化が期待できます。近い将来、ゲームエンジンやグラフィック制作ソフトにGAN関連技術が標準実装されるかも知れません。そうした技術は大作ゲームを制作する大規模スタジオと趣味でゲームを作るユーザの両方に恩恵をもたらすことでしょう。

Writer:吉本幸記

RELATED ARTICLE関連記事

にわかレベルだったゲームプレイAIは、いかにして熟練プレイヤーになったか?

2020.4.30ゲーム

にわかレベルだったゲームプレイAIは、いかにして熟練プレイヤーになったか?

未来は僕らの手の中に:若手ゲームAIエンジニア座談会(後編)

2020.2.07ゲーム

未来は僕らの手の中に:若手ゲームAIエンジニア座談会(後編)

【GDC 2019】ソーシャルゲームのバランス調整に遺伝的アルゴリズムを応用する

2019.4.17ゲーム

【GDC 2019】ソーシャルゲームのバランス調整に遺伝的アルゴリズムを応用する

RANKING注目の記事はこちら