モリカトロン株式会社運営「エンターテインメント×AI」の最新情報をお届けするサイトです。
- TAG LIST
- CGCGへの扉安藤幸央機械学習ディープラーニング月刊エンタメAIニュース河合律子GANOpenAI音楽NVIDIA吉本幸記ニューラルネットワーク強化学習Google生成系AI三宅陽一郎QA人工知能学会GPT-3Stable Diffusion自然言語処理グーグルDeepMindFacebook森川幸人シナリオ大内孝子マイクロソフトChatGPT敵対的生成ネットワークルールベースアート映画キャラクターAIスクウェア・エニックスモリカトロンAIラボインタビューAIと倫理SIGGRAPHゲームプレイAI大規模言語モデル倫理デバッグNFTDALL-E2StyleGANプロシージャル遺伝的アルゴリズムモリカトロン著作権画像生成自動生成テストプレイメタAI画像生成AINPCテキスト画像生成ロボット深層学習ファッションCEDEC2019ディープフェイクVFXMidjourneyデジタルツインボードゲームDALL-ECLIPビヘイビア・ツリーCEDEC2021LLMCEDEC2020ゲームAIメタバース不完全情報ゲームVRナビゲーションAI畳み込みニューラルネットワークGDC 2021マンガJSAI2022AdobeNVIDIA OmniverseGDC 2019マルチエージェントCEDEC2022AIアート小説Stability AI懐ゲーから辿るゲームAI技術史toioジェネレーティブAIスポーツCNNBERT作曲MicrosoftUnityMinecraftアニメーションOmniverseメタJSAI2023鴫原盛之HTN階層型タスクネットワークソニー栗原聡手塚治虫汎用人工知能JSAI2020GTC2023TensorFlowインタビューバーチャルヒューマンイベントレポート対話型エージェントAmazonロボティクスDQNMeta水野勇太アバター3DCGUbisoftGenvid TechnologiesガイスターStyleGAN2デジタルヒューマンGTC2022教育音楽生成AIJSAI2021研究シムピープルMCS-AI動的連携モデルモーションキャプチャーElectronic ArtsNeRFマーケティングメタデータGDC SummerブロックチェーンCMMicrosoft Azureアストロノーカキャリア模倣学習eスポーツスタンフォード大学アーケードゲームテニスサイバーエージェントトレーディングカード音声認識メディアアートeSportsBLUE PROTOCOLシーマンaibo合成音声チャットボットAWS徳井直生斎藤由多加AlphaZeroTransformerGPT-2rinnaAIりんなカメラ環世界中島秀之PaLM哲学ベリサーブPlayable!理化学研究所SIGGRAPH ASIASFNetflix東京大学はこだて未来大学現代アートエージェントDARPAドローンシムシティImagenZorkバイアスプロンプトGPT-4ASBSアドベンチャーゲームTEZUKA2020CEDEC2023AI美空ひばりテキスト生成マルチモーダルバンダイナムコ研究所スパーシャルAI3DLEFT 4 DEADイーロン・マスク通しプレイOpenAI FiveStable Diffusion XL本間翔太CygamesAudio2Faceピクサープラチナエッグイーサリアムボエダ・ゴティエビッグデータ中嶋謙互Amadeus Codeデータ分析MILEナラティブNVIDIA RivaOmniverse ReplicatorWCCFレコメンドシステムNVIDIA DRIVE SimWORLD CLUB Champion FootballNVIDIA Isaac Simセガ柏田知大軍事田邊雅彦トレカMax CooperGPT類家利直PyTorchChatGPT4眞鍋和子バンダイナムコスタジオ大澤博隆SFプロトタイピング齊藤陽介マインクラフトお知らせMagic Leap OneTencentバスケットボールサルでもわかる人工知能text-to-3DVAEDreamFusionブラック・ジャックリップシンキングUbisoft La Forge自動運転車ワークショップ知識表現ウォッチドッグス レギオンIGDA秋期GTC2022市場分析どうぶつしょうぎEpic GamesRobloxジェイ・コウガミ音楽ストリーミングMITAIロボ「迷キュー」に挑戦野々下裕子マシンラーニング5GMuZeroRival Peakpixivクラウド対話エンジン3Dスキャンリトル・コンピュータ・ピープルCodexシーマン人工知能研究所コンピューティショナル・フォトグラフィーPreferred Networksゴブレット・ゴブラーズ絵画ARMicrosoft DesignerイラストシミュレーションSoul Machines柿沼太一完全情報ゲームELSI坂本洋典釜屋憲彦ウェイポイントパス検索対談藤澤仁生物学GTC 2022画像認識GPT-3.5ハリウッドSiemensストライキStyleCLIPDeNA長谷洋平クラウドコンピューティングmasumi toyotaIBM宮路洋一OpenSeaGDC 2022SNSGen-1TextWorldEarth-2BingMagenta音声生成AIELYZA PencilScenarioSIGGRAPH2023テキスト画像生成AI松尾豊AIピカソGTC2021AI素材.comCycleGANテンセントAIQVE ONEデータマイニングNetHackBardキャラクターモーションControlNetNBAフェイクニュースRPG法律SIGGRAPH 2022世界モデルレベルデザインAIボイスアクターNVIDIA CanvasGPUALife人工生命オルタナティヴ・マシンサウンドスケープLaMDATRPGマジック：ザ・ギャザリングAI Dungeonぱいどん手塚眞不気味の谷ナビゲーションメッシュインディーゲーム高橋ミレイ深層強化学習松原仁松井俊浩武田英明ELYZAフルコトNEDOELYZA DIGEST建築音声合成広告西成活裕Apex LegendsELIZA群衆マネジメントライブポートレイトNinjaコンピュータRPGライブビジネスWonder Studioアップルタウン物語新型コロナ土木KELDIC周済涛BIMメロディ言語清田陽司インフラゲームTENTUPLAYサイバネティックスMARVEL Future FightAstro人工知能史Amazon BedrockタイムラプスEgo4DAI哲学マップバスキア星新一X.AI日経イノベーション・ラボStyleGAN-XLX Corp.敵対的強化学習StyleGAN3Twitter階層型強化学習GOSU Data LabGANimatorXホールディングスWANNGOSU Voice AssistantVoLux-GANMagi竹内将SenpAI.GGProjected GANMobalyticsSelf-Distilled StyleGANSDXL馬淵浩希ニューラルレンダリングRTFKT岡島学AWS SagemakerPLATONIKE映像セリア・ホデント形態素解析frame.ioClone XUXAWS LambdaFoodly村上隆誤字検出森山和道認知科学中川友紀子Digital MarkゲームデザインSentencePieceアールティSnapchatLUMINOUS ENGINEクリエイターコミュニティLuminous ProductionsBlenderBot 3バーチャルペットパターン・ランゲージ竹村也哉Meta AINVIDIA NeMo Serviceちょまどマーク・ザッカーバーグヴァネッサ・ローザGOAPWACULVanessa A RosaAdobe MAX 2021陶芸自動翻訳Play.ht音声AIAIライティングLiDAROmniverse AvatarAIのべりすとPolycamFPSQuillBotdeforumマルコフ決定過程NVIDIA MegatronCopysmith動画生成AINVIDIA MerlinJasperハーベストNVIDIA MetropolisForGamesパラメータ設計ゲームマーケットバランス調整岡野翔太協調フィルタリング郡山喜彦人狼知能テキサス大学ジェフリー・ヒントンGoogle I/O 2023AlphaDogfight TrialsAI Messenger VoicebotGoogle I/OエージェントシミュレーションOpenAI Codex武蔵野美術大学StarCraft IIHyperStyleBingAIFuture of Life InstituteRendering with StyleIntelDisneyFireflyLAIKADisneyリサーチヴィトゲンシュタインPhotoshopRotomationGauGAN論理哲学論考LightroomGauGAN2京都芸術大学Canvaドラゴンクエストライバルズ画像言語表現モデル不確定ゲームSIGGRAPH ASIA 2021PromptBaseBOOTHDota 2モンテカルロ木探索ディズニーリサーチpixivFANBOXMitsuba2バンダイナムコネクサス虎の穴ソーシャルゲームEmbeddingワイツマン科学研究所ユーザーレビューFantiaGTC2020CG衣装mimicとらのあなNVIDIA MAXINEVRファッションBaidu集英社淡路滋ビデオ会議ArtflowERNIE-ViLG少年ジャンプ＋グリムノーツEponym古文書ComicCopilotゴティエ・ボエダ音声クローニング凸版印刷コミコパGautier Boeda階層的クラスタリングGopherAI-OCRゲームマスター画像判定Inowrld AIJuliusSIE鑑定ラベル付けMODTPRGOxia PalusGhostwriterバーチャル・ヒューマン・エージェントtoio SDK for UnityArt RecognitionSkyrimクーガー田中章愛実況パワフルサッカースカイリム石井敦銭起揚NHC 2021桃太郎電鉄RPGツクールMZ茂谷保伯池田利夫桃鉄ChatGPT_APIMZGDMC新刊案内パワサカダンジョンズ&ドラゴンズマーベル・シネマティック・ユニバースコナミデジタルエンタテインメントOracle RPG成沢理恵MITメディアラボMCU岩倉宏介深津貴之アベンジャーズPPOxVASynthマジック・リープDigital DomainMachine Learning Project CanvasLaser-NVMagendaMasquerade2.0国立情報学研究所ノンファンジブルトークンDDSPフェイシャルキャプチャー石川冬樹MERFサッカーモリカトロン開発者インタビュースパコンAlibaba里井大輝Kaggle宮本茂則スーパーコンピュータVQRF山田暉松岡 聡nvdiffrecAssassin’s Creed OriginsAI会話ジェネレーターTSUBAME 1.0NeRFMeshingSea of ThievesTSUBAME 2.0LERFGEMS COMPANYmonoAI technologyLSTMABCIマスタリングモリカトロンAIソリューション富岳TikTok初音ミクOculusコード生成AISociety 5.0リアム・ギャラガー転移学習テストAlphaCode夏の電脳甲子園グライムスBaldur's Gate 3Codeforces座談会BoomyCandy Crush Saga自己増強型AItext-to-imageジョン・レジェンドSIGGRAPH ASIA 2020COLMAPザ・ウィークエンドADOPNVIDIA GET3DドレイクデバッギングBigGANGANverse3DTEZUKA2023MaterialGANRNNグランツーリスモSPORTAI絵師エッジワークスReBeLグランツーリスモ・ソフィーUGC日本音楽作家団体協議会GTソフィーPGCFCAVolvoFIAグランツーリスモチャンピオンシップVoiceboxNovelAIさくらインターネットRival PrakDGX A100NovelAI DiffusionVTuberぷよぷよユービーアイソフトWebcam VTuberモーションデータ立教大学星新一賞大阪公立大学北尾まどかHALOポーズ推定TCG将棋メタルギアソリッドVフォートナイトメッシュ生成KLabFSMメルセデス・ベンツQRコードMagic Leap囲碁ナップサック問題Live NationEpyllionデンソー汎用言語モデルWeb3.0マシュー・ボールデンソーウェーブAIOpsムーアの法則原昌宏Spotifyスマートコントラクト日本機械学会Replica Studioロボティクス・メカトロニクス講演会amuseChitrakarQosmoAdobe MAX 2022トヨタ自動車巡回セールスマン問題Adobe MAXかんばん方式ジョルダン曲線メディアAdobe Research村井源政治Galacticaプロット生成クラウドゲーミングがんばれ森川君2号オムロン サイニックエックス和田洋一リアリティ番組映像解析FastGANStadiaジョンソン裕子セキュリティ4コママンガMILEsNightCafe東芝デジタルソリューションズ電気通信大学インタラクティブ・ストリーミングLuis RuizSATLYS 映像解析AI稲葉通将インタラクティブ・メディアポケモン橋本敦史PFN 3D ScanElevenLabs東京工業大学HeyGenLudo博報堂After EffectsラップPFN 4D Scan絵本SIGGRAPH 2019ArtEmisZ世代DreamUp出版AIラッパーシステムDeviantArtAmmaar ReshiWaifu DiffusionStoriesGROVERプラスリンクス ～キミと繋がる想い～元素法典StoryBirdFAIRSTCNovel AIVersedチート検出Style Transfer ConversationOpen AIProlificDreamerオンラインカジノRCPUnity SentisアップルRealFlowRinna Character PlatformUnity MuseiPhoneCALACaleb WardDeep Fluids宮田龍MeInGameAmelia清河幸子AIGraphブレイン・コンピュータ・インタフェースバーチャルキャラクター西中美和BCIGateboxアフォーダンス安野貴博Learning from VideoANIMAKPaLM-SayCan斧田小夜予期知能逢妻ヒカリ宮本道人セコムGitHub CopilotLLaMA 2ユクスキュルバーチャル警備システムCode as PoliciesLLaMAカント損保ジャパンCaPHugging FaceCM3leon上原利之Stable DoodleドラゴンクエストエージェントアーキテクチャアッパーグラウンドコリジョンチェックT2I-AdapterPAIROCTOPATH TRAVELERxAI西木康智OCTOPATH TRAVELER 大陸の覇者山口情報芸術センター［YCAM］アルスエレクトロニカ2019品質保証YCAM日本マネジメント総合研究所StyleRigAutodeskアンラーニング・ランゲージVoyager逆転オセロニアBentley Systemsカイル・マクドナルドLily Hughes-Robinsonワールドシミュレーターローレン・リー・マッカーシーColossal Cave Adventure奥村エルネスト純いただきストリートH100鎖国［Walled Garden］プロジェクトAdventureGPT齋藤精一大森田不可止COBOLSIGGRAPH ASIA 2022リリー・ヒューズ＝ロビンソン高橋智隆DGX H100VToonifyBabyAGIロボユニザナックDGX SuperPODControlVAEGPT-3.5 Turbo泉幸典仁井谷正充変分オートエンコーダーカーリングロボコレ2019Instant NeRFフォトグラメトリウィンブルドンartonomous回帰型ニューラルネットワークbitGANsDeepJoin戦術分析ぎゅわんぶらあ自己中心派Azure Machine LearningAzure OpenAI Serviceパフォーマンス測定意思決定モデル脱出ゲームDeepLIoTHybrid Reward Architectureコミュニティ管理DeepL WriteProFitXウロチョロスSuper PhoenixWatsonxProject MalmoオンラインゲームAthletica気候変動コーチングProject Paidiaシンギュラリティ北見工業大学Project Lookoutマックス・プランク気象研究所レイ・カーツワイル北見カーリングホールWatch Forビョルン・スティーブンスヴァーナー・ヴィンジ画像解析気象モデルRunway ResearchじりつくんLEFT ALIVE気象シミュレーションMake-A-VideoNTT Sportict長谷川誠ジミ・ヘンドリックス環境問題PhenakiAIカメラBaby Xカート・コバーンエコロジーDreamixSTADIUM TUBEロバート・ダウニー・Jr.エイミー・ワインハウスSDGsText-to-ImageモデルPixelllot S3ソフトバンクYouTubeダフト・パンクメモリスタAIスマートコーチGlenn MarshallThe Age of A.I.Story2Hallucination音声変換LatitudeレコメンデーションJukeboxDreamboothVeap Japanヤン・ルカンEAPneoAIPerfusionSIFT福井千春DreamIconニューラル物理学DCGAN医療mign毛髪MOBADANNCEメンタルケアstudiffuse荒牧英治人事ハーバード大学Edgar HandyAndreessen Horowitz中ザワヒデキ研修デューク大学大屋雄裕QA Tech Night中川裕志mynet.aiローグライクゲーム松木晋祐Adreeseen Horowitz東京理科大学下田純也NVIDIA Avatar Cloud Engine人工音声NeurIPS 2021産業技術総合研究所桑野範久Replica StudiosリザバーコンピューティングSmart NPCsプレイ動画ヒップホップ対話型AIモデルRoblox Studio詩ソニーマーケティングPromethean AIサイレント映画もじぱnote音源分離環境音暗号通貨note AIアシスタントMusiioFUZZLEKetchupEndelAlterationAI Newsユニバーサルミュージック粒子群最適化法Art Selfie進化差分法オープンワールドArt TransferSonar群知能下川大樹AIFAPet PortraitsSonar+Dウィル・ライト高津芳希P2EBlob OperaWeb3大石真史クリムトDolby AtmosBEiTStyleGAN-NADASonar Music FestivalDETRゲームエンジンDreamerV3ライゾマティクスSporeUnreal Engineクリティックネットワーク真鍋大度デノイズ南カリフォルニア大学Unity for Industryアクターネットワーク花井裕也画像処理DMLabRitchie HawtinSentropyGLIDEControl SuiteErica SynthCPUDiscordAvatarCLIPAtari 100kUfuk Barış MutluSynthetic DataAtari 200MJapanese InstructBLIP AlphaCALMYann LeCun日本新聞協会プログラミングサム・アルトマン鈴木雅大AIいらすとやソースコード生成コンセプトアートAI PicassoGMAIシチズンデベロッパーSonanticColie WertzEmposyGitHubCohereリドリー・スコットAIタレントウィザードリィMCN-AI連携モデル絵コンテAIタレントエージェンシーUrzas.aiストーリーボードmodi.ai介護大阪大学BitSummit西川善司並木幸介KikiBlenderBitSummit Let’s Go!!サムライスピリッツ森寅嘉Zoetic AIRed RamゼビウスSIGGRAPH 2021ペットマーダーミステリーストリートファイター半導体Digital Dream LabsPaLM APIデジタルレプリカTopaz Video Enhance AICozmoMakerSuiteGOT7DLSSタカラトミーSkebsynthesia山野辺一記NetEaseLOVOTDreambooth-Stable-DiffusionHumanRF大里飛鳥DynamixyzMOFLINゲーム背景Actors-HQRomiGoogle EarthSAG-AFTRAU-NetミクシィGEPPETTO AIWGA13フェイズ構造ユニロボットStable Diffusion web UIチャーリー・ブルッカーADVユニボPoint-EXLandGatoアパレル岡野原大輔AGIAI model自己教師あり学習DEATH STRANDINGAI ModelsIn-Context Learning（ICL）Eric Johnson汎用強化学習AIZMO.AILoRAデザインMOBBY’SファインチューニングOculus Questコジマプロダクションロンドン芸術大学モビーディックグランツーリスモ生体情報デシマエンジンGoogle Brainダイビング量子コンピュータSound Controlアウトドアqubit写真SYNTH SUPERAIスキャニングIBM Quantum System 2照明Maxim PeterKarl Sims自動採寸北野宏明Joshua RomoffArtnome3DLOOKダリオ・ヒルハイパースケープICONATESizerジェン・スン・フアン山崎陽斗ワコールHuggingFace立木創太スニーカーStable Audio浜中雅俊UNSTREET宗教ミライ小町Newelse仏教テスラ福井健策CheckGoodsコカ・コーラGameGAN二次流通食品パックマンTesla Bot中古市場Coca‑Cola Y3000 Zero SugarTesla AI DayWikipediaDupe KillerCopilot Copyright Commitmentソサエティ5.0Sphere偽ブランドテラバースSIGGRAPH 2020バズグラフXaver 1000配信京都大学ニュースタンテキ養蜂立福寛東芝Beewiseソニー・ピクチャーズ アニメーション音声解析DIB-R倉田宜典フィンテック感情分析投資Fosters+Partners韻律射影MILIZEZaha Hadid Architects韻律転移三菱UFJ信託銀行
CGへの扉 Vol.53：CGの祭典SIGGRAPH50周年にみるAIの台頭
2023.8.21アート
CGの祭典SIGGRAPH 2023 開幕
コンピュータグラフィックスとインタラクティブ技術に関する学会・展示会であるSIGGRAPH 2023が、米国ロサンゼルスのコンベンションセンター会場とオンライン配信とのハイブリッド環境で開催されました。1974年に第1回SIGGRAPHが米国コロラド州ボルダーで開催されて以来、今年で50回目の開催となります。 今年のテーマは “50 years of SIGGRAPH”（SIGGRAPH50周年）です。毎回1万人以上、ピーク時には5万人近くを集めたSIGGRAPHも、最初は参加者約600人から始まりました。今年でなんと半世紀です。節目となる今回のSIGGRAPHでは、これまでの歴史を振り返る展示や催しが多数企画されました。
- SIGGRAPH 2023 開催概要 (2023/8/6〜10)：https://s2023.siggraph.org/
昨年の SIGGRAPH 2022 紹介記事 ：CGへの扉 Vol.41：AIが促進させるCG研究。SIGGRAPH2022論文より
8月6日（米国時間）より、オンラインコンテンツの配信が開始され、Twitchを活用したライブ配信を組み合わせ、順次会場で収録された映像も後追いで配信されています。例年ですと会期後3か月ほど見逃したセッションなどをオンライン配信をゆっくりと見ることができましたが、今年は約1か月間、9月9日までとの配信期間が短縮されており注意が必要です。オンライン配信は有料です。会場でのSIGGRAPH 2023は終了していますが、オンライン視聴に関しては、9月9日までは今から登録して視聴することも可能です。 近年、SIGGRAPHで見られる3DCG研究や映像制作においてAIは欠かせない技術要素となってきています。SIGGRAPH 2023での発表やデモンストレーションでもAIの活用は当然として扱われており、AIを活用していることへの目新しさは無くなってきています。 本記事ではAI活用をアピールしている研究や、AIの存在がそのCG研究の根幹をなすもの、AIの活用によって新しい領域が開拓されたCG研究を中心に紹介します。今年は86本の投稿論文と、学会誌から優秀論文126本が採択されました。
今年のBest Paper（優秀論文）は5本、最後の “DOC” はディズニーリサーチによる研究発表で、近い将来ディズニーランドのアトラクションで活用されるであろう、ロボットの滑らかな動きに関する論文でした。
- Split-Lohmann Multifocal Displays
- Differentiable Stripe Patterns for Inverse Design of Structured Surfaces
- Globally Consistent Normal Orientation for Point Clouds by Regularizing the Winding-number Field
- 3D Gaussian Splatting for Real-time Radiance Field Rendering
- DOC: Differentiable Optimal Control for Retargeting Motions Onto Legged Robots
さらにSIGGRAPH 50周年の今年は、10年以上過去の論文を振り返る ”Time-of-Time Award” というカテゴリが新たに設けられ、SIGGRAPH 2011から2013の3年間の中から、後続の研究に大きな影響を与えた論文4本が表彰されました。どれも10年前の論文なので目新しさはありませんが「巨人の肩に立つ（先人の偉業にもとづいて研究をすること）」の言葉通り50年というSIGGRAPHの積み重ねを強く感じたアワードでもありました。
- Functional Maps: A Flexible Representation of Maps Between Shapes (2012)
- Eulerian Video Magnification for Revealing Subtle Changes in the World (2012)
- HDR-VDP-2: A Calibrated Visual Metric for Visibility and Quality Predictions in All Luminance Conditions (2011)
- Optimizing Locomotion Controllers Using Biologically-based Actuators and Objectives (2012)
リアルタイムCG “Real-Time Live!” でのAIの存在感
SIGGRAPH で人気の目玉イベントの一つに、”Real-Time Live!” があります。これはコンピュータグラフィックス分野の中でもとくにリアルタイム性を重視したもの、ゲームやVR/AR、ビジュアライゼーション分野のデモをその場で行うものです。会場での発表は十分な機材とリハーサルが念入りに行われますが、それでも機材トラブルやデモ中の思わぬミスによってトラブルもよく起こり、発表者はもとより視聴者をもハラハラさせる緊張感漂うイベントです。 今年は13組の発表があり、会場の参加者を一番盛り上げた”Real-time Stage Modelling and Visual Effects for Live Performances” という会場内の参加者をリアルタイムでスキャンし、その映像に重ねてCGの波を重ねる特殊効果の発表が観客投票で最多得票数を得ていました。また審査員特別賞は、AIを活用しVR空間で物体の質感を自由に生成・編集できるNVIDIA社の”Interactive AI Material Generation and Editing in NVIDIA Omniverse” が受賞しました。SIGGRAPH論文発表でもAIの台頭が著しいですが、昨年は皆無に近かったリアルタイムCG分野での発表の大半がAIを活用したもので占められており、AIが研究段階から広く、失敗が許されない現場でも活用され始めている業界全体の変化が感じられる一連のデモでした。
Real-time Stage Modelling and Visual Effects for Live Performances
ライブパフォーマンスのためのリアルタイム・ステージ・モデリングとビジュアル・エフェクト。
Interactive AI Material Generation and Editing in NVIDIA Omniverse
NVIDIA OmniverseにおけるインタラクティブなAIマテリアル生成と編集。
※Real-Time Live！で発表されたものと同等のデモ
ChatAvatar: Creating Hyper-realistic Physically Based 3D Facial Assets Through AI-driven Conversations
AIとのチャットで、超リアルな物理ベースの3D顔アセットを作成する。Unreal Engine のプラグインとして公開。
https://www.unrealengine.com/marketplace/ja/product/chatavatar-plugin
Intermediated Reality With an AI 3D Printed Character
AIによる3Dプリント・キャラクターでリアリティを強調。
https://napier-repository.worktribe.com/preview/3160526/IntermediatedRealityWithAnAI3DPrintedCharacter.pdf
Real-time Collision Using AI
AIを使ったリアルタイム衝突検知。物体の数や衝突箇所が大量になった場合でも対処できるのが特徴。
https://www.youtube.com/watch?v=7snCXBe2RMA
Roblox Generative AI in Action
Robloxの生成系AI。複雑なモデリングやコーディング無しでインタラクティブなシーンを構築可能に。
https://www.youtube.com/watch?v=zISxm50eOG8
※SIGGRAPHの発表と同様の解説
Suit Up: AI MoCap
AIを活用したモーションキャプチャ。キャリブレーションやマーカーの調整も不要で、動きのデータを適切に補正しつつ取得できる。
Metaphysic Live: Real-time Hyperreal Faceswap
リアルタイムかつハイパーリアルな顔交換。ライブ配信時に他人に顔を差し替えたり、若々しい処理をした顔に差し替えることができる。
https://metaphysic.ai/
Napkinmatic AppMode 3D Mesh and Texture Designer
Napkinmatic AppMode 3D: メッシュ&テクスチャーエディター。紙ナプキンにスケッチした絵柄から3Dモデルを生成。
https://www.napkinmatic.com/3d/
SIGGRAPH 2023 で発表された注目のAI関連CG研究論文
SIGGRAPH 2023の本文は学会であり論文発表が花形です。昨年に比べ研究や応用にAI、とくにディープラーニングを活用するのは当然のこととなり、今年の傾向としてはAI活用を前面に打ち出した研究は少数でした。ただし論文全体としてみるとAIにおける大規模言語モデル（LLM：Large Language Model）と同様に三次元形状やテクスチャ、顔表現における大規模3Dモデルとも言える、CG専用のLLMを作り上げようとしている試みも始まっています。
A Method for Animating Children’s Drawings of the Human Figure
子どもが描いた人型のスケッチからアニメーションを自動生成する手法。スケッチの曖昧な骨格を読み取り適切な部位として動かすことができる。
- 論文：https://people.csail.mit.edu/liyifei/publication/children-animated-drawings/
サンプルコード：https://github.com/facebookresearch/AnimatedDrawings
Example-based Motion Synthesis via Generative Motion Matching
単一または少数のサンプル動作から可能な限り多くの多様なモーションを「採掘」する生成モデル。数分の一秒以内に高品質のモーションを合成できる。
GREIL-Crowds: Crowd Simulation with Deep Reinforcement Learning and Examples
深層強化学習と事例による群衆シミュレーション。群衆データによって導かれる歩行者の行動モデルを学習する手法の提案。
Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold
生成AIで作られた画像をマウス操作で平易に変形する手法。オブジェクトのポーズ、形状、表情、レイアウトを柔軟かつ正確に制御できる。
SIGGRAPH 2023より AI 関連のコースを紹介
SIGGRAPHでは、CG関連の技術を学ぶための基礎講座から応用編まで複数のコース（いわゆるチュートリアル）が数多く行われます。その中から AI関連のコースをいくつか紹介します。コースの動画そのものは SIGGRAPH参加者（会場参加者、オンライン参加者）のみの視聴となりますが、発表資料は無料で一部公開されています。
Machine Learning & Neural Networks：機械学習とニューラルネットワーク
https://dl.acm.org/doi/10.1145/3587423.3595530
※ページ右にある[PDF]という赤いボタンで資料をダウンロードできる
Deep Learning for Physics Simulation：物理シミュレーションのためのディープラーニング
https://dl.acm.org/doi/10.1145/3587423.3595518
Rockets, Robots, and AI: Lessons Learned from Science-Fiction Movies and TV for HCI/UX：ロケット、ロボット、AI：SF映画やテレビから学ぶHCI/UXの教訓
https://dl.acm.org/doi/10.1145/3587423.3595550
Opportunities for AI-Mediated 3D Telepresence：AIを介した3Dテレプレゼンスの可能性https://dl.acm.org/doi/10.1145/3587423.3595489
SIGGRAPH のこれから
新型コロナウイルスが世界中に蔓延し、米国ワシントンで開催されるはずだったものが急にキャンセル、オンライン開催となった SIGGRAPH 2021以来、万全のコロナ対策のもと開催されたSIGGRAPH 2022、今年の SIGGRAPH 2023 は完全復活とも言える、カンファンレンス開催となりました。 ただ会場内の展示会場にリアルで展示ブースを出展する企業は少なく、規模感としては縮小した感じが否めないものの、会場開催と、オンライン開催とをうまく組み合わせた方式は、今後もしばらく続くと考えられています。今後のSIGGRAPH開催予定は次のとおり。2024年冬には、数年ぶりに東京で開催されます。ここ数年、ここ数か月のAIの急激な進歩と広がりは、CG/VFX業界にも無縁ではなく、今後のSIGGRAPHの動向に目が離せない状況が続くことでしょう。
- SIGGRAPH ASIA 2023：シドニー / オーストラリア 12/12-15
SIGGRAPH 2024：米国コロラド州デンバー 7/28-8/1
SIGGRAPH ASIA 2024：東京国際フォーラム 12/3-6
本連載の今後の予定：「CGへの扉」では、単なるAIの話題とは少し異なり、CG/VFX, アートの文脈から話題を切り取り紹介していきます。映像制作の現場におけるAI活用や、AIで価値が高まった先進的なツール、これからの可能性を感じさせるような話題、テクノロジーの話題にご期待ください。なにか取り上げて欲しいテーマやご希望などがございましたら、ぜひ編集部までお知らせください。
Vol.51：広告産業の事例が教えてくれる創造性を加速させるAIの活用法
Vol.50：脅威論がある一方で公式化する動きも。生成系AIに対する各界の反応
Vol.49：AI時代の勝者NVIDIA #GTC2023 レポート
Vol.46：AIを活用したCG論文紹介 #SIGGRAPHAsia2022 より
Vol.45：大規模言語モデルChatGPTは仲間？ライバル？
Vol.44：AdobeMAX2022開催。SneaksよりAI活用の方向性を知る
Vol.42：現代の呪文promptが生み出すAIとの新しい関係性
Contributor：安藤幸央
RANKING
