モリカトロン株式会社運営「エンターテインメント×AI」の最新情報をお届けするサイトです。
- TAG LIST
- CGCGへの扉安藤幸央生成AI吉本幸記月刊エンタメAIニュース河合律子機械学習ディープラーニングOpenAIGAN音楽NVIDIAGoogleLLM大規模言語モデルグーグルChatGPT強化学習三宅陽一郎Stable Diffusion森川幸人モリカトロン人工知能学会ニューラルネットワークシナリオDeepMindマイクロソフトQAGPT-3自然言語処理AIと倫理Facebook大内孝子倫理アート映画著作権ルールベースSIGGRAPHゲームプレイAIキャラクターAIスクウェア・エニックス敵対的生成ネットワークMinecraftモリカトロンAIラボインタビューNPC画像生成NFT音楽生成AIロボットDALL-E2StyleGANプロシージャルMidjourneyデバッグファッション自動生成ディープフェイクVFX遺伝的アルゴリズムMetaアニメーション3DCG画像生成AIマンガマルチモーダルゲームAIAdobeテストプレイ動画生成AIVRメタAICLIPテキスト画像生成深層学習CEDEC2019Microsoftデジタルツインメタバース不完全情報ゲームマインクラフト小説ボードゲームDALL-Etoioビヘイビア・ツリーCEDEC2021CEDEC2020作曲ロボティクスナビゲーションAIAIアートメタ畳み込みニューラルネットワークアップルSoraスポーツエージェントGDC 2021Red RamGPT-4手塚治虫汎用人工知能JSAI20223DNeRFインタビューバーチャルヒューマンNVIDIA OmniverseGDC 2019マルチエージェントCEDEC2022Stability AIARデジタルヒューマンELSI懐ゲーから辿るゲームAI技術史教育ジェネレーティブAI東京大学はこだて未来大学プロンプト栗原聡CNNマーケティングJSAI2024DALL-E 3BERTMicrosoft Azure高橋力斗UnityOmniverseJSAI2023電気通信大学Playable!鴫原盛之HTN階層型タスクネットワークソニーAIQVE ONE世界モデルアドベンチャーゲームJSAI2020GTC2023広告メタデータTensorFlowブロックチェーンCMイベントレポートアストロノーカキャリア模倣学習対話型エージェントAmazonトレーディングカードメディアアートDQN合成音声水野勇太モリカトロン開発者インタビュー宮本茂則Geminiアバターブラック・ジャックUbisoftGenvid Technologiesガイスター市場分析StyleGAN2徳井直生稲葉通将ベリサーブGTC2022GPT-3.5SIGGRAPH ASIAAppleNetflixJSAI2021松木晋祐Bard研究シムピープルMCS-AI動的連携モデルマーダーミステリーモーションキャプチャーTEZUKA2020CEDEC2023AGIテキスト生成インディーゲームElectronic Arts音声合成GDC Summerイーロン・マスクStable Diffusion XL森山和道eスポーツスタンフォード大学アーケードゲームテニスサイバーエージェント音声認識類家利直FireflyeSportsBLUE PROTOCOLCEDEC2024シーマンaiboSIE大澤博隆SFプロトタイピングRunwayRunway Gen-3 Alphaチャットボットtext-to-3DDreamFusion自動運転車ワークショップEpic GamesAIロボ「迷キュー」に挑戦AWSAdobe MAX村井源クラウド斎藤由多加AlphaZeroPreferred NetworksTransformerGPT-2rinnaAIりんなカメラ環世界中島秀之PaLMGitHub CopilotLLaMA哲学Apple Vision Proハリウッド理化学研究所Gen-1YouTube音声生成AISFテキスト画像生成AI松尾豊人事データマイニングControlNet現代アートDARPAドローンシムシティゲームエンジンImagenZorkバイアスASBSぱいどんAI美空ひばり手塚眞バンダイナムコ研究所スパーシャルAIELYZANEDO建築FSM-DNNMindAgentBIMLEFT 4 DEAD通しプレイ論文OpenAI Five本間翔太馬淵浩希Cygames岡島学Audio2Faceピクサー九州大学プラチナエッグイーサリアム効果音ボエダ・ゴティエビッグデータ中嶋謙互Amadeus Codeデータ分析自動翻訳MILENVIDIA ACEナラティブNVIDIA RivaNianticOmniverse ReplicatorWCCFレコメンドシステムNVIDIA DRIVE SimWORLD CLUB Champion FootballNVIDIA Isaac Simセガ人狼知能柏田知大軍事田邊雅彦Google I/Oトレカ慶應義塾大学Max CooperGPTDisneyPhotoshop言霊の迷宮PyTorch京都芸術大学ChatGPT4モンテカルロ木探索眞鍋和子バンダイナムコスタジオコミコパヒストリアAI Frog Interactive新清士田中章愛銭起揚ComfyUI齊藤陽介コナミデジタルエンタテインメント成沢理恵お知らせMagic Leap OneTencentサッカーバスケットボールTikTokSuno AItext-to-imageサルでもわかる人工知能VAETEZUKA2023DOOMリップシンキングRNNGameNGenUbisoft La Forge知識表現ウォッチドッグス レギオンVTuberIGDA立教大学秋期GTC2022大阪公立大学フォートナイトKLabどうぶつしょうぎRobloxジェイ・コウガミ音楽ストリーミングMIT野々下裕子Movie GenQosmoマシンラーニング5GMuZeroRival Peakがんばれ森川君2号pixivオムロン サイニックエックスGPTsセキュリティ対話エンジンポケモン3Dスキャン橋本敦史リトル・コンピュータ・ピープルCodexシーマン人工知能研究所コンピューティショナル・フォトグラフィーゴブレット・ゴブラーズ絵画Open AI3D Gaussian SplattingMicrosoft DesignerイラストシミュレーションSoul Machines柿沼太一完全情報ゲームバーチャルキャラクター坂本洋典宮本道人釜屋憲彦LLaMA 2ウェイポイントパス検索Hugging Face対談藤澤仁生物学XRGTC 2022xAI画像認識SiemensストライキStyleCLIPDeNAVoyager長谷洋平GDC 2024クラウドコンピューティングmasumi toyotaIBM宮路洋一OpenSeaGDC 2022SNSTextWorldEarth-2BingMagentaソフトバンクELYZA PencilScenarioSIGGRAPH2023AIピカソGTC2021AI素材.comCycleGANテンセントAndreessen HorowitzQA Tech NightNetHack下田純也桑野範久キャラクターモーション音源分離NBAフェイクニュースユニバーサルミュージックRPG法律Web3SIGGRAPH 2022レベルデザインDreamerV3AIボイスアクターUnreal Engine南カリフォルニア大学NVIDIA CanvasGPUALife人工生命オルタナティヴ・マシンサム・アルトマンサウンドスケープLaMDATRPGマジック：ザ・ギャザリングGPT-4oAI Dungeon介護BitSummitGemma 2Veoゲーム背景IEEEPoint-Eアパレル不気味の谷ナビゲーションメッシュデザイン写真高橋ミレイ深層強化学習松原仁松井俊浩武田英明フルコトELYZA DIGESTApple IntelligenceWWDCWWDC 2024西成活裕ハイブリッドアーキテクチャAI野々村真Apex LegendsELIZA群衆マネジメントライブポートレイトNinjaコンピュータRPGライブビジネスWonder StudioAdobe Max 2023GPT-4-turboアップルタウン物語新型コロナ土木佐藤恵助KELDIC周済涛Bing Chat大道麻由メロディ言語清田陽司インフラBing Image Creator物語構造分析ゲームTENTUPLAYサイバネティックス慶応義塾大学MARVEL Future FightAstro人工知能史Amazon BedrockAssistant with Bard渡邉謙吾タイムラプスEgo4DAI哲学マップThe Arcadeここ掘れ！プッカバスキア星新一X.AISearch Generative Experienceくまうた日経イノベーション・ラボStyleGAN-XLX Corp.Dynalang濱田直希敵対的強化学習StyleGAN3TwitterVLE-CE大柳裕⼠階層型強化学習GOSU Data LabGANimatorXホールディングス加納基晴WANNGOSU Voice AssistantVoLux-GANMagiAI Actソニー・インタラクティブエンタテインメント竹内将SenpAI.GGProjected GANEU研究開発事例MobalyticsSelf-Distilled StyleGANSDXLArs Electronica赤羽進亮ニューラルレンダリングRTFKTAI規制遊戯王AWS SagemakerPLATONIKE欧州委員会UDI（Universal Duel Interface）映像セリア・ホデント形態素解析frame.ioClone X欧州議会第一工科大学UXAWS LambdaFoodly村上隆欧州理事会佐竹空良誤字検出MusicLM小林篤史認知科学中川友紀子Digital MarkAudioLMゲームデザインSentencePieceアールティSnapchatMusicCaps荻野宏実LUMINOUS ENGINEクリエイターコミュニティAudioCraft伊藤黎Luminous ProductionsBlenderBot 3バーチャルペットビヘイビアブランチパターン・ランゲージ竹村也哉Meta AINVIDIA NeMo ServiceMubertWPPちょまどマーク・ザッカーバーグヴァネッサ・ローザMubert RenderGeneral Computer Control（GCC）GOAPWACULVanessa A RosaGen-2CradleAdobe MAX 2021陶芸Runway AI Film FestivalSpiral.AIPlay.htPreVizItakoLLM-7b音声AI静岡大学AIライティングLiDARCharacter-LLM明治大学Omniverse AvatarAIのべりすとPolycam復旦大学北原鉄朗FPSQuillBotdeforumChat-Haruhi-Suzumiya中村栄太マルコフ決定過程NVIDIA MegatronCopysmith涼宮ハルヒ日本大学NVIDIA MerlinJasperハーベストEmu VideoヤマハNVIDIA MetropolisForGames前澤陽パラメータ設計ゲームマーケットペリドット増田聡バランス調整岡野翔太Dream Track採用協調フィルタリング郡山喜彦Music AI ToolsSakana AIテキサス大学ジェフリー・ヒントンLyria科学史Google I/O 2023Yahoo!知恵袋AIサイエンティストAlphaDogfight TrialsAI Messenger VoicebotインタラクティブプロンプトAITerraエージェントシミュレーションOpenAI Codex武蔵野美術大学AI OverviewStarCraft IIHyperStyleBingAI石渡正人電通Future of Life InstituteRendering with Style手塚プロダクションAICO2Intel林海象BitSummit DriftLAIKADisneyリサーチヴィトゲンシュタイン古川善規RotomationGauGAN論理哲学論考Lightroom大規模再構成モデルOmega CrafterGauGAN2CanvaLRMSPACE INVADIANSドラゴンクエストライバルズ画像言語表現モデルObjaverse西島大介不確定ゲームSIGGRAPH ASIA 2021PromptBaseBOOTHMVImgNet吉田伸一郎Dota 2ディズニーリサーチpixivFANBOXOne-2-3-45SIGGRAPH2024Mitsuba2バンダイナムコネクサス虎の穴3DガウシアンスプラッティングMotion-I2VソーシャルゲームEmbeddingワイツマン科学研究所ユーザーレビューFantiaワンショット3D生成技術ByteDanceGTC2020CG衣装mimicとらのあなToonify3DNVIDIA MAXINEVRファッションBaidu集英社FGDC生成対向ネットワーク淡路滋ビデオ会議ArtflowERNIE-ViLG少年ジャンプ＋Future Game Development Conference拡散モデルグリムノーツEponym古文書ComicCopilot佐々木瞬Diffusionゴティエ・ボエダ音声クローニング凸版印刷Gautier Boeda階層的クラスタリングGopherAI-OCRゲームマスターうめ画像判定Inowrld AI小沢高広Julius鑑定ラベル付けMODAniqueドリコムTPRGOxia PalusGhostwriter中村太一ai andバーチャル・ヒューマン・エージェントtoio SDK for UnityArt RecognitionSkyrimエグゼリオSaaSクーガー実況パワフルサッカースカイリムCopilotインサイト石井敦NHC 2021桃太郎電鉄RPGツクールMZカスタマーサポート茂谷保伯池田利夫桃鉄ChatGPT_APIMZserial experiments lainComfyUI-AdvancedLivePortraitGDMC新刊案内パワサカダンジョンズ&ドラゴンズAI lainGUIマーベル・シネマティック・ユニバースOracle RPGPCGMITメディアラボMCU岩倉宏介深津貴之PCGRLアベンジャーズPPOxVASynthDungeons&DragonsVideo to Videoマジック・リープDigital DomainMachine Learning Project CanvasLaser-NVビートルズiPhone 16MagendaMasquerade2.0国立情報学研究所ザ・ビートルズ: Get BackOpenAI o1ノンファンジブルトークンDDSPフェイシャルキャプチャー石川冬樹MERFDemucsAIスマートリンクスパコンAlibaba音楽編集ソフトシャープ里井大輝KaggleスーパーコンピュータVQRFAdobe Auditionウェアラブル山田暉松岡 聡nvdiffreciZotopeCE-LLMAssassin’s Creed OriginsAI会話ジェネレーターTSUBAME 1.0NeRFMeshingRX10Communication Edge-LLMSea of ThievesTSUBAME 2.0LERFMoisesLINEヤフーGEMS COMPANYmonoAI technologyLSTMABCIマスタリングAIペットモリカトロンAIソリューション富岳レベルファイブYahoo!ニュース初音ミクOculusコード生成AISociety 5.0リアム・ギャラガーAI Comic Factory転移学習テストAlphaCode夏の電脳甲子園グライムスKaKa CreationAI comic GeneratorBaldur's Gate 3Codeforces座談会BoomyVOICEVOXComicsMaker.aiCandy Crush Saga自己増強型AIジョン・レジェンドGenie AILlamaGen.aiSIGGRAPH ASIA 2020COLMAPザ・ウィークエンドSIGGRAPH Asia 2023GAZAIADOPNVIDIA GET3DドレイクC·ASEFlame PlannerデバッギングBigGANGANverse3DFLARE動画ゲーム生成モデルMaterialGANダンスグランツーリスモSPORTAI絵師エッジワークスMagicAnimateReBeLグランツーリスモ・ソフィーUGC日本音楽作家団体協議会Animate AnyoneVirtuals ProtocolGTソフィーPGCFCAインテリジェントコンピュータ研究所スーパーマリオブラザーズVolvoFIAグランツーリスモチャンピオンシップVoiceboxアリババMarioVGGNovelAIさくらインターネットDreaMoving社員インタビューRival PrakDGX A100NovelAI DiffusionVISCUIT松原卓二ぷよぷよScratchArt Transfer 2ユービーアイソフトWebcam VTuberモーションデータスクラッチArt Selfie 2星新一賞ビスケットMusical Canvas北尾まどかHALOポーズ推定TCGプログラミング教育The Forever Labyrinth将棋メタルギアソリッドVメッシュ生成Refik AnadolFSMメルセデス・ベンツQRコードVALL-EAlexander RebenMagic Leap囲碁Deepdub.aiRhizomatiksナップサック問題Live NationEpyllionデンソーAUDIOGENMolmo汎用言語モデルWeb3.0マシュー・ボールデンソーウェーブEvoke MusicPixMoAIOpsムーアの法則原昌宏AutoFoleyQwen2 72BSpotifyスマートコントラクト日本機械学会Colourlab.AiDepth ProReplica Studioロボティクス・メカトロニクス講演会ディズニーamuseChitrakarAdobe MAX 2022トヨタ自動車Largo.aiVARIETAS巡回セールスマン問題かんばん方式CinelyticAI面接官ジョルダン曲線メディアAdobe ResearchTaskadeキリンホールディングス政治Galacticaプロット生成Pika.art空間コンピューティングクラウドゲーミングAI Filmmaking AssistantDream Screen和田洋一リアリティ番組映像解析FastGANSynthIDStadiaジョンソン裕子4コママンガAI ScreenwriterFirefly Video ModelMILEsNightCafe東芝デジタルソリューションズ芥川賞Stable Video 4Dインタラクティブ・ストリーミングLuis RuizSATLYS 映像解析AI文学AI受託開発事例インタラクティブ・メディア恋愛田中志弥PFN 3D ScanElevenLabsタップルPlayable!3D東京工業大学HeyGenAbema TVPlayable!MobileLudo博報堂After EffectsNECAdobe MAX 2024ラップPFN 4D Scan絵本木村屋SneaksSIGGRAPH 2019ArtEmisZ世代DreamUp出版GPT StoreIllustratorAIラッパーシステムDeviantArtAmmaar Reshi生成AIチェッカーMeta Quest 3Waifu DiffusionStoriesユーザーローカルXR-ObjectsGROVERプラスリンクス ～キミと繋がる想い～元素法典StoryBird九段理江PeridotFAIRSTCNovel AIVersed東京都同情塔Orionチート検出Style Transfer ConversationProlificDreamer防犯オンラインカジノRCPUnity Sentis4Dオブジェクト生成モデルO2RealFlowRinna Character PlatformUnity MuseAlign Your GaussiansScam DetectioniPhoneCALACaleb WardAYGLive Threat DetectionDeep Fluids宮田龍MAV3D乗換NAVITIMEMeInGameAmelia清河幸子ファーウェイKaedimAIGraphブレイン・コンピュータ・インタフェース西中美和4D Gaussian Splatting3DFY.aiBCIGateboxアフォーダンス安野貴博4D-GSLuma AILearning from VideoANIMAKPaLM-SayCan斧田小夜GlazeAvaturn予期知能逢妻ヒカリWebGlazeBestatセコムNightShadeOasisユクスキュルバーチャル警備システムCode as PoliciesSpawningDecartカント損保ジャパンCaPHave I Been Trained?Dejaboom!CM3leonFortniteUnbounded上原利之Stable DoodleUnreal Editor For FortniteEtchedドラゴンクエストエージェントアーキテクチャアッパーグラウンドコリジョンチェックT2I-Adapter声優PAIROCTOPATH TRAVELERパブリシティ権西木康智Volumetrics日本俳優連合OCTOPATH TRAVELER 大陸の覇者山口情報芸術センター［YCAM］AIワールドジェネレーター日本芸能マネージメント事業者協会アルスエレクトロニカ2019品質保証YCAM日本マネジメント総合研究所Rosebud AI Gamemaker日本声優事業社協議会StyleRigAutodeskアンラーニング・ランゲージLayerIAPP逆転オセロニアBentley Systemsカイル・マクドナルドLily Hughes-RobinsonCharisma.aiTripo 2.0ワールドシミュレーターローレン・リー・マッカーシーColossal Cave AdventureMeta 3D Gen奥村エルネスト純いただきストリートH100鎖国［Walled Garden］プロジェクトAdventureGPT調査スマートシティ齋藤精一大森田不可止COBOLSIGGRAPH ASIA 2022リリー・ヒューズ＝ロビンソンMeta Quest都市計画高橋智隆DGX H100VToonifyBabyAGIIPロボユニザナックDGX SuperPODControlVAEGPT-3.5 Turbo泉幸典仁井谷正充変分オートエンコーダーカーリング強いAIロボコレ2019Instant NeRFフォトグラメトリウィンブルドン弱いAIartonomous回帰型ニューラルネットワークbitGANsDeepJoin戦術分析ぎゅわんぶらあ自己中心派Azure Machine LearningAzure OpenAI Serviceパフォーマンス測定Lumiere意思決定モデル脱出ゲームDeepLIoTUNetHybrid Reward Architectureコミュニティ管理DeepL WriteProFitXImageFXウロチョロスSuper PhoenixWatsonxMusicFXProject MalmoオンラインゲームAthleticaTextFX気候変動コーチングProject Paidiaシンギュラリティ北見工業大学KeyframerProject Lookoutマックス・プランク気象研究所レイ・カーツワイル北見カーリングホールWatch Forビョルン・スティーブンスヴァーナー・ヴィンジ画像解析Gemini 1.5気象モデルRunway ResearchじりつくんAI StudioLEFT ALIVE気象シミュレーションMake-A-VideoNTT SportictVertex AI長谷川誠ジミ・ヘンドリックス環境問題PhenakiAIカメラChat with RTXBaby Xカート・コバーンエコロジーDreamixSTADIUM TUBESlackロバート・ダウニー・Jr.エイミー・ワインハウスSDGsText-to-ImageモデルPixelllot S3Slack AIPokémon Battle Scopeダフト・パンクメモリスタAIスマートコーチポケットモンスターGlenn MarshallkanaeruThe Age of A.I.Story2Hallucination音声変換Latitude占いレコメンデーションJukeboxDreambooth行動ロジック生成AIVeap Japanヤン・ルカンConvaiEAPneoAIPerfusionNTTドコモSIFT福井千春DreamIconニューラル物理学EmemeDCGAN医療mign毛髪GenieMOBADANNCEメンタルケアstudiffuse荒牧英治汎用AIエージェントハーバード大学Edgar Handy中ザワヒデキAIファッションウィーク研修デューク大学大屋雄裕インフルエンサー中川裕志Grok-1mynet.aiローグライクゲームAdreeseen HorowitzMixture-of-Experts東京理科大学NVIDIA Avatar Cloud EngineMoE人工音声NeurIPS 2021産業技術総合研究所Replica StudiosClaude 3リザバーコンピューティングSmart NPCsClaude 3 Haikuプレイ動画ヒップホップ対話型AIモデルRoblox StudioClaude 3 Sonnet詩ソニーマーケティングPromethean AIClaude 3 Opusサイレント映画もじぱnote森永乳業環境音暗号通貨note AIアシスタントMusiioC2PAFUZZLEKetchupEndelゲーミフィケーションAlterationAI NewsTomo Kihara粒子群最適化法Art SelfiePlayfool進化差分法オープンワールドArt TransferSonar遊び群知能下川大樹AIFAPet PortraitsSonar+Dtsukurunウィル・ライト高津芳希P2EBlob Opera地方創生大石真史クリムトDolby Atmos吉田直樹BEiTStyleGAN-NADASonar Music Festival素材DETRライゾマティクスSIMASporeクリティックネットワーク真鍋大度OpenAI JapanデノイズUnity for Industryアクターネットワーク花井裕也Voice Engine画像処理DMLabRitchie HawtinCommand R+SentropyGLIDEControl SuiteErica SynthOracle Cloud InfrastructureCPUDiscordAvatarCLIPAtari 100kUfuk Barış MutluGoogle WorkspaceSynthetic DataAtari 200MJapanese InstructBLIP AlphaUdioCALMYann LeCun日本新聞協会立命館大学プログラミング鈴木雅大AIいらすとや京都精華大学ソースコード生成コンセプトアートAI PicassoTacticAIGMAIシチズンデベロッパーSonanticColie WertzEmposyNPMPGitHubCohereリドリー・スコットAIタレントFOOHウィザードリィMCN-AI連携モデル絵コンテAIタレントエージェンシーUrzas.aiストーリーボードmodi.aiProject Astra大阪大学Google I/O 2024西川善司並木幸介KikiBlenderBitSummit Let’s Go!!サムライスピリッツ森寅嘉Zoetic AIゼビウスSIGGRAPH 2021ペット感情認識ストリートファイター半導体Digital Dream LabsPaLM APIデジタルレプリカ音声加工Topaz Video Enhance AICozmoMakerSuiteGOT7マルタ大学DLSSタカラトミーSkebsynthesia田中達大山野辺一記NetEaseLOVOTDreambooth-Stable-DiffusionHumanRFInworld AI大里飛鳥DynamixyzMOFLINActors-HQMove AIRomiGoogle EarthSAG-AFTRAICRA2024U-NetミクシィGEPPETTO AIWGA13フェイズ構造ユニロボットStable Diffusion web UIチャーリー・ブルッカー大規模基盤モデルADVユニボToroboXLandGato岡野原大輔東京ロボティクスAI model自己教師あり学習インピーダンス制御DEATH STRANDINGAI ModelsIn-Context Learning（ICL）深層予測学習Eric Johnson汎用強化学習AIZMO.AILoRA日立製作所MOBBY’Sファインチューニング早稲田大学Oculus Questコジマプロダクションロンドン芸術大学モビーディックグランツーリスモ尾形哲也生体情報デシマエンジンGoogle Brainダイビング量子コンピュータAIRECSound Controlアウトドアqubit汎用ロボットSYNTH SUPERAIスキャニングIBM Quantum System 2オムロンサイニックエックス照明Maxim PeterKarl Sims自動採寸北野宏明ViLaInJoshua RomoffArtnome3DLOOKダリオ・ヒルPDDLハイパースケープICONATESizerジェン・スン・フアンニューサウスウェールズ大学山崎陽斗ワコールHuggingFaceClaude Sammut立木創太スニーカーStable Audioオックスフォード大学浜中雅俊UNSTREET宗教Lars Kunzeミライ小町Newelse仏教杉浦孔明テスラ福井健策CheckGoodsコカ・コーラ田向権GameGAN二次流通食品VASA-1パックマンTesla Bot中古市場Coca‑Cola Y3000 Zero SugarVoxCeleb2Tesla AI DayWikipediaDupe KillerCopilot Copyright CommitmentAniTalkerソサエティ5.0Sphere偽ブランドテラバース上海大学SIGGRAPH 2020バズグラフXaver 1000配信京都大学ニュースタンテキ養蜂立福寛東芝Beewiseソニー・ピクチャーズ アニメーション音声解析DIB-R倉田宜典フィンテック感情分析Luma投資Fosters+Partners周 済涛Dream Machine韻律射影MILIZEZaha Hadid ArchitectsステートマシンNTT韻律転移三菱UFJ信託銀行ディープニューラルネットワークPerplexity
CGへの扉 Vol.6：Facebookが取り組むVRとAIのアプローチ
2019.9.13アート
Facebook とVR/CG研究、AI研究
VRヘッドセット普及の一端を担った Oculus をSNS（ソーシャルネットワークサービス）で知られる Facebookが20億ドルで買収したのは 2014年のこと。以降、Facebookではコミュニケーションやデータ解析以外のVRやCG、画像処理関連の研究が広がってきています。もともとFacebookの中で研究組織が存在した人工知能や機械学習のグループとの協業により、VRやCG、画像処理の研究でも業界内で頭角を現し始めています。
前記事「CGへの扉 Vol.5：SIGGRAPH 2019に見るCG研究と機械学習」でご紹介したコンピュータグラフィックスとインタラクティブ技術の学会 SIGGRAPHでも、2019年に4本、2018年に5本、2017年に2本と、論文を発表しています。発表者の所属組織を見ると、Facebook Reality Labs （旧Oculus Research）という VR/CG系の研究組織、120名ほどが所属しているといわれる Facebook AI Research (FAIR) という人工知能系の研究組織などが見られます。また、SIGGRAPHへの論文投稿はありませんが、Applied Machine Learning（AML）という機械学習系のグループも存在します。Facebook Research全体としては、現在約700名ほどの研究者が所属しており、SNS関連に限らずさまざまな研究がなされ、その研究成果の一部が公開されています。
研究内容は AR/VR、写真加工、カメラ技術、コンピュータによる映像処理、デジタルデバイスの操作・体験、最新AI技術、機械学習、自然言語処理、音声合成、データサイエンス。コミュニケーションや経済、セキュリティ、ネットワークなど、現在の SNS、SNSアプリに必要な事柄から近い未来のコミュニケーションにまつわることまで多岐に渡っています。
Facebook が存在感を示す、SIGGRAPH 2019 における人工知能系VR/CG系の研究
一見 Facebookがどのような VR/CG研究をしているのかを想像するのは難しいですが、その研究内容を見ると、現在の課題をどのようにとらえ、それらをどう解決していくか、既存のSNSのモバイルアプリや将来の SNSやVRによるコミュニケーションをどのように創造していこうと考えているのかが読み取れます。
Neural Volumes: Learning Dynamic Renderable Volumes from Images (Facebook Research)
複数方向から撮影したビデオ映像から、3Dモデルを構築する方法です。例えば本人そっくりのVRアバターが制作できます。三次元の形状をエンコード・デコード（符号化・復号化）という考えで扱うことでデータ量を減らし、VR空間における自分の代わりとなる三次元モデル（アバター）として扱うことを想定しています。Facebookでは、ここで生成されるアバターのことを 「コーデック・アバター」と呼び、機械学習で一般的な顔の表情や、感情の表現方法などを少ないデータで再現できるように研究しています（コーデック・アバターに関しては ”Facebook is building the future of connection with lifelike avatars”をご参照ください）。
論文/動画：https://research.fb.com/publications/neural-volumes-learning-dynamic-renderable-volumes-from-images/
Learning to Optimize Halide with Tree Search and Random Programs (Facebook Research)
画像処理専用のプログラミング言語 Halide を高速に実行するための手法です。計算の順序を最適化するアプローチで、専門家がチューニングした場合よりも優れています。計算コストを機械学習によって最適化し、計算のタイミングや依存関係などを考慮した上で適切な順序で計算をスケジューリングします。
論文：https://research.fb.com/publications/learning-to-optimize-halide-with-tree-search-and-random-programs/
ソースコード：https://github.com/halide/Halide/tree/master/apps/autoscheduler/
VR Facial Animation via Multiview Image Translation (Facebook Research)
VR-HMD(ヘッドマウントディスプレイ)をかぶると、ユーザーの顔が隠れて表情が見えなくなる問題に対処するための技術です。改造したVR-HMD内部に9つの小型カメラを搭載し、顔の表情の動きを機械学習させます。
目の周りに4個、口の周りに5個付けられたカメラからの情報をもとに、ほぼ顔全体の表情データを取得します。その結果をもとに利用時には3個のカメラのみで顔の表情の動きをとらえ、VR内でユーザーの顔の表情を再現します。このアプローチによって、VR-HMDを被ったままでも実際の自分の表情に限りなく近い表情を、VR空間でコミュニケーションしている相手に送ることができるのです。
Synthetic Defocus and Look-Ahead Autofocus for Casual Videography (Facebook Research, UC Berkeley共同研究)
スマートフォンで手軽に撮影した動画に対して、背景がぼけたような被写界深度の浅い映像になるよう動画加工する手法です。さらにビデオカメラのオートフォーカスのように、被写体が移動してもフォーカスを合わせるべき被写体を自動追尾する仕組みを持ちます。
現在、スマートフォンで手軽に撮影したポートレート写真に対して、背景をぼかす加工が一般的になっていますが、本研究の技術が一般化するとスマートフォンで撮影した動画に対しても、特殊なカメラやレンズなしで映画のように被写界深度の浅く、雰囲気のある動画が手軽に撮影できるようになります。技術的には任意の焦点に合わせて背景をぼかす機能と、動画の次のフレームで、どこに焦点を合わせるべきか先読みしていく機能を組み合わせて実現されています。また HDR (ハイダイナミックレンジ）にも対応しているため、輝いているものや一部分だけ明るいものも違和感なく調整されます。
DeepFovea: Universal Neural Reconstruction for Foveated Rendering and Video Compression Using Learned Statistics of Natural Videos (Facebook Research)
VR-HMD（ヘッドマウントディスプレイ）用に考えられた、目の仕組みを考慮したビデオ圧縮とその映像を再構成する方法の提案です。人間の目は焦点を合わせた中心部しか見ておらず、その周辺はぼんやりと見ているだけです。その性質を利用してVR-HMDでは描画を省略し、中心部のみ高精細な描画を行いますが、現在一般的には、周辺部分を省略して精細度の低い映像しか表示させないことで、コンピューティングパワーやネットワーク帯域を節約する方法が使われています。
その際、本来望まない圧縮によってアーティファクトと呼ばれるノイズや余計な表示物などが残ったり、逆に必要なものが欠損して表示されない場合があります。そういったアーティファクトを軽減するためにGAN（敵対的生成ネットワーク）を活用し、本来描かれているであろう高精細な映像を再現しようというのが本研究のアプローチです。これによって、安価なVR-HMD、帯域の狭いネットワーク環境においても比較的良好な映像を観られる可能性が高くなります。発表の段階ではあまり詳細が明らかにされていませんでしたが、SIGGRAPH ASIA 2019 で論文発表がされるようです。
ソーシャルネットワークとVR/CG、人工知能の関係性
ここまで紹介した SIGGRAPHにおける Facebookの研究は、純粋なVR/CGの研究というよりは、VRをプラットフォームとしたオンラインコミュニケーションのために必要な要素や立ちはだかる課題を、一つひとつ対処していっているように見えます。
また、Facebook Researchは企業内の研究所であり、SNS広告などの企業活動で得られた資金をもとに研究開発を進められていると思われます。しかし単なる損得勘定や自社の利益を追い求めるだけでなく、社会全体、学術界、業界、AIやCG技術全体のことを考えて、最先端技術やその応用技術を、世の中が使いやすくさまざまな用途に広げられるように考慮されていることが見て取れます。その様子はソースコード共有サイト github にオープンソースとして公開される研究段階のプログラムや、研究内容の積極的な論文公開という透明性の高い振る舞いにも現れています。
主にコンピュータグラフィックスの描画のために開発、販売されていたGPU（Graphics Processing Unit）が、現在ではディープラーニング等の機械学習を高速かつ大量のデータを同時に扱って計算するために応用されています。Facebook ではそれらの応用をさらに推し進め、GPUの性能を最大限にいかした方法で、AI関連の計算負荷を減らすための独自の研究を進めています。これは理想の計算方法を追い求めるのではなく、GPUハードウェアに最適であることを優先させてAIの計算方法を考えるという、従来とは逆のアプローチです。これは今後爆発的に増えていくであろうAI関連の計算量をいかに安価に、かつ効率的に分散させていくのかといった考えのもとに進められているのでしょう。
Optimizing Facebook AI Workloads for NVIDIA GPUs （NVIDIAのイベントでの Facebookの発表）
現在Facebookで利用者に影響する人工知能の活用分野として実際に運用されているのは、有害なコンテンツやフェイクニュースなどのフィルタリング、ある人がどのようなコンテンツを好んで読むのかを学習し、どのコンテンツをフィードに流すのかといったコンテンツの選定、写真を文字で説明するための機能だといわれています。さらに一般的に知られていないSNSやメッセンジャーの機能でも、人工知能や機械学習をベースとした機能は、
これからますます増えていくでしょう。利用者が提供する膨大なデータをもとに、さまざまな人工知能研究や布石を打てるのがFacebookの強みなのかもしれません。
動画：https://developer.nvidia.com/gtc/2019/video/S9866
※視聴は無料ですが、登録が必要です。
発表資料：https://developer.download.nvidia.com/video/gputechconf/gtc/2019/presentation/s9866-optimizing-facebook-ai-workloads-for-nvidia-gpus.pdf
本連載の今後の予定：「CGへの扉」は、単なるAIの話題とは少し異なり、CG/VFX, アートの文脈から話題を切り取り紹介していきます。映像制作の現場におけるAI活用や、AIで価値が高まった先進的なツール、これからの可能性を感じさせるような話題、テクノロジーの話題にご期待ください。なにか取り上げて欲しいテーマやご希望などがございましたら、ぜひ編集部までお知らせください。
CGへの扉：
Vol.1：CG/VFXにおける人工知能の可能性と、その限界
Vol.2：なめらかなキャラクタアニメーションと、ディープラーニングの役目
Vol.3：CGとAIの蜜月が今まで不可能だった映像を生みだす
Contributor：安藤幸央
RANKING
