モリカトロン株式会社運営「エンターテインメント×AI」の最新情報をお届けするサイトです。

TAG LIST
CGCGへの扉安藤幸央機械学習月刊エンタメAIニュースディープラーニング河合律子生成AI吉本幸記OpenAIGANNVIDIA音楽Google三宅陽一郎強化学習ニューラルネットワークStable DiffusionChatGPTグーグル森川幸人シナリオDeepMindQA人工知能学会GPT-3自然言語処理マイクロソフト大規模言語モデルFacebook大内孝子映画著作権AIと倫理キャラクターAI敵対的生成ネットワークルールベースアート倫理SIGGRAPHモリカトロンゲームプレイAIスクウェア・エニックスモリカトロンAIラボインタビュー画像生成LLMNPCNFTプロシージャルMidjourneyデバッグMinecraftDALL-E2StyleGAN遺伝的アルゴリズム画像生成AIロボット自動生成VFXAdobeテストプレイメタAIアニメーションテキスト画像生成深層学習ファッションCEDEC2019音楽生成AIディープフェイクデジタルツインメタバースVRボードゲームDALL-ECLIPビヘイビア・ツリーマンガCEDEC2021CEDEC2020ゲームAI不完全情報ゲームナビゲーションAI小説畳み込みニューラルネットワークGDC 2021JSAI2022作曲MicrosoftNVIDIA OmniverseGDC 2019マルチエージェントCEDEC2022MetaマインクラフトAIアート3DCGStability AIメタデジタルヒューマン懐ゲーから辿るゲームAI技術史toioジェネレーティブAIスポーツエージェントプロンプト栗原聡手塚治虫CNNNeRFDALL-E 3バーチャルヒューマンBERTロボティクスUnityOmniverseJSAI2023鴫原盛之HTN階層型タスクネットワークソニーGPT-4マルチモーダル汎用人工知能JSAI2020GTC20233DTensorFlowインタビューブロックチェーンイベントレポート対話型エージェントAmazonDQN水野勇太アバターUbisoftGenvid TechnologiesガイスターStyleGAN2ARELSIGTC2022教育SIGGRAPH ASIANetflixJSAI2021はこだて未来大学Bard研究シムピープルMCS-AI動的連携モデルRed RamモーションキャプチャーTEZUKA2020CEDEC2023テキスト生成インディーゲームElectronic Arts音声合成マーケティングメタデータGDC SummerStable Diffusion XLCMMicrosoft Azureアストロノーカキャリア模倣学習動画生成AIeスポーツスタンフォード大学アーケードゲームテニスサイバーエージェントトレーディングカード音声認識メディアアート類家利直eSportsBLUE PROTOCOLシーマンaibo合成音声チャットボットブラック・ジャックEpic GamesAWS徳井直生クラウド斎藤由多加AlphaZeroTransformerGPT-2rinnaAIりんなカメラ環世界中島秀之PaLM哲学ベリサーブPlayable!GPT-3.5ハリウッド理化学研究所Gen-1SFテキスト画像生成AIデータマイニング東京大学現代アートDARPAドローンシムシティゲームエンジンImagenZorkバイアスマーダーミステリーASBSぱいどんアドベンチャーゲームAI美空ひばり手塚眞バンダイナムコ研究所スパーシャルAINEDOFSM-DNNLEFT 4 DEADイーロン・マスク通しプレイ論文OpenAI Five本間翔太馬淵浩希Cygames森山和道Audio2Faceピクサープラチナエッグイーサリアム効果音ボエダ・ゴティエビッグデータ中嶋謙互Amadeus Codeデータ分析MILENVIDIA ACEナラティブNVIDIA RivaOmniverse ReplicatorWCCFレコメンドシステムNVIDIA DRIVE SimWORLD CLUB Champion FootballNVIDIA Isaac Simセガ柏田知大軍事田邊雅彦トレカMax CooperGPTDisneyFireflyPyTorchChatGPT4眞鍋和子バンダイナムコスタジオAI Frog Interactive新清士大澤博隆SFプロトタイピング齊藤陽介お知らせMagic Leap OneTencentモリカトロン開発者インタビュー宮本茂則バスケットボールGeminiTikToktext-to-imageサルでもわかる人工知能text-to-3DVAEDreamFusionTEZUKA2023リップシンキングRNNUbisoft La Forge自動運転車ワークショップ知識表現ウォッチドッグス レギオンVTuberIGDA立教大学秋期GTC2022市場分析フォートナイトどうぶつしょうぎRobloxジェイ・コウガミ音楽ストリーミングMITAIロボ「迷キュー」に挑戦野々下裕子Adobe MAXマシンラーニング村井源5GMuZeroRival Peakpixivオムロン サイニックエックスGPTs電気通信大学対話エンジン稲葉通将ポケモン3Dスキャン橋本敦史リトル・コンピュータ・ピープルCodexシーマン人工知能研究所コンピューティショナル・フォトグラフィーPreferred Networksゴブレット・ゴブラーズ絵画3D Gaussian SplattingMicrosoft DesignerアップルイラストシミュレーションSoul Machines柿沼太一完全情報ゲーム坂本洋典釜屋憲彦GitHub CopilotウェイポイントLLaMAパス検索対談藤澤仁生物学GTC 2022Apple Vision Pro画像認識SiemensストライキStyleCLIPDeNA長谷洋平クラウドコンピューティングmasumi toyotaIBM宮路洋一OpenSeaGDC 2022SNSTextWorldEarth-2BingMagentaYouTube音声生成AIELYZA PencilScenarioSIGGRAPH2023松尾豊AIピカソGTC2021AI素材.comCycleGANテンセントAndreessen HorowitzAIQVE ONENetHackキャラクターモーションControlNet音源分離NBAフェイクニュースユニバーサルミュージックRPG法律Web3SIGGRAPH 2022世界モデルレベルデザインDreamerV3AIボイスアクターUnreal Engine南カリフォルニア大学NVIDIA CanvasGPUALife人工生命オルタナティヴ・マシンサウンドスケープLaMDATRPGマジック:ザ・ギャザリングAI Dungeonゲーム背景AGI不気味の谷ナビゲーションメッシュ高橋ミレイ深層強化学習松原仁松井俊浩武田英明ELYZAフルコトELYZA DIGEST建築広告西成活裕ハイブリッドアーキテクチャApex LegendsELIZA群衆マネジメントライブポートレイトNinjaコンピュータRPGライブビジネスWonder StudioAdobe Max 2023アップルタウン物語新型コロナ土木MindAgentKELDIC周済涛BIMBing Chatメロディ言語清田陽司インフラBing Image CreatorゲームTENTUPLAYサイバネティックスMARVEL Future FightAstro人工知能史Amazon BedrockAssistant with BardタイムラプスEgo4DAI哲学マップThe Arcadeバスキア星新一X.AISearch Generative Experience日経イノベーション・ラボStyleGAN-XLX Corp.Dynalang敵対的強化学習StyleGAN3TwitterVLE-CE階層型強化学習GOSU Data LabGANimatorXホールディングスWANNGOSU Voice AssistantVoLux-GANMagiAI Act竹内将SenpAI.GGProjected GANEUMobalyticsSelf-Distilled StyleGANSDXLArs ElectronicaニューラルレンダリングRTFKTAI規制岡島学AWS SagemakerPLATONIKE欧州委員会映像セリア・ホデント形態素解析frame.ioClone X欧州議会UXAWS LambdaFoodly村上隆欧州理事会誤字検出MusicLM認知科学中川友紀子Digital MarkAudioLMゲームデザインSentencePieceアールティSnapchatMusicCapsLUMINOUS ENGINEクリエイターコミュニティAudioCraftLuminous ProductionsBlenderBot 3バーチャルペットパターン・ランゲージ竹村也哉Meta AINVIDIA NeMo ServiceMubertちょまどマーク・ザッカーバーグヴァネッサ・ローザMubert RenderGOAPWACULVanessa A RosaGen-2Adobe MAX 2021陶芸Runway AI Film Festival自動翻訳Play.htPreViz音声AIAIライティングLiDARCharacter-LLMOmniverse AvatarAIのべりすとPolycam復旦大学FPSQuillBotdeforumChat-Haruhi-Suzumiyaマルコフ決定過程NVIDIA MegatronCopysmith涼宮ハルヒNVIDIA MerlinJasperハーベストEmu VideoNVIDIA MetropolisForGamesNianticパラメータ設計ゲームマーケットペリドットバランス調整岡野翔太Dream Track協調フィルタリング郡山喜彦Music AI Tools人狼知能テキサス大学ジェフリー・ヒントンLyriaGoogle I/O 2023Yahoo!知恵袋AlphaDogfight TrialsAI Messenger VoicebotGoogle I/OインタラクティブプロンプトAIエージェントシミュレーションOpenAI Codex武蔵野美術大学慶應義塾大学StarCraft IIHyperStyleBingAI石渡正人Future of Life InstituteRendering with Style手塚プロダクションIntel林海象LAIKADisneyリサーチヴィトゲンシュタインPhotoshop古川善規RotomationGauGAN論理哲学論考Lightroom大規模再構成モデルGauGAN2京都芸術大学CanvaLRMドラゴンクエストライバルズ画像言語表現モデルObjaverse不確定ゲームSIGGRAPH ASIA 2021PromptBaseBOOTHMVImgNetDota 2モンテカルロ木探索ディズニーリサーチpixivFANBOXOne-2-3-45Mitsuba2バンダイナムコネクサス虎の穴3DガウシアンスプラッティングソーシャルゲームEmbeddingワイツマン科学研究所ユーザーレビューFantiaワンショット3D生成技術GTC2020CG衣装mimicとらのあな高橋力斗NVIDIA MAXINEVRファッションBaidu集英社FGDC淡路滋ビデオ会議ArtflowERNIE-ViLG少年ジャンプ+Future Game Development ConferenceグリムノーツEponym古文書ComicCopilot佐々木瞬ゴティエ・ボエダ音声クローニング凸版印刷コミコパヒストリアGautier Boeda階層的クラスタリングGopherAI-OCRゲームマスター画像判定Inowrld AIJuliusSIE鑑定ラベル付けMODAniqueTPRGOxia PalusGhostwriter中村太一バーチャル・ヒューマン・エージェントtoio SDK for UnityArt RecognitionSkyrimエグゼリオクーガー田中章愛実況パワフルサッカースカイリムCopilot石井敦銭起揚NHC 2021桃太郎電鉄RPGツクールMZComfyUI茂谷保伯池田利夫桃鉄ChatGPT_APIMZserial experiments lainGDMC新刊案内パワサカダンジョンズ&ドラゴンズAI lainマーベル・シネマティック・ユニバースコナミデジタルエンタテインメントOracle RPGPCG成沢理恵MITメディアラボMCU岩倉宏介深津貴之PCGRLアベンジャーズPPOxVASynthDungeons&Dragonsマジック・リープDigital DomainMachine Learning Project CanvasLaser-NVビートルズMagendaMasquerade2.0国立情報学研究所ザ・ビートルズ: Get BackノンファンジブルトークンDDSPフェイシャルキャプチャー石川冬樹MERFDemucsサッカースパコンAlibaba音楽編集ソフト里井大輝KaggleスーパーコンピュータVQRFAdobe Audition山田暉松岡 聡nvdiffreciZotopeAssassin’s Creed OriginsAI会話ジェネレーターTSUBAME 1.0NeRFMeshingRX10Sea of ThievesTSUBAME 2.0LERFMoisesGEMS COMPANYmonoAI technologyLSTMABCIマスタリングモリカトロンAIソリューション富岳レベルファイブ初音ミクOculusコード生成AISociety 5.0リアム・ギャラガーSuno AI転移学習テストAlphaCode夏の電脳甲子園グライムスKaKa CreationBaldur's Gate 3Codeforces座談会BoomyVOICEVOXCandy Crush Saga自己増強型AIジョン・レジェンドGenie AISIGGRAPH ASIA 2020COLMAPザ・ウィークエンドSIGGRAPH Asia 2023ADOPNVIDIA GET3DドレイクC·ASEデバッギングBigGANGANverse3DFLAREMaterialGANダンスグランツーリスモSPORTAI絵師エッジワークスMagicAnimateReBeLグランツーリスモ・ソフィーUGC日本音楽作家団体協議会Animate AnyoneGTソフィーPGCFCAインテリジェントコンピュータ研究所VolvoFIAグランツーリスモチャンピオンシップVoiceboxアリババNovelAIさくらインターネットDreaMovingRival PrakDGX A100NovelAI DiffusionVISCUITぷよぷよScratchユービーアイソフトWebcam VTuberモーションデータスクラッチ星新一賞大阪公立大学ビスケット北尾まどかHALOポーズ推定TCGプログラミング教育将棋メタルギアソリッドVメッシュ生成KLabFSMメルセデス・ベンツQRコードVALL-EMagic Leap囲碁Deepdub.aiナップサック問題Live NationEpyllionデンソーAUDIOGEN汎用言語モデルWeb3.0マシュー・ボールデンソーウェーブEvoke MusicAIOpsムーアの法則原昌宏AutoFoleySpotifyスマートコントラクト日本機械学会Colourlab.AiReplica Studioロボティクス・メカトロニクス講演会ディズニーamuseChitrakarQosmoAdobe MAX 2022トヨタ自動車Largo.ai巡回セールスマン問題かんばん方式Cinelyticジョルダン曲線メディアAdobe ResearchTaskade政治Galacticaプロット生成Pika.artクラウドゲーミングがんばれ森川君2号AI Filmmaking Assistant和田洋一リアリティ番組映像解析FastGANStadiaジョンソン裕子セキュリティ4コママンガAI ScreenwriterMILEsNightCafe東芝デジタルソリューションズ芥川賞インタラクティブ・ストリーミングLuis RuizSATLYS 映像解析AI文学インタラクティブ・メディア恋愛PFN 3D ScanElevenLabsタップル東京工業大学HeyGenAbema TVLudo博報堂After EffectsNECラップPFN 4D Scan絵本木村屋SIGGRAPH 2019ArtEmisZ世代DreamUp出版GPT StoreAIラッパーシステムDeviantArtAmmaar Reshi生成AIチェッカーWaifu DiffusionStoriesユーザーローカルGROVERプラスリンクス ~キミと繋がる想い~元素法典StoryBird九段理江FAIRSTCNovel AIVersed東京都同情塔チート検出Style Transfer ConversationOpen AIProlificDreamerオンラインカジノRCPUnity Sentis4Dオブジェクト生成モデルRealFlowRinna Character PlatformUnity MuseAlign Your GaussiansiPhoneCALACaleb WardAYGDeep Fluids宮田龍MAV3DMeInGameAmelia清河幸子ファーウェイAIGraphブレイン・コンピュータ・インタフェースバーチャルキャラクター西中美和4D Gaussian SplattingBCIGateboxアフォーダンス安野貴博4D-GSLearning from VideoANIMAKPaLM-SayCan斧田小夜Glaze予期知能逢妻ヒカリ宮本道人WebGlazeセコムLLaMA 2NightShadeユクスキュルバーチャル警備システムCode as PoliciesSpawningカント損保ジャパンCaPHugging FaceHave I Been Trained?CM3leonFortnite上原利之Stable DoodleUnreal Editor For FortniteドラゴンクエストエージェントアーキテクチャアッパーグラウンドコリジョンチェックT2I-AdapterXRPAIROCTOPATH TRAVELERxAI西木康智VolumetricsOCTOPATH TRAVELER 大陸の覇者山口情報芸術センター[YCAM]AIワールドジェネレーターアルスエレクトロニカ2019品質保証YCAM日本マネジメント総合研究所Rosebud AI GamemakerStyleRigAutodeskアンラーニング・ランゲージVoyagerLayer逆転オセロニアBentley Systemsカイル・マクドナルドLily Hughes-RobinsonCharisma.aiワールドシミュレーターローレン・リー・マッカーシーColossal Cave AdventureGDC 2024奥村エルネスト純いただきストリートH100鎖国[Walled Garden]​​プロジェクトAdventureGPT調査齋藤精一大森田不可止COBOLSIGGRAPH ASIA 2022リリー・ヒューズ=ロビンソンMeta Quest高橋智隆DGX H100VToonifyBabyAGIIPロボユニザナックDGX SuperPODControlVAEGPT-3.5 Turbo泉幸典仁井谷正充変分オートエンコーダーカーリング強いAIロボコレ2019Instant NeRFフォトグラメトリウィンブルドン弱いAIartonomous回帰型ニューラルネットワークbitGANsDeepJoin戦術分析ぎゅわんぶらあ自己中心派Azure Machine LearningAzure OpenAI Serviceパフォーマンス測定Lumiere意思決定モデル脱出ゲームDeepLIoTUNetHybrid Reward Architectureコミュニティ管理DeepL WriteProFitXImageFXウロチョロスSuper PhoenixWatsonxMusicFXProject MalmoオンラインゲームAthleticaTextFX気候変動コーチングSoraProject Paidiaシンギュラリティ北見工業大学KeyframerProject Lookoutマックス・プランク気象研究所レイ・カーツワイル北見カーリングホールAppleWatch Forビョルン・スティーブンスヴァーナー・ヴィンジ画像解析Gemini 1.5気象モデルRunway ResearchじりつくんAI StudioLEFT ALIVE気象シミュレーションMake-A-VideoNTT SportictVertex AI長谷川誠ジミ・ヘンドリックス環境問題PhenakiAIカメラChat with RTXBaby Xカート・コバーンエコロジーDreamixSTADIUM TUBESlackロバート・ダウニー・Jr.エイミー・ワインハウスSDGsText-to-ImageモデルPixelllot S3Slack AIソフトバンクPokémon Battle Scopeダフト・パンクメモリスタAIスマートコーチポケットモンスターGlenn MarshallkanaeruThe Age of A.I.Story2Hallucination音声変換Latitude占いレコメンデーションJukeboxDreambooth行動ロジック生成AIVeap Japanヤン・ルカンConvaiEAPneoAIPerfusionNTTドコモSIFT福井千春DreamIconニューラル物理学EmemeDCGAN医療mign毛髪GenieMOBADANNCEメンタルケアstudiffuse荒牧英治汎用AIエージェント人事ハーバード大学Edgar Handy中ザワヒデキ研修デューク大学大屋雄裕QA Tech Night中川裕志mynet.aiローグライクゲーム松木晋祐Adreeseen Horowitz東京理科大学下田純也NVIDIA Avatar Cloud Engine人工音声NeurIPS 2021産業技術総合研究所桑野範久Replica StudiosリザバーコンピューティングSmart NPCsプレイ動画ヒップホップ対話型AIモデルRoblox StudioソニーマーケティングPromethean AIサイレント映画もじぱnote環境音暗号通貨note AIアシスタントMusiioFUZZLEKetchupEndelAlterationAI News粒子群最適化法Art Selfie進化差分法オープンワールドArt TransferSonar群知能下川大樹AIFAPet PortraitsSonar+Dウィル・ライト高津芳希P2EBlob Opera大石真史クリムトDolby AtmosBEiTStyleGAN-NADASonar Music FestivalDETRライゾマティクスSporeクリティックネットワーク真鍋大度デノイズUnity for Industryアクターネットワーク花井裕也画像処理DMLabRitchie HawtinSentropyGLIDEControl SuiteErica SynthCPUDiscordAvatarCLIPAtari 100kUfuk Barış MutluSynthetic DataAtari 200MJapanese InstructBLIP AlphaCALMYann LeCun日本新聞協会プログラミングサム・アルトマン鈴木雅大AIいらすとやソースコード生成コンセプトアートAI PicassoGMAIシチズンデベロッパーSonanticColie WertzEmposyGitHubCohereリドリー・スコットAIタレントウィザードリィMCN-AI連携モデル絵コンテAIタレントエージェンシーUrzas.aiストーリーボードmodi.ai介護大阪大学BitSummit西川善司並木幸介KikiBlenderBitSummit Let’s Go!!サムライスピリッツ森寅嘉Zoetic AIゼビウスSIGGRAPH 2021ペットストリートファイター半導体Digital Dream LabsPaLM APIデジタルレプリカTopaz Video Enhance AICozmoMakerSuiteGOT7DLSSタカラトミーSkebsynthesia山野辺一記NetEaseLOVOTDreambooth-Stable-DiffusionHumanRF大里飛鳥DynamixyzMOFLINActors-HQRomiGoogle EarthSAG-AFTRAU-NetミクシィGEPPETTO AIWGA13フェイズ構造ユニロボットStable Diffusion web UIチャーリー・ブルッカーADVユニボPoint-EXLandGatoアパレル岡野原大輔AI model自己教師あり学習DEATH STRANDINGAI ModelsIn-Context Learning(ICL)Eric Johnson汎用強化学習AIZMO.AILoRAデザインMOBBY’SファインチューニングOculus Questコジマプロダクションロンドン芸術大学モビーディックグランツーリスモ生体情報デシマエンジンGoogle Brainダイビング量子コンピュータSound Controlアウトドアqubit写真SYNTH SUPERAIスキャニングIBM Quantum System 2照明Maxim PeterKarl Sims自動採寸北野宏明Joshua RomoffArtnome3DLOOKダリオ・ヒルハイパースケープICONATESizerジェン・スン・フアン山崎陽斗ワコールHuggingFace立木創太スニーカーStable Audio浜中雅俊UNSTREET宗教ミライ小町Newelse仏教テスラ福井健策CheckGoodsコカ・コーラGameGAN二次流通食品パックマンTesla Bot中古市場Coca‑Cola Y3000 Zero SugarTesla AI DayWikipediaDupe KillerCopilot Copyright Commitmentソサエティ5.0Sphere偽ブランドテラバースSIGGRAPH 2020バズグラフXaver 1000配信京都大学ニュースタンテキ養蜂立福寛東芝Beewiseソニー・ピクチャーズ アニメーション音声解析DIB-R倉田宜典フィンテック感情分析投資Fosters+Partners周 済涛韻律射影MILIZEZaha Hadid Architectsステートマシン韻律転移三菱UFJ信託銀行ディープニューラルネットワーク

【CEDEC2020】AIによるデバッグの自動化はどこまで進んでいるのか?

2020.10.05モリカトロン

【CEDEC2020】AIによるデバッグの自動化はどこまで進んでいるのか?

ビデオゲームのハイクオリティ化にともない、デバッグなどのQA(品質管理)にかかるコストも年々膨大なものとなっています。現場の作業負担を軽減させ、かつ可能な限り抜け漏れのないQAを補助するものとしてAIによるQAはゲーム業界全体の注目を集めています。昨年のCEDEC2019では、モリカトロン株式会社代表取締役社長の本城嘉太郎氏が登壇し、「AIにゲームをデバッグさせることは出来るのか? 〜ゲームAI専門会社モリカトロンの挑戦〜」と題するセッションでAIによるQAの全体像と当時の最新技術を発表しました。CEDEC2020では、その続編としてのセッション「AIにゲームをデバッグさせることは出来るのか? Season2 〜monoAI technology AIQAツール開発チームの挑戦〜」を行いました。

関連記事:【CEDEC2019】AIは今どこまでゲームのデバッグをできるのか?

品質管理の分析とは?

AIによるQAの現状は、まだ人によるデバッグ作業から置き換えられる段階ではなく、AIによる自動プレイツールの研究開発と併行して、人によるデバッグの効率化を支援するツールを開発して導入を始めているのが現状です。デバッグ作業を効率化させるアプローチとしてmonoAI Technologyが考えるのは、人の検知する感性や属性を標準化し、その標準化した仕組みをAIに実行させるというものです。そして、その手前で重要なのが現状の品質管理の分析です。

従来型のテストではデバッグをする人員を大量に配置して、とにかく多くのバグを見つけるという作業をしてきました。しかしこれでは、いつ収束するのかも、なぜそのバグが出たのかも、そもそも全部の項目をチェックしきれているのかも分かりません。そういった所を最新のソフトウェアテストの技法、JSTQB(*1) などを取り入れて分析していくことにしました。(本城嘉太郎氏)

*1:JSTQB(Japan Software Testing Qualifications Board)とは、ソフトウェアの信頼性を向上するためのテスト技術を担保するソフトウェアテスト技術者の資格のこと。国際標準のソフトウェアテスト技法が問われる試験になっており、取得のための学習を通じて、ソフトウェアテストの技法を体系立てて学ぶことができる。

例えば、不具合のランク別(SABCD)に発見された数と「どこにその不具合が発生したのか」をプロットします。こちらの例では、システム不具合、コーディングミス、環境設定ミス、マスタ設定ミスなど、さまざまな種類のバグが発生した数をランク別にプロットしています。下記の図を見ると明らかにマスタ設定にミスが集中していることが分かります。

この例では、マスタ設定ミスが要因となる不具合が最も多く64件が検出された。また、最も多い不具合はランクBだが、進行不能になるレベルのランクSやAも検出されており、それがテストの進捗に影響を与えたことが分かる

さらに、ゲームの機能別にそれぞれのバグをプロットすことで具体的なバグの原因を割り出すことができます。

この例では、機能別に見てキャラクターに最も多くの不具合が検出され、そのうちマスタ設定ミスが最も多い。つまり、キャラクターのマスタ設定に問題があると分かる

テストスケジュールの管理も行います。通常は何万件ものテストケースを作成し、それを日々消化していきますが、このようなテストスケジュールもデイリーで進捗を記録しておくことで「最終日に何百個もバグが残っている!」ということもなくなります。

テストケースのステータス結果。日々の進捗を、NG(不具合が発生)、未実装(実装されていないためテストできなかったもの)、削除(仕様変更のためテストしない)、BLOCK(不具合が原因でテストできなかったもの)で分類

進捗を記録しておくことでテストスケジュールの予実管理も可能となります。例えば、下記の図のように、2週間で23,871ケースを消化しようという場合に実際の消化ベースとの乖離をつかむことができます。

折れ線グラフの青い線が理想の進捗で、赤い線が実際の消化ベースを示す。この例では4/29あたりに乖離が出てくる。棒グラフの部分を見ると「未実装」「BLOCK」が伸びているので、実装されていなかったり不具合のためテストできなかった数が多かったことが原因だと分かる

このような品質管理の分析により、遅れてしまった理由を何となく推察するのではなく、具体的にどういった問題が起きたから遅れたのかをエビデンスベースで示すことができます。

今回の事例においては、マスタ設定ミスが多く、特にキャラから多く検出されています。個々の作業員の方のイージーミスなのかスケジュールがタイトなのかを見直した方が良さそうです。テストの進捗の遅れも未実装とBLOCKが多数発生したことで起きているので、テストスケジュール自体を見直すべきです。このような判断を根拠を持ってすることができます。(本城嘉太郎氏)

もちろん、欠かせないのはこうした分析があった上でのエキスパートチームの存在だと本城氏は言います。テストケースを使ってバグをつぶしていくだけではなく、「神デバッガーがその腕でとんでもない所にバグを見つける」という、いわゆる探索型のテストも重要だからです。monoAI technologyは、テストケースでバグを発見しつつ、業界で20年以上実績を積み重ねてきた”神デバッガーの集団”も組織し、人の観点からのバグ検出も行うという両輪によって作業を進めています。2020年8月現在、monoAI technologyでは東京、神戸、京都、福岡、高知の5箇所に正社員・契約社員テスター125名、登録アルバイト300名が在籍しています。

最新のQAツール紹介:今、AIはここまで人のデバッグを支援できる

ここからは、AIをゲームのデバッグに活用するという本題に入ります。冒頭で、AIによる自動プレイツールの研究開発と、人のデバックを効率よく支援するツールの研究開発を併行で進めているという話がありましたが、ここでは後者の支援ツールとしてのAIの活用を中心にご紹介します。

なお、AIによる自動プレイツールの研究、これはグループ企業であるモリカトロン株式会社のAIエンジニアチームが同じCEDEC2020で発表し、こちらの記事で詳細が紹介されています。

関連記事:【CEDEC2020】テストプレイや接待プレイができるAI技術でモリカトロンが目指すこと

monoAI technologyでは、「こんなものがあったらいい」「これは使っておくべきだ」といった現場のQA担当者の意見を参考に、手作業で時間がかかっている部分をツールで改善するための次のようなQAツールの開発を進めています。

  1. monoAIAutoMapper
  2. monoAITester
  3. monoAIBugReporter
  4. monoAIDebugSDK
  5. monoAITextChecker
  6. monoAIVideoCloud
  7. monoAIBTSTransporter
  8. monoAIPallarelViewer

昨年のCEDEC2019においても当時開発中のQAツールが発表されましたが、今回はその続編として、monoAIAutoMapper、monoAITester、monoAIVideoCloud、monoAIBTSTransporterを取り上げ、実際に使用した結果を紹介しました。

monoAIAutoMapper

 monoAIAutoMapperはアプリ画面の遷移を行い、その遷移情報から画面遷移図を生成します。つまり、各画面がどのようにつながっているかを確認する作業を自動化できます。

QAの現場ではテストケースを作る際に画面遷移図が必要になる場合がありますが、画面遷移図が資料になかったり、画面がおおまかにフィックスしてから遷移図を作るプロジェクトもあります。とはいえ、自分たちで遷移図を作ろうとすると、画面を動かしスクリーンショットを撮る作業を繰り返すことになり、手間がかかる上に手作業のためミスも発生しやすくなります。その問題に対応すべく、画面のスクリーンショットから自動で遷移図を作成するツールの開発が始まりました。

monoAIAutoMapperの機能は以下の通りです。

  • 端末画面のスクリーンショットを元に画面遷移図を作成する
  • 遷移図データを用いることでmonoAITesterと連携することで指定画面まで移動するテストも可能

遷移図のファイルやデータをプロジェクトフォルダで一元管理し、各遷移画像に画面のタイトルを付けたり、遷移図のツリー情報を編集できます。

monoAIAutoMapperの概要。開発に使われているのはPython3、GUIの開発にはPyQt5、実行環境作成にはPyInstalller
monoAIAutoMapperの画面。プロジェクトを作成する「ファイル操作」部分、画像解析で取得した画像の一覧を表示する「タイムライン」、解析情報のツリーを表示する「画像リスト」、選択した画像・遷移図を表示する「スクリーン」など。遷移図作成を実行する「遷移ツリー」が表示される

動作フローとしては、monoAIDeviceConnectorに遷移を監視する端末をつなぎ、monoAIAutoMapperと連携させた上で、端末から必要な遷移を行います。monoAIDeviceConnectorは端末の現在の画面を保存し、ソケット通信でmonoAIAutoMapper側に送信します。monoAIAutoMapper側で前後の画面の比較や解析を行い、HTMLとPNGファイルの2種類の遷移図を出力するという流れになります。

実作業で使ってみた結果は、PCにつないで操作するだけで画面が保存されるのでアップロードの手間が不要になりました。操作した通りの遷移の順番をデータとして保持してくれるため遷移図の基本形がその場で作れるので大幅な時間短縮につながりました。

monoAITester

ゲームの自動化テストツールで、monoAITesterで作成したスクリプトの実行によりデバッグ業務の一部を自動化します。また、画像認識によってUIの自動テストなどを行うこともできます。これを開発する目的はふたつありました。ひとつは効率化を図るためです。テスト項目の中には消化するのにとても時間のかかる項目があり、それが自動化できれば他の作業に人手を回すことができます。もうひとつはテスト項目の内容自体が属人化するのを防ぐことです。作業を機械で自動化できれば、それが属人化してしまう問題も解消できるはずです。

monoAITesterの機能は以下の通りです。

  • テストケースの作成と自動実行
  • テスト実行の結果をレポートファイルとして出力する

端末画面のスクリーンショットの撮影も可能で、出力したレポートはダイアログやWebブラウザで閲覧できます。テストケースはプロジェクトフォルダで管理します。

monoAITesterの概要
monoAITesterの画面。上部がファイル操作関連、左の「Assistant」部分に基本的な操作を簡易コマンドとして収納、中央のエディタにテストを実行するスクリプトを記述する(テストケースは1行ごとの処理)

使ってみた結果は、長時間のテストの自動化による効率アップを実現、また属人化の課題も解消できました。また、似たようなものであれば少し調整することでスクリプトを使い回すことも可能で、全体の効率化につながりました。

monoAIVideoCloud

monoAIVideoCloudはゲームのテストプレイの画面動画をサーバで自動保存する動画クラウドです。スマートフォンで操作中のアプリの画面をMovieReporterによってクラウドに録画して保存していきます。保存された動画はWebブラウザを通して見ることができ、クライアントへのバグ報告や再現手順の共有ができます。

不具合の報告において、動画のほうが発生時の手順を伝えやすいのは事実ですが、これまではバックグラウンドで起動したスクリーンレコーダーでの録画はできても端末でテストしたいアプリだけを起動して画面情報を動画で残すことはできませんでした。PCにつないで直接取り込む方法もありますが、動画ファイルの容量が大きすぎてPCに保存ができなかったり、保存できても容量を圧迫するといった問題も生じます。それを解決するためにテストプレイの画面を動画で保存する動画クラウドを開発しました。

monoAIVideoCloudの機能は以下の通りです。

  • 端末画面を録画し、動画をクラウドに保存
  • 保存した動画のトリミング
  • 動画にコメントを付加

動画は発行されるURLで閲覧できます。セキュリティ対策として、アップロード先の動画が流出しないよう案件ごとに分けて管理(データベース・コンテナ・ユーザーを個別に管理)しています。また、URL改変への対応としてULIDを使ったランダム文字列を発行しています。なお、monoAIVideoCloudで撮った動画はストリーミング再生のみとなります。

monoAIVideoCloudの概要
monoAIVideoCloudのシステム概要

monoAIVideoCloudとmonoAITesterを組み合わせることによって、エージングテストを低コストで実現できます。作業現場にmonoAIVideoCloudの導入にしたことで、不具合が解消されるとともにテスト中のプレイ動画をクライアントと共有することができたため作業をスムーズに行えるようになりました。

monoAIBTSTransporter

 monoAIBTSTransporterは、社内のBTS(bug tracking system)のチケット情報を社外の開発会社のBTSに自動で転送する機能です。

テスト業務としてバグチケットを発行する際、いったん社内のBTSに発行し、精査を経てクライアント先のBTSでチケットを発行する手順になります。大型アップデート時など、多い時は1日30件出ることもあります。それらを1つひとつ確認してからコピペする作業が大きな負担を伴う工数になっていました。また、手作業には人的ミスも発生します。monoAIBTSTranspoterはその課題を解消するために開発されました。

monoAIBTSTransporterは、自社のRedmineに起票されたチケットを他社のRedmineに転送することで、先方のRedmineでチケットを作成・起票する権限を自社の作業者全員に付与する必要がなく運用することが可能です。

monoAIBTSTransporterの画面。左の送信元Redmine(社内)にチケットの一覧が表示され、その中からレポートを作成するチケットを選択する

monoAIBTSTransporterの機能は以下の通りです。

  • 社内のRedmineのチケットを客先のRedmineに転送する(添付ファイルや履歴も一緒に転送)
  • 独自の優先度、カスタマーフィールドが設定されている場合は対応表で自動変換する
monoAIBTSTransporterのシステム概要

Redmaineのサーバには外部からチケット一覧やチケットを登録する機能にアクセスできるようにWebAPIが実装されています。BTSTransporterでは、そのWebAPIを利用してまず社内サーバからチケット一覧を読み込み、転送するチケットをユーザーが選択すると、選択されたチケットを相手側のWebAPIを通じて登録していく流れになります。このツールの導入後の反応は好評でした。複数のチケットをまとめて選択して社外のBTSに履歴や添付ファイルごと転送できるようになったため、ミスも減らせたからです。

このように、品質管理業務の効率をアップするツールを新規に開発し、実案件でも使っていますが、monoAI technologyではさらに自動化スクリプトのビジュアルプログラミング対応を行っています。

やはりこれまでプログラミングに触れてこなかった人には手を出しにくいという面がありました。実はテスターさんにPythonのコードを書いてもらった所、結構使えるコードができたんです。これは「プログラマでなくとも自動化はできる」という発見でした。現在、Webクライアント上で関数ブロックを組み上げることでPythonの知識がなくても簡単にテストスクリプトを作成して自動テストを行えるようになっています。また、従来はローカルPCに保存していたテストスクリプトをデータベースに保存することで、テストスクリプトの共有化も進めています。(本城嘉太郎氏)

「AIでバグが取れるようになるにはあと1年かかる」と語る本城氏。今後も挑戦は続き、AI QAのツールやオートプレイを進化させるよう研究開発に取り組んでいきたいとの決意でセッションを締めました。

Writer:大内孝子

RELATED ARTICLE関連記事

小学生向けAIワークショップでモリカトロンが伝えた機械の心

2019.12.11モリカトロン

小学生向けAIワークショップでモリカトロンが伝えた機械の心

『Playable!』スタッフ鼎談:より簡単に、楽しく開発ができるソリューションを目指して

2022.12.20モリカトロン

『Playable!』スタッフ鼎談:より簡単に、楽しく開発ができるソリューション...

若手ゲームAI開発者が考える、AIでゲームを面白くするために必要なことと将来の展望

2022.10.12モリカトロン

若手ゲームAI開発者が考える、AIでゲームを面白くするために必要なことと将来の展...

RANKING注目の記事はこちら