ゲームアセット生成AI Scenario:　Isometric 2D Tilesゲームステージ作り

nakashun

2023年9月3日 08:08

GenerativeAIをゲーム開発に活用する方法Tipsのマガジンゲーム開発AI Lab.
Witchpotに含まれる記事です

ゲームアセット用生成AIサービスのScenarioの紹介はこちら

Unity向けプラグインの使い方の一つとしてUnity上でIsometricの2D Tilemapを作るワークフローが紹介されていました

これに従って作っていくとこの↓動画のようなゲームステージを作ることが出来ます

このワークフローを翻訳するとともに実際に試した中での注意点や追加で行った処理などをまとめます

WitchpotではScenarioのようなゲーム開発に生成AIを活かすツールをフル活用してゲームを開発、また生成AIツールの開発や展開を行っています

生成AI x ゲーム開発の情報を発信していきますのでTwitterやnoteをよかったらフォローしてください

事前準備

もしScenarioのUnityプラグインのインストールがまだの場合はインストールを行ってください

またUnityのTilemapの取り扱いの細かい部分はスキップしています
調べれば公式の解説↓や解説ブログがあるのでそちらで使い方を押さえてある前提です

タイルの生成

まず初めに建物やアイテムなどタイルマップの構成オブジェクトを画像生成AIツールを使ってどんどん作って行きます

タイルはベースとなる↓の画像をControlNetのガイドとして利用していきます
ダウンロードしてご使用ください

これは作るTilemapのグリッドの形状に合わせて作成されています

Unity上 Window > Scenario > Prompt Window より画像生成の画面を開きます

Modelは特にこだわりがなければ最初はPublic Modelsの中にあるAssetDiffusion(Beta)を選択します

Prompt Windowで建物のあるタイルを作る想定で設定を行います
下の画像の赤でハイライトした部分を設定していきます

・Image to Imageを選択して
・ダウンロードしたベースのタイル画像を設定
・Enable ControlNet と Advanced Settingsをアクティブに
・Model1にCannyを選択してWeightを1に設定
・Promptに isometric building, low poly style などを設定
・Sampling steps : 75, Guidance : 9.0, Influence : 0.5 程度に設定

タイルが生成されます
ControlNetのModelがcannyでうまく生成できないときlineartやdepth, normal-mapなどに変更したりしても良い絵が生成できました

タイルの設定

まずWindow > Scenario > Scenario Settings からSave Folderに設定したフォルダがあることを確認してください
筆者はTexturesフォルダを作成し設定しました
※このフォルダがないと、このあとの処理画像が保存されずエラーになってしまいます

出来たタイル用の画像を選択するとRemove Backgroundボタンが出てくるのでこれをクリックします