AI・Music　夏の午後にキャシー・AI画像とEasy Jazz（Textual Inversion機能でイタリアの街を再現）

Stable Diffusionで生成した詩織の画像とオリジナルJAZZのコラボ
「AI・Music」の第3弾は、夏の午後にジン・フィズを飲みながら聞いてほしい「Kathy」です。

以前、この曲をモチーフにした英語のショートエッセイを「BingAI」と「chatGPT」に書いてもらったことがありますが、なかなかいい感じに出来て感動しました。興味がある方はこちらもご覧ください。

さて、今日作ったこのMusicVideoの舞台は、イタリアの世界遺産アマルフィ海岸です。イタリアのナポリから更に南東に下った海岸の断崖絶壁の急斜面に、へばりつくように建ち並ぶ家々が印象的ですが、実は僕は行ったことがありません。

以前、ローマからナポリを通って、ポンペイまでは行ったのですが、ポンペイがあまりにも広く見るところがいっぱいで、日程の関係もあり断念しました。

今回、「Kathy」という曲のMusicVideoを作るにあたり、このアマルフィ海岸を舞台に、詩織が青い空の下を歩き回る画像を作ろうと考え四苦八苦しましたが、なかなかうまくいきません。

そんな時、本当にたまたま下記のページを見つけて歓喜しました。

photo by PromptHero

そこで、Textual Inversionという方法を使って、まさにアマルフィ海岸の街並みを再現できることがわかりました。
これは、モデルに対して、追加の学習結果を適用できるStable Diffusionの機能で、ファイルをダウンロードして、PROMPT上に、その指定ワードを入れれば、街並みが再現できるというものです。

早速、適用してみると、見事に街並みが再現されました。感動です！

ただ、実際の街並みはけして色鮮やかというわけでもないので、PROMPTにテラコッタの壁や花、両開きの窓などの言葉を入れて生成し、完成させたのが、今日のMusicVideoの画像です。

夏の午後に、冷たいジン・フィズでも飲みながら可愛い写真とオリジナルEasy・Jazzをお楽しみください。

『Kathy』

I still don't know anything about you,
But I fell in love with you.
I have only two pictures and the message you gave to me・・・

Even so, Why in my mind,
The everything you give me seems to shine for me
I have only two pictures and the message you gave to me・・・

Kathy・・・
your smile, your voice, How far is the distance between you and me?
If you say to me you want to see me,
I will fly to your place soon.
Kathy・・・
your eyes, your lips, How far is the distance between you and me?
If you say to me you love me too,
I will fly to your heart, Kathy・・・

AI・Musicの他のシリーズは下記からご覧ください。

MusicVideoに使用した画像はこちらです。
モデル：chilloutmix_NiPrunedFp32Fix
Textual Inversion：Italian Style