AIしげちゃん（スマホ版）Ver 2.4

2023.08.15

生成AI(GPT-3.5/4)と音声認識・合成(Google Cloud Speech)により、VRM形式の3Dアバターと音声対話できるスマホアプリ

基本機能

• 音声による質問を認識し、生成AIの回答を音声で話す

• 生成AIの回答等に応じて3Dアバターの表情や動作が変わる

追加機能

• 生成AIの回答を音声だけでなくテキストウインドウでも表示

• 気象庁の気象情報APIを利用し、指定した地域の天気予報等を答える

• 環境センサーと連携し、温湿度の値や不快指数等を答える

• スマートリモコンと連携し、部屋の照明や家電製品を制御する

• ウェイクワード(起動音声コマンド)の代わりにマイクボタンをタッチすることで、音声入力待機状態にできる

• 音声入力待機時に待機ウィンドウをクリックすると、プリセットされた質問をランダムに行い、生成AIに回答させることができる

• アイドル時にプリセットされた独り言をランダムに喋る。

• 3Dアバターをクリックすると、プリセットされた独り言をランダムに喋らせることができる

• タイトルをタッチするとプリセットされた動作をランダムに行う。

ChatdollKitをベースにさせていただき、いくつか機能を追加して、概ねやりたかったことはできたので、ほぼ完成版かなw

AIしげちゃん（スマホ版）Ver 2.4