AIアバターとの音声会話によって、MR空間から現実空間を制御
とあるセミナーでXRと生成AIについて喋ることになったので、以前、Meta Quest 3のパススルー機能のテスト用に作った「AIしげちゃん(MR版)」のデモ動画を作成し直して、生成AIとXR、現実空間とデジタル空間(MR空間)が融合しているイメージのデモ動画にしてみました。
前回のデモ動画では、MR空間内で「AIしげちゃん」と音声会話したり、Function callingで気象庁のAPIから指定した都市の天気予報を取得・回答させたりして、生成AIとXRが連動している様子