こないだ少しバズったトラッキングシステムを紹介する記事
上のツイートのシステムの話です。
システムの概要
Live2Dの描画制御は昔に作ったGadgetXLive2DをCubism4の読み込みやiPhoneXで動作するフェイスキャプチャソフト「Face Cap」の通信規格を受け取れるように改造したものを使用しています。
同様のことをしようとする場合、GadgetXLive2DはCubism3,4対応版はライセンスの関係で公開が難しいのと、
Face Capはソフト自体は無料でもキャプチャデータをUDPで長時間飛ばすのに7000