ユーザーローカル、AIを活用したVTuberシステムを無償で提供開始

この「Webcam VTuber」は、AIアルゴリズムによってカメラ映像から顔の動きやまばたきを読み取り、画面内のVRMキャラクターにリアルタイム反映することができる。ハンドトラッキングにも対応しており、腕や手のひら、指の動きを3Dモデルに反映させることができる。ソフトウエアをインストールすることなく、Webブラウザからすぐに利用可能だ。

顔の表情変更やキャラクター変更にも対応しており、すべての機能が無償で利用可能。無料配信ツールのOBS（Open Broadcaster Software）やHDMIキャプチャと組み合わせることで、YouTubeの動画配信やzoom通話に使用できる。AIによる顔のトラッキングや骨格推定はすべてWebブラウザ内でのみ行われるようになっており、利用者のカメラ映像がインターネットに送信されることはない。

Webサイトにアクセスするだけで、数秒から十数秒ほどで起動する。Webカメラ映像をトラッキングして、すぐにアバターを操作可能だ。顔の表情は、笑顔・困り顔・怒り顔などに対応しており、画面にある表情アイコンを押すか、ショートカットキーとして1～5の数字を押すことですぐに変更できる。アバターは複数のモデルを簡単に切替可能で、利用者オリジナルのVRMモデルのアップロードにも対応している。