Ayase

VR向けフェイストラッキングカメラ 「クチトラ」 本製品「クチトラ」は、口元の動きをリアルタイムでトラッキング可能な、Babble互換のフェイストラッキングカメラです。 160°広角ナイトビジョンカメラと非可視光の赤外線LEDにより鮮明な映像を出力することができます。 ソフトウェアは付属しておりません。 ご使用の際は、フェイストラッキングソフト（Babbleなど）をダウンロード・インストールいただいた上で、PCに接続してご利用ください。 ----------内容物---------- ・クチトラ本体 ・USB Type-C ケーブル ※おまけ ・汎用VR用マウント（両面マジックテープ） ・個別VR用マウントいずれか1点（Quest 3 / Quest 3S / Quest 2 / Pico 4） ※汎用マウントおよび個別マウントはテスト中の試作品となります。 現在、Pico 4 および Quest 2 にて検証済みですが、他機種での動作確認は未実施のため、マウントに関するサポートは致しかねます。予めご了承ください。 ---------- 製品仕様（スペック）---------- 項目 内容 ・モジュール ESP32-S3 WROOM ・最大画素数 200万画素 ・撮影方式 ナイトビジョン ・最大フレームレート 30fps ・視野角 160° ・接続端子 USB Type-C ・接続方式 有線（USB-UART／シリアル通信） ・電源 外部給電（5V / 1.5〜2A） ---------------------ご注意事項-------------------- ・本製品は、個人が3Dプリンタで製作したハンドメイド品となります。 そのため、小さなキズやバリ取り跡、見た目に影響のない程度の成形誤差が見られる場合がございます。あらかじめご了承のうえご購入ください。 ・本製品は、PCとの接続を前提とした設計となっております。 VR機器単体ではご使用いただけませんので、ご注意ください。 ・本製品は「Babble」ソフトウェアに対応しておりますが、ソフトウェア自体のご使用方法などにつきましてはサポート対象外となっております。 お手数をおかけいたしますが、詳細はGoogleなどで「Babble」に関する情報をご検索のうえご確認ください。 ・USBポートからの電力供給が不足している場合、カメラ映像がちらつく可能性がございます。 必ず5V / 1.5〜2Aの給電が可能なUSBポートに接続してください。 ・クチトラ本体およびマウントのご使用により発生した機器の破損等に関しては、一切の責任を負いかねます。あらかじめご了承ください。 ・製品の改良に伴い、仕様や外観の一部を予告なく変更する場合がございます。 -------------------------------------------------------------------------------------- セットアップ　Project Babble + VRCFaceTracking + クチトラ -----手順の概要----- 1.VRCFaceTracking (VRCFT) をインストールする 2.Project Babble を導入する 3.クチトラを設定する 4.VRCFTでBabbleプラグインを有効化する 5.VRChatで表情を反映させる ----------1. VRCFaceTrackingのインストール---------- 公式サイトまたはGitHubより最新のVRCFaceTrackingをダウンロードしてください。 　👉 https://github.com/benaclejames/VRCFaceTracking ダウンロードしたZIPファイルを解凍し、VRCFaceTracking.exe を起動します。 初回起動時に「VRChat OSCが有効か確認しますか？」というメッセージが表示された場合は、「はい」を選択してください。 設定画面で次の項目を確認します： 　- “Start with Windows” → 無効でも問題ありません。 　- “Start VRCFT with VRChat” → 有効にしておくと便利です。 ----------2. Project Babbleのインストール---------- 公式ページ（GitHub）よりProject Babbleをダウンロードします。 　👉 https://github.com/Project-Babble/Baballonia/releases 最新バージョンを取得し、解凍後インストールしてください。 💡 Project Babbleは、カメラ映像からAIを使って表情を推定し、そのデータをVRCFaceTrackingに送信するアプリケーションです。 ----------3. クチトラのセットアップ---------- お使いのパソコンにクチトラを接続します。 Babbleを起動し、「Face Camera Adress」から「COM11」を選択します。 「Start Camera」を選択し、クチトラのカメラ映像が表示することを確認します。 「Image Rotation」のスライダー調節し映像の向きを調整します。 ※babbleにクチトラが認識しない場合ファームウエアを再書き込みすることで改善される場合があります。 再書き込み用のファームウエアはこちらからダウンロードします。 EyeTrackVR https://github.com/EyeTrackVR/FirmwareFlashingTool/releases EyeTrackVRを起動し、「Select board」から「wrooms3USB」を選択し次へ進みます。 「Install Openiris」を選択しファームウエアを書き込みます。 Firmware flashed successfully!と表示されたら書き込み完了です。 クチトラを再接続してBabbleを起動し「Face Camera Adress」から「COM11」を選択できるか確認してください。 ----------4. VRCFTでBabbleプラグインを有効化する---------- VRCFaceTrackingを起動します。 “Active Modules” の一覧に “Babble” が表示されているか確認してください。 表示されていない場合は、以下の手順を行います： 　　左タブのダウンロードアイコンをクリック 　　VRCFT-Babbleをインストール 　- その後、VRCFTを再起動してください。 “Babble” に「✅ Active」と表示されていれば、接続は成功です。 ----------5. VRChat側の設定---------- VRChatを起動し、フェイストラッキング対応のアバターを選択します。 アバターが「Expression Tracking」または「VRCFT対応」であることをご確認ください。 ----------表情が反映されない場合は、次の項目を確認します：---------- 　- VRChatの設定で「OSC」が有効になっているか 　- VRCFTのステータスが「Connected to VRChat」になっているか -------------------------------------------------------------------------------------- ■ 更新履歴 2025年10月9日　販売開始