Skip to content

3.6.0

Choose a tag to compare

@github-actions github-actions released this 19 Oct 09:32

[2026/10/19] VRCT v3.6.0 Release 🎉

VRChatのチャット吹き出しを読み取って翻訳する「チャット読み取り」機能と、VRの中からVRCTを操作できる「VR UI(β版)」を追加しました。あわせて、音声認識のVAD対応、アップデート画面の刷新、設定画面の検索、安定性・セキュリティの改善を行いました。

✨ 新機能

💬 チャット読み取り(OCR)

  • VRChatの画面に表示されるチャット吹き出しを読み取り、翻訳してメッセージログとSteamVRオーバーレイに表示する機能を追加しました。メイン画面の機能として、翻訳・マイク・スピーカーと同じようにON/OFFできます。
  • 吹き出しの検出には専用に学習したAIモデルを使い、VRCTのオーバーレイなど吹き出し以外の文字を拾いにくくしています。
  • SteamVRの起動中はVRの画面から、それ以外はVRChatのウィンドウから読み取ります。
  • 読み取り言語、キャプチャ対象のウィンドウ名、キャプチャ間隔、信頼度の下限、最小文字数を設定できます。読み取り中に言語を変えてもそのまま切り替わります。
  • 読み取った結果はVRChatのチャットボックスへは送信しません。
  • 開始できない場合(モデル未準備など)は、理由を通知します。

🥽 VR UI(β版)

  • VRの中に手首のランチャーとウィンドウを表示し、翻訳・マイク・スピーカー・チャット読み取りのON/OFF、ログの確認、言語の変更、設定の変更ができるようにしました。設定画面のVRタブからON/OFFでき、字幕のオーバーレイとは別に使えます。
  • ウィンドウはグリップで掴んで移動・押し引き・拡大縮小でき、ログウィンドウは角を掴んで大きさを変えられます。空間への固定や、見失ったウィンドウの呼び戻しにも対応しています。
  • ランチャーを見失ったときは、設定画面の「ランチャーの位置と大きさを初期に戻す」で左手首に戻せます。
  • ボタンの説明を表示する吹き出しを、VR内の設定からON/OFFできます。
  • VR UIの設定ウィンドウを開いている間は、翻訳と文字起こしを一時停止します(閉じると再開します)。

🎙️ 音声認識

  • マイク/スピーカーの入力感度に「VAD(自動)」を追加しました。AI(Silero VAD)で人の声を検出し、話し終わるごとに音声認識へ送るため、BGMやゲーム音の誤認識を抑えやすくなります。マイクとスピーカーで個別に設定できます。

🔄 アップデート画面の刷新

  • アップデート画面を作り直し、安定版/Beta版のリリースチャンネル、CPU版/GPU版、インストールするバージョン(ダウングレードを含む)を1つの画面で選べるようにしました。
  • インストール前に、現在とインストール後の構成の違いを表で確認できます。ダウングレードやチャンネルの切り替え時には注意を表示します。
  • 選べるバージョンは v3.6.0 以降です。バージョンの切り替え機能は v3.6.0 から入るため、それより前のバージョンへ戻すことはできません。
  • インストーラーの表示言語がVRCTの表示言語と連動するようにしました。

⚙️ 設定画面

  • 設定項目の検索機能を追加しました。
  • 翻訳タブを「AI翻訳(ローカル)」「外部翻訳API」「ローカルLLM・互換サーバー」に分けました。
  • デバイス設定をマイク/スピーカーのセクションに分けました。
  • 翻訳/音声認識モデルの一覧に「デフォルト」を表示するようにしました。
  • 音声認識エンジンに応じて、必要な設定項目だけを表示するようにしました。Whisperの詳細設定(Avg Logprob / No Speech Prob)はWhisper選択時のみ表示し、説明文を追加しました。
  • 入力欄でEnterキーでも保存できるようにしました。数値入力欄は矢印キーで微調整でき、マウスホイールで値が変わらないようにしました。
  • ホットキーが他と重複している場合にエラーを表示するようにしました。
  • 「認証キー」の表記を「APIキー」に統一しました。

🛠️ 改善

  • 起動時の翻訳・音声認識エンジンの確認を並列に行い、起動時間を短縮しました。
  • 複数の言語へ翻訳するときに、並列で翻訳するようにしました。
  • 無音を挟まずに話し続けたり環境音が続いたりした場合でも、15秒ごとに区切って文字起こしし、遅延が積み重ならないようにしました。
  • VRCTを先に起動した場合でも、VRChatのアバター読み込みのたびにマイクのミュート状態を同期するようにしました。
  • マイクの自動選択は、Windowsの既定のデバイスに追従するようにしました(仮想オーディオデバイスなどへ勝手に切り替わらなくなります)。
  • メイン画面上部の「VRCマイクミュート同期」「最前面表示」をポップアップなしで直接切り替えられるようにしました。
  • 会話ログや設定ファイルの場所を開いたときに通知を表示するようにしました。トースト通知のエラーメッセージを選択してコピーできるようにしました。
  • ドロップダウンメニューが親要素で切れないようにし、外側クリックやEscキーで閉じられるようにしました。
  • AboutVRCTのドキュメントリンクを表示言語(日本語/英語)に合わせて開くようにしました。
  • GPU版のパッケージ構成を見直し、PyTorchへの依存をなくしました。
  • Web翻訳エンジン(Google/Bing/Papago)の内部実装を置き換えました。オフラインで起動しても、ネットワークが戻れば翻訳できるようになります。
  • AIモデルのダウンロードに再試行とタイムアウトを追加し、一時的な通信断で「AIモデル未検出」になる問題を防ぎました。

🔒 セキュリティ

  • アップデート時にダウンロードしたインストーラーをSHA-256で検証し、一致しない場合は更新を中止するようにしました。
  • WebSocketサーバーにトークン認証を追加しました。外部ツールから接続する場合は、設定画面の「WebSocket URL(クリックでコピー)」からトークン付きのURLをコピーして使ってください。OBSブラウザソースは自動で対応しています。また、0.0.0.0 / :: での待ち受けはできなくなりました。
  • APIキーがログや標準出力に平文で出力される問題を修正しました。

🐛 バグ修正

  • WebSocketサーバーで異常な切断が起きると、OBSブラウザソースが真っ白になる問題を修正しました。
  • 音声デバイスの抜き差しや自動選択のON/OFFが重なったときに、録音が止まったまま復帰しない問題を修正しました。
  • マイクにWASAPIのステレオ入力(例:MOTU M Series の In 1-2)を選ぶと、音量メーターは動くのに文字起こしが一切出ない問題を修正しました。
  • 起動処理が固まったまま終わらない場合があった問題、固まった際に終了できない問題を修正しました。
  • 起動完了がGitHubへの更新確認の応答を待って遅れる問題を修正しました。
  • ログ出力が詰まると、アプリ全体が数十秒固まる場合があった問題を修正しました。
  • クリップボード機能でウィンドウのフォーカスに失敗したときの挙動を修正しました。失敗時は通知を表示します。
  • 色の設定で無効な値が保存される問題を修正しました。
  • OpenAI互換のURLを空にすると設定が失われる問題を修正しました。
  • 処理デバイスの一覧に選択中のデバイスがない場合に、設定タブが落ちる問題を修正しました。
  • 設定画面のスライダーで目盛りやラベルが表示されない問題を修正しました。
  • 稀にUIとの通信でパースエラーが起きる問題を修正しました。

🗑️ 削除

  • プラグイン機能を廃止しました。
  • AboutVRCTのポスターセクションとローカライズ項目を削除しました(ローカライズの協力者はスペシャルサンクスに掲載しています)。

🔗 リンク (Link)