指定したアプリだけ翻訳
ゲームとDiscordを同時に開いているときは、ゲームを選ぶとそのセリフだけが字幕になります。仲間の会話を読みたいときはDiscordを選びます。
音声入力 · アプリ単体 / システム音声聞き取れない声を、
読める字幕に。
選んだゲームやアプリの音声だけを翻訳できます。ストーリーの会話には映画字幕、チームの会話には従来のオーバーレイが使えます。
5言語・20方向のオンライン翻訳 · 日本語・韓国語・ロシア語はBeta · 英語↔中国語はオフライン対応
VoxGoはWindowsのシステム音声を取り込み、PC上で認識して翻訳し、字幕ウィンドウに表示します。スクロールして処理の流れをご覧ください。
ゲームとDiscordを同時に開いているときは、ゲームを選ぶとそのセリフだけが字幕になります。仲間の会話を読みたいときはDiscordを選びます。
音声入力 · アプリ単体 / システム音声faster-whisperがPC上で音声を認識します。VoxGo Liteでは初回利用時に認識モデルをダウンロードします。
He is one shot behind the box.ローカル音声認識:動作中v0.6.1は20方向のオンライン直接翻訳と、英語↔中国語のローカル翻訳に対応。現在の翻訳方式は字幕ウィンドウに表示されます。
Rotate B, don't peek mid. → 转 B,别探中路。方式:API / ローカル原文と訳文を透明な最前面ウィンドウに表示します。翻訳済み字幕のコピーや、同じLAN内のスマートフォンへの同期も可能です。
LIVE SUBTITLE / 转 B,别探中路。出力:リアルタイム字幕中国語、英語、日本語(Beta)、韓国語(Beta)、ロシア語(Beta)に対応。各言語から残り4言語へ直接翻訳できます。
| 言語 | ローカル認識 | オンライン | オフライン |
|---|---|---|---|
| 中国語(標準中国語) | 対応 | 残り4言語と相互翻訳 | 英語 ↔ 中国語 |
| 英語 | 対応 | 残り4言語と相互翻訳 | 英語 ↔ 中国語 |
| 日本語(Beta) | 対応(Beta) | 残り4言語と相互翻訳 | 非対応 |
| 韓国語(Beta) | 対応(Beta) | 残り4言語と相互翻訳 | 非対応 |
| ロシア語(Beta) | 対応(Beta) | 残り4言語と相互翻訳 | 非対応 |
WhisperがPC上で音声を認識します。オンライン翻訳は、ご自身のAPIキーや利用権限で設定したOpenAI互換サービス・モデル、またはGoogle Cloud Translation Basic v2が認識テキストを処理します。ローカルOPUSは英語↔中国語のみで、他の18方向はオンライン翻訳が必要です。対応言語と品質はサービス・モデルによって異なります。無断のサービス切替や他言語経由の翻訳は行いません。
Beta言語では、短い発話、雑音、音楽、声の重なりによって聞き落とし、誤訳、遅延が発生する場合があります。認識精度、処理性能、字幕の安定性を継続的に改善します。
どちらの方式でも音声認識はローカルで実行します。翻訳には、設定したオンラインサービスかPC上のモデルを利用できます。
v0.6.1は、ご自身で設定したOpenAI互換サービスまたはGoogle Cloud Translation Basic v2を通じて20方向のオンライン翻訳に対応します。APIキーは各自でご用意ください。対応言語はサービス・モデルに依存します。
ローカルOPUSは英語↔中国語のみ対応。モデルを準備すればAPIキーなしでオフライン翻訳できます。他の18方向では、オンラインサービスを明示的に選択・設定する必要があります。
各改善の詳細はGitHub Releaseで確認できます。
多くのプレイヤーにはLiteがおすすめです。初回起動時に翻訳と音声のテストを案内し、認識モデルをダウンロードします。
初めて試す方向けの軽量パッケージです。ローカルWhisper認識、APIまたはローカル翻訳、ゲーム字幕ウィンドウを利用できます。
Whisper small/baseの多言語モデルを同梱し、初回ダウンロードを減らします。
NVIDIAユーザー向けに多言語モデルとCUDA DLLを同梱しています。
すべてのパッケージとチェックサムはこちら: 最新のReleaseを見る
ゲームを始める前に翻訳と音声を確認しましょう。字幕が出ない場合、多くはWindowsの出力デバイスの選択に原因があります。
Lite、Full、Full-CUDAのいずれかをダウンロードし、展開します。
VoxGo.exeを起動し、初回設定を完了します。
OpenAI互換サービスまたはGoogle Translationを選択し、APIテストを実行します。
既定ではシステム音声を使います。Windows 11 では設定の音声タブで「指定したアプリだけ翻訳」を選べます。会話を再生して音量メーターを確認してください。
字幕ウィンドウを移動・固定し、ゲーム中はホットキーやトレイアイコンを利用します。
使った感想を共有し、サポートや更新情報を受け取り、今後のVoxGoについて話しましょう。
お知らせ、サポート、機能の提案。
Discordに参加 ↗中国語でのお知らせと交流。
KOOKに参加 ↗バージョン、デバイス、再現手順を添えてください。
Issueを作成 ↗ソースコードの閲覧、開発への参加、公開版の確認はこちら。
ソースコードを見る ↗交流、使い方の質問、機能の提案は各コミュニティへ。再現可能な不具合やコードの問題は次の窓口へ: GitHub Issue.
字幕ツールを使う前によくある疑問にお答えします。
認識時に単語や文末が抜けたり、翻訳で固有名詞・数字・否定が変わったりする場合があります。雑音、音楽、複数人の発話は誤りを増やします。遅延はCPU、音声の分割、ネットワーク、翻訳サービスに依存します。Betaは改善中であることを示し、精度の割合、一定の遅延、ゲームのFPSは保証しません。
ゲームやDiscordのシステム音声を取り込みます。v0.6.1は5言語の認識と20方向のオンライン翻訳に対応し、日本語・韓国語・ロシア語はBetaです。
はい。英語↔中国語のみ対応します。ローカルOPUSモデルを準備すればAPIキーは不要です。v0.6.1の日本語・韓国語・ロシア語を含む方向はオンライン翻訳が必要です。
既定では録音しません。VoxGoはゲーム音声、Discord、動画など、Windowsのシステム出力音声を取り込むためのツールです。
いいえ。VoxGoは独立したデスクトップアプリです。Windowsの音声デバイスから音を取り込み、透明な最前面ウィンドウに字幕を表示します。
選んだ音声デバイスがWindowsの現在の出力と異なる可能性があります。初回設定または設定画面の音声メーターを使い、ゲームやDiscordの音で反応するループバックデバイスを選んでください。
v0.6.1は中国語(標準中国語)、英語、日本語(Beta)、韓国語(Beta)、ロシア語(Beta)と20方向のオンライン翻訳に対応します。詳細は上の対応言語表をご覧ください。
LiteはモデルもCUDA DLLも同梱しません。FullはWhisper small/baseの多言語モデルを同梱し、CUDA DLLは含みません。Full-CUDAはNVIDIA向けに両方を同梱します。英語専用モデルは純英語環境を有効にした場合のみ必要に応じて取得します。
VoxGoはゲームプロセスにコードを注入しません。既定ではマイクではなくシステム音声を取り込み、Whisper認識はローカルで実行。翻訳サービスはユーザーが選びます。
字幕は独立したウィンドウです。ゲームクライアントへのパッチ、フック、改変は行いません。
Whisperによる音声認識はPC上で実行します。翻訳リクエストは設定したサービスに送信します。
ソースコードはGitHubで公開しており、パッケージ作成スクリプト、更新情報、実行処理も確認できます。
不具合報告には、バージョン、デバイス、サービス、遅延、ログの場所を含むアプリ内テンプレートを利用できます。使い方の質問や機能の提案はコミュニティへどうぞ。