AndroidでYouTubeライブ配信をリアルタイム翻訳する方法
韓国のアイドルが韓国語でライブ配信を始めた。海外メーカーの発表会が英語で流れている。中国語のゲーム配信を追いかけたい。手元にあるのは Android 端末で、いつもどおり YouTube アプリで見ながら、いま流れている音声に日本語の字幕を付けたい。
Android で使える手段は限られています。YouTube の自動翻訳字幕は、配信者が自動字幕を有効にしている配信でしか出ず、遅れも大きく、ライブ配信では字幕自体を切っていることが少なくありません。Pixel や多くの Android 端末に入っている自動字幕起こし（Live Caption）は、音声を文字にするだけで言語をまたぎません。アクセシビリティのための機能なので、韓国語の音声からは韓国語の文字しか出てきません。
Play ストアにある「リアルタイム翻訳」を名乗るアプリの多くは、次のどちらかに落ち着きます。マイクで拾う方式（YouTube をスピーカーで大きめに鳴らし、周囲の雑音に負けないことを祈る）か、ブラウザに戻される方式（YouTube アプリを離れることになる）です。Whisperr の Android アプリはそのどちらでもありません。Android 公式の MediaProjection API で YouTube アプリの音声を直接受け取り、翻訳字幕をピクチャ・イン・ピクチャで YouTube の上に重ねます。
この方法で翻訳できるもの
Android アプリが音声を取り込めるのは次のアプリです。
対象アプリ | 対応範囲 |
|---|---|
YouTube | ライブ配信、プレミア公開、通常の動画、ショート |
ライブ配信、リール、ストーリーズ | |
TikTok | ライブ配信、通常の動画、海外クリエイターの投稿 |
Chrome のタブ、Twitch、Spotify、電話アプリなどの音声は、現時点のアプリ音声取り込みでは対象外です。それらを翻訳したい場合は、パソコンでウェブ版を使うのが現実的です。
手順
1. アプリを入れて言語を選ぶ
Play ストアから Whisperr を入れて開きます。ホーム画面上部の録音バーで、言語のドロップダウンをタップします。
- 翻訳元 … 配信で話されている言語（韓国語、英語、中国語など）
- 翻訳先 … 読みたい言語（日本語）
100 を超える組み合わせに対応しています。無料プランがあるので、課金の前に実際の配信で試せます。
2. フローティング字幕を有効にする
Whisperr アプリの右下の設定アイコンをタップします。
上部の「フローティング字幕」をタップします。
3. 録画を開始する
右下の録画アイコンをタップすると、画面共有の確認画面が出ます。
「1 つのアプリを共有」か「画面全体を共有」のどちらかを選び、次へを押します。成功すると、次のように黒い帯が浮かびます。
4. YouTube を開いてライブ配信を再生する
YouTube アプリに切り替えて、翻訳したいライブ配信を再生します。
YouTube の音声が鳴り始めた瞬間から取り込みが始まります。音声取り込みで配信の音が消えることはありません。スピーカーからもイヤホンからも、これまでどおり聞こえます。
5. 終わったら停止する
フローティング字幕の右上の「×」をタップすると収録が終わります。Whisperr アプリの停止ボタンでも止まります。
他の方法より優れている点
YouTube の上に本当に字幕が重なります。 ピクチャ・イン・ピクチャのウィンドウは、アプリを切り替えても表示されたままです。画面を分割する必要も、別のタブを見る必要もありません。
ここは Android で特に重要な点があります。Play ストアの「翻訳オーバーレイ」を名乗るアプリのいくつかは、ユーザー補助（アクセシビリティ）の権限を要求します。これは、あなたが使うすべてのアプリの、すべての画面の、すべての文字を読み取れる権限です。翻訳ツールが求めるには重すぎます。Whisperr は Android 公式のピクチャ・イン・ピクチャを使うので、この権限を要求しません。提供元不明の APK を入れる必要もありません。翻訳アプリを入れる前に、この点は必ず確認してください。
YouTube の音声を直接取り込みます。 マイク方式では、配信を大きく鳴らして周囲の雑音に負けないことを祈るしかありません。Whisperr は YouTube アプリから出てくる音声そのものを受け取ります。入る音がきれいであれば、出てくる翻訳もきれいになります。音楽が乗る配信、早口の配信、訛りのある話し方では差がはっきり出ます。
文字起こしではなく翻訳です。 自動字幕起こしは同じ言語のまま文字にするだけですが、Whisperr は 100 以上の言語ペアで翻訳します。
追加料金なしで見放題です。 配信ごとの課金も分単位の課金もありません。
対応言語が広いことです。 広東語のゲーム配信、タガログ語のニュース、ポーランド語の e スポーツなど、「対応」と書いてあっても実用にならないことが多い言語まで含みます。
音声は保存されません。 取り込んだ音声はリアルタイムに処理され、サーバー上に保存され続けることはありません。アカウントに残る二言語の記録テキストは、いつでも削除できます。
Android の標準機能では足りない理由
YouTube の自動翻訳字幕は、配信者が自動字幕を有効にしている配信でしか使えず、遅れも大きく、ライブ配信では無効にされていることがよくあります。
自動字幕起こし（Live Caption）は、Pixel と多くの Android 端末に入っていますが、音声を文字にする機能であって、言語を変換しません。対応する入力言語は増えましたが、同じ言語のまま文字になるという性質は変わりません。
Pixel の Live Translate はより近いものの、特定の Google アプリと限られた言語に縛られており、YouTube アプリの上に字幕を浮かせることはできません。
Galaxy AI の通訳機能も同様です。端末上で動き、無料で、Samsung の公表では 16 言語に対応しますが、システムのアプリに限定されており、YouTube の音声には届きません。
Google 翻訳の会話モードは言語をまたぎますが、二人が交互に話して間を置くことを前提にしており、止まらずに流れ続ける配信には向きません。アプリを前面に置いておく必要もあります。
つまり、Android で YouTube のライブ配信をリアルタイムに翻訳し、字幕を YouTube アプリの上に重ねたい場合、MediaProjection を使うアプリが現時点で唯一の道です。
よくある質問
Instagram ライブや TikTok ライブでも使えますか
使えます。手順は同じです。Whisperr で収録を開始し、Instagram または TikTok に切り替えて配信を開けば、字幕ウィンドウが上に出ます。
Twitch や Kick、Chrome のウェブプレーヤーなどについては、パソコンでウェブ版を使ってください。
ワイヤレスイヤホンを使っていても動きますか
動きます。音声の取り込みは、出力先の機器に音が回る前のシステム階層で行われます。Pixel Buds、Galaxy Buds、ソニーの WH シリーズ、AirPods（Android でも）など、いずれも問題ありません。
画面をロックしても収録は続きますか
ライブ配信の間は画面を点けたままにするのが確実です。端末によっては、画面がロックされると Android の電池管理が背後の音声取り込みを止めることがあります。長時間の視聴で画面を消したい場合は、設定 → アプリ → Whisperr → 電池 → 制限なしにしてください。
通信量はどれくらいですか
音声をサーバーに送り続けるため、ビデオ通話と同程度です。長い配信を追う場合は Wi-Fi をおすすめします。
次のライブ配信で試す
流れはこれだけです。
- Play ストアからアプリを入れて、翻訳元と翻訳先の言語を選ぶ。
- フローティング字幕を有効にして、収録を開始する。
- YouTube に切り替えて配信を再生し、浮かんでいる字幕を読む。
YouTubeアプリの上に翻訳字幕を重ねて表示。iPhone一台で、100以上の言語に対応。2台目の端末もスピーカー再生も不要です。