メインコンテンツまでスキップ

動画とエンターテインメント

Whisperr を使って、動画・映画・ライブ配信をリアルタイムの文字起こしと翻訳で視聴しましょう。TikTok Live でも、YouTube の動画でも、Netflix の番組でも、Whisperr が音声をキャプチャして、翻訳された字幕をデバイスに表示します。

最適なセットアップは どのデバイスで視聴しているか によって異なります。下のガイドから自分に合ったものを選んでください。

仕組み

  1. 動画や配信を再生する — TikTok、YouTube、Netflix、Instagram、その他あらゆるメディア
  2. Whisperr が音声をキャプチャし、リアルタイムで文字起こしします
  3. 翻訳された字幕が画面に表示される ので、好きな言語で内容を追えます

どのデバイスで視聴していますか?

📱 スマートフォンやタブレット — フローティング字幕を使う

スマートフォンで TikTok、YouTube、Instagram のアプリを視聴している場合です。フローティング字幕をオンにして Whisperr を起動してから動画アプリに切り替えましょう。翻訳が動画の上に浮かんで表示されるので、アプリを離れる必要はありません。

iPhone が動画にフローティング字幕を重ねてリアルタイム翻訳を表示している様子

💻 パソコンでブラウザ視聴 — Web アプリを使う

Chrome で tiktok.com、youtube.com などのサイトを視聴している場合です。2つ目のタブで Whisperr の Web アプリを開き、動画タブから直接音声をキャプチャさせましょう。インストールは不要で、音声もデジタルキャプチャされるため背景ノイズが入りません。

  • Web AppWeb アプリでのフローティング字幕
  • メリット: 最高の音質、あらゆるウェブサイトに対応、ダウンロード不要
  • デメリット: Whisperr がキャプチャできるのはブラウザの タブ のみです — ウィンドウや画面全体、ネイティブのデスクトップアプリはキャプチャできません。2つのタブを並べて表示すれば、視聴と字幕の確認を同時に行えます
一方のタブに YouTube、もう一方のタブに Whisperr が翻訳字幕を表示した分割画面

🖥️ パソコンで Whisperr デスクトップアプリを使う — システム音声をキャプチャ

Mac または Windows PC に Whisperr アプリをインストール済みの場合です。任意のブラウザ(または任意のアプリ)で配信を開き、Whisperr のソースを システム音声 に切り替えて、Whisperr のウィンドウを動画の隣に置いておきましょう。特定のブラウザタブだけでなく、パソコンが再生しているものすべてをキャプチャできるため、これがデスクトップで最も柔軟な方法です。

  • MacMac でのフローティング字幕
  • WindowsWindows でのフローティング字幕
  • メリット: タブだけでなく、あらゆるアプリやブラウザをキャプチャできる。クリアなデジタル音声
  • デメリット: デスクトップアプリのインストールが必要。字幕は動画の上ではなく Whisperr のウィンドウに表示される

📺 テレビ・プロジェクター・その他のデバイス — マイクキャプチャを使う

テレビやプロジェクター、あるいは他の人の画面で視聴している場合です。動画をスピーカーで再生し、近くに置いたスマートフォンやノート PC のマイクで Whisperr に聞き取らせましょう。

  • すべてのプラットフォームマイク音声キャプチャ
  • メリット: テレビ、プロジェクター、映画館など、あらゆる動画ソースに対応
  • デメリット: 背景ノイズで精度が下がることがある。音質はスピーカーの音量と距離に左右される
テレビで映画を再生し、近くのスマートフォンがマイクで音声をキャプチャして翻訳字幕を表示している様子

簡易比較

フローティング字幕はほとんどの動画・配信アプリで動作します — Zoom、Teams、Meet、Webex など一部のアプリだけは完全にブロックします。詳しくは下記のアプリの対応状況を参照してください。

視聴デバイス…使う方法音質ガイド
iPhone / iPad(ほとんどのアプリ)フローティング字幕最高iPhone・iPad
Android(ほとんどのアプリ)フローティング字幕最高Android
パソコン、Chrome のタブWeb アプリのタブキャプチャ最高Web アプリ
Mac、デスクトップアプリシステム音声キャプチャ最高Mac
Windows、デスクトップアプリシステム音声キャプチャ最高Windows
テレビ・プロジェクター・その他のデバイスマイクキャプチャ状況によるマイク音声キャプチャ

例: TikTok Live を視聴する

  • スマートフォンの場合: Whisperr を開いてフローティング字幕をオンにし、録音を開始してから TikTok アプリを開いて Live に参加します。翻訳が配信の上に浮かんで表示されます。
  • パソコン(Chrome)の場合: 1つのタブで tiktok.com の Live を開き、もう1つのタブで app.whisperr.co を開いて録音をクリックし、画面キャプチャ を選んで TikTok のタブを選択します。
  • Mac または Windows PC(デスクトップアプリ)の場合: 任意のブラウザで Live を開き、Whisperr を システム音声 に切り替えて録音をクリックします。

アプリの対応状況(フローティング字幕)

アプリ対応備考
TikTokTikTok Live を含む
YouTube
Instagram
Weverse
Amazon Prime✅ *1フローティング字幕は動画の再生開始後に起動する必要があります
Netflix✅ *1フローティング字幕は動画の再生開始後に起動する必要があります
Zoom、Teams、Meet、Webexプライバシー上の制限により iOS でも Android でも非対応 — オンライン会議 を参照

*1 これらのプラットフォームでは、先に動画を再生してから、Whisperr アプリでフローティング字幕を有効にしてください。

フローティング字幕がブロックされる場合

一部のアプリはフローティング字幕による音声キャプチャを一切許可しません — Zoom、Teams、Meet、Webex はプライバシー上の制限により iOS でも Android でも完全にブロックしますし、他のアプリも同様の挙動を取ることがあります。そのような場合は、同じデバイスでマイクキャプチャに切り替えましょう。アプリの音をスピーカーで再生し(ヘッドフォンは使わず)、Whisperr をマイクソースで起動し、エコーキャンセルをオフにします。

  • 音声はヘッドフォンではなくスピーカーで再生してください。 音がスピーカーから出ていなければ、マイクには何も聞こえません。
  • 同じデバイスでエコーキャンセルをオフにしてください。 エコーキャンセルはデバイス自身のスピーカー音声をマイクから除外するための機能です — まさにここでキャプチャしたい音声そのものなので、オンではなくオフにする必要があります。
  • これがうまくいくのは、1台のデバイスが両方の役割を担っているからです。上記のテレビやプロジェクターのように別のデバイスで聞いている場合、聞き取る側のデバイスのエコーキャンセルは無関係です。エコーキャンセルはそのデバイス自身のスピーカー音声しかフィルタリングせず、部屋の中の別のものから聞こえてくる音声には作用しないからです。

これはマイクキャプチャのセットアップなので、同じトレードオフが当てはまります。背景ノイズで精度が下がることがあり、音質はスピーカーの音量と距離に左右されます。

対応プラットフォーム

プラットフォーム対応動画のキャプチャ方法
iOSフローティング字幕が動画アプリの上にオーバーレイ表示される
Androidフローティング字幕が動画アプリの上にオーバーレイ表示される
Web Appブラウザタブから直接音声をキャプチャ
Macあらゆるアプリやブラウザのシステム音声をキャプチャ
Windowsあらゆるアプリやブラウザのシステム音声をキャプチャ

より良い結果を得るためのヒント

  • デジタルキャプチャを優先する — モバイルのフローティング字幕、Web アプリのタブキャプチャ、デスクトップのシステム音声はいずれもマイクノイズを回避できます
  • Whisperr の設定でフォントサイズを変更する — 長時間の視聴でも読みやすくなります
  • マイクキャプチャを使うときは背景ノイズを減らす — 他の音源をオフにしましょう

みんなで視聴する

言語が異なる友人や家族と一緒に視聴していますか? 全員のデバイスにフローティング字幕を設定する代わりに ブロードキャストモード を使いましょう。上記のいずれかの方法で動画の音声をキャプチャし、ブロードキャストルームを開始して、リンクを共有します。QR コードは Web アプリからのみ共有できます。

  • ルームを開いた人はそれぞれ 自分の言語を選べます — 同じ配信から、ある人はスペイン語の字幕を読み、別の人は日本語を読む、といったことが同時にできます
  • 読むより聞きたい人は、ルーム内で 音声読み上げモード をオンにすれば、選んだ声と速度で翻訳を音声で聞けます
  • 視聴者に必要なのはブラウザだけです — Whisperr のアカウントもアプリのインストールも不要です

制限事項

  • iOS・Android: プライバシー上の制限により、Zoom、Teams、Meet、Webex の上にフローティング字幕を表示できません — 上記の、同じデバイスでのマイクキャプチャによる回避策を利用してください。一部のストリーミングアプリ(Amazon Prime、Netflix)では、フローティング字幕を有効にする前に動画を再生する必要があります。
  • Web App: キャプチャできるのはブラウザの タブ の音声のみです — 画面全体、ウィンドウ、ネイティブのデスクトップアプリからはキャプチャできません。その場合は Mac または Windows アプリを使用してください。

関連情報