観客のスマートフォンと会場スクリーン向けに原語字幕と多言語字幕を表示するPockitle Live Console

SurtitleLive、Pockitleを正式リリース:台本のない公演にライブ字幕を


公演で使われる言葉の中には、何か月も前から準備できるものがあります。一方で、演者や登壇者、観客がその場で口にするまで存在しない言葉もあります。

SurtitleLiveは、Pockitleを正式にリリースしました。Pockitleは、完成した字幕台本を事前に用意できない演劇、トーク、パネルディスカッション、ワークショップ、Q&Aなど、音声を中心とする催しのためのライブ字幕ツールです。

Pockitleは一つの話し言葉を聞き取り、その言語でライブ字幕を生成します。さらに、機械翻訳による字幕を最大3言語まで追加できます。観客はウェブリンクまたはQRコードから自分のスマートフォンで字幕を開き、会場側は選択した1言語を共有スクリーンに表示できます。

字幕台本をアップロードする必要も、事前に組んだキュー列を操作する必要もありません。

ただし、PockitleはSurtitleLiveの事前準備型サータイトル・ワークフローを置き換えるものではありません。二つの製品は、出発点となる言葉が異なります。

  • SurtitleLiveは、事前に準備し、編集し、翻訳し、稽古し、キュー出しできる言葉のための製品です。
  • Pockitleは、話されたその瞬間に字幕化しなければならない言葉のための製品です。

どちらを選ぶかは、まず次の問いから考えられます。

公演が始まる前に、何が話されるか分かっていますか?

Pockitleでできること

Pockitleは、会場で話される音声を観客が読める字幕へ変える、ブラウザベースのワークフローです。

制作チームやイベント運営者は、次のことができます。

  • イベントで話される一つの言語を選択する。
  • その原語のライブ字幕を配信する。
  • 翻訳字幕を最大3言語まで追加する。
  • 観客に一つのリンクまたはQRコードを案内する。
  • 観客が自分のスマートフォンで利用可能な言語を選べるようにする。
  • 会場スクリーンに選択した1言語を表示する。
  • Pockitle Live Consoleから字幕の開始、一時停止、再開、監視を行う。
  • 必要に応じて、重要な非発話場面のために準備済みメッセージを追加する。
  • イベント後の確認用として、タイムスタンプ付き字幕記録を任意で保存する。

観客がアプリをインストールする必要はありません。

確定した同じ字幕状態を、個人のスマートフォン表示と会場の共有スクリーンの両方に送れます。オペレーターが表示先ごとに別々の字幕列を配信する必要はありません。

Pockitleの使い方

実際の流れは、意図的に分かりやすく設計されています。

1. イベントを作成する

New showから始め、そのイベント専用の観客用アドレスを作成します。

このアドレスはリンクとして共有することも、QRコードとして掲示することもできます。観客はイベントの前または最中に、そこから字幕ビューアーへ入ります。

2. 言語を選ぶ

公演またはイベントで話される一つの言語を選択します。

その言語は原語字幕として自動的に含まれます。続いて、観客向けの翻訳字幕を最大3言語まで追加できます。

開場前に制作チームが実際に確認できる言語だけを提供してください。

3. 音声入力を準備し、テストする

Pockitleはマイク入力でも動作しますが、会場ミキサーから制御された台詞音声を受け取れる場合は、その方が通常は安定します。

入力テストでは、本番で使うマイク、コンピューター、ブラウザ、ミキサー経路、会場条件をそのまま使ってください。QRコードをどこに置くかよりも、明瞭な音声信号の方が重要です。

音楽、残響、拍手、発話の重なり、遠いマイクは、いずれも認識結果に影響します。

4. 観客用と会場用の出力を準備する

イベント開始前に、観客が見つけやすい場所へリンクまたはQRコードを掲示します。デジタルプログラム、チケット窓口、入口、アクセシビリティ案内カードなどが考えられます。

投影を使用する場合は、実際のプロジェクター出力を開き、共有スクリーンに表示する言語を選びます。

観客を入れる前に、スマートフォン表示と投影の両方をテストしてください。

5. 音声受信を開始する

入力と出力の準備が整ったら、Pockitle Live Consoleを開き、Start listeningを選択します。

まず原語字幕を確認し、その後、観客に提供すると案内した翻訳をすべて確認します。

イベント中はConsoleを開いたままにし、状態を継続して監視してください。

6. 一時停止、再開、終了

マイクや音声経路を変更する前に字幕を一時停止します。変更後は入力を再テストしてから再開してください。

終了時には音声受信を止め、End performanceを選択します。Pockitleは現在の観客セッションを閉じ、Performance Summaryを作成します。

字幕記録を有効にしていた場合、終了後にタイムスタンプ付きCSVを確認できます。生の音声データは保存されません。

ライブ字幕とサータイトルは、別の課題を解決する

ライブ字幕もサータイトルも、観客の前に文字を表示します。しかし、共通点はほぼそこまでです。

もとになる素材、編集工程、現場運用の前提が異なります。

質問 SurtitleLiveの事前準備型サータイトル Pockitleのライブ字幕
文字はどこから来るか 台本または準備済み字幕原稿 イベント中に取得した音声
事前に文言を確認できるか できる できない。字幕は現場で生成される
翻訳を演出に合わせて調整できるか 人による編集と稽古を通じて調整できる 間接的にしか調整できない。ライブ機械翻訳には作品固有の編集工程がない
タイミングはどう制御されるか 人間のオペレーターが公演に合わせて準備済み字幕をキュー出しする 音声が認識され、確定した時点で字幕が表示される
何に最も向いているか 台本のある演劇、オペラ、翻訳劇、準備済みプレゼンテーション 即興、トーク、Q&A、パネル、台本のない公演
主なトレードオフは何か 準備と稽古に時間が必要 文言、タイミング、翻訳品質の確実性が下がる

ライブシステムは速く、役に立つものであり得ます。しかし、編集と稽古を経たサータイトルと同等ではありません。

なぜ『マクベス』には通常、準備済みサータイトルが適しているのか

『マクベス』を使った Pockitle の検証では、二つのワークフローの違いがはっきり表れました。

ある時点で、ライブの原文字幕として次の断片が確定・配信されました。

“Have lighted fools the dusty way to death.”

同じ確定断片は、複数の言語にも配信されました。

出力 検証時のライブ字幕
英語 Have lighted fools the dusty way to death.
日本語 埃っぽい道を通って死へ、愚か者たちを照らした。
繁体字中国語 點燃愚人的火焰,讓他們走上塵土飛揚的死亡之路。
フランス語 J'ai éclairé les fous sur le chemin poussiéreux de la mort.

Macbeth検証の英語、日本語、繁体字中国語、フランス語の出力を表示するPockitle Live Console

Macbeth検証中のPockitle Live Console。確定した原文字幕、観客向け翻訳、会場スクリーンのプレビューを同時に表示しています。

ここで大切なのは、Pockitle がライブ字幕として本来の仕事をしているという点です。その瞬間に確定できた文字を、待たせずに観客へ届けています。難しさは、確定した原文断片がすでにシェイクスピアの完全な一文ではなくなっていることにあります。

本来のまとまりは次のとおりです。

“And all our yesterdays have lighted fools
The way to dusty death.”

前半が失われると、文法も比喩も不安定になります。繁体字中国語では lighted が「火をつける」という意味に解釈され、フランス語では断片に一人称主語の J'ai が補われました。日本語では「dusty」の像が「埃っぽい道」を中心に組み直されています。どの訳も、不完全な原文から意味の通る文を作ろうとした結果です。

準備済みサータイトルなら、チームは完全な劇的意味をもとに、上演前に編集判断を行えます。例えば、以下は『マクベス』の正典的な訳ではなく、上演用として考えられる処理例です。

言語 準備済みサータイトルの例
繁体字中国語 我們所有的昨日,都曾替愚人照亮那條走向死亡、歸於塵土的路。
日本語 われらのすべての昨日は、愚か者が死へ、塵へと向かう道を照らしてきた。
フランス語 Tous nos hiers ont éclairé aux fous le chemin vers la mort, vers la poussière.

この中に『マクベス』の唯一の正解訳があるわけではありません。別の演出なら、より直訳的、現代的、古風、あるいは短く圧縮した表現を選ぶこともあります。そこに準備済みサータイトルの強みがあります。翻訳者、演出家、字幕チームが、この上演にふさわしい言葉を決め、稽古の中で文言とキューのタイミングを確認できます。

同じ検証では、もう一つ、より微妙な問題も見えました。シェイクスピアの原文は次の一行です。

“Creeps in this petty pace from day to day.”

ライブ字幕では、次のように二つの読みやすい単位として確定されることがあります。

“Creeps in this petty pace.”
“From day to day.”

文字認識自体は間違っていなくても、ひと続きの修辞的な流れは二つに分かれます。即興の発話なら、このトレードオフは合理的です。観客には今すぐ文字が必要だからです。一方、台本のある韻文では、韻律、息、動き、読み時間に合わせて、あらかじめキューの切れ目を決める方が適しています。

したがって、内容が安定した『マクベス』には通常、SurtitleLive の準備済みサータイトルを使うべきです。Pockitle がより力を発揮するのは、終演後の Q&A、アーティスト・トーク、即興パートなど、事前には存在しない言葉を扱う場面です。

Pockitleがより力を発揮する場面

事前に言葉を正確に用意できない場面で、Pockitleは最も役立ちます。

例えば次のような場面です。

  • 即興演劇。
  • 発話内容が大きく変わるデバイジング作品。
  • 台本のない観客参加。
  • 終演後トークやアーティスト・トークバック。
  • 観客とのQ&A。
  • パネルディスカッションや公開対談。
  • 講義、ワークショップ、地域イベント。
  • 式典、告知、スピーチ。
  • 発話内容が変化し続ける稽古やワーク・イン・プログレス。

こうした場面では、準備済みキューリストを作ること自体が不可能、不完全、あるいは誤解を招く場合があります。ライブ字幕なら、会場で初めて最終形になる言葉を観客が追えるようにできます。

両方のワークフローが必要な公演も多い

サータイトルかライブ字幕かという選択が、イベント全体に一律で当てはまるとは限りません。

一晩の演劇プログラムで、次のように使い分けることができます。

  • 台本のある本編には SurtitleLiveの準備済みサータイトル
  • 終演後トークには Pockitleのライブ字幕
  • どちらの時間にも、観客のスマートフォンを選択可能な閲覧手段として用意する。

フェスティバルでは、海外の台本作品にSurtitleLiveを使い、その後のアーティスト・パネルにPockitleを使えます。学校では、台本のある場面に字幕を準備し、その後の生徒のディスカッションをライブ字幕化できます。

これは重複ではありません。言葉が生まれるタイミングに、文字のワークフローを合わせているのです。

明瞭な音声も字幕サービスの一部

ライブ字幕の品質は、音声がブラウザへ届く前から決まります。

Pockitleは次の条件で最も力を発揮します。

  • イベント全体で一つの話し言葉を一貫して使う。
  • 明瞭な音声を取れる距離にマイクがある。
  • 会場が制御された台詞ミックスを提供できる。
  • 話者が重ならず、順番に話す。
  • 可能な範囲で固有名詞や専門用語をテストしている。
  • 観客に約束するすべての言語を実際の会場で確認している。

歌唱、音楽中心の公演、継続的に発話が重なる場面、話し言葉が頻繁に切り替わるイベントには向いていません。

不明瞭な音声は、翻訳言語を増やしても直せません。

観客には正確な説明を

Pockitleの字幕と翻訳は機械生成です。遅れ、不完全な表示、誤りが生じることがあります。

それでもサービスに価値がないわけではありません。制作側が、何を提供するのかを正確に説明する必要があるということです。

観客には次の点を伝えてください。

  • 字幕がどこに表示されるか。
  • どの言語を利用できるか。
  • インターネット接続された自分のスマートフォンが必要か。
  • 会場に共有スクリーンがあるか。
  • 字幕経路が利用できなくなった場合、チームがどう対応するか。

ライブ字幕だけで、アクセシビリティ字幕に必要なすべての要素が自動的にそろうわけではありません。観客とイベントに応じて、話者表示、重要な音情報、専門的な字幕支援を別途計画する必要があります。

高精度が不可欠な場合、契約上保証される場合、または正式な法令・基準への適合要件がある場合は、専門のライブキャプショナーやCARTサービスが適していることがあります。

Pockitleの動作を見る

公開Pockitle Demoでは、暫定的な音声認識が確定字幕へ変わる過程、翻訳が更新されるタイミング、同じ字幕状態が観客のスマートフォンと会場風スクリーンに表示される様子を確認できます。

Demoは事前収録です。訪問者はマイクを開いたりライブセッションを始めたりせずに、製品の動作を確認できます。これはワークフローを説明するものであり、どのイベントでも同じ速度や精度になると示すベンチマークではありません。

Demoを見た後は、実際のイベントで使う声、マイク、会場、言語でPockitleをテストしてください。

Pockitleを開く対応言語を見る、またはPockitle Liveクイックスタートをお読みください。

準備できる言葉は、準備する。準備できない言葉は、その場で字幕にする。

関連記事