リアルタイム字幕放送

リアルタイム字幕放送は、字幕つきの放送のうち、放送時に字幕を作成・付加するシステム。ここでは、主に日本のテレビ放送で、受信機で表示を切り替えられるものを述べる。

1. 概要
-----

日本の文字多重放送は事前に収録した番組にしか対応していなかった。生放送における字幕放送は、海外の表音文字のみ使用する場合だと音声認識で対応できたが、日本では同じ音でも複数の表記方法がある表語文字が使われ、機械的や技術的な問題があり行われていなかったのである。

聴覚障害者や高齢者にも情報のバリアフリーを推進していこうとNHK放送技術研究所が音声認識ソフトによる文字放送を開発した。2000年3月27日から日本放送協会の一部番組で実施されており、現在は民間放送やインターネットテレビ配信サービスのAbemaTVでも実施している。

2. 原理
-----

リアルタイム字幕の原理には、人間が聞き取ってキーボードから文字を入力する方式と、音声認識技術を用いた音声認識方式と、の2方式が存在する。

字幕を生成する過程以外では、通常の字幕放送と同じ流れでデータが重畳され、電波に乗せられて届けられる。原理的に字幕を生成する部分での遅延が避けられないので、字幕は発声の数秒遅れで表示される事になる。

2.1. キーボード入力方式
--------------

放送音声を//「ステノキャプショナー」と呼ばれる//入力オペレータが聞きながら同時に打ち込みを行う。入力は複数人で分担して行われるが、方式によって役割分担が異なっている。

主に2つの方式がある。

一般的なキーボードを用いた方式 パソコン要約筆記を応用した方式。複数人のオペレータが交互にリレー入力をする。一般的なOADG仕様のキーボードを使っている ため、入力者を短期間で養成でき低コストというメリットをもつ。TBS、テレビ朝日が採用している。 速記キーボードを用いた方式 スピードワープロ やステンチュラといった速記用に最適化されたキーボードを使う。聞き取った音を入力する人と、その文字を漢字に変換する人に分担されている点が前項とは異なる。このため本方式ではかならず2人単位の人員を要する。トップスピードでは前項の方式に勝るものの、高価な専用キーボードが必要でオペレータの養成に3年程かかるため人件費もかさむ。スピードワープロ研究所 やワードワープ が採用しており、NHKやいくつかの民放がこれらの会社と契約をしている。通常は打ち込み速度が放送音声より遅れるため、入力オペレータと校正オペレータの組を複数セット用いてリレー方式で入力を行う。

2.2. 音声認識方式
-----------

基本的には音声認識による文字情報の直接生成を用いたものである。音声認識は現在でも100%の変換が難しいものであるが、ニュースにおいては語調や使用される単語などを一定の条件に制限できる事から、この用途に限って音声認識を用いる事で高い変換効率を実現した。開発当初、リアルタイム字幕の付加はスタジオなどでのアナウンサーの発声に限られる場合が多く、VTR映像などの音声には同様の字幕が付かない事が殆どだった。スポーツイベントやNHK紅白歌合戦などの番組では、専門のアナウンサーが字幕生成のためにセリフを再発声する「リスピーク方式」とすることで同様の条件を達成している。

NHKでは2012年3月14日放送の一部の『NHKニュース』から、アナウンサーの発声など認識率が高い部分は音声認識システムを使い、聞き取りにくい部分のみ担当者がリスピークを行う「ハイブリッド方式」の導入を開始した。

AbemaTVでは2018年12月10日放送の『けやきヒルズ』から、LASSICが開発したリアルタイムAI字幕システム「AIポン」の導入を開始した。

2.3. 通常の字幕放送との違い
----------------

音声認識・キーボード入力共に、放送音声から字幕が表示されるまで遅延が発生することは、どうしても避けることができない。アメリカ合衆国のクローズドキャプションも同様。
NHKの生放送番組などでは、VTR収録部分や予め決めているコメントがあるときは、事前に作成しているためか、遅延なしまたは微妙な遅延程度に抑えて表示することもある。
ニュース番組などで事前に作成されている原稿を、放送されている音声のタイミングに合わせて字幕を送出するものは「テイク方式」と呼ばれる。
NHKでは2020年開始のNHKプラスでリアルタイム字幕放送のニュース番組を見逃し配信する際は、字幕と映像が合うように修正して配信される。
NHKでは2020年東京オリンピック・パラリンピックと2022年北京オリンピックの放送において「ぴったり字幕」と称するリアルタイム字幕放送を実施した。原理的には、フジテレビで放送されていた『ダウンタウンなう』の「ほぼ生放送」と同じ遅延送出システムにリアルタイム字幕放送を組み合わせたもので、映像を30秒遅れで送出し字幕の作成時間を稼ぐ。なお『ダウンタウンなう』は「ほぼ生放送」時代は字幕放送を実施していない。。
民放の番組ではCMに入ると、原理的にCMに入る数秒前の発言は字幕化できない。また、CMから明けてもCM入りする前の字幕から表示されるわけではないため、発言の流れがそこで途切れてしまう。
歌や音楽の音符・効果音の記述「」等、音関係の表示が少ない。
表示位置は半固定。モニタの設定ができる場合をのぞき、常時同じ場所に表示される。
半角文字は用いられない。カタカナ、英数字は無条件で全角になる。
注意しないと誰が話しているのかわからないことがある。アメリカのリアルタイム字幕放送同様に話し始めは「＞＞」や「≫」の記号を挿入するが、実施していない番組もある。ただ、NHK、テレビ朝日、TBS、日本テレビでは生放送でも話している人の苗字が表示されることもある。
日本の字幕放送は色別に区分けする事ができるが、民放のリアルタイム字幕での実施例は少ない。なおTBSとフジテレビは報道・情報ワイドショー番組は黄色、スポーツやバラエティ番組は白色と番組のジャンルにより色分けしている
一部の録画番組では、放送日時近くまで番組制作をしていて、通常の字幕放送の制作方法では放送に間に合わないためか、リアルタイム字幕放送と同様の形式で字幕が表示されている場合がある。
人名などの固有名詞が発せられると、その漢字が判明するまで字幕の進行が止まってしまうか、すぐに判明しない場合はひらがなもしくはカタカナでの入力を余儀なくされる。
放送局によって話がテロップ表示されている箇所も字幕表示するかしないかが異なる。例えば日本テレビ系では。
文字の打ち込みから送出までの時間が限られているため、通常の字幕放送に比べ誤字や脱字が出やすい傾向にある。そのため、一部の局では番組開始冒頭に事前に作成した「生放送のため誤字が生じる場合があります」や「誤字脱字が発生する場合があります」などといったその旨の断りを表示している。
余談だが、上記のような生放送字幕の特性を逆手にとった放送例も存在する。2020年1月1日放送の『全力!脱力タイムズ新春SP』では、全編収録番組であるにも拘わらず生放送と見せかけて放送するという特殊な構成だったため、番組終盤に実は事前収録だったということが明かされるまで、字幕放送もリアルタイム字幕放送風の様式で放送していた。なお、事前収録が明かされたシーンからは通常の字幕放送の様式に切り替わった。
『SBS8ニュース』のKNTVでの放送分での日本語字幕は、翻訳しながら字幕を打ち込んでおり、常時放送では唯一のリアルタイム字幕放送となっている。『MBCニュースデスク』をネットしていた頃の2006年12月から実施している。

3. 実施番組
-------

ローカルに差し替わった部分では行わない場合がある。

3.1. NHK
--------

NHKニュース おはよう日本
あさイチ
NHKニュース。2009年3月30日より。国会中継などで『あさイチ』が短縮・休止となる場合は臨時に単独番組扱いで放送する場合がある。2009年度は午前8時30分から単独番組扱いでの放送だった）