(57)【特許請求の範囲】
【請求項１】
サーバと番組出力装置とを具備する番組システムであって、
前記サーバは、
絵文字識別情報に対応付けて、災害の規模または災害のレベルまたは災害に対する対処の緊急度合いを報知する絵文字に関する２以上の絵文字情報を格納している絵文字情報格納部と、
前記番組出力装置から前記絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、
前記絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を前記絵文字情報格納部から取得する絵文字情報取得部と、
前記絵文字情報取得部が取得した絵文字情報を前記番組出力装置に送信する絵文字情報送信部と、を具備し、
前記番組出力装置は、
ニュース速報の字幕付き番組を受信する番組受信部と、
絵文字識別情報を受信する絵文字識別情報受信部と、
前記絵文字識別情報受信部が受信した絵文字識別情報を有する絵文字情報送信指示を、前記サーバに送信する絵文字情報送信指示送信部と、
前記絵文字情報送信指示の送信に応じて、当該絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を前記サーバから受信する絵文字情報受信部と、
前記絵文字情報受信部が受信した絵文字情報を用いて、前記番組受信部が受信したニュース速報の字幕付き番組と絵文字とを出力する出力部と、を具備する
番組システム。
【請求項２】
前記絵文字情報格納部は、
災害の内容を特定するコードと、災害の規模または災害のレベルまたは災害に対する対処の緊急度合いを特定するコードとの組み合わせである絵文字識別情報に対応付けて、２種類以上の各災害の内容ごとに２以上の絵文字情報を格納している請求項１記載の番組システム。
【請求項３】
前記サーバは、
番組を識別する番組識別情報に対応付いている１または２以上の補助情報を格納している補助情報格納部と、
前記番組出力装置から番組識別情報を有する補助情報送信指示を受信する補助情報送信指示受信部と、
前記補助情報送信指示が有する番組識別情報に対応する補助情報を前記補助情報格納部から取得する補助情報取得部と、
前記補助情報取得部が取得した補助情報を前記番組出力装置に送信する補助情報送信部と、
をさらに具備し、
前記番組出力装置は、
前記番組受信部が受信する番組の番組識別情報を受信する番組識別情報受信部と、
前記番組識別情報を有する補助情報送信指示を、前記サーバに送信する補助情報送信指示送信部と、
前記補助情報送信指示の送信に応じて、当該補助情報送信指示が有する番組識別情報に対応する補助情報を前記サーバから受信する補助情報受信部と、
をさらに具備し、
前記出力部は、前記補助情報受信部が受信した補助情報を、前記番組および前記絵文字とともに出力する、請求項１または請求項２に記載の番組システム。
【請求項４】
前記番組出力装置は、
前記番組受信部が受信する番組の番組識別情報を受信する番組識別情報受信部と、
前記番組識別情報に対応する補助情報を受信する補助情報受信部と、をさらに具備し、
前記出力部は、前記補助情報受信部が受信した補助情報を、前記番組および前記絵文字とともに出力する、請求項１または請求項２に記載の番組システム。
【請求項５】
番組とともに絵文字情報を出力する番組出力装置に通信可能に接続されたサーバであって、
絵文字識別情報に対応付けて、災害の規模または災害のレベルまたは災害に対する対処の緊急度合いを報知する絵文字に関する２以上の絵文字情報を格納している絵文字情報格納部と、
前記番組出力装置から前記絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、
前記絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を前記絵文字情報格納部から取得する絵文字情報取得部と、
前記絵文字情報取得部が取得した絵文字情報を前記番組出力装置に送信する絵文字情報送信部と、を具備し、
前記絵文字情報格納部は、
災害の内容を特定するコードと、災害の規模または災害のレベルまたは災害に対する対処の緊急度合いを特定するコードとの組み合わせである絵文字識別情報に対応付けて、２種類以上の各災害の内容ごとに２以上の絵文字情報を格納している、サーバ。
【請求項６】
災害の内容を特定するコードと、災害の規模または災害のレベルまたは災害に対する対処の緊急度合いを特定するコードとの組み合わせである絵文字識別情報に対応付けて、２種類以上の各災害の内容ごとに２以上の絵文字情報を格納している絵文字情報格納部と、絵文字情報送信指示受信部と、絵文字情報取得部と、絵文字情報送信部とにより実現される情報処理方法であって、
前記絵文字情報送信指示受信部が、番組出力装置から前記絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信ステップと、
前記絵文字情報取得部が、前記絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を前記絵文字情報格納部から取得する絵文字情報取得ステップと、
前記絵文字情報送信部が、前記絵文字情報取得ステップで取得された絵文字情報を前記番組出力装置に送信する絵文字情報送信ステップとを具備する情報処理方法。
【請求項７】
災害の内容を特定するコードと、災害の規模または災害のレベルまたは災害に対する対処の緊急度合いを特定するコードとの組み合わせである絵文字識別情報に対応付けて、２種類以上の各災害の内容ごとに２以上の絵文字情報を格納している絵文字情報格納部にアクセス可能なコンピュータを、
番組出力装置から前記絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、
前記絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を前記絵文字情報格納部から取得する絵文字情報取得部と、
前記絵文字情報取得部が取得した絵文字情報を前記番組出力装置に送信する絵文字情報送信部として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、番組とともに絵文字を出力する番組出力装置等に関するものである。
【背景技術】
【０００２】
従来、聴覚障害者や聴覚能力が低下している高齢者のために、受信装置で番組とともに障害の程度に応じた補助情報を出力させることができる送受信システムが提案されている（特許文献１の段落［０００８］、図１，図２参照）。補助情報は、聴覚障害者の視聴を補助するための字幕や手話映像などの情報である。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第４７７２０９７号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来の送受信システムにおける字幕などの補助情報では、例えば、番組で伝達したい内容などを視聴者に直感的に伝達することができないという課題があった。例えば、地震発生などの緊急放送の場合、字幕や手話映像などでは視聴者に緊急避難の緊急度合いなどを直感的に伝達することが困難であった。また、例えば、速報内容が悲報や朗報の場合も、字幕や手話映像などでは視聴者に悲しい情報や嬉しい情報であるという感情的なニュアンスを直感的に伝達することが困難であった。
【課題を解決するための手段】
【０００５】
本第一の発明の番組出力装置は、絵文字識別情報に対応付けて絵文字に関する１または２以上の絵文字情報を格納している絵文字情報格納部と、番組を受信する番組受信部と、絵文字識別情報を受信する絵文字識別情報受信部と、絵文字識別情報受信部が受信した絵文字識別情報に対応する絵文字情報を絵文字情報格納部から取得する絵文字情報取得部と、絵文字情報取得部が取得した絵文字情報を用いて、番組受信部が受信した番組とともに絵文字を出力する出力部と、を具備する番組出力装置である。
【０００６】
かかる構成により、絵文字によって所定の情報を視聴者に直感的に伝達することができる。
【０００７】
本第二の発明の番組出力装置は、サーバと番組出力装置とを具備する番組システムを構成する番組出力装置であって、サーバは、絵文字識別情報に対応付けて絵文字に関する１または２以上の絵文字情報を格納している絵文字情報格納部と、番組出力装置から絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を絵文字情報格納部から取得する絵文字情報取得部と、絵文字情報取得部が取得した絵文字情報を番組出力装置に送信する絵文字情報送信部と、を具備し、番組出力装置は、番組を受信する番組受信部と、絵文字識別情報を受信する絵文字識別情報受信部と、絵文字識別情報受信部が受信した絵文字識別情報を有する絵文字情報送信指示を、サーバに送信する絵文字情報送信指示送信部と、絵文字情報送信指示の送信に応じて、当該絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報をサーバから受信する絵文字情報受信部と、絵文字情報受信部が受信した絵文字情報を用いて、番組受信部が受信した番組とともに絵文字を出力する出力部と、を具備する番組システムを構成する番組出力装置である。
【０００８】
かかる構成により、絵文字によって所定の情報を視聴者に直感的に伝達することができる。
【０００９】
また、本第三の発明の番組出力装置は、第二の発明に対して、サーバは、番組を識別する番組識別情報に対応付いている１または２以上の補助情報を格納している補助情報格納部と、番組出力装置から番組識別情報を有する補助情報送信指示を受信する補助情報送信指示受信部と、補助情報送信指示が有する番組識別情報に対応する補助情報を補助情報格納部から取得する補助情報取得部と、補助情報取得部が取得した補助情報を番組出力装置に送信する補助情報送信部と、をさらに具備し、番組出力装置は、番組受信部が受信する番組の番組識別情報を受信する番組識別情報受信部と、番組識別情報を有する補助情報送信指示を、サーバに送信する補助情報送信指示送信部と、補助情報送信指示の送信に応じて、当該補助情報送信指示が有する番組識別情報に対応する補助情報をサーバから受信する補助情報受信部と、をさらに具備し、出力部は、補助情報受信部が受信した補助情報を、番組および絵文字とともに出力する番組出力装置である。
【００１０】
かかる構成により、補助情報によって番組の内容の伝達を補助できるとともに、絵文字によって所定の情報を視聴者に直感的に伝達することができる。
【００１１】
また、本第四の発明の番組出力装置は、第一または第二の発明に対して、番組出力装置は、番組受信部が受信する番組の番組識別情報を受信する番組識別情報受信部と、番組識別情報に対応する補助情報を受信する補助情報受信部と、をさらに具備し、出力部は、補助情報受信部が受信した補助情報を、番組および絵文字とともに出力する、番組出力装置である。
【００１２】
かかる構成により、補助情報によって番組の内容の伝達を補助できるとともに、絵文字によって所定の情報を視聴者に直感的に伝達することができる。
【００１３】
また、本第五の発明の番組出力装置は、第一ないし第三の発明のいずれかに対して、絵文字情報は、絵文字に対応する絵文字コードである、番組出力装置である。
【００１４】
かかる構成により、絵文字情報の情報量を少なくすることができる。
【００１５】
また、本第六の発明の番組出力装置は、第一ないし第五の発明のいずれかに対して、絵文字は、人間の感情を表現する画像である、番組出力装置である。
【００１６】
かかる構成により、例えば、悲報や朗報などの速報を、人間の感情を表現した絵文字によって視聴者に直感的に伝達することができる。
【００１７】
また、本第七の発明の番組出力装置は、第一ないし第六の発明のいずれかに対して、番組受信部は、緊急放送を受信し、絵文字識別情報受信部は、緊急放送の緊急度合いを示す絵文字に対応した絵文字識別情報を受信する、番組出力装置である。
【００１８】
かかる構成により、例えば、災害発生などの緊急放送の場合に、緊急避難の緊急度合いを視聴者に直感的に伝達することができる。
【００１９】
また、本第八の発明のサーバは、番組とともに絵文字情報を出力する番組出力装置に通信可能に接続されたサーバであって、絵文字識別情報に対応付けて絵文字に関する１または２以上の絵文字情報を格納している絵文字情報格納部と、番組出力装置から絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を絵文字情報格納部から取得する絵文字情報取得部と、絵文字情報取得部が取得した絵文字情報を番組出力装置に送信する絵文字情報送信部と、を具備するサーバである。
【００２０】
かかる構成により、番組出力装置は、番組に関連した絵文字情報をサーバから取得することができる。
【発明の効果】
【００２１】
本発明による番組出力装置等によれば、絵文字によって、例えば、災害発生時における緊急避難の緊急度合いなどの所定の情報を視聴者に直感的に伝達することができる。
【図面の簡単な説明】
【００２２】
【図１】実施の形態１における番組出力装置のブロック図
【図２】同災害発生などの緊急放送に対する絵文字の一例を示す図
【図３】同人間の感情を表す絵文字の一例を示す図
【図４】同緊急放送の映像に絵文字を重畳してディスプレイに出力する一例を示す図
【図５】同番組出力装置における番組と絵文字の出力動作を説明するためのフローチャート
【図６】同絵文字情報格納部に格納される緊急放送用の絵文字情報の一例を示す図
【図７】同図６に示す絵文字情報と絵文字識別情報との関係を説明するための図
【図８】同絵文字情報格納部に格納される人間の感情を表す絵文字情報の一例を示す図
【図９】同図８に示す絵文字情報と絵文字識別情報との関係を説明するための図
【図１０】同番組の映像にニュース速報に関連した絵文字をディスプレイに出力する一例を示す図
【図１１】同実施の形態２における番組出力装置のブロック図
【図１２】同実施の形態２の番組出力装置における番組と絵文字の出力動作を説明するためのフローチャート
【図１３】同実施の形態２のサーバにおける絵文字情報の送信動作を説明するためのフローチャート
【図１４】同実施の形態３における番組出力装置のブロック図
【図１５】同実施の形態３の番組出力装置における番組と絵文字の出力動作を説明するためのフローチャート
【図１６】同実施の形態３のサーバにおける絵文字情報の送信動作を説明するためのフローチャート
【図１７】同サーバの補助情報格納部に格納される字幕情報の一例を示す図
【図１８】同番組の映像に字幕とともに当該番組に関連した絵文字を出力する一例を示す図
【図１９】同実施の形態２における番組出力装置の変形例のブロック図
【図２０】同実施の形態３における番組出力装置の変形例のブロック図
【図２１】同番組出力装置等を実現するコンピュータシステムの外観の一例を示す模式図
【図２２】同コンピュータシステムの内部構成を示すブロック図
【発明を実施するための形態】
【００２３】
以下、本発明による番組出力装置等の実施形態について、図面を参照して説明する。
【００２４】
なお、実施の形態において、同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。また、本実施の形態において、説明する各種の情報の形式、内容などは、あくまで例示であり、形式、内容は問わない。
【００２５】
（実施の形態１）
図１は、実施の形態１における番組出力装置１Ａのブロック図である。
【００２６】
番組出力装置１Ａは、テレビジョン放送やＩＰ放送などによって放送される番組を受信してディスプレイとスピーカーに出力する。番組出力装置１Ａには、例えば、デジタルテレビ受信機や、パソコンや、ハードディスクレコーダーや、プルーレイディスク・レコーダーなどが含まれる。
【００２７】
番組出力装置１Ａは、番組受信部１０１、絵文字識別情報受信部１０２、絵文字情報取得部１０３、絵文字情報格納部１０４および出力部１０５を備える。
【００２８】
番組受信部１０１は、番組を受信する。番組は、通常、番組のコンテンツを示す映像と音声を含む。番組が、例えば、二ヶ国語放送などのような字幕付き番組の場合や手話映像が付加されている場合は、映像および音声に対応付けられた字幕や手話映像などを番組のコンテンツの要素に含んでもよい。
【００２９】
絵文字識別情報受信部１０２は、放送局などから送信される絵文字識別情報を受信する。絵文字識別情報は、予め作成された複数の絵文字を識別するための各絵文字固有の情報である。絵文字識別情報は、通常、絵文字に付与されたＩＤ番号などの絵文字識別子であるが、絵文字に固有の名称などであってもよい。
【００３０】
番組受信部１０１と絵文字識別情報受信部１０２は、通常、無線または有線の通信手段で実現されるが、放送受信手段で実現しても良い。番組受信部１０１と絵文字識別情報受信部１０２は、同一媒体から無線または有線の通信手段で番組と絵文字識別情報をそれぞれ受信しても良いし、異なる媒体から無線で番組と絵文字識別情報とをそれぞれ受信しても良い。
【００３１】
番組受信部１０１が受信する番組と絵文字識別情報受信部１０２が受信する絵文字識別情報とのデータ構造は問わない。例えば、番組がデジタル放送される場合、絵文字識別情報は、番組の映像または音声に埋め込まれていても良いし、番組の映像および音声に多重化されるデータに含まれていても良い。例えば、絵文字識別情報は、データに含まれる番組関連情報に含まれていても良い。
【００３２】
なお、絵文字識別情報が番組の映像、音声またはデータに埋め込まれている場合は、番組受信部１０１が絵文字識別情報受信部１０２として機能し、番組受信部１０１が放送波を受信することによって番組と絵文字識別情報の両方を受信することになる。従って、番組受信部１０１と絵文字識別情報受信部１０２は、番組受信部１０１が絵文字識別情報受信部１０２を兼用する構成でも良く、互いに独立した構成でも良い。
【００３３】
番組受信部１０１は、通常、番組出力装置１Ａの電源がＯＮになっている間、図示省略のチャネル番号格納部に格納されているチャネル番号で放送されている番組を受信している。また、絵文字識別情報受信部１０２は、同チャネル番号で送信される絵文字識別情報を受信する。チャネル番号格納部には、視聴者がリモコンを操作して受信チャネルのチャネル番号を設定する毎に、設定されたチャネル番号が格納される。従って、番組受信部１０１は、視聴者が設定した最新のチャネル番号で放送されている番組を受信し、絵文字識別情報受信部１０２は、当該チャネル番号で送信される絵文字識別情報を受信する。
【００３４】
絵文字情報取得部１０３は、絵文字識別情報受信部１０２が受信した絵文字識別情報に対応する１または２以上の絵文字情報を絵文字情報格納部１０４から取得する。
【００３５】
絵文字情報格納部１０４は、１または２以上の絵文字に関する絵文字情報を絵文字識別情報に対応付けて格納している。絵文字情報格納部１０４は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも良い。絵文字情報格納部１０４に絵文字情報が格納される過程は問わない。例えば、記録媒体を介して絵文字情報が絵文字情報格納部１０４に格納されてもよい。また、通信回線等を介して送信された絵文字情報が絵文字情報格納部１０４に格納されてもよい。あるいは、入力デバイスを介して入力された絵文字情報が絵文字情報格納部１０４に格納されてもよい。
【００３６】
絵文字情報格納部１０４が格納している絵文字情報は、例えば、災害発生時に災害の種類と災害の規模（若しくはレベル）やその災害に対する対処の緊急度合いを視聴者に報知する絵文字情報や、悲報、朗報などの人間の感情に関連した報道内容の種類を表す絵文字情報などである。例えば、台風、地震、津波などの災害が発生した場合、その災害発生は、例えば、番組表に基づいて放送されている番組（以下、この種の番組を「通常の番組」という。）を緊急放送に切り替えて視聴者に報道されたり、通常の番組に字幕などのニュース速報を重畳させて視聴者に報道されたりする。また、災害発生以外でも、国民に対して速報性を要する出来事が生じた場合は、そのニュースが緊急放送やニュース速報によって視聴者に報道される。
【００３７】
絵文字情報格納部１０４が格納している絵文字情報は、緊急放送やニュース速報が行われる場合に、災害の種類や緊急度合いなどの情報を直感的に視聴者に伝達したり、速報される出来事の朗報、悲報などの種類を直感的に視聴者に伝達したりするために用いられる絵文字の情報である。
【００３８】
災害に対する対処の緊急度合いとしては、例えば、避難所や安全な場所への避難の緊急性の度合いや防災準備の緊急性の度合いなどが含まれる。通常、災害の規模が大きいほど、その災害に対する対処の緊急性が高くなるので、災害の規模やレベルを示す情報は、緊急度合いを示す情報として視聴者に伝達される。
【００３９】
災害発生などの緊急放送に対する絵文字は、例えば、図２に示すように、災害をデザインした絵柄と避難や防災の行動を促す絵柄や記号とで構成される。なお、図２に示す絵文字の例は、地震発生を報知する絵文字で、ビルの建物が揺れている絵柄と地震のレベル（避難の緊急度合い）を示す数値（図２では「１」）とを組み合わせた構成となっている。
【００４０】
災害のレベルの表現としては、例えば、災害の種類を示す絵柄に災害のレベルを示す数値を組み合わせたり、災害の種類を示す絵柄の色を災害のレベルに応じて変化させたり、災害の種類を示す絵柄の内容や大きさを災害のレベルに応じて変化させたりする方法が含まれる。
【００４１】
災害の種類を示す絵柄に数値を組み合わせる場合、通常、災害のレベルが高くなるのに応じて高いレベル値が組み合わされる。また、災害の種類を示す絵柄の色を変化させる場合、通常、絵柄の色は、災害のレベルが高くなるのに応じて危険色系（例えば、赤色系）の色に変化させる。また、災害の種類を示す絵柄の大きさを変化させる場合、通常、災害のレベルが高くなるのに応じて絵柄の大きさが大きくなるように変化させる。
【００４２】
また、人間の感情に関連した報道内容の種類を表す絵文字としては、例えば、図３に示すように、人間の感情を顔の表情などで象徴的に表現した絵柄で構成される。なお、図３に示す絵文字は、人間の笑い顔を表現した絵文字で、例えば、ニュース速報が朗報を伝える内容の場合に使用される絵文字の例である。
【００４３】
絵文字に関する絵文字情報は、例えば、出力部１０５が絵文字を出力するための情報である。絵文字のデータ構造は問わない。絵文字像のデータ構造は、ビットマップデータ形式でもよく、ベクターデータ形式でもよく、外字のデータ形式でもよい。
【００４４】
絵文字情報格納部１０４に格納されている１または２以上の絵文字情報は、絵文字コード表の形式で格納されている。絵文字情報は、絵文字コードと絵文字の画像で構成される。絵文字コードは、通常、絵文字の絵文字識別情報として使用される。なお、絵文字に絵文字コードとは異なる絵文字識別子（絵文字ＩＤ）を付与し、その絵文字識別子を絵文字コードに変換する構成にしてもよい。
【００４５】
絵文字コードは、絵文字コード表における絵文字の位置を行番号（コード表の横方向（行方向）の番号）と列番号（コード表の縦方向（列方向）の番号）を組み合わせた番号で表したものである。例えば、行番号がＸ０，Ｘ１，Ｘ２，…で表され、列番号がＹ０，Ｙ１，Ｙ２，…表される場合、Ｘｎ（ｎ＝０，１，２，…）の行とＹｍ（ｍ＝０，１，２，…）の列が交叉する位置に割り当てられた絵文字の絵文字コードは「ＸｎＹｍ」で表される。
【００４６】
絵文字情報取得部１０３は、絵文字識別情報受信部１０２が受信した絵文字識別情報を用いて、絵文字情報格納部１０４を検索し、当該絵文字識別情報に対応付けられた絵文字情報を取得する。例えば、絵文字識別情報が絵文字コードである場合、絵文字情報取得部１０３は、絵文字識別情報受信部１０２が受信した絵文字コードを有する絵文字情報を絵文字情報格納部１０４から取得する。
【００４７】
絵文字情報取得部１０３は、通常、ＭＰＵやメモリ等から実現され得る。絵文字情報取得部１０３の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、絵文字情報取得部１０３をハードウェア（専用回路）で実現しても良い。
【００４８】
出力部１０５は、番組受信部１０１が受信した番組を出力する。また、出力部１０５は、絵文字情報取得部１０３が取得した絵文字情報を用いて、番組受信部１０１が受信した番組とともに絵文字を出力する。出力部１０５は、通常、番組の映像に重畳して絵文字情報（絵文字の画像）を番組出力装置１Ａのディスプレイに出力する。
【００４９】
出力部１０５は、絵文字情報取得部１０３が絵文字情報格納部１０４から絵文字情報を取得した場合、例えば、図４に示すように、その絵文字情報によって絵文字を番組の映像に重畳してディスプレイの所定の位置に出力する。絵文字情報取得部１０３が絵文字情報格納部１０４から複数個の絵文字情報を取得する場合、出力部１０５が複数の絵文字を出力する方法は問わない。例えば、出力部１０５は、絵文字情報取得部１０３が絵文字情報を取得する毎にその絵文字情報に対応する絵文字を順番に出力しても良く、絵文字情報取得部１０３が全ての絵文字情報を取得した後、全ての絵文字情報に対応する絵文字を一括して出力しても良い。
【００５０】
絵文字を番組の映像に重畳する技術としては、例えば、スーパーインポーズなど周知の技術を用いることができる。
【００５１】
なお、出力部１０５は、番組の映像に絵文字を重畳して出力しても良く、番組の映像とは別の領域に絵文字を出力しても良い。また、絵文字は、番組の最初に一時的に出力しても良く、番組中に連続して出力しても良い。
【００５２】
また、番組と絵文字の出力処理は、ディスプレイへの出力（画像表示）だけでなく、例えば、プロジェクターを用いた投影、プリンタでの印字、他の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどの処理であってもよい。
【００５３】
他の処理装置としては、例えば、携帯電話、スマートフォンなどのように、画像を出力することができる装置が含まれる。従って、出力部１０５は、絵文字を番組出力装置１Ａとは異なる、携帯電話やスマートフォンのような携帯端末のディプレイに出力するようにしても良い。なお、送信、蓄積、処理結果の引渡しの処理については、出力対象が最終的に視聴者に提示されるものとする。
【００５４】
従って、出力部１０５は、ディスプレイ等の出力デバイスを含むと考えても良く、含まないと考えても良い。出力部１０５は、出力デバイスのドライバーソフト、または、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
【００５５】
次に、番組出力装置１Ａの番組と絵文字の出力動作について、図５のフローチャートを用いて説明する。
【００５６】
（ステップＳ５０１）番組受信部１０１は、電源がＯＮになったか否かを判断する。電源がＯＮになると（Ｓ５０１：Ｙ）、ステップＳ５０２に進み、電源がＯＦＦ状態であれば（Ｓ５０１：Ｎ）、ステップＳ５０１に戻る。
【００５７】
（ステップＳ５０２）番組受信部１０１は、チャネル番号格納部に格納されているチャネル番号で放送される番組を受信する。出力部１０５は、番組受信部１０１が受信し、復調した番組の映像をフレーム単位でディスプレイに表示し、番組の音声をスピーカーから出力する。
【００５８】
（ステップＳ５０３）絵文字識別情報受信部１０２は、絵文字識別情報を受信したか否かを判断する。絵文字識別情報受信部１０２が絵文字識別情報を受信すると（Ｓ５０３：Ｙ）、ステップＳ５０４に進み、絵文字識別情報受信部１０２が絵文字識別情報を受信しなければ（Ｓ５０３：Ｎ）、ステップＳ５０６に進む。
【００５９】
（ステップＳ５０４）絵文字情報取得部１０３は、絵文字識別情報受信部１０２が受信した絵文字識別情報を用いて絵文字情報格納部１０４を検索し、当該絵文字識別情報に対応付けられた絵文字情報を取得する。
【００６０】
（ステップＳ５０５）出力部１０５は、絵文字情報取得部１０３が受信した絵文字情報を用いて絵文字を出力する。出力部１０５は、例えば、番組の映像が出力されている番組出力装置１Ａのディスプレイに当該番組に重畳して絵文字を出力する。
【００６１】
（ステップＳ５０６）番組受信部１０１は、電源がＯＦＦになったか否かを判断する。電源がＯＦＦになっていないときは（Ｓ５０６：Ｎ）、ステップＳ５０２に戻り、電源がＯＦＦになったときは（Ｓ５０６：Ｙ）、番組と絵文字の出力処理を終了する。
【００６２】
図５の処理手順では、絵文字識別情報受信部１０２が絵文字識別情報を受信すると、出力部１０５が絵文字識別情報の受信期間に当該絵文字識別情報を有する絵文字情報を用いて番組とともに絵文字を出力する。この処理に対して、出力部１０５は、絵文字識別情報の受信開始から所定の時間だけ番組とともに絵文字を出力するようにしてもよい。
【００６３】
（具体例１）
次に、番組出力装置１Ａにおける番組と絵文字の出力動作の具体例について説明する。
【００６４】
具体例１は、災害などの安全に関する重大な出来事を緊急放送やニュース速報で視聴者に報道する場合に絵文字によって災害の種類や緊急度合いのレベルを視聴者に直感的に伝達する場合の例である。
【００６５】
具体例１では、１または２以上の絵文字情報が、例えば、図６に示す絵文字コード表の形式で絵文字情報格納部１０４に格納されているものとする。図６に示す絵文字情報は、災害発生時に災害の内容や緊急レベルを視聴者に報知する場合の絵文字情報の例である。
【００６６】
図６では、地震発生を報知する３種類の絵文字ＰＧＡ１，ＰＧＡ２，ＰＧＡ３と、津波発生を報知する３種類の絵文字ＰＧＢ１，ＰＧＢ２，ＰＧＢ３と、噴火発生を報知する３種類の絵文字ＰＧＣ１，ＰＧＣ２，ＰＧＣ３とを示している。絵文字ＰＧＡｎ，ＰＧＢｎ，ＰＧＣｎ（ｎ＝１，２，３）は、災害の種類を示す絵柄と災害の規模（緊急度合いのレベル）を示す数値を組み合わせて構成されている。絵文字ＰＧＡｎ，ＰＧＢｎ，ＰＧＣｎの画像は、例えば、ビットマップデータ形式で作成されている。
【００６７】
Ｘ０，Ｘ１，Ｘ２，…は、絵文字コード表の行番号であり、Ｙ０，Ｙ１，Ｙ２，…は、絵文字コード表の列番号である。行番号Ｘｉ（ｉ＝０，１，…ｎ）と列番号Ｙｊ（ｊ＝０，１，…ｍ）を組み合わせた絵文字コード「ＸｉＹｊ」は、Ｘｉの行とＹｊの列が交叉する位置に割り当てられた絵文字の絵文字コードである。
【００６８】
従って、地震発生を報知する３種類の絵文字ＰＧＡ１，ＰＧＡ２，ＰＧＡ３は、それぞれ絵文字コードＸ０Ｙ０、絵文字コードＸ０Ｙ１、絵文字コードＸ０Ｙ２に割り当てられ、津波発生を報知する３種類の絵文字ＰＧＢ１，ＰＧＢ２，ＰＧＢ３は、それぞれ絵文字コードＸ１Ｙ０、絵文字コードＸ１Ｙ１、絵文字コードＸ１Ｙ２に割り当てられ、噴火発生を報知する３種類の絵文字ＰＧＣ１，ＰＧＣ２，ＰＧＣ３は、それぞれ絵文字コードＸ２Ｙ０、絵文字コードＸ２Ｙ１、絵文字コードＸ２Ｙ２に割り当てられている。
【００６９】
本具体例１では、絵文字コードが絵文字の絵文字識別情報となっている。従って、絵文字情報格納部１０４には、ＰＧＡ１〜ＰＧＡ３，ＰＧＢ１〜ＰＧＢ３，ＰＧＣ１〜ＰＧＣ３，…の各絵文字が、図７に示すように、絵文字識別情報（絵文字コード）に対応付けて格納されている。
【００７０】
次に、番組出力装置１Ａで通常の番組を受信中に、例えば、地震が発生し、その報道が緊急放送や字幕などによるニュース速報で行なわれる場合の絵文字の出力処理について、説明する。
【００７１】
番組受信部１０１が通常の番組を受信しているときには、出力部１０４は、番組受信部１０１が受信した番組の映像を番組出力装置１Ａのディスプレイに出力し、番組の音声をスピーカーから出力している。このときには、絵文字識別情報受信部１０２が絵文字識別情報を受信しないので、番組出力装置１Ａのディスプレイには絵文字は出力されない。
【００７２】
通常の放送中に地震が発生し、例えば、その放送が地震発生を報道する緊急放送に切り換えられた場合、番組受信部１０１は、その緊急放送を受信し、出力部１０５は、受信した緊急放送の映像を番組出力装置１Ａのディスプレイに出力し、緊急放送の音声をスピーカーから出力する。また、例えば、通常の番組に地震発生のニュース速報の字幕が付加された場合、出力部１０５は、番組受信部１０１が受信したニュース速報の字幕付きの映像を番組出力装置１のディスプレイに出力する。
【００７３】
放送局は、地震発生の緊急放送やニュース速報を行う際、地震発生に対応する絵文字の絵文字識別情報を送信するので、絵文字識別情報受信部１０２はその絵文字識別情報を受信する。例えば、放送局は、絵文字ＰＧＡ１，ＰＧＡ２，ＰＧＡ３のいずれかの絵文字識別情報（絵文字コード）を送信し、絵文字識別情報受信部１０２がその絵文字識別情報を受信する。
【００７４】
絵文字識別情報受信部１０２が地震発生に対応する絵文字ＰＧＡ１，ＰＧＡ２，ＰＧＡ３のいずれかの絵文字識別情報を受信すると、絵文字情報取得部１０３が絵文字情報格納部１０４からその絵文字識別情報に対応付けられた絵文字情報を取得する。
【００７５】
例えば、絵文字識別情報受信部１０２が受信した絵文字識別情報が絵文字コード「Ｘ０Ｙ０」であった場合、絵文字情報取得部１０３は絵文字情報格納部１０４から絵文字コード「Ｘ０Ｙ０」に対応付けられた絵文字情報（緊急度合いのレベル値「２」と建物が揺れている絵柄とを組み合わせた絵文字ＰＧＡ１の画像情報）（図６，図７参照）を取得する。
【００７６】
そして、出力部１０５は、例えば、緊急放送の場合、図４に示す表示態様で、絵文字情報取得部１０３が取得した絵文字ＰＧＡ１の画像を地震発生の緊急放送の映像に重畳してディスプレイに出力する。
【００７７】
放送局は、通常、緊急放送中は絵文字識別情報（絵文字コード「Ｘ０Ｙ０」）を送信するので、番組受信部１０１が緊急放送を受信している間は絵文字識別情報受信部１０２もその絵文字識別情報を受信し、番組出力装置１Ａのディスプレイには、当該絵文字識別情報（絵文字コード「Ｘ０Ｙ０」）を有する絵文字ＰＧＡ１が緊急放送の映像に重畳して出力される。
【００７８】
緊急放送中に緊急度合いが変化し、放送局から当初の絵文字識別情報とは異なる絵文字識別情報が送信されると、絵文字識別情報受信部１０２が受信する絵文字識別情報が変化するので、出力部１０５は、変化後の絵文字識別情報を有する絵文字を緊急放送の映像に重畳して出力する。
【００７９】
例えば、緊急放送中に、絵文字識別情報受信部１０２が受信した絵文字コードが絵文字コード「Ｘ０Ｙ１」に変化すると、絵文字情報取得部１０３は絵文字情報格納部１０４から絵文字コード「Ｘ０Ｙ１」を有する絵文字情報（緊急度合いのレベル値「２」と建物が大きく揺れている絵柄とを組み合わせた絵文字ＰＧＡ２の画像情報）を取得する。そして、出力部１０５は、ディスプレイに緊急放送に重畳して出力している絵文字ＰＧＡ１を絵文字ＰＧＡ２に切り換える。
【００８０】
地震発生がニュース速報の字幕などで報知される場合も上述した緊急放送の場合と同様の処理が行われる。すなわち、絵文字識別情報受信部１０２が絵文字識別情報（絵文字コード）をすると、絵文字情報取得部１０３が絵文字情報格納部１０４からその絵文字識別情報（絵文字コード）に対応付けられた絵文字情報（絵文字ＰＧＡｎの画像情報）を取得し、出力部１０５がその絵文字情報を番組の映像とニュース速報の字幕に重畳して出力する。
【００８１】
以上のように、具体例１によれば、番組受信部１０１が受信している番組が、例えば、地震発生の緊急放送に切り換えられたり、字幕によるニュース速報が行なわれたりした場合、絵文字識別情報受信部１０２と絵文字情報取得部１０３とによって、放送局から送信される絵文字識別情報に対応付けられた絵文字情報（地震発生を示す絵文字ＰＧＡｎの画像情報）を取得し、その絵文字情報を番組の映像に重畳して出力する。これにより、絵文字ＰＧＡｎによって緊急放送やニュース速報が地震発生の報知であることを視聴者に直感的に伝達することができる。
【００８２】
また、絵文字ＰＧＡｎには、地震の規模や緊急度合いなどを示す情報が含まれているので、地震発生の該当地域の視聴者に対して避難や防災などの緊急性を直感的に伝達することができる。
【００８３】
なお、上記具体例１では、絵文字情報を緊急放送中やニュース速報中に常時出力しているが、例えば、緊急度合いが低い場合などでは、緊急放送やニュース速報の開始から所定の時間だけ絵文字を出力させるようにしてもよい。
【００８４】
また、上記具体例１では、緊急放送やニュース速報の例として地震発生の場合について説明したが、津波、噴火、山火事、雪崩、山崩れなどの他の災害発生の場合についても同様である。また、緊急放送やニュース速報の種類は災害に限られるものではなく、政変、事変、テロ発生などの他の種類の出来事の緊急放送やニュース速報であってもよい。
【００８５】
（具体例２）
具体例１は、災害などの安全に関する重大な出来事を緊急放送やニュース速報で視聴者に報道する場合に絵文字によって災害の種類やレベルを視聴者に直感的に伝達する場合の例だったが、具体例２は、視聴者の関心が高く、かつ、速報性の高い出来事を緊急放送やニュース速報で視聴者に報道する場合にその出来事の人の感情に関連した種類（例えば、朗報、悲報などの種類）を絵文字によって視聴者に直感的に伝達する場合の例である。
【００８６】
具体例２では、１または２以上の絵文字情報が、例えば、図８に示す絵文字コード表の形式で絵文字情報格納部１０４に格納されているものとする。図８は、図６に対して、絵文字と絵文字コードの内容が異なる。図８に示す絵文字情報は、人の顔の喜んでいる表情や泣いている表情などを象徴的に表現した絵柄で人の感情を表す絵文字を構成したものである。
【００８７】
図８では、人が喜んでいる表情の絵文字ＰＧＤ、人が怒っている表情の絵文字ＰＧＥ、人が哀しんでいる表情の絵文字ＰＧＦ、人が楽しんでいる表情の絵文字ＰＧＧの４種類を示しているが、人間の感情を表す絵文字はこれらに限定されない。例えば、恐れ、不安、迷惑、困窮などの他の種類の感情を表す絵文字を絵文字コード表に適宜、登録してもよい。
【００８８】
図８において、ｘ０，ｘ１，…は、絵文字コード表の行番号であり、ｙ０，ｙ１，…は、絵文字コード表の列番号である。行番号ｘｉ（ｉ＝０，１，…ｎ）と列番号ｙｊ（ｉ＝０，１，…ｍ）を組み合わせた絵文字コード「ｘｉｙｊ」は、ｘｉの行とｙｊの列が交叉する位置に割り当てられた絵文字の絵文字コードである。４種類の絵文字ＰＧＤ，ＰＧＥ，ＰＧＦ，ＰＧＧはそれぞれ絵文字コード「ｘ０ｙ０」、「ｘ０ｙ１」、「ｘ１ｙ０」、「ｘ１ｙ１」に割り当てられている。
【００８９】
具体例２でも、絵文字コードが絵文字の絵文字識別情報となっている。従って、絵文字情報格納部１０４には、ＰＧＤ，ＰＧＥ，ＰＧＦ，ＰＧＧの各絵文字が、図９に示すように、絵文字識別情報（絵文字コード）に対応付けて格納されている。
【００９０】
次に、番組出力装置１Ａで番組を受信中に、例えば、視聴者の関心が高く、速報性の高い出来事が発生し、その出来事が、例えば、ニュース速報で報道される場合の絵文字の出力処理について、説明する。
【００９１】
出来事が生じていない状態では、放送局は、番組表に基づいて通常の番組を放送し、絵文字識別情報は送信しないので、絵文字識別情報受信部１０２は絵文字識別情報を受信しない。従って、出来事が生じていない状態では、出力部１０５は、番組出力装置１Ａのディスプレイには絵文字を出力しない。
【００９２】
番組の放送中に、例えば、日本チームがオリンピックなどの世界大会で優勝したなどの出来事があり、放送局がその出来事を字幕などでニュース速報を行う場合、放送局は、その出来事の人の感情に関連した絵文字の絵文字識別情報を送信する。例えば、出来事が上記の日本チームがオリンピックなどの世界大会で優勝した内容である場合、その出来事は嬉しい出来事であるので、放送局は、朗報に対応する絵文字の絵文字識別情報を送信する。一方、出来事が、例えば、著名人の急逝の場合、その出来事は悲しい内容であるので、放送局は悲報に対応する絵文字の絵文字識別情報を送信する。
【００９３】
放送局が絵文字識別情報を送信すると、絵文字識別情報受信部１０２はその絵文字識別情報を受信する。例えば、番組の放送中に日本チームが世界大会で優勝したという出来事が発生し、放送局が朗報を示す絵文字ＰＧＤに付与された絵文字識情報（絵文字コード「ｘ０ｙ０」）を送信すると、絵文字識別情報受信部１０２がその絵文字識別情報（絵文字コード「ｘ０ｙ０」）を受信する。
【００９４】
絵文字識別情報受信部１０２が絵文字コード「ｘ０ｙ０」を受信すると、絵文字情報取得部１０３が絵文字情報格納部１０４からその絵文字コード「ｘ０ｙ０」に対応付けられた絵文字（人が笑っている顔の絵文字ＰＧＤの画像）（図８，図９参照）を取得する。そして、出力部１０５は、例えば、図１０に示す表示態様で、絵文字情報取得部１０３が取得した絵文字ＰＧＤの画像をニュー速報の字幕とともに番組の映像に重畳してディスプレイに出力する。
【００９５】
放送局は、通常、ニュース速報中は絵文字識別情報を送信するので、出力部１０５がニュース速報を出力している間は絵文字識別情報受信部１０２も絵文字識別情報を受信し、番組出力装置１Ａのディスプレイには、当該絵文字識別情報を有する絵文字がニュース速報の字幕とともに通常の番組の映像に重畳して出力される。
【００９６】
なお、上記の具体例２では、速報性の高い出来事をニュース速報で報道する場合の絵文字情報の出力について説明したが、速報性の高い出来事を通常の番組から緊急放送に切り換えて報道する場合も同様の出力処理をすることによって絵文字を緊急放送の映像に重畳して出力することができる。
【００９７】
以上のように、具体例２によれば、国民の関心が高く、速報性の高い出来事をニュース速報や緊急放送によって報道する場合、その出来事の種類に応じた人間の感情を表す絵文字を番組の映像に重畳して出力するので、当該絵文字によって報道内容の感情的なニュアンスを視聴者に直感的に伝達することができる。
【００９８】
なお、上記具体例２でも絵文字をニュース速報中若しくは緊急放送中に常時出力しているが、ニュース速報若しくは緊急放送の開始から所定の時間だけ絵文字を出力させるようにしてもよい。
【００９９】
以上のように、実施の形態１によれば、緊急放送やニュース速報によって報道される出来事が災害発生などの国民の安全に関連した重大な出来事の場合、災害内容や緊急度合いのレベルなどを絵文字によって視聴者に直感的に伝達することができる。
【０１００】
また、緊急放送やニュース速報によって報道される出来事が視聴者の関心が高く、且つ、速報性が高い出来事の場合、その出来事の人の感情に関連した種類（例えば、朗報、悲報などの種類）を絵文字によって視聴者に直感的に伝達することができる。
【０１０１】
（実施の形態２）
図１１は、実施の形態２における番組出力装置１Ｂとサーバ２Ａを具備する番組システムのブロック図である。
【０１０２】
実施の形態２は、絵文字情報が格納された絵文字情報格納部２０１を備えたサーバ２Ａに番組出力装置１Ｂを通信可能に接続し、当該サーバ２Ａから番組出力装置１Ｂの要求に応じて絵文字識別情報に対応した絵文字情報を番組出力装置１Ｂに提供する構成である。番組出力装置１Ｂとサーバ２Ａは、例えば、インターネット回線網３に接続され、相互に通信可能になっている。
【０１０３】
図１１に示す番組出力装置１Ｂは、図１に示す実施の形態１の番組出力装置１Ａにおいて、絵文字情報取得部１０３と絵文字情報格納部１０４を削除し、絵文字情報送信指示送信部１０６と絵文字情報受信部１０７を追加した構成である。
【０１０４】
番組出力装置１Ｂ内の番組受信部１０１、絵文字識別情報受信部１０２および出力部１０５は、実施の形態１で説明した番組受信部１０１、絵文字識別情報受信部１０２および出力部１０５と基本的に同一の動作をするので、重複する構成の説明は省略し、異なる構成について説明する。
【０１０５】
絵文字情報送信指示送信部１０６は、絵文字識別情報受信部１０２が受信した絵文字識別情報を有する絵文字識別情報送信指示をサーバ２Ａに送信する。絵文字識別情報送信指示は、サーバ２Ａに対して絵文字識別情報に対応付けられた１または２以上の絵文字情報を番組出力装置１Ｂに送信することの指示である。
【０１０６】
絵文字情報受信部１０７は、絵文字識別情報送信指示に応じて、サーバ２Ａから送信される絵文字識別情報に対応付けられた１または２以上の絵文字情報を受信する。出力部１０５は、絵文字情報受信部１０７が受信した絵文字情報を用いて、番組受信部１０１が受信した番組とともに絵文字を出力する。出力部１０５は、通常、番組の映像に重畳して絵文字（絵文字の画像）を番組出力装置１Ａのディスプレイに出力する。
【０１０７】
絵文字情報送信指示送信部１０６は、通常、無線または有線の通信手段で実現されるが、放送送信手段で実現しても良い。また、絵文字情報受信部１０７は、通常、無線または有線の通信手段で実現されるが、放送受信手段で実現しても良い。
【０１０８】
サーバ２Ａは、絵文字情報格納部２０１、絵文字情報送信指示受信部２０２、絵文字情報取得部２０３および絵文字情報送信部２０４を備える。
【０１０９】
絵文字情報格納部２０１は、１または２以上の絵文字に関する絵文字情報を絵文字識別情報に対応付けて格納している。絵文字情報格納部２０１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも良い。絵文字情報格納部２０１に絵文字情報が格納される過程は問わない。例えば、記録媒体を介して絵文字情報が絵文字情報格納部２０１に格納されてもよい。また、通信回線等を介して送信された絵文字情報が絵文字情報格納部２０１に格納されてもよい。あるいは、入力デバイスを介して入力された絵文字情報が絵文字情報格納部２０１に格納されてもよい。
【０１１０】
絵文字情報格納部２０１には、例えば、上述した実施の形態１の番組出力装置１Ａの絵文字情報格納部１０４に格納されている絵文字情報と同様の絵文字情報が格納されている。すなわち、絵文字情報格納部２０１には、例えば、災害発生時に災害の種類と災害の規模（若しくはレベル）やその災害に対する対処の緊急度合いを視聴者に報知する絵文字情報や、悲報、朗報などの人間の感情に関連した報道内容の種類を表す絵文字情報などが格納されている。
【０１１１】
具体的には、絵文字情報格納部２０１は、災害発生などに関連した１または２以上の絵文字情報が、例えば、図６に示す絵文字コード表の形式で格納され、例えば、視聴者の関心が高く、かつ、速報性の高い出来事に関連した１または２以上の絵文字情報が、図８に示す絵文字コード表の形式で格納されている。
【０１１２】
絵文字情報格納部２０１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。絵文字情報格納部２０１に絵文字情報が記憶される過程は問わない。例えば、記録媒体を介して絵文字情報が絵文字情報格納部２０１で記憶されてもよい。また、通信回線等を介して送信された絵文字情報が絵文字情報格納部２０１で記憶されてもよい。あるいは、入力デバイスを介して入力された絵文字情報が絵文字情報格納部２０１で記憶されてもよい。
【０１１３】
絵文字情報送信指示受信部２０２は、番組出力装置１Ｂから絵文字情報を有する絵文字情報送信指示を受信する。絵文字情報送信指示受信部２０２は、通常、無線または有線の通信手段で実現されるが、放送受信手段で実現しても良い。
【０１１４】
絵文字情報取得部２０３は、絵文字情報送信指示受信部２０２が受信した絵文字情報送信指示に含まれる絵文字識別情報に対応付けられた絵文字情報を絵文字情報格納部２０１から取得する。絵文字情報取得部２０３は、通常、ＭＰＵやメモリ等から実現され得る。絵文字情報取得部２０３の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、絵文字情報取得部２０３をハードウェア（専用回路）で実現しても良い。
【０１１５】
絵文字情報送信部２０４は、絵文字情報取得部２０３が取得した絵文字情報を番組出力装置１Ｂに送信する。絵文字情報送信部２０４は、通常、無線または有線の通信手段で実現されるが、放送送信手段で実現しても良い。
【０１１６】
次に、番組出力装置１Ｂの番組と絵文字の出力動作について、図１２のフローチャートを用いて説明する。
【０１１７】
図１２に示すフローチャートは、図５に示すフローチャートにおいて、ステップＳ５０４の処理を、ステップＳ５０４−１とステップＳ５０４−２の処理に置き換えたものである。ステップＳ５０４−１は、番組出力装置１Ｂからサーバ２Ａに絵文字情報送信指示を送信する処理であり、ステップＳ５０４−２は、絵文字情報送信指示に応じてサーバ２Ａから送信される絵文字情報を受信する処理である。以下、番組出力装置１Ｂの番組と絵文字情報の出力動作を説明する。
【０１１８】
（ステップＳ５０１）番組受信部１０１は、電源がＯＮになったか否かを判断する。電源がＯＮになると（Ｓ５０１：Ｙ）、ステップＳ５０２に進み、電源がＯＦＦ状態であれば（Ｓ５０１：Ｎ）、ステップＳ５０１に戻る。
【０１１９】
（ステップＳ５０２）番組受信部１０１は、チャネル番号格納部に格納されているチャネル番号で放送される番組を受信する。出力部１０５は、番組受信部１０１が受信し、復調した番組の映像をフレーム単位でディスプレイに表示し、番組の音声をスピーカーから出力する。
【０１２０】
（ステップＳ５０３）絵文字識別情報受信部１０２は、絵文字識別情報を受信したか否かを判断する。絵文字識別情報受信部１０２が絵文字識別情報を受信すると（Ｓ５０３：Ｙ）、ステップＳ５０４−１に進み、絵文字識別情報受信部１０２が絵文字識別情報を受信しなければ（Ｓ５０３：Ｎ）、ステップＳ５０６に進む。
【０１２１】
（ステップＳ５０４−１）絵文字情報送信指示送信部１０６は、絵文字識別情報受信部１０２が受信した絵文字識別情報を含む絵文字情報送信指示をサーバ２Ａに送信する。
【０１２２】
（ステップＳ５０４−２）絵文字情報受信部１０７は、絵文字情報送信指示送信部１０６による絵文字情報送信指示に応じてサーバ２Ａから送信される絵文字情報を受信する。
【０１２３】
（ステップＳ５０５）出力部１０５は、絵文字情報受信部１０７が受信した絵文字情報を用いて絵文字を出力する。出力部１０５は、例えば、番組の映像が出力されている番組出力装置１Ｂのディスプレイに当該番組に重畳して絵文字情報を出力する。
【０１２４】
（ステップＳ５０６）番組受信部１０１は、電源がＯＦＦになったか否かを判断する。電源がＯＦＦになっていないときは（Ｓ５０６：Ｎ）、ステップＳ５０２に戻り、電源がＯＦＦになったときは（Ｓ５０６：Ｙ）、番組と絵文字の出力処理を終了する。
【０１２５】
図１２の処理手順では、絵文字識別情報受信部１０２が絵文字識別情報を受信すると、出力部１０５が絵文字識別情報の受信期間に絵文字を番組とともに出力する。この処理に対して、出力部１０５は、絵文字識別情報の受信開始から所定の時間だけ絵文字を番組とともに出力するようにしてもよい。
【０１２６】
次に、サーバ２Ａの絵文字情報の送信制御の動作について、図１３のフローチャートを用いて説明する。
【０１２７】
（ステップＳ１３０１）絵文字情報送信指示受信部２０２は、番組出力装置１Ｃから絵文字情報送信指示があるか否かを監視しており（ステップＳ１３０１のループ処理）、絵文字情報送信指示受信部２０２が番組出力装置１Ｃから絵文字情報送信指示を受信すると（ステップＳ１３０１：Ｙ）、ステップＳ１３０２に進む。
【０１２８】
（ステップＳ１３０２）絵文字情報送信指示受信部２０２は、絵文字情報格納部２０１から絵文字情報送信指示受信部２０２が受信した絵文字情報送信指示に含まれる絵文字識別情報（絵文字コード）に対応する絵文字情報を絵文字情報格納部２０１から取得する。
【０１２９】
（ステップＳ１３０３）絵文字情報送信部２０４は、絵文字情報取得部２０３が取得した絵文字情報を番組出力装置１Ｃに送信し、ステップＳ１３０１に戻る。
【０１３０】
（具体例３）
次に、番組出力装置１Ｂにおける番組と絵文字の出力動作の具体例について説明する。
【０１３１】
具体例３は、実施の形態１の具体例１と同様に、災害などの完全に関する重大な出来事を緊急放送やニュース速報で視聴者に報道する場合に絵文字によって災害の種類やレベルを視聴者に直感的に伝達する場合の例である。
【０１３２】
従って、具体例３では、サーバ２Ａの絵文字情報格納部２０１に、１または２以上の絵文字情報が、例えば、図６に示す絵文字コード表の形式で格納されている。
【０１３３】
実施の形態２の番組出力装置１Ｂでは、番組出力装置１Ｂの番組受信部１０１が通常の番組を受信しているときに、例えば、その番組中に発生した地震の報道が、例えば、緊急放送で行われる場合、番組受信部１０１は、その緊急放送を受信し、出力部１０５は、受信した緊急放送の映像を番組出力装置１Ｂのディスプレイに出力する。これにより、番組出力装置１Ｂのディスプレイに表示される番組の映像は、緊急放送の映像に切り換えられる。
【０１３４】
また、絵文字識別情報受信部１０２は、放送局から送信される地震発生に対応する絵文字識別情報を受信する。絵文字識別情報受信部１０２が絵文字識別情報を受信すると、絵文字情報送信指示送信部１０６は、その絵文字識別情報とともに絵文字識別情報送信指示をサーバ２Ａに送信する。
【０１３５】
サーバ２Ａは、絵文字情報送信指示受信部２０２が番組出力装置１Ｂからの絵文字識別情報送信指示を受信すると、絵文字情報取得部２０３が絵文字情報格納部２０１から当該絵文字識別情報送信指示に含まれる絵文字識別情報に対応付けられた１または２以上の絵文字情報を取得する。
【０１３６】
例えば、絵文字情報送信指示受信部２０２が絵文字識別情報（絵文字コード「Ｘ０Ｙ０」）を有する絵文字識別情報送信指示を受信した場合、絵文字情報取得部２０３は、絵文字情報格納部２０１に格納されている図６の絵文字コード表から絵文字コード「Ｘ０Ｙ０」に割り当てられた絵文字情報（地震発生の絵文字ＰＧＡ１の画像情報）を取得する。
【０１３７】
絵文字情報取得部２０３が、絵文字ＰＧＡ１の画像情報を取得すると、絵文字情報送信部２０４は、その絵文字ＰＧＡ１の画像を番組出力装置１Ｂに送信する。
【０１３８】
サーバ２Ａが絵文字識別情報送信指示に応じて絵文字ＰＧＡ１の画像情報を番組出力装置１Ｂに送信すると、絵文字情報受信部１０７がその絵文字ＰＧＡ１の画像情報を受信する。そして、出力部１０５は、例えば、図４に示す表示態様で、絵文字情報受信部１０７が受信した絵文字ＰＧＡ１の画像情報を地震発生の緊急放送の映像に重畳してディスプレイに出力する。
【０１３９】
放送局が、例えば、地震発生の報道を字幕によるニュース速報などで行う場合も、番組システム１Ｂは、上述した処理手順と同様の処理手順でサーバ２Ａから地震発生に対応する絵文字（絵文字ＰＡＧ１〜ＰＡＧ３のいずれかの画像情報）を取得し、例えば、図１０の表示態様で、その絵文字を番組の映像に重畳して出力する。
【０１４０】
（具体例４）
具体例４は、実施の形態１の具体例２と同様に、視聴者の関心が高く、かつ、速報性の高い出来事を緊急放送やニュース速報で視聴者に報道する場合にその出来事の人の感情に関連した種類（例えば、朗報、悲報などの種類）を絵文字によって視聴者に直感的に伝達する場合の例である。
【０１４１】
従って、具体例４では、サーバ２Ａの絵文字情報格納部２０１に、１または２以上の絵文字情報が、例えば、図８に示す絵文字コード表の形式で格納されている。
【０１４２】
実施の形態２の番組出力装置１Ｂでは、番組出力装置１Ｂの番組受信部１０１が通常の番組を受信しているときに、例えば、日本チームが世界大会で優勝したなどの速報性の高い出来事が発生し、例えば、その報道が字幕などのニュース速報で行われる場合、番組出力装置１Ｂの出力部１０５は、番組受信部１０１が受信した番組に含まれる字幕情報を当該番組に重畳してディスプレイに出力する。
【０１４３】
また、絵文字識別情報受信部１０２は、放送局から送信される絵文字識別情報（ニュース速報の種類（朗報、悲報などの種類）に対応する絵文字の絵文字識別情報）を受信する。例えば、ニュース速報が朗報の場合、絵文字識別情報受信部１０２は、例えば、朗報を示す絵文字ＰＧＤに付与された絵文字識情報（絵文字コード「ｘ０ｙ０」）を受信する。
【０１４４】
絵文字識別情報受信部１０２が絵文字識別情報を受信すると、絵文字情報送信指示送信部１０６は、その絵文字識別情報とともに絵文字識別情報送信指示をサーバ２Ａに送信する。
【０１４５】
サーバ２Ａでは、絵文字情報送信指示受信部２０２が番組出力装置１Ｂからの絵文字識別情報送信指示を受信すると、絵文字情報取得部２０３が絵文字情報格納部２０１から当該絵文字識別情報送信指示に含まれる絵文字識別情報に対応付けられた１または２以上の絵文字情報を取得する。
【０１４６】
例えば、絵文字情報送信指示受信部２０２が絵文字コード「ｘ０ｙ０」を有する絵文字識別情報送信指示を受信した場合、絵文字情報取得部２０３は、絵文字情報格納部２０１に格納されている図８に示す絵文字コード表から絵文字コード「ｘ０ｙ０」に割り当てられた絵文字情報（笑い顔の絵文字ＰＧＤの画像）を取得する。そして、絵文字情報取得部２０３が、絵文字ＰＧＤの画像を取得すると、絵文字情報送信部２０４は、その絵文字ＰＧＤの画像を番組出力装置１Ｂに送信する。
【０１４７】
サーバ２Ａが絵文字識別情報送信指示に応じて絵文字ＰＧＤの画像を番組出力装置１Ｂに送信すると、絵文字情報受信部１０７がその絵文字ＰＧＤの画像を受信する。そして、出力部１０５は、例えば、図１０に示す表示態様で、絵文字情報受信部１０７が受信した絵文字ＰＧＤの画像をニュース速報の映像に重畳してディスプレイに出力する。
【０１４８】
上記実施の形態１，２では、通常の番組とは異なる緊急放送やニュース速報などが行われる場合に、当該緊急放送若しくニュース速報の人の感情に関連した絵文字を出力させるようにしているが、通常の番組に対しても人の感情に関連した絵文字を出力させるようにしても良い。
【０１４９】
例えば、通常の番組を、例えば、泣ける番組、笑える番組、怖い番組などの人の感情に関連した複数の種類に分類し、番組の放送中に当該番組の種類に対応した絵文字を出力させるようにしてもよい。
【０１５０】
例えば、通常の番組が映画やドラマを放送する場合、スリラー、喜劇、悲劇、戦争などの映画やドラマをそのテーマや内容によって怖い映画（若しくはドラマ）、笑える映画（若しくはドラマ）、泣ける映画（若しくはドラマ）、気分が高揚する映画（若しくはドラマ）などの複数の種類に分類し、その映画（若しくはドラマ）の種類に対応する絵文字を出力させるようにしてもよい。
【０１５１】
この場合は、例えば、番組に絵文字識別情報を含めておき、番組受信部１０１が番組を受信したときに絵文字識別情報も受信し、出力部１０５が番組（映画若しくはドラマ）とともに当該絵文字識別情報に対応する絵文字を出力するようにする。従って、この場合は、番組受信部１０１が絵文字識別情報受信部１０２の機能も果たすことになる。
【０１５２】
例えば、デジタル放送では、番組は、デジタル符号化された映像、音声および各種のデータをそれぞれ、例えば、トランスポートストリーム（Ｔｒａｎｓｐｏｒｔ  Ｓｔｒｅａｍ）と呼ばれる伝送信号形式に変換した後、更にそれらのトランスポートストリームを多重化して１つのトランスポートストリームとしたデータ構造を有している。
【０１５３】
各種のデータのトランスポートストリームには、例えば、番組名、放送日時、放送時間、番組の概要などの番組に関連した情報（番組関連情報）を含めることができる。従って、この番組関連情報に番組の種類に対応した絵文字識別情報を含めておき、番組受信部１０１がデジタル放送の番組を受信したときに絵文字識別情報を取得できるようにするとよい。
【０１５４】
あるいは、番組関連情報にスリラー、喜劇、悲劇、戦争などの映画若しくはドラマの種類の情報を含めておき、番組受信部１０１が番組を受信したときに番組関連情報から映画若しくはドラマの種類の情報が得られるようにしてもよい。例えば、喜劇と悲劇の映画若しくはドラマの種類の情報として「Ｍ００１」と「Ｍ００２」の番組種類識別子を設定し、番組受信部１０１が映画若しくはドラマを受信したときに番組関連情報から番組種類識別子が得られるようにしてもよい。
【０１５５】
この場合は、図８に示す絵文字コード表に加えて、番組種類識別子を絵文字識別情報に変換する変換リストを絵文字情報格納部１０４に格納しておき、絵文字情報取得部１０３がその変換リストから番組受信部１０１が受信した番組種類識別子に対応する絵文字識別情報を取得し、さらに図８に示す絵文字コード表からその絵文字識別情報に対応する絵文字の画像を取得するようにするとよい。
【０１５６】
例えば、絵文字情報格納部１０４に格納された変換リストに、番組種類識別子「Ｍ００１」と番組種類識別子「Ｍ００２」がそれぞれ絵文字コード「ｘ０ｙ０」と絵文字コード「ｘ１ｙ０」を対応付けられている場合、番組受信部１０１が、例えば、番組種類識別子「Ｍ００１」を受信したときには、絵文字情報取得部１０３が変換リストからその番組種類識別子「Ｍ００１」に対応する絵文字コード「ｘ０ｙ０」を取得し、さらに図８に示す絵文字コード表から絵文字コード｛ｘ０ｙ０」に割り当てられた絵文字ＰＧＤの画像情報を取得する。
【０１５７】
そして、出力部１０５が番組（喜劇の映画若しくはドラマ）とともに絵文字ＰＧＤを番組出力装置１Ａ，１Ｂのディスプレイに出力する。
【０１５８】
なお、上記の例は、番組が映画若しくはドラマの放送の場合であったが、映画若しくはドラマの放送以外の番組についても、人の感情を表す複数の絵文字の種類に基づいて番組の種類を分類し、各番組の番組関連情報に当該番組の種類を示す番組種類識別子の情報を含めて放送するようにしてもよい。
【０１５９】
例えば、バラエティ番組に「楽しい番組」の番組種類識別子を設定し、スポーツ番組に「気分が高揚する番組」の番組種類識別子を設定しておき、番組受信部１０１がバラエティ番組を受信し、出力部１０５がそのバラエティ番組を出力する場合、番組受信部１０１が受信した「楽しい番組」の番組種類識別子に対応する絵文字情報（例えば、笑い顔の絵文字ＰＧＤの画像）を絵文字情報取得部１０３が絵文字情報格納部１０４から取得して、出力部１０５がその絵文字情報を用いてバラエティ番組とともに絵文字を出力するようにしてもよい。
【０１６０】
以上のように、実施の形態２においても、緊急放送やニュース速報によって報道される出来事が災害発生などの国民の安全に関連した重大な出来事の場合、災害内容や緊急度合いのレベルなどを絵文字によって視聴者に直感的に伝達することができる。
【０１６１】
また、緊急放送やニュース速報によって報道される出来事が視聴者の関心が高く、且つ、速報性が高い出来事の場合、その出来事の人の感情に関連した種類（例えば、朗報、悲報などの種類）を絵文字によって視聴者に直感的に伝達することができる。
【０１６２】
また、実施の形態２では、サーバ２Ａの絵文字情報格納部２０１に格納されている絵文字情報を修正することにより、絵文字の修正や追加を容易に行うことができる。
【０１６３】
上記実施の形態１，２では、緊急放送やニュース速報や通常の番組の全体に対して当該番組に関連した絵文字を番組とともに出力させるようにしているが、番組内の特定のシーンに対して当該シーンの内容に関連した絵文字を出力させるようにしてもよい。
【０１６４】
例えば、ドラマや映画の場合、全体的には喜劇であっても個別のシーンでは悲しいシーンや楽しいシーンや怖いシーンなど、人間の感情に関連した多様なシーンが混在する場合が多い。また、ニュース番組でも朗報や悲報のニュースが混在している場合がある。
【０１６５】
このような番組に対して、各シーンの出現に対応して当該シーンに関連した人間の感情を表す絵文字を出力するようにしてもよい。
【０１６６】
この場合は、例えば、放送局側で番組のデータに、番組内の各シーンの出現時刻に対応付けられた各シーンの内容に関連した絵文字の絵文字識別情報を含めておけば、番組出力装置１Ａ，１Ｂの番組受信部１０１が番組の絵文字識別情報が対応付けられたシーンを受信した際、そのシーンの出現時に当該絵文字識別情報に対応する所定の絵文字を出力させることができる。
【０１６７】
例えば、番組がドラマや映画の場合、番組内の特定のシーン（例えば、悲しいシーン）の出現時刻は、例えば、当該シーンのフレーム番号によって決定することができる。従って、番組のデータに、１又は２以上の悲しいシーンのフレーム番号に対応付けて泣き顔の絵文字の絵文字識別情報（例えば、絵文字コード「ｘ１ｙ０」）を含めておく。
【０１６８】
番組出力装置１Ａでは、番組受信部１０１が番組の悲しいシーンを受信する毎に、当該番組受信部１０１が番組のデータから絵文字識別情報（絵文字コード「ｘ１ｙ０」）を取得するので、絵文字情報取得部１０３が絵文字情報格納部１０４からその絵文字コード「ｘ１ｙ０」に対応する泣き顔の絵文字ＰＧＦの画像情報を取得し、出力部１０５が番組の悲しいシーンが出現する毎にそのシーンの映像に重畳して絵文字ＰＧＦを出力する。
【０１６９】
番組出力装置１Ｂでは、番組受信部１０１が番組の悲しいシーンを受信する毎に、当該番組受信部１０１が番組のデータから絵文字識別情報（絵文字コード「ｘ１ｙ０」）を取得するので、絵文字情報送信指示送信部１０６がその絵文字識別情報（絵文字コード「ｘ１ｙ０」）を有する絵文字情報送信指示をサーバ２Ａに送信し、絵文字情報取得部１０３が当該サーバ２Ａから送信される絵文字識別情報（絵文字コード「ｘ１ｙ０」）に対応する泣き顔の絵文字ＰＧＦの画像を取得する。そして、出力部１０５が番組の悲しいシーンが出現する毎にそのシーンの映像に重畳して絵文字ＰＧＦを出力する。
【０１７０】
同様の方法で、番組がニュース番組の場合も、例えば、朗報のニュースを報道するシーンではそのシーンのフレーム番号に対応付けて笑い顔の絵文字の絵文字コード「ｘ０ｙ０」を含めておき、例えば、悲報のニュースを報道するシーンではそのシーンのフレーム番号に対応付けて泣き顔の絵文字の絵文字コード「ｘ１ｙ０」を含めておく。
【０１７１】
番組出力装置１Ａでは、番組受信部１０１が朗報のニュースを受信する際には番組受信部１０１が番組のデータから絵文字コード「ｘ０ｙ０」を取得するとともに、絵文字情報取得部１０３が絵文字コード「ｘ０ｙ０」に対応する絵文字ＰＧＤの画像情報を取得し、同番組受信部１０１が悲報のニュースを受信する際には番組受信部１０１が番組のデータから絵文字コード「ｘ１ｙ０」を取得するとともに、絵文字情報取得部１０３が絵文字コード「ｘ１ｙ０」に対応する絵文字ＰＧＦの画像を取得するので、出力部１０５は、朗報のニュースの場面では笑い顔の絵文字ＰＧＤを番組の映像に重畳して出力させ、悲報のニュースの場面では泣き顔の絵文字ＰＧＦを番組の映像に重畳して出力させることができる。
【０１７２】
また、番組出力装置１Ｂでは、番組受信部１０１が朗報のニュースを受信する際には番組受信部１０１が番組のデータから絵文字コード「ｘ０ｙ０」を取得するとともに、絵文字情報送信指示送信部１０６および絵文字情報受信部１０７が絵文字コード「ｘ０ｙ０」に対応する絵文字ＰＧＤの画像をサーバ２Ａから取得し、同番組受信部１０１が悲報のニュースを受信する際には番組受信部１０１が番組のデータから絵文字コード「ｘ１ｙ０」を取得するとともに、絵文字情報送信指示送信部１０６および絵文字情報受信部１０７が絵文字コード「ｘ１ｙ０」に対応する絵文字ＰＧＦの画像を取得するので、出力部１０５は、朗報のニュースの場面では笑い顔の絵文字ＰＧＤを番組の映像に重畳して出力させ、悲報のニュースの場面では泣き顔の絵文字ＰＧＦを番組の映像に重畳して出力させることができる。
【０１７３】
上記のように、番組の特定のシーンの出現に対して当該シーンに関連した人間の感情を表す所定の絵文字を出力するようにすれば、特定のシーンが出現する毎に、当該シーンが視聴者のどのような感情に関連した内容（例えば、悲しい内容や嬉しい内容など）であるのかを直感的に伝達することができる。
【０１７４】
（実施の形態３）
図１４は、実施の形態３における番組出力装置１Ｃとサーバ２Ｂを具備する番組システムのブロック図である。
【０１７５】
実施の形態３は、絵文字コード表が格納された絵文字情報格納部２０１と字幕や手話映像などの番組の視聴を補助する補助情報が格納された補助情報格納部２０５とを備えたサーバ２Ｂに番組出力装置１Ｃを通信可能に接続し、当該サーバ２Ｂから番組出力装置１Ｃの要求に応じて番組識別情報に対応した補助情報と絵文字識別情報に対応した絵文字情報とを番組出力装置１Ｃに提供する構成である。番組出力装置１Ｃとサーバ２Ｂは、例えば、インターネット回線網３に接続され、相互に通信可能になっている。
【０１７６】
図１４に示す番組出力装置１Ｃは、図１１に示す実施の形態２の番組出力装置１Ｂにおいて、補助情報送信指示送信部１０８と補助情報受信部１０９を追加した構成である。図１４に示すサーバ２Ｂは、図１１に示す実施の形態２のサーバ２Ａにおいて、補助情報格納部２０５、補助情報送信指示受信部２０６、補助情報取得部２０７および補助情報送信部２０８を追加した構成である。
【０１７７】
番組出力装置１Ｃ内の番組受信部１０１、絵文字識別情報受信部１０２、出力部１０５、絵文字情報送信指示送信部１０６および絵文字情報受信部１０７は、実施の形態１と実施の形態２で説明した番組受信部１０１、絵文字識別情報受信部１０２、出力部１０５、絵文字情報送信指示送信部１０６および絵文字情報受信部１０７と基本的に同一の動作をするので、重複する構成の説明は省略し、異なる構成について説明する。
【０１７８】
サーバ２Ｂ内の絵文字情報格納部２０１、絵文字情報送信指示受信部２０２、絵文字情報取得部２０３および絵文字情報送信部２０４は、実施の形態２で説明した絵文字情報格納部２０１、絵文字情報送信指示受信部２０２、絵文字情報取得部２０３および絵文字情報送信部２０４と基本的に同一の動作をするので、重複する構成の説明は省略し、異なる構成について説明する。
【０１７９】
番組出力装置１Ｃの番組受信部１０１は、放送局から放送される番組と当該番組の番組識別情報とを受信する。番組識別情報は、通常は、番組毎に付与される番組識別子（番組ＩＤ）であるが、番組を識別できるものであれば、他の識別情報であっても良い。例えば、番組名や、Ｇコードなどの番組に設定されたコード番号を番組識別情報に利用してもよい。
【０１８０】
番組受信部１０１は、番組配信サーバから有線や無線の通信手段で番組と番組識別情報を受信しても良いし、地上波放送局から無線で番組と番組識別情報を受信しても良い。番組受信部１０１が受信した番組識別情報は図示省略の番組情報格納部に一時的に記憶される。
【０１８１】
番組がデジタル放送される場合、番組識別情報は、デジタル化される映像または音声に埋め込まれていても良いし、デジタル化された映像および音声に多重化されるデータに含まれていても良い。例えば、データに含まれる番組関連情報に番組識別情報を含めても良い。なお、番組識別情報が番組の映像、音声またはデータに埋め込まれている場合は、番組受信部１０１は、番組識別情報受信部として機能し、放送波を受信することによって番組と番組識別情報とを受信する。
【０１８２】
番組識別情報は、番組の伝送信号にリンク付けされていてもよい。要するに、番組受信部１０１が放送波を受信し、その放送波を復調することによって番組の映像、音声およびデータと、当該番組の番組識別情報とが得られる構造であれば、番組の放送波における番組と番組識別情報のデータ構造は問わない。
【０１８３】
番組出力装置１Ｃの補助情報送信指示送信部１０８は、番組受信部１０１が受信した番組識別情報を有する補助情報送信指示をサーバ２Ｂに送信する。補助情報送信指示は、サーバ２Ｂに対して番組識別情報に対応付けられた１または２以上の補助情報を番組出力装置１Ｃに送信することの指示である。
【０１８４】
サーバ２Ｂに２以上の補助情報の送信を指示する場合、補助情報送信指示部１０８は、番組識別情報と補助情報識別子とを指定した補助情報送信指示をサーバ２Ｂに送信して、各補助情報送信指示に対応する補助情報をサーバ２Ｂから送信させる。
【０１８５】
なお、サーバ２Ｂに２以上の補助情報の送信を指示する場合、補助情報送信指示送信部１０８は、最初の補助情報送信指示では、番組識別情報だけを有する補助情報送信指示をサーバ２Ｂに送信する。最初の補助情報送信指示を送信するときには、最初の補助情報の補助情報識別子が分からないので、番組識別情報だけを有する補助情報送信指示をサーバ２Ｂに送信し、サーバ２Ｂから当該番組識別情報と番組の受信開始時とに対応する補助情報を送信させるためである。
【０１８６】
補助情報送信指示送信部１０８は、２回目以降の補助情報送信指示では、番組受信部１０１が受信した番組識別情報と、取得した最新の補助情報に含まれる補助情報識別子とを有する補助情報送信指示をサーバ２Ｂに送信する。
【０１８７】
番組出力装置１Ｃの補助情報受信部１０９は、補助情報送信指示送信部１０８による補助情報送信指示の送信に応じて、補助情報送信指示に対応する補助情報をサーバ２Ｂから受信する。補助情報送信指示送信部１０８が番組識別情報だけを有する補助情報送信指示を送信した場合、補助情報受信部１０９は、サーバ２Ｂから送信される当該番組識別情報に対応付けられ、かつ、当該補助情報送信指示を受信した時刻に対応する補助情報を受信する。
【０１８８】
また、補助情報送信指示送信部１０８が番組識別情報と補助情報識別子とを有する補助情報送信指示を送信した場合、補助情報受信部１０９は、サーバ２Ｂから当該番組識別情報と当該補助情報識別子の次の補助情報識別子とに対応付けられた補助情報を受信する。
【０１８９】
補助情報受信部１０９は、受信した補助情報を図示省略の補助情報格納部に少なくとも一時的に格納する。補助情報格納部は、例えば、バッファメモリで構成される。
【０１９０】
補助情報送信指示送信部１０８は、通常、無線または有線の通信手段または放送送信手段で実現される。また、補助情報受信部１０９は、通常、無線または有線の通信手段または放送受信手段で実現される。
【０１９１】
番組出力装置１Ｃの出力部１０５は、補助情報受信部１０９が取得した１または２以上の補助情報を出力する。出力部１０５は、補助情報が箇所情報を有しない場合は、補助情報受信部１０９が補助情報を受信する毎に、その補助情報を直ちに出力し、補助情報が箇所情報を有している場合は、出力している番組の開始からの経過時間がその箇所情報に含まれる番組内の出力時間になったときに補助情報を出力する。
【０１９２】
番組と補助情報の出力は、例えば、スピーカーへの出力（発音）、ディスプレイへの出力（画像表示）、プロジェクターを用いた投影、プリンタでの印字、他の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。
【０１９３】
なお、他の装置とは、例えば、イヤホン、ヘッドホン、携帯電話、スマートフォンなどのように、画像または音声を出力することができる装置である。また、送信、蓄積、処理結果の引渡しについては、出力対象が最終的に視聴者に提示されるものとする。
【０１９４】
サーバ２Ｂの補助情報格納部２０５は、番組識別情報に対応付いている１または２以上の補助情報を格納している。補助情報格納部２０５に格納される補助情報は、字幕、手話映像、補助音声などの補助情報である。補助情報格納部２０５に格納されている１または２以上の補助情報には、補助情報識別子が付与されている。補助情報には、番組内の出力箇所を示す箇所情報を有する場合がある。番組内の出力箇所とは、番組の出力時間における補助情報の時間的な出力位置（番組内の相対的な出力時刻）である。
【０１９５】
字幕は、番組の映像に合わせて表示させる会話、解説、擬音語などを文字や記号で表記したものである。字幕は、通常、無地の背景に文字や記号を表記した静止画で構成され、通常、番組の映像の当該字幕が対応付けられたシーンに重畳して出力される。
【０１９６】
手話映像は、会話、解説、擬音語などを手話で表現している映像（動画）である。手話映像は、例えば、ＣＧ（Ｃｏｍｐｕｔｅｒ  Ｇｒａｐｈｉｃｓ）の映像であっても良く、手話通訳者が行う手話通訳の動作を撮影した映像でも良い。また、手話映像は、番組の映像に対応付けられたテキスト情報を用いて自動的に生成した手話映像であっても良い。番組の映像に対応付けられたテキスト情報は、例えば、番組の映像に対応付けられた字幕や、番組の映像に対応付けられた音声を音声認識によって取得したテキスト情報などである。
【０１９７】
補助音声は、番組の映像に表示若しくは付加される解説などを音声で解説した情報である。補助音声は、例えば、人が解説文を読み上げた音声であっても良く、解説文を音声合成により変換した合成音や音声合成される文字列などであっても良い。
【０１９８】
１つの番組には、通常、１または２以上の補助情報が対応付けられる。例えば、映像に登場する話者の会話に対応付けて字幕を出力させる場合、通常、１つの番組に対応付けられる字幕は、番組内の複数のシーンに対応付けられた複数の字幕によって構成される。映像の一部のシーンにだけ解説の字幕が出力される場合は、１つの番組に対応付けられる字幕は、番組内の該当シーンに対応付けられた１つの字幕によって構成される場合もある。
【０１９９】
ニュース解説のような番組に対して手話映像による解説を付加する場合は、通常、１つの番組に対応付けられる手話映像は１本の手話映像で構成されるが、番組の一部に解説や説明の必要なシーンがある場合は、１つの番組に対応付けられる手話映像は、番組内の該当シーンに対応付けられた１または２以上の手話映像によって構成される場合もある。補助音声の場合も同様で、１つの番組に対して当該番組全体に対応付けられる１本の補助音声で構成される場合と、当該番組の一部のシーンに対応付けられた１または２以上の補助音声で構成される場合とがある。
【０２００】
１つの番組に２以上の補助情報が対応付けられる場合、各補助情報が番組内の出力箇所によって対応付けられる場合がある。番組内の出力箇所（番組内における補助情報の時間的な出力位置）は、番組開始からの経過時間や、番組の映像を構成するフレームの識別子（例えば、フレームＩＤやフレーム番号など）や、番組開始時からのオフセットなどで定義することができる。なお、補助情報の時間的な出力位置は、番組内の時間的な位置を定義できるパラメータであれば、経過時間、フレームＩＤ、オフセットなどのパラメータに限定されるものではない。
【０２０１】
補助情報格納部２０５は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。補助情報格納部２０５に補助情報が記憶される過程は問わない。例えば、記録媒体を介して補助情報が補助情報格納部２０５で記憶されてもよい。また、通信回線等を介して送信された補助情報が補助情報格納部２０５で記憶されてもよい。あるいは、入力デバイスを介して入力された補助情報が補助情報格納部２０５で記憶されてもよい。
【０２０２】
補助情報送信指示受信部２０６は、番組出力装置１Ｃから番組識別情報を有する補助情報送信指示若しくは番組識別情報と補助情報識別子とを有する補助情報送信指示を有する補助情報送信指示を受信する。
【０２０３】
補助情報取得部２０７は、補助情報送信指示受信部２０６が番組識別情報を有する補助情報送信指示に対応する補助情報を補助情報格納部２０５から取得する。
【０２０４】
補助情報取得部２０７は、補助情報送信指示受信部２０６が番組識別情報と補助情報識別子とを有する補助情報送信指示を受信した場合、補助情報送信指示が有する番組識別情報と補助情報識別子とに対応付けられた補助情報の次の補助情報を補助情報格納部２０５から取得する。次の補助情報は、補助情報識別子で識別され、順番が次となる補助情報である。通常は、補助情報送信指示が有する補助情報識別子の次の順番の補助情報識別子である。
【０２０５】
補助情報送信部２０８は、補助情報取得部２０７が取得した補助情報を番組出力装置１Ｃに送信する。
【０２０６】
補助情報送信指示受信部２０６は、通常、無線または有線の通信手段または放送受信手段で実現され、補助情報送信部２０８は、通常、無線または有線の通信手段または放送受信手段で実現される。また、補助情報取得部２０７は、通常、ＭＰＵやメモリ等から実現され得る。補助情報取得部２０７の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
【０２０７】
なお、サーバ２Ｂは、複数種類の補助情報（例えば、字幕、手話映像および補助音声等の情報）を管理・提供する構成でも良く、１種類の補助情報（例えば、字幕の補助情報）を管理・提供する構成でもよい。また、例えば、字幕用サーバ２Ｂ１、手話映像用サーバ２Ｂ２、補助音声用サーバ２Ｂ３を設け、番組出力装置１Ｃの要求に応じて各サーバ２Ｂ１，２Ｂ２，２Ｂ３から字幕、手話映像、補助音声の各補助情報を提供するようにしてもよい。
【０２０８】
次に、番組出力装置１Ｃの番組と絵文字の出力制御の動作について、説明する。
【０２０９】
以下の説明では、番組識別情報が番組に含まれており、番組の受信によって番組識別情報も受信される場合について説明する。番組出力装置１Ｃが受信する番組に対してサーバ２Ｂから当該番組の番組識別情報に対応付けられた１または２以上の補助情報が提供される場合について説明する。
【０２１０】
図１５は、番組出力装置１Ｃが番組識別情報に対応付けられた１又は２以上の補助情報をサーバ２Ｂから順番に取得し、各補助情報を順次出力させる場合（補助情報を連続的に出力させる場合）の番組と絵文字の出力制御の処理手順を示すフローチャートである。以下、図１５のフローチャートについて説明する。
【０２１１】
（ステップＳ１５０１）番組受信部１０１は、電源がＯＮになったか否かを判断する。電源がＯＮになると（Ｓ１５０１：Ｙ）、ステップＳ１５０２に進み、電源がＯＦＦ状態であれば（Ｓ１５０１：Ｎ）、ステップＳ１５０１に戻る。
【０２１２】
（ステップＳ１５０２）番組受信部１０１は、チャネル番号格納部に格納されているチャネル番号で送信される番組を受信する。出力部１０５は、番組受信部１０１が受信し、フレーム単位で復調した番組の映像をディスプレイに表示し、番組の音声をスピーカーから出力する。
【０２１３】
（ステップＳ１５０３）番組受信部１０１は、受信した番組に含まれる番組識別情報を復調し、番組識別情報格納部に格納する。
【０２１４】
（ステップＳ１５０４）補助情報送信指示送信部１０８は、出力部１０５が出力している番組に対して当該番組に対応付けて出力させる複数個の補助情報をサーバ２Ｂから全て取得しているか否かを判別する。補助情報送信指示送信部１０８は、複数個の補助情報を全て取得していなければ（Ｓ１５０４：Ｎ）、ステップＳ１５０7に進み、複数個の補助情報を全て取得していれば（Ｓ１５０４：Ｙ）、ステップＳ１５０５に進む。
【０２１５】
（ステップＳ１５０５）補助情報送信指示送信部１０８は、番組受信部１０１が受信した番組識別情報を含む補助情報送信指示をサーバ２Ｂに送信する。具体的には、補助情報送信指示送信部１０８は、既に補助情報を受信していなければ、番組識別情報格納部から番組識別情報を読み出し、補助情報送信指示のコマンドとともにサーバ２Ｂに送信する。また、補助情報送信指示送信部１０８は、既に補助情報を受信していれば、番組識別情報格納部から番組識別情報を読み出し、その番組識別情報と最新の補助情報の補助情報識別子とを補助情報送信指示のコマンドとともにサーバ２Ｂに送信する。
【０２１６】
（ステップＳ１５０６）補助情報受信部１０９は、補助情報送信指示送信部１０８による補助情報送信指示に応じてサーバ２Ｂから送信される補助情報を番組受信部１０１が現在受信している番組に対する補助情報として受信する。
【０２１７】
なお、補助情報送信指示送信部１０８が補助情報送信指示をサーバ２Ｂに送信したとき、サーバ２Ｂは、補助情報送信指示に含まれる番組識別情報と現在時刻（補助情報送信指示の受信時刻に相当）に対応する補助情報を番組出力装置１Ｃに送信する。従って、補助情報受信部１０９は、番組受信部１０１が受信を開始した時刻に放送されている番組に対応する補助情報を受信する。
【０２１８】
（ステップＳ１５０７）出力部１０５は、補助情報取得部２０６が取得した補助情報を出力する。
【０２１９】
（ステップＳ１５０８）絵文字識別情報受信部１０２は、絵文字識別情報を受信したか否かを判断する。絵文字識別情報受信部１０２が絵文字識別情報を受信すると（Ｓ１５０８：Ｙ）、ステップＳ１５０９に進み、絵文字識別情報受信部１０２が絵文字識別情報を受信しなければ（Ｓ１５０８：Ｎ）、ステップＳ１５１２に進む。
【０２２０】
（ステップＳ１５０９）絵文字情報送信指示送信部１０６は、絵文字識別情報受信部１０２が受信した絵文字識別情報を含む絵文字情報送信指示をサーバ２Ｂに送信する。
【０２２１】
（ステップＳ１５１０）絵文字情報受信部１０７は、絵文字情報送信指示送信部１０６による絵文字情報送信指示に応じてサーバ２Ｂから送信される絵文字情報を受信する。
【０２２２】
（ステップＳ１５１１）出力部１０５は、絵文字情報受信部１０７が受信した絵文字情報を用いて絵文字を出力する。出力部１０５は、例えば、番組の映像と補助情報が出力されている番組出力装置１Ｂのディスプレイに当該番組と補助情報に重畳して絵文字を出力する。
【０２２３】
（ステップＳ１５１２）番組受信部１０１は、電源がＯＦＦになったか否かを判断する。電源がＯＦＦになっていないときは（Ｓ１５１２：Ｎ）、ステップＳ１５０２に戻り、電源がＯＦＦになったときは（Ｓ１５１２：Ｙ）、番組と絵文字の出力制御を終了する。
【０２２４】
次に、サーバ２Ｂの絵文字情報と補助情報の送信制御の動作について、図１６のフローチャートを用いて説明する。
【０２２５】
（ステップＳ１６０１）絵文字情報送信受信部２０２は、番組出力装置１Ｃから絵文字情報送信指示があるか否かを判断する。絵文字情報送信受信部２０２が絵文字情報送信指示を受信しなければ（Ｓ１６０１：Ｎ）、ステップＳ１６０４に進み、絵文字情報送信指示受信部２０２が絵文字情報送信指示を受信すると（ステップＳ１６０１：Ｙ）、ステップＳ１６０２に進む。
【０２２６】
（ステップＳ１６０２）絵文字情報取得部２０３は、絵文字情報格納部２０１から絵文字情報送信指示受信部２０２が受信した絵文字情報送信指示に含まれる絵文字識別情報（絵文字コード）に対応する絵文字情報を取得する。
【０２２７】
（ステップＳ１６０３）絵文字情報送信部２０４は、絵文字情報取得部２０３が取得した絵文字情報を番組出力装置１Ｃに送信し、ステップＳ１６０１に戻る。
【０２２８】
（ステップＳ１６０４）補助情報送信指示受信部２０６は、番組出力装置１Ｃから補助情報送信指示があるか否かを判断する。補助情報送信指示受信部２０６が補助情報送信指示を受信しなければ（Ｓ１６０４：Ｎ）、ステップＳ１６０１に戻り、補助情報送信指示受信部２０６が補助情報送信指示を受信すると（ステップＳ１６０４：Ｙ）、ステップＳ１６０５に進む。
【０２２９】
（ステップＳ１６０５）補助情報取得部２０７は、補助情報送信指示受信部２０６が受信した補助情報送信指示に補助情報識別子が含まれているか否かを判別する。補助情報取得部２０７は、補助情報送信指示受信部２０６が受信した補助情報送信指示に補助情報識別子が含まれていなければ（Ｓ１６０５：Ｎ）、ステップＳ１６０６に進み、補助情報識別子が含まれていれば（Ｓ１６０５：Ｙ）、ステップＳ１６０８に進む。
【０２３０】
（ステップＳ１６０６）補助情報取得部２０７は、現在時刻（補助情報送信指示受信部２０６が補助情報送信指示を受信した時刻に相当）の情報を、例えば、サーバ２Ｂに内蔵された時計から取得する。
【０２３１】
（ステップＳ１６０７）補助情報取得部２０７は、補助情報格納部２０５に格納された補助情報のうち、補助情報送信指示受信部２０６が受信した補助情報送信指示に含まれる番組識別情報と、補助情報取得部２０７が取得した現在時刻とに対応する補助情報を決定する。
【０２３２】
（ステップＳ１６０８）補助情報取得部２０７は、補助情報格納部２０５に格納された補助情報のうち、補助情報送信指示受信部２０６が受信した補助情報送信指示に含まれる番組識別情報と、補助情報送信指示に含まれる補助情報識別子に対して次の順番となる補助情報識別子とに対応する補助情報を決定する。
【０２３３】
（ステップＳ１６０９）補助情報取得部２０７は、決定した補助情報（補助情報識別子、番組識別情報、箇所情報および補助内容などを含む情報）を補助情報格納部２０５から読み出す。
【０２３４】
（ステップＳ１６１０）補助情報送信部２０８は、補助情報取得部２０７が読み出した補助情報を番組出力装置１Ｃに送信して、ステップS１６０１に戻る。
【０２３５】
図１６のフローチャートにおいて、ステップＳ１６０４で受信した補助情報送信指示に現在時刻が含まれている場合は、ステップＳ１６０６の処理をせず、ステップＳ１６０７で、補助情報取得部２０７は、補助情報格納部２０５に格納された補助情報のうち、補助情報送信指示受信部２０６が受信した補助情報送信指示に含まれる番組識別情報と現在時刻とに対応する補助情報を決定するようにしてもよい。
【０２３６】
また、図１６のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。
【０２３７】
（具体例５）
次に、番組出力装置１Ｃにおける番組と補助情報および絵文字の出力動作の具体例について説明する。
【０２３８】
以下の説明では、番組出力装置１Ｃは、放送局から番組放送制御情報に基づいてデジタル放送される番組を受信するものとし、その番組の番組関連情報には当該番組の番組識別情報が含まれているものとする。
【０２３９】
また、サーバ２Ｂの補助情報格納部２０５には、例えば、図１７に示すリスト形式で１または２以上の字幕が格納されているものとし、本具体例では、補助情報として字幕がサーバ２Ｂから番組出力装置１Ｃに提供されるものとする。
【０２４０】
図１７において、「字幕ＩＤ」の欄は、補助情報識別子を示す欄であり、「番組ＩＤ」は、字幕が対応付けられている番組の番組識別情報（番組識別子）を示す欄である。また、「出力箇所」の欄は、対応付けられた番組内での字幕の出力箇所を示す欄であり、「字幕内容」の欄は、出力される字幕の内容を示す欄である。
【０２４１】
図１７の例では、「出力箇所」の情報として、例えば、字幕が対応付けられる番組シーンのフレームに関する情報（例えば、フレーム番号）が記載されている。「字幕内容」は、短文の場合は、１つの文章であるが、長文の場合は、１つの文章を複数個に分割した文である。例えば、「今日の天気は晴れです。」の文章や、「今日の天気は、午前中は晴れますが、」、「午後になると雨になるでしょう。」などの分割された文である。
【０２４２】
以下の説明では、番組出力装置１Ｃが番組ＩＤ「ｘｘ１１」を有する喜劇映画の番組を受信する場合の例について、説明する。なお、番組のデータのトランスポートストリームには、番組ＩＤ（ｘｘ１１）、番組名（ＡＡＡ）、放送日（Ｙ年Ｍ月Ｄ日）、放送時間（放送開始時刻Ｔ１、放送終了時刻Ｔ２）、番組の概要（×××・・・・。）、放送のチャネル番号（Ｘ１）などの当該番組に関連した番組関連情報が含まれているものとする。
【０２４３】
また、チャネル番号格納部にはチャネル番号「Ｘ１」が格納されているものとし、番組受信部１０１は、番組出力装置１Ｃの電源がＯＮになると、そのときにチャネル番号「Ｘ１」で放送されている番組名「ＡＡＡ」および番組ＩＤ「ｘｘ１１」を有する映画番組の受信を開始するものとする。
【０２４４】
番組受信部１０１は、番組名「ＡＡＡ」の番組の受信を開始すると、受信した番組を復調して得られる映像と音声を順次、番組格納部に一時的に格納する。一方、出力部１０５は、番組格納部に格納された番組の映像と音声を格納順に読み出して映像をディスプレイに表示し、音声をスピーカーから出力する。また、番組受信部１０１は、受信した番組を復調して得られる番組ＩＤ「ｘｘ１１」を順次、番組識別情報格納部に一時的に格納する。
【０２４５】
番組受信部１０１が番組名「ＡＡＡ」の番組の番組ＩＤ「ｘｘ１１」を取得すると、補助情報送信指示送信部１０８は、その番組ＩＤ「ｘｘ１１」に対応付けられた字幕の情報をサーバ２Ｂから取得しているか否かを判断する。番組の受信開始時は、サーバ２Ｂから字幕の情報を受信していないので、補助情報送信指示送信部１０８は、番組識別情報格納部に格納されている番組ＩＤ「ｘｘ１１」を読み出し、その番組ＩＤ「ｘｘ１１」とともに補助情報送信指示をサーバ２Ｂに送信する。
【０２４６】
そして、その補助情報送信指示に対して、サーバ２Ｂから字幕の情報（例えば、字幕ＩＤ＝ＰＮ０２、番組ＩＤ＝ｘｘ１１、出力箇所（フレーム番号）＝ＢＢ０２、字幕内容＝「ｂｂｂ・・・・、」の情報）が送信されると、補助情報受信部１０９がその字幕の情報を受信し、バッファメモリに格納する。
【０２４７】
なお、サーバ２Ｂでは、補助情報送信指示受信部２０６が補助情報送信指示を受信すると、補助情報取得部２０７が現在時刻Ｔｃ（Ｔ１＜Ｔｃ＜Ｔ２）を取得し、その現在時刻Ｔｃと補助情報送信指示に含まれる番組ＩＤ「ｘｘ１１」とを用いて補助情報格納部２０５を検索し、現在時刻Ｔｃと番組ＩＤ「ｘｘ１１」とに対応する字幕の情報を読み出す。現在時刻Ｔｃと番組ＩＤ「ｘｘ１１」とに対応する字幕の情報は、番組ＩＤ「ｘｘ１１」を有し、かつ、現在時刻Ｔｃに最も近い当該現在時刻Ｔｃよりも遅い出力箇所を有する字幕の情報である。
【０２４８】
図１７に示す補助情報の例で、現在時刻Ｔｃに最も近い当該現在時刻Ｔｃよりも遅い出力箇所がフレーム番号「ＢＢ０２」の映像が出現する時刻であるとすると、補助情報取得部２０７は、番組ＩＤ「ｘｘ１１」と出力箇所「フレーム番号ＢＢ０２」とを有する字幕の情報（字幕ＩＤ＝ＰＮ０２、番組ＩＤ＝ｘｘ１１、出力箇所（フレーム番号）＝ＢＢ０２、字幕内容＝「ｂｂｂ・・・・、」の情報）を補助情報格納部２０５から読み出す。そして、補助情報送信部２０８がその字幕の情報を番組出力装置１Ｃに送信する。
【０２４９】
補助情報送信指示部１０８は、補助情報受信部１０９が字幕ＩＤ「ＰＮ０２」を有する字幕の情報を受信すると、次の字幕の情報の取得処理を行う。２回目以降の字幕の情報の取得処理では、補助情報送信指示部１０８は、番組識別情報格納部から格納されている番組ＩＤ「ｘｘ１１」を読み出し、その番組ＩＤ「ｘｘ１１」と、直前に受信した字幕の情報に含まれる字幕ＩＤ「ＰＮ０２」とともに補助情報送信指示をサーバ２Ｂに送信する。
【０２５０】
なお、番組受信部１０１が番組を受信している期間では周期的に当該番組を復調して得られる番組ＩＤによって番組識別情報格納部に格納された番組ＩＤが更新される。従って、番組識別情報格納部には、番組受信部１０１が現在受信している番組の番組ＩＤ（図１７の例では、番組ＩＤ「ｘｘ１１」）が格納されている。
【０２５１】
そして、その補助情報送信指示に対して、サーバ２Ｂから次の字幕の情報（字幕ＩＤ＝ＰＮ０３、番組ＩＤ＝ｘｘ１１、出力箇所（フレーム番号）＝ＣＣ０３、字幕内容＝「ｃｃｃ・・・・。」の情報）が送信されると、補助情報受信部１０９がその字幕の情報を受信し、バッファメモリに格納する。
【０２５２】
なお、サーバ２Ｂでは、補助情報送信指示受信部２０６が補助情報送信指示を受信すると、その補助情報送信指示に含まれる字幕ＩＤ「ＰＮ０２」の次の字幕ＩＤ「ＰＮ０３」とその補助情報送信指示に含まれる番組ＩＤ「ｘｘ１１」とを用いて補助情報格納部２０５を検索し、字幕ＩＤ「ＰＮ０３」と番組ＩＤ「ｘｘ１１」とに対応する字幕の情報（字幕ＩＤ＝ＰＮ０３、番組ＩＤ＝ｘｘ１１、出力箇所（フレーム番号）＝ＣＣ０３、字幕内容＝「ｃｃｃ・・・・。」の情報）を補助情報格納部２０５から読み出す。そして、補助情報送信部２０８がその字幕の情報を番組出力装置１Ｃに送信する。
【０２５３】
以下、補助情報送信指示部１０８と補助情報受信部１０９は、字幕の情報を受信する毎に、番組識別情報に格納された番組ＩＤと直前に取得した字幕の情報に含まれる字幕ＩＤとを有する補助情報送信指示をサーバ２Ｂに送信し、サーバ２Ｂから番組ＩＤ「ｘｘ１１」を有する、字幕ＩＤ「ＰＮ０４」、「ＰＮ０５」、…「ＰＮ５０」の字幕の情報を順番に受信し、一旦ファメモリに格納する。
【０２５４】
出力部１０５は、組受信部１０１が受信する番組の映像と音声の出力を開始すると、バッファメモリに字幕の情報が格納される毎に、当該バッファメモリからその字幕を読み出し、予め設定された出力態様で出力する。
【０２５５】
出力部１０５は、例えば、スーパーインポーズなどの出力技術を用いて、例えば、図１８に示す出力態様で、番組の映像が出力されているディスプレイに当該映像に重畳して複数の字幕を順次、出力する。図１８に示す表示態様は、喜劇映画の映像が表示されているディスプレイの下部中央に字幕を一行で表示する態様である。
【０２５６】
また、絵文字識別情報受信部１０２は、番組受信部１０１が番組名「ＡＡＡ」の番組の受信を開始すると、放送局から送信される絵文字識別情報（番組名「ＡＡＡ」の番組に対応する絵文字コード「ｘ０ｙ０」）を受信する。
【０２５７】
絵文字識別情報受信部１０２が絵文字識別情報（絵文字コード「ｘ０ｙ０」）を受信すると、絵文字情報送信指示送信部１０６は、その絵文字識別情報とともに絵文字識別情報送信指示をサーバ２Ｂに送信する。
【０２５８】
サーバ２Ｂでは、絵文字情報送信指示受信部２０２が番組出力装置１Ｃからの絵文字識別情報送信指示を受信すると、絵文字情報取得部２０３が絵文字情報格納部２０１から当該絵文字識別情報送信指示に含まれる絵文字識別情報（絵文字コード「ｘ０ｙ０」）に対応付けられた１または２以上の絵文字識別情報を取得する。
【０２５９】
例えば、絵文字情報送信指示受信部２０２が絵文字コード「ｘ０ｙ０」を有する絵文字識別情報送信指示を受信した場合、絵文字情報取得部２０３は、絵文字情報格納部２０１に格納されている図８に示す絵文字コード表から絵文字コード「ｘ０ｙ０」に割り当てられた絵文字情報（笑い顔の絵文字ＰＧＤの画像情報）を取得する。そして、絵文字情報送信部２０４がその絵文字ＰＧＤの画像情報を番組出力装置１Ｂに送信する。
【０２６０】
サーバ２Ｂが絵文字識別情報送信指示に応じて絵文字ＰＧＤの画像情報を番組出力装置１Ｃに送信すると、絵文字情報受信部１０７がその絵文字ＰＧＤの画像情報を受信する。そして、出力部１０５は、例えば、図１８に示す表示態様で、絵文字情報受信部１０７が受信した絵文字ＰＧＤを字幕とともに喜劇映画の映像に重畳してディスプレイに出力する。図１８に示す表示態様は、喜劇映画の映像が表示されているディスプレイの左下隅に絵文字ＰＧＤを表示する態様である。
【０２６１】
なお、上記の具体例５では、字幕ＩＤ「ＰＮ０２」、「ＰＮ０３」、…「ＰＮ５０」の字幕の情報を番組内の各字幕の出力箇所ＡＡ０２、ＢＢ０３、…ＤＤ５０よりも前に予め取得しておき、各字幕に対応付けられた番組のシーンが出現するときに、字幕ＩＤ「ＰＮ０２」、「ＰＮ０３」、…「ＰＮ５０」の字幕内容を出力させる構成だった。これに対し、各字幕に対応付けられた番組のシーンが出現する毎に、補助情報送信指示部１０８が番組ＩＤ「ｘｘ１１」を有する補助情報送信指示をサーバ２Ｂに送信して当該番組ＩＤ「ｘｘ１１」と出力箇所に対応する字幕の情報をサーバ２Ｂから取得し、その字幕の情報に含まれる字幕内容を出力部１０５が直ちに出力させるようにしてもよい。
【０２６２】
また、具体例５では、番組全体に対応する絵文字を出力させるようにしているが、字幕の内容に対応する絵文字情報を出力させるようにしてもよい。
【０２６３】
また、具体例５では、字幕を例に説明したが、手話映像や補助音声等の補助情報についても同様の出力制御を行うことによって、番組のシーンに対応付けて（同期させて）１または２以上の補助情報を出力させることができ、その補助情報とともに絵文字を出力させることができる。
【０２６４】
以上のように、本実施の形態３によっても、番組出力装置１Ｃが受信する番組に対して、補助情報により番組の視聴を補助できるとともに、絵文字により伝達し難い情報を視聴者に直感的に伝達することができる。
【０２６５】
なお、上記実施の形態３では、サーバ２Ｂから番組出力装置１Ｃに補助情報情報を提供する構成であるが、放送局から番組識別情報に対応する補助情報が提供される構成でもよい。この場合は、図１に示す番組出力装置１Ａの構成を図１９に示す番組出力装置１Ｄの構成に変形し、図１１に示す番組出力装置１Ｂの構成を図２０に示す番組出力装置１Ｅの構成に変形すればよい。
【０２６６】
図１９に示す番組出力装置１Ｄは、図１に示す番組出力装置１Ａに対して、番組識別情報受信部１１０と補助情報受信部１１１を追加したものである。また、図２０に示す番組出力装置１Ｅは、図１１に示す番組出力装置１Ｂに対して、番組識別情報受信部１１０と補助情報受信部１１１を追加したものである。
【０２６７】
番組出力装置１Ｄ，１Ｅにおいては、番組識別情報受信部１１０は、放送局から放送される番組の番組識別情報を受信する。すなわち、番組識別情報受信部１１０は、図１４に示す番組出力装置１Ｃの番組受信部１０１が果たす番組識別情報の受信機能と同一の機能を果たす。図１９、図２０では、番組識別情報受信部１１０を追加した構成としているが、番組受信部１０１が番組識別情報受信部１１０を兼用する構成でもよい。番組識別情報受信部１１０の番組識別情報の受信動作は、上述した図１４に示す番組出力装置１Ｃの番組受信部１０１の番組識別情報の受信動作と基本的に同一であるので、その説明の詳細は省略する。
【０２６８】
補助情報受信部１１１は、放送局から送信される補助情報のうち、番組識別情報受信部１１０が受信した番組識別情報に対応付けられた補助情報を受信する。番組受信部１０１が番組の受信を開始したとき、放送局から補助情報として、例えば、図１７に示す字幕情報が送信され、番組識別情報受信部１１０が、例えば、番組ＩＤ＝ｘｘ１１の番組識別情報を受信した場合、補助情報受信部１１１は、番組ＩＤ＝ｘｘ１１を含む字幕情報（ＰＮ０１〜ＰＮ５０の字幕ＩＤを有する字幕情報）を受信する。そして、出力部１０５が、番組受信部１０１が受信する番組（番組ＩＤ「ｘｘ１１」を有する番組名「ＡＡＡ」の番組）の映像をディスプレイに出力するとともに、補助情報受信部１１１が受信した字幕情報に含まれる字幕を、例えば、図１８に示した出力態様で、番組の映像に重畳して出力する。
【０２６９】
これらの変形例でも、番組出力装置１Ｄ，１Ｅが受信する番組に対して、補助情報により番組の視聴を補助できるとともに、絵文字により伝達し難い情報を視聴者に直感的に伝達することができる。
【０２７０】
本実施の形態１〜３の番組出力装置１Ａ，１Ｂ，１Ｃにおける処理や本実施の形態２，３のサーバ２Ａ，２Ｂにおける処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ−ＲＯＭなどの記録媒体に記録して流布しても良い。
【０２７１】
本実施の形態１における番組出力装置１Ａを実現するソフトウェアは、以下のようなプログラムである。
【０２７２】
すなわち、コンピュータがアクセス可能な記録媒体は、絵文字識別情報に対応付けて絵文字に関する１または２以上の絵文字情報を格納する絵文字情報格納部を具備し、コンピュータを、番組を受信する番組受信部と、絵文字識別情報を受信する絵文字識別情報受信部と、絵文字情報受信部が受信した絵文字識別情報に対応する絵文字情報を絵文字情報格納部から取得する絵文字情報取得部と、絵文字情報取得部が取得した絵文字情報を、番組受信部が受信した番組とともに出力する出力部と、して機能させるためのプログラムである。
【０２７３】
また、実施の形態２における番組出力装置１Ｂを実現するソフトウェアは、以下のようなプログラムである。
【０２７４】
すなわち、コンピュータを、番組を受信する番組受信部と、絵文字識別情報を受信する絵文字識別情報受信部と、絵文字識別情報受信部が受信した絵文字識別情報を有する絵文字情報送信指示を、絵文字識別情報に対応付けられた１または２以上の絵文字情報を備えるサーバに送信する絵文字情報送信指示送信部と、絵文字情報送信指示の送信に応じて、当該絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報をサーバから受信する絵文字情報受信部と、絵文字情報受信部が受信した絵文字情報を用いて、受信部が受信した番組とともに絵文字を出力する出力部と、して機能させるためのプログラムである。
【０２７５】
また、実施の形態３における番組出力装置１Ｃを実現するソフトウェアは、以下のようなプログラムである。
【０２７６】
すなわち、コンピュータを、番組を受信する番組受信部と、絵文字識別情報を受信する絵文字識別情報受信部と、絵文字識別情報受信部が受信した絵文字識別情報を有する絵文字情報送信指示を、絵文字識別情報に対応付けられた１または２以上の絵文字情報と番組識別情報に対応付けられた１または２以上の補助情報とを備えるサーバに送信する絵文字情報送信指示送信部と、絵文字情報送信指示の送信に応じて、当該絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報をサーバから受信する絵文字情報受信部と、番組の番組識別情報を受信する番組識別情報受信部と、番組識別情報を有する補助情報送信指示を、サーバに送信する補助情報送信指示送信部と、補助情報送信指示の送信に応じて、当該補助情報送信指示が有する番組識別情報に対応する補助情報をサーバから受信する補助情報受信部と、絵文字情報受信部が受信した絵文字情報と補助情報受信部が受信した補助情報とを、受信部が受信した番組とともに出力する出力部と、して機能させるためのプログラムである。
【０２７７】
また、実施の形態２におけるサーバ２Ａを実現するソフトウェアは、以下のようなプログラムである。
【０２７８】
すなわち、コンピュータがアクセス可能な記録媒体は、絵文字識別情報に対応付けて絵文字に関する１または２以上の絵文字情報を格納する絵文字情報格納部を具備し、コンピュータを、番組とともに絵文字を出力する番組出力装置から絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を絵文字情報格納部から取得する絵文字情報取得部と、絵文字情報取得部が取得した絵文字情報を番組出力装置に送信する絵文字情報送信部と、して機能させるためのプログラムである。
【０２７９】
また、実施の形態２におけるサーバ２Ｂを実現するソフトウェアは、以下のようなプログラムである。
【０２８０】
すなわち、コンピュータがアクセス可能な記録媒体は、絵文字識別情報に対応付けて絵文字に関する１または２以上の絵文字情報を格納する絵文字情報格納部と、番組を識別する番組識別情報に対応付いている１または２以上の補助情報を格納している補助情報格納部と、を具備し、コンピュータを、番組とともに絵文字を出力する番組出力装置から絵文字識別情報を有する絵文字情報送信指示を受信する絵文字情報送信指示受信部と、絵文字情報送信指示が有する絵文字識別情報に対応する絵文字情報を絵文字情報格納部から取得する絵文字情報取得部と、絵文字情報取得部が取得した絵文字情報を番組出力装置に送信する絵文字情報送信部と、番組出力装置から番組識別情報を有する補助情報送信指示を受信する補助情報送信指示受信部と、補助情報送信指示が有する番組識別情報に対応する補助情報を補助情報格納部から取得する補助情報取得部と、補助情報取得部が取得した補助情報を番組出力装置に送信する補助情報送信部と、して機能させるためのプログラムである。
【０２８１】
図２１は、上記プログラムを実行して、番組出力装置１Ａ〜１Ｅやサーバ２Ａ，２Ｂを実現するコンピュータの外観の一例を示す模式図である。
【０２８２】
図２１において、コンピュータシステム９００は、ＣＤ−ＲＯＭドライブ９０５を含むコンピュータ９０１と、キーボード９０２と、マウス９０３と、モニタ９０４とを備える。
【０２８３】
図２２は、コンピュータシステム９００の内部構成を示す図である。図２２において、コンピュータ９０１は、ＣＤ−ＲＯＭドライブ９０５に加えて、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９１１と、ブートアッププログラム等のプログラムを記憶するためのＲＯＭ９１２と、ＭＰＵ９１１に接続され、アプリケーションプログラムの命令を一時的に記憶すると共に、一時記憶空間を提供するＲＡＭ９１３と、アプリケーションプログラム、システムプログラム、及びデータを記憶するハードディスク９１４と、ＭＰＵ９１１、ＲＯＭ９１２等を相互に接続するバス９１５とを備える。なお、コンピュータ９０１は、ＬＡＮやＷＡＮ等への接続を提供する図示しないネットワークカードを含んでいてもよい。
【０２８４】
コンピュータシステム９００に、上記の番組出力装置１Ａ，〜１Ｅやサーバ２Ａ，２Ｂの機能を実行させるプログラムは、ＣＤ−ＲＯＭ９２１に記憶されて、ＣＤ−ＲＯＭドライブ９０５に挿入され、ハードディスク９１４に転送されてもよい。これに代えて、そのプログラムは、図示しないネットワークを介してコンピュータ９０１に送信され、ハードディスク９１４に記憶されてもよい。プログラムは実行の際にＲＡＭ９１３にロードされる。なお、プログラムは、ＣＤ−ＲＯＭ９２１、またはネットワークから直接、ロードされてもよい。また、ＣＤ−ＲＯＭ９２１に代えて他の記録媒体（例えば、ＤＶＤ等）を介して、プログラムがコンピュータシステム９００に読み込まれてもよい。
【０２８５】
プログラムは、コンピュータ９０１に、上記の番組出力装置１Ａ，〜１Ｅやサーバ２Ａ，２Ｂの機能を実行させるオペレーティングシステム（ＯＳ）、またはサードパーティプログラム等を必ずしも含んでいなくてもよい。プログラムは、制御された態様で適切な機能やモジュールを呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいてもよい。コンピュータシステム９００がどのように動作するのかについては周知であり、詳細な説明は省略する。
【０２８６】
なお、上記プログラムにおいて、情報を送信する送信ステップや、情報を受信する受信ステップなどでは、ハードウェアによって行われる処理、例えば、送信ステップにおけるモデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。
【０２８７】
また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。
【０２８８】
また、上記実施の形態１〜３において、一の装置に存在する２以上の通信手段は、物理的に一の媒体で実現されても良いことは言うまでもない。
【０２８９】
また、上記実施の形態１〜３において、各処理（各機能）は、単一の装置（システム）によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。
【０２９０】
本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。
【産業上の利用可能性】
【０２９１】
以上のように、本発明にかかる番組出力装置等は、絵文字によって当該番組の内容や伝達しにくい感情的なニュアンスを視聴者に直感的に伝達することができるという効果を有し、番組出力装置等として有用である。
【符号の説明】
【０２９２】
１Ａ，１Ｂ，１Ｃ，１Ｄ，１Ｅ  番組出力装置
１０１  番組受信部
１０２  絵文字識別情報受信部
１０３  絵文字情報取得部
１０４  絵文字情報格納部
１０５  出力部
１０６  絵文字情報送信指示送信部
１０７  絵文字情報受信部
１０８  補助情報送信指示送信部
１０９  補助情報受信部
１１０  番組識別情報受信部
１１１  補助情報受信部
２Ａ，２Ｂ  サーバ
２０１  絵文字情報格納部
２０２  絵文字情報送信指示受信部
２０３  絵文字情報取得部
２０４  絵文字情報送信部
２０５  補助情報格納部
２０６  補助情報送信指示受信部
２０７  補助情報取得部
２０８  補助情報送信部
３  インターネット回線網
９００  コンピュータシステム
９０１  コンピュータ
９０２  キーボード
９０３  マウス
９０４  モニタ
９１４  ハードディスク
９１５  バス
【図１】
0006612028.tif 000002
【図２】
0006612028.tif 000003
【図３】
0006612028.tif 000004
【図４】
0006612028.tif 000005
【図５】
0006612028.tif 000006
【図６】
0006612028.tif 000007
【図７】
0006612028.tif 000008
【図８】
0006612028.tif 000009
【図９】
0006612028.tif 000010
【図１０】
0006612028.tif 000011
【図１１】
0006612028.tif 000012
【図１２】
0006612028.tif 000013
【図１３】
0006612028.tif 000014
【図１４】
0006612028.tif 000015
【図１５】
0006612028.tif 000016
【図１６】
0006612028.tif 000017
【図１７】
0006612028.tif 000018
【図１８】
0006612028.tif 000019
【図１９】
0006612028.tif 000020
【図２０】
0006612028.tif 000021
【図２１】
0006612028.tif 000022
【図２２】
0006612028.tif 000023