(57)【要約】【課題】表示装置において、他の装置からの通知情報を支障なく表示する。【解決手段】表示装置（４）は、表示部（４１）、音声出力装置通信部（４２）、画面表示状態を取得する画面状態取得部（４５１）を備え、音声出力装置通信部は、画面状態取得部が画面表示の開始、終了を検知した場合に、画面表示の開始、終了を示す信号を音声出力装置（２）に送信し、音声出力装置から通知情報を取得し、表示部は、通知情報を表示する。【選択図】図１
2019144837.tif 000002
【特許請求の範囲】
【請求項１】
表示装置であって、
表示部、通信部、及び上記表示部の画面表示状態を取得する画面状態取得部を備え、
上記通信部は、
上記画面状態取得部が上記表示部の画面表示の開始又は終了を検知した場合に、
上記表示部の画面表示の開始又は終了を示す信号を所定の機器に送信し、
上記信号の送信に対する応答として、上記所定の機器から通知情報を取得し、
上記表示部は、上記通知情報を表示する
ことを特徴とする表示装置。
【請求項２】
上記通知情報を表示する場合に、事前に上記通知情報に行われた重み付けに従って、上記通知情報の表示順序または表示個数を決定する
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
上記通知情報を表示する場合に、表示する時間帯またはユーザの行動履歴を参照して、上記通知情報の表示時間長を決定する
ことを特徴とする請求項１または２に記載の表示装置。
【請求項４】
上記通知情報の情報源は複数存在し、
上記情報源に応じた表示態様にて上記通知情報を表示する
ことを特徴とする請求項１から３の何れか１項に記載の表示装置。
【請求項５】
音声出力装置であって、
表示装置の画面表示の開始又は終了を示す信号を取得する表示信号取得部と、
上記表示装置に表示させる通知情報を出力する通知情報出力部と
を備え、
上記通知情報出力部は、
上記表示信号取得部による、上記表示装置の画面表示の開始又は終了を示す信号の取得に起因して、上記通知情報を上記表示装置に出力する
ことを特徴とする音声出力装置。
【請求項６】
表示装置と、音声出力装置とを備えた情報通知システムであって、
上記表示装置は、
表示部、通信部、及び上記表示部の画面表示状態を取得する画面状態取得部を備え、
上記通信部は、
上記画面状態取得部が上記表示部の画面表示の開始又は終了を検知した場合に、
上記表示部の画面表示の開始又は終了を示す信号を音声出力装置に送信し、
上記信号の送信に対する応答として、上記音声出力装置から通知情報を取得し、
上記表示部は、上記通知情報を表示し、
上記音声出力装置は、
音声を出力する音声出力部と、
上記表示装置の画面表示の開始又は終了を示す信号を取得する表示信号取得部と、
上記表示装置に表示させる通知情報を出力する通知情報出力部と
を備え、
上記通知情報出力部は、
上記表示信号取得部による、上記表示装置の画面表示の開始又は終了を示す信号の取得に起因して、上記通知情報を上記表示装置に出力する
ことを特徴とする情報通知システム。
【請求項７】
上記音声出力装置は、
上記音声出力部が出力する音声に関する関連情報を記憶する記憶部と、
ユーザの反応を示すユーザ反応情報を取得する取得部と、
上記取得部が取得したユーザの反応に応じて反応タイミングを特定し、特定した反応タイミングに応じて、上記記憶部に記憶された関連情報から、出力すべき関連情報を抽出する抽出部と、
をさらに備え、
上記通知情報出力部は、上記抽出部が抽出した関連情報を上記通知情報として上記表示装置に出力する
ことを特徴とする請求項６に記載の情報通知システム。
【請求項８】
請求項１に記載の表示装置としてコンピュータを機能させるためのプログラムであって、上記画面状態取得部としてコンピュータを機能させるためのプログラム。
【請求項９】
請求項８に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置、音声出力装置、情報通知システム、プログラム、および、プログラムの記録媒体に関する。
【背景技術】
【０００２】
従来、音声出力装置（スマートスピーカ）と、表示装置（テレビジョン受像機）とが通信可能に接続され、音声出力装置が、再生されたコンテンツ、放送番組に関連する情報を表示装置に通知し、表示装置が、通知されたコンテンツ、情報を表示するシステムがある。
【０００３】
例えば、特許文献１の表示システムでは、音声入力に対する検索結果を、外部の表示装置に表示させることにより、ユーザに通知する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−１３４９４号公報（２０１４年１月２３日公開）
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、音声出力装置からの通知情報を、当該通知情報の生成タイミングで表示装置に表示させると、利便性が低下するという問題がある。例えば、ユーザがテレビ視聴中の場合、検索結果の表示により、視聴が妨げられるおそれがある。
【０００６】
本発明の一態様は、表示装置において、他の装置からの通知情報を支障なく表示することを目的とする。
【課題を解決するための手段】
【０００７】
上記の課題を解決するために、本発明の一態様に係る表示装置は、表示部、通信部、及び上記表示部の画面表示状態を取得する画面状態取得部を備え、上記通信部は、上記画面状態取得部が上記表示部の画面表示の開始又は終了を検知した場合に、上記表示部の画面表示の開始又は終了を示す信号を所定の機器に送信し、上記信号の送信に対する応答として、上記所定の機器から通知情報を取得し、上記表示部は、上記通知情報を表示する。
【０００８】
また、上記の課題を解決するために、本発明の一態様に係る音声出力装置は、表示装置の画面表示の開始又は終了を示す信号を取得する表示信号取得部と、上記表示装置に表示させる通知情報を出力する通知情報出力部とを備え、上記通知情報出力部は、上記表示信号取得部による、上記表示装置の画面表示の開始又は終了を示す信号の取得に起因して、上記通知情報を上記表示装置に出力する。
【０００９】
また、上記の課題を解決するために、本発明の一態様に係る情報通知システムは、表示装置と、音声出力装置とを備えた情報通知システムであって、上記表示装置は、表示部、通信部、及び上記表示部の画面表示状態を取得する画面状態取得部を備え、上記通信部は、上記画面状態取得部が上記表示部の画面表示の開始又は終了を検知した場合に、上記表示部の画面表示の開始又は終了を示す信号を音声出力装置に送信し、上記信号の送信に対する応答として、上記音声出力装置から通知情報を取得し、上記表示部は、上記通知情報を表示し、上記音声出力装置は、上記表示装置の画面表示の開始又は終了を示す信号を取得する表示信号取得部と、上記表示装置に表示させる通知情報を出力する通知情報出力部とを備え、上記通知情報出力部は、上記表示信号取得部による、上記表示装置の画面表示の開始又は終了を示す信号の取得に起因して、上記通知情報を上記表示装置に出力する。
【発明の効果】
【００１０】
本発明の一態様によれば、表示装置において、他の装置からの通知情報を支障なく表示することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態１に係る情報通知システムの構成、ならびに、音声出力装置および表示装置のハードウェア構成を示す図である。
【図２】本発明の実施形態１に係る音声出力装置の処理を示すフローチャートである。
【図３】本発明の実施形態１の実施例１に係る制御部の機能構成を示すブロック図である。
【図４】本発明の実施形態１の実施例１に係る情報通知システムの動作概要を示す図である。
【図５】本発明の実施形態１の実施例１に係る情報通知システムの動作詳細を示す図である。
【図６】本発明の実施形態１の実施例１に係る情報通知システムの動作詳細を示す図である。
【発明を実施するための形態】
【００１２】
〔実施形態１〕
以下、本発明の実施形態１について、詳細に説明する。図１は、本実施形態に係る情報通知システム１の構成、ならびに、音声出力装置２および表示装置４のハードウェア構成を示す図である。
【００１３】
（情報通知システム１の構成）
図１に示すように、情報通知システム１は、音声出力装置２、サーバ３、表示装置４、および、ＩｏＴ（Internet of Things）家電５を備えている。音声出力装置２は、人と会話したり、音楽を流したりする（音声を出力する）装置であり、例えば、スマートスピーカ、ＡＩ（Artificial Intelligence）スピーカ等である。音声出力装置２が出力する「音声」には、音楽、環境音、通知音等が含まれる。音声出力装置２は、インターネットを介してサーバ３、および、ＩｏＴ家電５と通信可能であり、ＬＡＮ（Local Area Network）等を介して表示装置４と通信可能である。サーバ３は、インターネットを介して音声出力装置２、および、表示装置４と通信可能である。
【００１４】
表示装置４は、放送されるコンテンツを受信して視聴可能に出力する装置であり、例えば、テレビジョン受像機である。表示装置４は、ＬＡＮ等を介して音声出力装置２と通信可能であり、インターネットを介してサーバ３と通信可能である。表示装置４と、音声出力装置２との間の通信は、インターネット経由であってもよいし、ＬＡＮ経由であってもよいし、屋内のネットワーク経由であってよい。
【００１５】
ＩｏＴ家電５は、インターネットに接続された家電機器であり、インターネットを介して音声出力装置２と通信可能である。
【００１６】
（音声出力装置２の構成）
図１に示すように、音声出力装置２は、サーバ通信部２１、制御部２２、記憶部２３、スピーカ（音声出力部）２４、マイク２５、音声処理部２６、表示装置通信部２７、および、ＩｏＴ家電通信部２８を備えている。
【００１７】
サーバ通信部２１は、サーバ３との通信を行う。制御部２２は、音声出力装置２全体を制御するものであり、ＣＰＵ（Central Processing Unit）等である。制御部２２は、サーバ通信部２１、表示装置通信部２７、および、ＩｏＴ家電通信部２８を介して、ならびに、記憶部２３から、各種情報を取得する。記憶部２３は、各部からのデータを記憶し、また、各部にデータを読み出すものであり、ＲＡＭ（Random Access Memory）、不揮発メモリ（ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive））等である。
【００１８】
スピーカ２４は、音声を出力する。マイク２５は、音声を取得する。音声処理部２６は、音声信号を処理する。表示装置通信部２７は、表示装置４との通信を行う。ＩｏＴ家電通信部２８は、ＩｏＴ家電５との通信を行う。
【００１９】
（表示装置４の構成）
図１に示すように、表示装置４は、表示部４１、音声出力装置通信部（通信部）４２、ＩｏＴ家電通信部（通信部）４３、サーバ通信部４４、制御部４５、および、記憶部４６を備えている。表示部４１は、放送番組、他の装置からの情報等を表示する。音声出力装置通信部４２は、音声出力装置２との通信を行う。ＩｏＴ家電通信部４３は、ＩｏＴ家電通信部２８との通信を行う。サーバ通信部４４は、サーバ３との通信を行う。
【００２０】
制御部４５は、表示装置４全体を制御するものであり、ＣＰＵ等である。制御部４５は、音声出力装置通信部４２、ＩｏＴ家電通信部４３、および、サーバ通信部４４を介して、ならびに、記憶部４６から、各種情報を取得する。記憶部４６は、各部からのデータを記憶し、また、各部にデータを読み出すものであり、ＲＡＭ、不揮発メモリ（ＨＤＤ、ＳＳＤ）等である。
【００２１】
（音声出力装置２の処理）
図２は、本実施形態に係る音声出力装置２の処理を示すフローチャートである。音声出力装置２の電源スイッチがオンに投入されると、音声出力装置２の処理が開始される。
【００２２】
音声出力装置２が処理を行う契機となるイベントには、第１のイベント、第２のイベント、および、第３のイベントがある。
【００２３】
第１のイベントは、最初に音声出力装置２の電源スイッチがオフからオンに投入されることである。
【００２４】
第２のイベントは、音声出力装置２の電源スイッチがオンの状態におけるイベントである。以下に、第２のイベントの具体例を示す。
【００２５】
・マイク２５を通じて入力された音声の検知
・制御部２２の時計機能を用いた所定時刻の到来
・以前の発話またはコンテンツ再生に関連した情報の検知
第３のイベントは、音声出力装置２が省電力モードの状態におけるイベントである。以下に、第３のイベントの具体例を示す。
【００２６】
・マイク２５を通じたキーワードの取得
・制御部２２の時計機能を用いた所定時刻の到来
なお、キーワードには、ユーザによる呼びかけ（例えば、「もしもし、スピーカ」）等がある。
【００２７】
（ステップＳ２０１）
音声出力装置２の制御部２２は、イベントに応じた発話、及び、コンテンツの再生の少なくとも何れかを行う。制御部２２は、音声処理部２６、および、スピーカ２４を通じて、上記イベントに応じた発話、及び、上記コンテンツの再生の少なくとも何れかに応じた音声を音声出力するか、または、表示装置４に情報を出力する。なお、処理開始時のイベントは第１のイベントであり、ステップＳ２０２の判定結果に応じて実行される場合のイベントは第２のイベントであり、ステップＳ２０７の処理に続いて実行される場合のイベントは第３のイベントである。また、出力のタイミング、出力情報、出力先装置の具体例に関しては、後記する。
【００２８】
（ステップＳ２０２）
制御部２２は、第２のイベントが発生したか否かを判定する。第２のイベントが発生した場合（ステップＳ２０２のＹＥＳ）、制御部２２は、ステップＳ２０１の処理を実行する。第２のイベントが発生していない場合（ステップＳ２０２のＮＯ）、制御部２２は、ステップＳ２０３の判定を実行する。
【００２９】
（ステップＳ２０３）
制御部２２は、ステップＳ２０１の処理を実行してから所定時間が経過したか否かを判定する。所定時間が経過していない場合（ステップＳ２０３のＮＯ）、ステップＳ２０２の判定を再度実行する。所定時間が経過している場合（ステップＳ２０３のＹＥＳ）、ステップＳ２０４の処理を実行する。
【００３０】
（ステップＳ２０４）
制御部２２は、必要に応じて、スピーカ２４を通じて発話を行う。音声出力装置２が省電力モードに移行する前に、制御部２２は、例えば、「今からスタンバイモードになります。」との発話を行ってもよい。
【００３１】
（ステップＳ２０５）
音声出力装置２は、省電力モードに移行する。
【００３２】
（ステップＳ２０６）
制御部２２は、第３のイベント待ちになる。すなわち、制御部２２は、第３のイベントが発生した場合にステップＳ２０７の処理を実行する。
【００３３】
（ステップＳ２０７）
制御部２２は、音声出力装置２を、省電力モードから電源オン状態に移行させる。そして、ステップＳ２０１の処理を実行する。
【００３４】
（出力タイミングの例）
制御部２２による出力タイミングの例を、以下に示す。音声出力装置２は、以下に示すタイミングで情報を出力する。
【００３５】
＜出力タイミングの例：音声出力装置２が契機になるタイミング＞
・制御部２２がユーザによりコンテンツ（楽曲等）が指定されたことを検知した場合。
【００３６】
・制御部２２がコンテンツの再生が終了したことを検知した場合。
【００３７】
・制御部２２がユーザとの会話が終了したことを検知した場合。
【００３８】
・制御部２２がサーバ通信部２１または記憶部２３から再生中の、または再生したコンテンツに関するメタ情報を取得した場合。
【００３９】
・スピーカ２４が発話中またはコンテンツ再生中である場合。
【００４０】
・制御部２２がキーワード待ち状態に遷移した場合。
【００４１】
・制御部２２がキーワードを取得した場合。制御部２２が、例えば、コンテンツ再生の間、または、コンテンツが終了してから所定時間以内に「いいね」、「ええわ〜」、「ないす」等の声を認識して、「いいね」の意味と認識した場合。
【００４２】
・コンテンツ再生の間、音声出力装置２が置かれたテーブルをユーザがトンと叩いて振動センサが反応することによって、制御部２２が「いいね」の意味と認識した場合
・制御部２２がサーバ通信部２１または記憶部２３からコンテンツ関連情報（例えば、放送中のテレビまたはラジオの前メタ情報、後メタ情報）を取得した場合。
【００４３】
・制御部２２がコンテンツの再生と、次のコンテンツの再生との間であることを検知した場合。
【００４４】
・制御部２２が通知情報の緊急度に応じた出力タイミングであることを検知した場合。当該出力タイミングの例を（１）〜（５）に示す。
【００４５】
（１）制御部２２が、音声出力装置２の電源がオフからオンになったことを検知した場合。
【００４６】
（２）制御部２２が、スピーカ２４が動作中であることを検知した場合。
【００４７】
（３）制御部２２が、スピーカ２４の動作が終了したことを検知した場合。
【００４８】
（４）制御部２２が、音声出力装置２がスタンバイ中であることを検知した場合。
【００４９】
（５）制御部２２が、音声出力装置２がスタンバイ移行時（オン＝＞スタンバイ）であることを検知した場合。
【００５０】
・制御部２２が、スピーカ２４がコンテンツ再生の前であることを検知した場合。
【００５１】
・制御部２２がＩｏＴ家電５からＩｏＴ家電通信部２８を介して機器情報を取得した場合。
【００５２】
・制御部２２がサーバ通信部２１または記憶部２３からコンテンツの再生中にコンテンツに関するメタ情報を取得した場合。
【００５３】
なお、前メタ情報は、放送局が事前に作成した、番組に関するメタ情報であり、例えば、当該番組の概要、テーマ、出演者等を含む情報である。また、後メタ情報は、番組の放送中又は放送後に生成されたメタ情報であり、例えば、当該番組にて紹介された商品等のメタ情報を、業者が手入力で生成したものである。
＜出力タイミングの例：周辺機器が契機になるタイミング＞
・制御部２２が、周辺機器において所定のイベントが発生したことを検知した場合。
【００５４】
・制御部２２が、周辺機器がメタ情報を取得したことを検知した場合。
【００５５】
・制御部２２が、表示装置４が後メタ情報を取得したことを検知した場合。
【００５６】
・制御部２２が、表示装置４の電源がオン、オフしたことを検知した場合。
【００５７】
・制御部２２が、表示装置４が音声出力装置２から情報を取得したことを検知した場合。
【００５８】
（出力情報の例）
制御部２２による出力情報の例を、以下に示す。
【００５９】
出力情報には、インターネット上の一般情報、個人の生活習慣情報、他の機器情報（外部機器の情報）、音声出力装置２の使用情報、メタ情報（付加情報、すなわち、前メタ情報、後メタ情報）等がある。
【００６０】
一般情報は、例えば、ニュース、交通情報、株価、日々の検索結果、料理レシピ、気象情報（温度、湿度、気圧、花粉、ＰＭ２．５、黄砂等）等である。
【００６１】
生活習慣情報は、例えば、毎日の生活（起床、食事、散歩、仕事、買物、就寝）、スケジュール（旅行、出張、ゴミの日、イベント、来客）等である。
【００６２】
機器情報は、例えば、テレビ、冷蔵庫、洗濯機等の家電の利用状況（使用タイミング、使用サイクル、動作終了）である。
【００６３】
ＩｏＴ家電５からの情報には、例えば、情報発信源のＩｏＴ家電５を示す情報（「冷蔵庫からのお知らせです」等）が含まれる。
【００６４】
音声出力装置２の使用情報は、例えば、音楽の嗜好（いつどんな曲をどのくらい聴いたか）、情報の嗜好（いつどんな情報を欲したか）、機器操作情報（他の機器をいつどのように使ったか）等である。
【００６５】
メタ情報は、例えば、音楽（歌手名、アルバム名、ジャンル、年代、売れ行き、タイアップ情報）、テレビ、ラジオ等の放送に関するリアルタイムの情報および今後の情報である。
【００６６】
スピーカ２４が発話する内容には、時間、天気、他の家電機器の状態に応じた、音楽・情報のレコメンド、指定されたコンテンツに合わせた一言メッセージ、再生したコンテンツに関する情報からの新たなレコメンドメッセージ、次のユーザ行動へのレコメンド、コンテンツの関連情報、前に再生したコンテンツに関連するコンテンツ（音楽・情報のレコメンド）、「いいね」をしたコンテンツの情報、周囲の機器からの情報等がある。
【００６７】
出力情報には、楽曲の入ったアルバムの情報、音声出力装置２主導の発話、キーワードに応じた発話等がある。重要な情報がある場合には、音声出力装置２は、まず重要な情報を発話してから、キーワードに応答してもよい（例えば、以前の曲の話をしてから、キーワードに応答してもよい）。さらに、タイミングに応じた話題、行動履歴に応じた話題、その他条件に応じた話題、メタ情報の発信源に応じた情報等がある。
【００６８】
出力情報には、テレビ放送、ラジオ放送の前メタ情報、後メタ情報、発話タイミングに関連した発話、再生するコンテンツに付随するメタ情報、メタ情報から類推される情報等がある。
【００６９】
出力情報には、再生対象のコンテンツや放送番組に関連する情報、音声出力装置２が今回再生した曲の情報、音声出力装置２が前回再生した曲の情報、コンテツに関するメタ情報等がある。
【００７０】
出力情報には、音声出力装置２が生成した情報がある。表示装置４は、発話内容と同じ内容を表示してもよいし、音声出力装置２が前回再生した曲の情報等、発話内容と異なる内容を表示してもよい。
【００７１】
（出力形態の例）
情報の出力形態には、音声出力装置２の発話、表示装置４の表示、他の機器（スマートフォン等の端末）の表示等がある。
【００７２】
〔実施例１〕
以下、本実施形態の実施例１について説明する。本実施例における音声出力装置２は、基本的に図２に示したフローチャートと同様の動作を行うが、より具体的に説明すべき点について以下に記載する。
【００７３】
本実施例に係る表示装置４は、表示部４１の画面表示状態を取得する画面状態取得部４５１を備えている。図３は、本実施例に係る制御部２２の機能構成を示すブロック図である。図３に示すように、制御部２２は、画面状態取得部４５１を備えている。画面状態取得部４５１は、表示部４１の画面表示の開始又は終了を検知する。
【００７４】
表示装置４は、表示装置４の動作（電源のオン、オフ）に応じて、周囲の無線通信可能な機器から通知情報を取得して表示する。無線通信可能な機器が音声出力装置２である場合には、表示装置４は、表示装置４の動作に応じて、音声出力装置２からの通知情報（再生対象のコンテンツ、放送番組に関連する情報等）を取得して表示する。通知情報には、例えば、前回表示後に音声出力装置２で聞いた楽曲に関する情報等がある。また、通知情報は、上記の（出力情報の例）で示した情報であってもよい。
【００７５】
図４は、本実施例に係る情報通知システム１の動作概要を示す図である。図４（ａ）は、表示装置４の電源がオンからオフへの動作概要を示す。図４（ｂ）は、表示装置４の電源がオフからオンへの動作概要を示す。
【００７６】
図４（ａ）に示すように、音声出力装置２が曲を再生中であり、表示装置４の電源がオンの場合に、ユーザが電源オフの操作を行ったとする。このとき、表示装置４は、音声出力装置２から「この曲は××に収録されています」との通知情報を取得し、表示する。そして、しばらくすると、表示装置４は、自らの電源をオフにして画面表示を終了する。
【００７７】
図４（ｂ）に示すように、音声出力装置２が曲を再生中であり、表示装置４の電源がオフの場合に、ユーザが電源オンの操作を行ったとする。このとき、表示装置４は、音声出力装置２から「この曲は××に収録されています」との通知情報を取得し、表示する。そして、しばらくすると、表示装置４は、自らの電源をオンにして画面表示を開始する。
【００７８】
図５は、本実施例に係る情報通知システム１の動作詳細を示す図である。図５を参照しながら、表示装置４の画面表示が終了する場合の動作を説明する。なお、音声出力装置２と、表示装置４とが、ＬＡＮ等により直接的に通信接続されているものとする。
【００７９】
（ステップＳ５０１）
表示装置４において、画面状態取得部４５１は、表示部４１の画面表示の終了を検知する。
【００８０】
（ステップＳ５０２）
表示装置４において、音声出力装置通信部（通信部）４２は、表示部４１の画面表示の終了を示す信号を音声出力装置（所定の機器）２に送信する。
【００８１】
（ステップＳ５０３）
音声出力装置２において、表示装置通信部（表示信号取得部）２７は、表示装置４の画面表示の終了を示す信号を受信（取得）する。
【００８２】
（ステップＳ５０４）
音声出力装置２において、表示装置通信部（通知情報出力部）２７は、表示装置４に表示させる通知情報を送信（出力）する。すなわち、表示装置通信部２７は、ステップＳ５０３における、表示装置４の画面表示の終了を示す信号の取得に起因して、通知情報を表示装置４に送信する。
【００８３】
ここで、本実施例では、図２のステップＳ２０２における「第２のイベント」は、表示装置通信部２７が表示装置４から画面表示の終了を示す信号を取得したことである。また、図２のステップＳ２０１における「情報」は、表示装置４に表示させる通知情報である。
【００８４】
（ステップＳ５０５）
表示装置４において、音声出力装置通信部（通信部）４２は、信号の送信に対する応答として、音声出力装置２から通知情報を受信（取得）する。
【００８５】
（ステップＳ５０６）
表示装置４において、表示部４１は、受信した通知情報を表示する。
【００８６】
（ステップＳ５０７）
表示装置４において、ステップＳ５０１における検知に応じて、画面表示を終了する。
【００８７】
なお、音声出力装置２は、過去の通知情報、現在の通知情報、および、将来の通知情報を蓄積しておいて、表示装置４の画面表示の終了を示す信号を取得した場合に、蓄積した通知情報を表示装置４に送信してもよい。
【００８８】
また、音声出力装置２は、通知情報を取得するタイミングで通知情報を表示装置４に送信してもよい。この場合、表示装置４は、音声出力装置２から受信した通知情報を蓄積しておき、画面表示が終了するタイミングで、通知情報を表示する。
【００８９】
図６は、本実施例に係る情報通知システム１の動作詳細を示す図である。図６を参照しながら、表示装置４の画面表示が開始する場合の動作を説明する。なお、音声出力装置２と、表示装置４とが、ＬＡＮ等により直接的に通信接続されているものとする。
【００９０】
（ステップＳ６０１）
表示装置４において、画面状態取得部４５１は、表示部４１の画面表示の開始を検知する。
【００９１】
（ステップＳ６０２）
表示装置４において、音声出力装置通信部（通信部）４２は、表示部４１の画面表示の開始を示す信号を音声出力装置（所定の機器）２に送信する。
【００９２】
（ステップＳ６０３）
音声出力装置２において、表示装置通信部（表示信号取得部）２７は、表示装置４の画面表示の開始を示す信号を受信（取得）する。
【００９３】
（ステップＳ６０４）
音声出力装置２において、表示装置通信部（通知情報出力部）２７は、表示装置４に表示させる通知情報を送信（出力）する。すなわち、表示装置通信部２７は、ステップＳ６０３における、表示装置４の画面表示の開始を示す信号の取得に起因して、通知情報を表示装置４に送信する。
【００９４】
ここで、本実施例では、図２のステップＳ２０２における「第２のイベント」は、表示装置通信部２７が表示装置４から画面表示の開始を示す信号を取得したことである。また、図２のステップＳ２０１における「情報」は、表示装置４に表示させる通知情報である。
【００９５】
（ステップＳ６０５）
表示装置４において、音声出力装置通信部（通信部）４２は、信号の送信に対する応答として、音声出力装置２から通知情報を受信（取得）する。
【００９６】
（ステップＳ６０６）
表示装置４において、表示部４１は、受信した通知情報を表示する。
【００９７】
（ステップＳ６０７）
表示装置４において、ステップＳ６０１における検知に応じて、画面表示を開始する。
【００９８】
なお、音声出力装置２は、過去の通知情報、現在の通知情報、および、将来の通知情報を蓄積しておいて、表示装置４の画面表示の開始を示す信号を取得した場合に、蓄積した通知情報を表示装置４に送信してもよい。
【００９９】
〔実施例２〕
以下、本実施形態の実施例２について説明する。本実施例は、実施例１に適用される実施例である。
【０１００】
表示装置４は、通知情報を表示する場合に、事前に通知情報に行われた重み付けに従って、通知情報の表示順序または表示個数を決定してもよい。表示装置４は、例えば、通知情報の重み付けに応じて、表示の順序を変えてもよいし、最も重要な１個の通知情報を表示してもよい。音声出力装置２が、表示装置４に通知情報を送信する際に、優先度の情報を併せて送信することにより、表示装置４における表示態様を変えてもよい。
【０１０１】
表示装置４は、通知情報を表示する場合に、表示する時間帯またはユーザの行動履歴を参照して、通知情報の表示時間長を決定してもよい。例えば、平日の朝は、ユーザが忙しいので、表示装置４は、表示を短めに行ってもよい。一方、ユーザに予定のない土曜日、日曜日は、ユーザに時間的余裕があるので、表示装置４は、表示を長めに行ってもよい。
【０１０２】
表示装置４は、通知情報の情報源は複数存在し、当該情報源に応じた表示態様にて通知情報を表示してもよい。例えば、再生中のコンテンツに関するメタ情報を表示する場合に、表示装置４は、当該メタ情報の発信者、発信サイト等を特定可能な出力形態（表示の追加、色、形、デザイン等）により、当該メタ情報を出力してもよい。
【０１０３】
音声出力装置２は、スピーカ２４が出力する音声に関する関連情報を記憶する記憶部と、ユーザの反応を示すユーザ反応情報を取得する取得部と、取得部が取得したユーザの反応に応じて反応タイミングを特定し、特定した反応タイミングに応じて、上記記憶部に記憶された関連情報から、出力すべき関連情報を抽出する抽出部と、をさらに備えていてもよい。この場合、表示装置通信部２７は、抽出部が抽出した関連情報を通知情報として表示装置４に出力する。
【０１０４】
例えば、音声出力装置２において、制御部２２が楽曲の再生の間、または、楽曲の再生が終了してから所定時間以内に「いいね」、「ええわ〜」、「ないす」等の声を認識して、「いいね」の意味と認識した場合に、表示装置通信部２７が当該楽曲の関連情報を表示装置４に出力してもよい。
【０１０５】
また、音声出力装置２において、楽曲の再生の間に、ユーザが音声出力装置２をトンと叩いて、振動センサが反応した結果、制御部２２が「いいね」の意味と認識した場合に、表示装置通信部２７が当該楽曲の関連情報を表示装置４に出力してもよい。
【０１０６】
〔実施形態１の効果〕
表示装置４の特定動作時に、音声出力可能な機器からの通知情報が表示されるため、通知情報の確認漏れ、テレビ視聴の妨げ等を抑制できるので、利便性が向上する。
【０１０７】
〔ソフトウェアによる実現例〕
音声出力装置２および表示装置４の制御ブロック（制御部２２、制御部４５）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ソフトウェアによって実現してもよい。
【０１０８】
後者の場合、音声出力装置２および表示装置４は、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータを備えている。このコンピュータは、例えば少なくとも１つのプロセッサ（制御装置）を備えていると共に、上記プログラムを記憶したコンピュータ読み取り可能な少なくとも１つの記録媒体を備えている。そして、上記コンピュータにおいて、上記プロセッサが上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記プロセッサとしては、例えばＣＰＵ（Central Processing Unit）を用いることができる。上記記録媒体としては、「一時的でない有形の媒体」、例えば、ＲＯＭ（Read Only Memory）等の他、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムを展開するＲＡＭ（Random Access Memory）などをさらに備えていてもよい。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
【０１０９】
〔まとめ〕
本発明の態様１に係る表示装置（４）は、表示部（４１）、通信部（音声出力装置通信部４２、ＩｏＴ家電通信部４３）、及び上記表示部の画面表示状態を取得する画面状態取得部（４５１）を備え、上記通信部は、上記画面状態取得部が上記表示部の画面表示の開始又は終了を検知した場合に、上記表示部の画面表示の開始又は終了を示す信号を所定の機器に送信し、上記信号の送信に対する応答として、上記所定の機器から通知情報を取得し、上記表示部は、上記通知情報を表示する。
【０１１０】
上記の構成によれば、表示装置において、所定の機器からの通知情報を支障なく表示することができる。
【０１１１】
本発明の態様２に係る表示装置は、上記態様１において、上記通知情報を表示する場合に、事前に上記通知情報に行われた重み付けに従って、上記通知情報の表示順序または表示個数を決定することとしてもよい。
【０１１２】
上記の構成によれば、表示装置において、事前に通知情報に行われた重み付けに従って決定された表示順序または表示個数により、通知情報を表示することができる。
【０１１３】
本発明の態様３に係る表示装置は、上記態様１または２において、上記通知情報を表示する場合に、表示する時間帯またはユーザの行動履歴を参照して、上記通知情報の表示時間長を決定することとしてもよい。
【０１１４】
上記の構成によれば、表示装置において、ユーザの都合に合わせた表示時間長により、通知情報を表示することができる。
【０１１５】
本発明の態様４に係る表示装置は、上記態様１から３において、上記通知情報の情報源は複数存在し、上記情報源に応じた表示態様にて上記通知情報を表示することとしてもよい。
【０１１６】
上記の構成によれば、複数存在する情報源に応じた表示態様にて通知情報を表示するので、情報源を識別可能に表示することができる。
【０１１７】
本発明の態様５に係る音声出力装置（２）は、表示装置の画面表示の開始又は終了を示す信号を取得する表示信号取得部（表示装置通信部２７）と、上記表示装置に表示させる通知情報を出力する通知情報出力部（表示装置通信部２７）とを備え、上記通知情報出力部は、上記表示信号取得部による、上記表示装置の画面表示の開始又は終了を示す信号の取得に起因して、上記通知情報を上記表示装置に出力する。
【０１１８】
上記の構成によれば、表示装置において、音声出力装置からの通知情報を支障なく表示することができる。
【０１１９】
本発明の態様６に係る情報通知システム（１）は、表示装置と、音声出力装置とを備えた情報通知システムであって、上記表示装置は、表示部、通信部、及び上記表示部の画面表示状態を取得する画面状態取得部を備え、上記通信部は、上記画面状態取得部が上記表示部の画面表示の開始又は終了を検知した場合に、上記表示部の画面表示の開始又は終了を示す信号を音声出力装置に送信し、上記信号の送信に対する応答として、上記音声出力装置から通知情報を取得し、上記表示部は、上記通知情報を表示し、上記音声出力装置は、音声を出力する音声出力部（スピーカ２４）と、上記表示装置の画面表示の開始又は終了を示す信号を取得する表示信号取得部と、上記表示装置に表示させる通知情報を出力する通知情報出力部とを備え、上記通知情報出力部は、上記表示信号取得部による、上記表示装置の画面表示の開始又は終了を示す信号の取得に起因して、上記通知情報を上記表示装置に出力する。
【０１２０】
上記の構成によれば、表示装置において、音声出力装置からの通知情報を支障なく表示することができる。
【０１２１】
本発明の態様７に係る情報通知システムは、上記態様６において、上記音声出力装置は、上記音声出力部が出力する音声に関する関連情報を記憶する記憶部（２３）と、ユーザの反応を示すユーザ反応情報を取得する取得部と、上記取得部が取得したユーザの反応に応じて反応タイミングを特定し、特定した反応タイミングに応じて、上記記憶部に記憶された関連情報から、出力すべき関連情報を抽出する抽出部と、をさらに備え、上記通知情報出力部は、上記抽出部が抽出した関連情報を上記通知情報として上記表示装置に出力する。
【０１２２】
上記の構成によれば、表示装置において、ユーザの反応があった関連情報を表示することができる。
【０１２３】
本発明の各態様に係る音声出力装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記音声出力装置が備える各部（ソフトウェア要素）として動作させることにより上記音声出力装置をコンピュータにて実現させる音声出力装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
【０１２４】
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
【符号の説明】
【０１２５】
１  情報通知システム
２  音声出力装置
４  表示装置
２４  スピーカ（音声出力部）
２７  表示装置通信部（表示信号取得部、通知情報出力部）
４１  表示部
４２  音声出力装置通信部（通信部）
４３  ＩｏＴ家電通信部（通信部）
４５１  画面状態取得部
【図１】
2019144837.tif 000003
【図２】
2019144837.tif 000004
【図３】
2019144837.tif 000005
【図４】
2019144837.tif 000006
【図５】
2019144837.tif 000007
【図６】
2019144837.tif 000008