(57)【特許請求の範囲】
【請求項１】
ユーザの動きの加速度を検出する加速度センサで検出されたセンサデータを受信するセンサデータ受信部と、
前記センサデータ受信部が前記加速度センサから受信した前記ユーザの加速度データに基づいて前記ユーザの現在の余裕度を推定し、現在提示している情報の提示形態を決定する制御部と、
前記制御部による制御に基づき前記情報に対し所定の処理を行う情報処理部と、
前記情報処理部で処理された情報を出力部へ出力する出力処理部と、
映像データからテロップを抽出するテロップ抽出部と、を含み、
前記制御部により前記ユーザの余裕度が小さいと判断された場合、前記テロップ抽出部は、前記制御部による制御に基づいて前記情報に含まれる映像データからテロップを抽出し、前記情報処理部は、前記テロップを含む情報を前記出力処理部へ供給する
情報処理装置。
【請求項２】
前記情報処理部は、テロップを映像データの所定の位置に貼り付け処理するテロップ貼付部を含み、
前記テロップ貼付部は、前記抽出したテロップを前記映像データに基づく映像に対する子画面として表示されるよう貼付処理する
請求項１に記載の情報処理装置。
【請求項３】
前記情報処理部は、テロップを映像データの所定の位置に貼り付け処理するテロップ貼付部を含み、
前記テロップ貼付部は、前記抽出したテロップを前記映像データに基づく映像に対して別画面として表示されるよう貼付処理する
請求項１に記載の情報処理装置。
【請求項４】
前記情報処理部は、前記テロップ抽出部で抽出された前記テロップの内容を音声データに変換し、
前記出力処理部は、前記音声データをスピーカに供給する
請求項１に記載の情報処理装置。
【請求項５】
ユーザに関する情報に基づいて出力部に情報を提示する情報処理装置の情報処理方法において、
前記情報処理装置に備えられたセンサデータ受信部が、ユーザの動きの加速度を検出する加速度センサで検出されたセンサデータを受信する第１のステップと、
前記情報処理装置に備えられた制御部が、前記センサデータ受信部が前記加速度センサから受信した前記ユーザの加速度データに基づいて前記ユーザの現在の余裕度を推定し、現在提示している情報の提示形態を決定する第２のステップと、
前記情報処理装置に備えられた情報処理部が、前記決定された提示形態に基づいて前記現在提示している情報に対し所定の処理を行う第３のステップと、
前記情報処理装置に備えられた出力処理部が、前記所定の処理がされた情報を前記出力部へ出力する第４のステップと、を含み、
前記第２のステップで前記ユーザの余裕度が小さいと判断された場合、前記第２のステップでは、前記情報処理装置に備えられており映像データからテロップを抽出するテロップ抽出部が、前記制御部による制御に基づいて前記情報に含まれる映像データからテロップを抽出し、前記第３のステップでは、前記情報処理部は、前記テロップを含む情報を前記出力処理部へ供給する
情報処理方法。
【請求項６】
前記情報処理部は、テロップを映像データの所定の位置に貼り付け処理するテロップ貼付部を含み、
前記第３のステップでは、前記テロップ貼付部は、前記抽出したテロップを前記映像データに基づく映像に対する子画面として表示されるよう貼付処理する
請求項５に記載の情報処理方法。
【請求項７】
前記情報処理部は、テロップを映像データの所定の位置に貼り付け処理するテロップ貼付部を含み、
前記第３のステップでは、前記テロップ貼付部は、前記抽出したテロップを前記映像データに基づく映像に対して別画面として表示されるよう貼付処理する
請求項５に記載の情報処理方法。
【請求項８】
前記第３のステップでは、前記情報処理部は、前記テロップ抽出部で抽出された前記テロップの内容を音声データに変換し、
前記第４のステップでは、前記出力処理部は、前記音声データをスピーカに供給する
請求項５に記載の情報処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザの状況に応じて適応的に情報の提示手法（提示形態）を変更する情報処理装置および情報処理方法に関する。
【背景技術】
【０００２】
従来、映像や音声等の情報を提示する情報提示装置が設置されている場合において、ユーザがその映像をじっくりと視聴できる状況であれば、通常の提示手法（提示形態）であってもユーザは提示された映像の内容を十分に理解できると考えられるが、ユーザの状況によっては、十分に映像を見る余裕がない場合も存在する。
【０００３】
例えば、夜帰宅して部屋にいる場合は、提示された情報をじっくりと視聴をすることができるが、朝出かける際には、時間に余裕がないのでゆっくり視聴することができない。しかしながら、忙しい朝でも映像からの情報は効率的に取得したいといった場合がある。このような場合に、通常の提示手法では十分に満足できる情報を取得できないという問題点があった。
【０００４】
例えば、特許文献１には、生体情報を取得し、生体情報に応じて表示画像を制御する技術が開示されている。
【特許文献１】特開２００７−３６１８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、特許文献１に記載された、生体情報を取得し、生体情報に応じて表示画像を制御することで生体リズムの調整を可能とし、人（ユーザ）にやさしい情報の提示を目指しているが、忙しさといったようなユーザの余裕度に応じて情報の効率的な提示を行うものではなかった。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、ユーザの余裕度に応じて提供する情報の提示形態を適応的に変化させることができるようにするものである。
【課題を解決するための手段】
【０００７】
本発明の一側面の情報処理装置は、ユーザの動きの加速度を検出する加速度センサで検出されたセンサデータを受信するセンサデータ受信部と、前記センサデータ受信部が前記加速度センサから受信した前記ユーザの加速度データに基づいて前記ユーザの現在の余裕度を推定し、現在提示している情報の提示形態を決定する制御部と、前記制御部による制御に基づき前記情報に対し所定の処理を行う情報処理部と、前記情報処理部で処理された情報を出力部へ出力する出力処理部と、映像データからテロップを抽出するテロップ抽出部と、を含み、前記制御部により前記ユーザの余裕度が小さいと判断された場合、前記テロップ抽出部は、前記制御部による制御に基づいて前記情報に含まれる映像データからテロップを抽出し、前記情報処理部は、前記テロップを含む情報を前記出力処理部へ供給することを特徴とする。
【０００８】
本発明の一側面の情報処理方法は、ユーザに関する情報に基づいて出力部に情報を提示する情報処理装置の情報処理方法であって、前記情報処理装置に備えられたセンサデータ受信部が、ユーザの動きの加速度を検出する加速度センサで検出されたセンサデータを受信する第１のステップと、前記情報処理装置に備えられた制御部が、前記センサデータ受信部が前記加速度センサから受信した前記ユーザの加速度データに基づいて前記ユーザの現在の余裕度を推定し、現在提示している情報の提示形態を決定する第２のステップと、前記情報処理装置に備えられた情報処理部が、前記決定された提示形態に基づいて前記現在提示している情報に対し所定の処理を行う第３のステップと、前記情報処理装置に備えられた出力処理部が、前記所定の処理がされた情報を前記出力部へ出力する第４のステップと、を含み、前記第２のステップで前記ユーザの余裕度が小さいと判断された場合、前記第２のステップでは、前記情報処理装置に備えられており映像データからテロップを抽出するテロップ抽出部が、前記制御部による制御に基づいて前記情報に含まれる映像データからテロップを抽出し、前記第３のステップでは、前記情報処理部は、前記テロップを含む情報を前記出力処理部へ供給することを特徴とする。
【０００９】
本発明の一側面においては、加速度センサから受信したユーザの加速度データに基づいてユーザの余裕度を推定し、ユーザの余裕度が小さいと判断した場合には、情報に含まれる映像データからテロップを抽出し、このテロップを含む情報を出力部へ出力する。すなわち、ユーザの余裕度に応じて情報（コンテンツ）の形態が適応的に変化する。
【発明の効果】
【００１０】
以上のように、本発明の一側面によれば、加速度センサから受信したユーザの加速度データに基づいてユーザの余裕度を推定し、ユーザの余裕度が小さいと判断した場合には、情報に含まれる映像データからテロップを抽出し、このテロップを含む情報を出力部へ出力する。このように、ユーザの余裕度に応じて情報の提示形態が適応的に変化するので、ユーザは、余裕度が小さくゆっくり映像を見ることのできないときでも情報の内容を把握することができる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の実施の形態の例について、添付図面を参照しながら説明する。
【００１２】
以下に述べる実施の形態は、本発明を実施するための好適な形態の具体例であるから、技術的に好ましい種々の限定が付されている。ただし、本発明は、以下の実施の形態の説明において特に本発明を限定する旨の記載がない限り、これらの実施の形態に限られるものではない。したがって、例えば、以下の説明で挙げる使用材料とその使用量、処理時間、処理順序および各パラメータの数値的条件等は好適例に過ぎず、説明に用いた各図における寸法、形状および配置関係等も一例を示す概略的なものである。
【００１３】
下記の実施の形態では、ユーザの余裕度を示す情報を取得する例として、加速度センサを用いる場合について説明するがこれに限られるものではない。
【００１４】
図１は、本発明の情報処理装置が適用されたシステムの一実施の形態の構成例を示すブロック図である。
【００１５】
図１に示すシステムは、アンテナ１と、チューナ２と、デコード部３と、制御部４と、リモコン受信部６と、テロップ抽出部７と、ダイジェスト作成部８と、ＨＤＤ（Hard Disk Drive）９を含む。さらに、このシステムは、音量調整部１０と、再生速度調整部１１と、テロップ貼付部１２と、出力処理部１３と、表示部１４と、スピーカ１５と、拡大・縮小処理部１６と、音量調整部１７と、再生速度調整部１８と、テロップ貼付部１９と、出力処理部２０と、表示装置２１、センサデータ受信部３３を含むように構成される。
【００１６】
本実施の形態は、本発明の情報処理装置を、例えば複数のテレビジョン放送番組を表示するのに使用されるスケーラブル・テレビジョン・システム（以下、「スケーラブルＴＶシステム」という。）に適用した例である。スケーラブルＴＶシステムとは、複数のテレビジョン受像機（モニタ）を必要に応じて連携して動作させ、１枚の画像や複数の画像を様々な方法で表示させるシステムである。この複数のテレビジョン受像機を必要に応じて連携して動作させて画像を表示する技術は周知の技術であり、一例として本出願人が先に出願した特開２００７−９３７０２号公報に開示されているもの等、種々のものがある。
【００１７】
チューナ２は、例えばシステムに設置されたテレビジョン受像機に対応して設置され、アンテナ１により受信したテレビジョン信号から任意のチャンネルの映像データ、音声データを抽出するものである。
【００１８】
デコード部３は、チューナ２から入力されたテレビジョン信号に含まれる符号化された映像データおよび音声データを、それらの符号化フォーマットに応じた所定の規則に基づいてデコード（復号）し、制御部４へ供給するものである。
【００１９】
制御部４は、不揮発性メモリのＲＯＭ（Read Only Member）に記憶されているコンピュータ・プログラムを、図示しない揮発性メモリのＲＡＭ（Random Access Memory）に読み出して、所定の制御および演算等を行うものである。この制御部４は全てのブロックに対し制御データを送信して制御することができる。例えば、後述するセンサデータ受信部３３または各種センサ３２から取得したセンサデータに基づいて所定のブロックに対し所定の処理を行わせるように制御する。
【００２０】
リモコン受信部６は、特許請求の範囲に記載した「余裕度取得部」の下位概念である「操作信号受信部」の一例であり、遠隔操作用の操作手段である送信機５から送信された赤外線信号または無線信号等による操作信号（リモコン信号）を受信し、その操作信号を復調して制御部４に供給する。
【００２１】
テロップ抽出部７は、制御部４から出力される制御データに基づき、画像信号からテロップ等の人工的に加工された画像に対応した画素データを抽出するものであり、例えば本出願人が先に出願した特開２００４−３１８２５６号公報に開示されている技術などがある。
【００２２】
ダイジェスト作成部８は、制御部４から送信される制御データに基づき、コンテンツ（すなわち情報）の内容を所定の条件に沿って短時間に集約・編集するなどの処理を行うブロックであり、いわゆるダイジェストを作成して制御部４あるいはＨＤＤ９へ供給するものである。ダイジェストを作成する技術として、例えば特開２００６−２１１３１１号公報に記載されているようなもの等がある。
【００２３】
ＨＤＤ９は、ハード・ディスク・ドライブであり記録装置の一例である。チューナ２により受信したテレビジョン信号に含まれるテレビジョン番組等のコンテンツ（映像データ、音声データ）や、ネットワークを利用してダウンロードしたコンテンツあるいはＤＶＤ等の記録媒体に記録されているコンテンツ等を保存、蓄積する。さらに、ＨＤＤ９は、後述する音量調整、テロップ子画面表示、テロップ別画面表示、提示速度調整、ダイジェスト再生および番組数増減などの各再生処理において参照される加速度変化の大きさの閾値等の情報を記憶している。なお、これらの情報は不揮発性のメモリに記憶してあればよく、ＨＤＤ９の他、図示しないフラッシュメモリ等の半導体メモリなどに記憶してもよい。
【００２４】
音量調節部１０、再生調整部１１およびテロップ貼付部１２は、特許請求の範囲に記載した「情報処理部」を構成する要素の一例である。
【００２５】
音量調整部１０は、制御部４から出力される制御データに基づいて、提示するコンテンツの音声データの音量を調整するものである。
【００２６】
再生速度調整部１１は、制御部４から出力される制御データに基づき、提示するコンテンツの再生速度を調整するものである。
【００２７】
テロップ貼付部１２は、制御部４から出力される制御データに基づき、テロップ抽出部７で抽出されたテロップを、当該テロップを抽出した元のコンテンツの映像データとともに出力するものである。
【００２８】
出力処理部１３は、特許請求の範囲に記載した「出力処理部」の一例であり、画像処理部１３ａおよび音声処理部１３ｂを含み、情報処理部で所定の処理が施された情報（映像データおよび／または音声データ）に対し、所定の処理を行い、表示部１４および／またはスピーカ１５へ供給する。
【００２９】
画像処理部１３ａは、情報処理部１０から入力される映像データに対し、表示部１４の画面に表示するための所定の画像処理を実行し、表示部１４へ供給する。
【００３０】
音声処理部１３ｂは、情報処理部１０から入力される音声データに対し、所定の音声処理を実行したり、音声データを映像データに同期させて再生する処理を実行したりし、スピーカ１５へ供給する。
【００３１】
表示部１４は、特許請求の範囲に記載した「出力部」の一例であり、出力処理部１３から入力された映像データを表示する。表示部１４には、液晶表示装置など種々の表示手段が適用できる。
【００３２】
スピーカ１５は、特許請求の範囲に記載した「出力部」の一例であり、出力処理部１３から入力された音声データをデジタル−アナログ変換し、放音するものである。スピーカ１５には、例えば、フラットパネルスピーカまたはコーン型のスピーカなどが適用される。
【００３３】
拡大・縮小処理部１６、音量調節部１７、再生調整部１８およびテロップ貼付部１９は、特許請求の範囲に記載した「情報処理部」を構成する要素の一例である。音量調節部１７、再生調整部１８およびテロップ貼付部１９は、上述した音量調節部１０、再生調整部１１およびテロップ貼付部１２と同様の機能であるから、説明を省略する。
【００３４】
拡大・縮小処理部１６は、特許請求の範囲に記載した「拡大・縮小処理部」の一例であり、制御部４から入力される制御データに基づいてコンテンツに含まれる映像データの画面サイズの拡大または縮小処理を行い、後述する複数の出力部に同時に表示される番組数等のコンテンツ数を変更する。この拡大・縮小処理部１６を始め、音量調節部１７、再生調整部１８およびテロップ貼付部１９により所定の処理がされた映像データまたは音声データが、出力処理部２０に供給される。
【００３５】
出力処理部２０は、特許請求の範囲に記載した「出力処理部」の一例であり、画像処理部２０ａおよび音声処理部２０ｂを含み、情報処理部で所定の処理が施された情報（映像データおよび／または音声データ）に対し、所定の処理を行い、表示装置２１に供給するする。画像処理部２０ａおよび音声処理部２０ｂは、上述した画像処理部１３ａおよび音声処理部１３ｂと同様の機能であるから、説明を省略する。
【００３６】
表示装置２０は、特許請求の範囲に記載した「出力部」の一例であり、出力処理部２０から入力された映像データを表示する。この表示装置２０は、いわゆるスケーラブルＴＶシステムが適用されており、例えば９台の表示部２１Ａ〜２１Ｉにより大画面が構成されている。表示部２１Ａ〜２１Ｉには、液晶表示装置など種々の表示手段が適用でき、これら各表示部（画面）に対する表示形態は、センサデータ受信部３３で受信したセンサデータに応じて制御部４により決定される。
【００３７】
なお、表示装置２０は例えば表示部ごとに図示しないスピーカを備え、該スピーカにより出力処理部２０から入力された音声データをデジタル−アナログ変換し、放音する。スピーカには、スピーカ１５と同様、フラットパネルスピーカまたはコーン型のスピーカなどが適用される。
【００３８】
さらに本実施の形態のシステムは、特許請求の範囲に記載した「余裕度取得部」の下位概念である「センサデータ受信部」の一例であるセンサデータ受信部３３を備える。センサデータ受信部３３は、ユーザの余裕度を示す情報としてユーザに装着もしくはユーザが保持する加速度センサ検出部３１からの加速度データを取得する。センサデータ受信部３３は、加速度センサ検出部３１から取得した加速度データを制御部４に送る。加速度データは、ユーザの忙しさや行動の様子などの状態を反映した情報であり、制御部４は、この情報からユーザの現在の余裕の有無、すなわち余裕度を推定する。
【００３９】
図２は、加速度センサ検出部３１で得られる加速度の測定データの例を示すグラフである。グラフの横軸は時間、縦軸は加速度を示す。
【００４０】
図２に示す加速度の時間遷移において、加速度の変化が大きい部分と加速度の変化が小さい部分が見られる。検出された加速度の変化の大きさを予め設定した閾値と比較することにより、ユーザの余裕度を推定することができる。例えば、加速度変化が閾値より大きい場合は、ユーザが忙しく動き回っていて余裕のない状態（余裕度が小さい状態）と判断できる。一方、加速度変化が閾値より小さい場合は、ユーザはあまり動き回っておらず落ち着いた余裕のある状態（余裕度が大きい状態）であると判断できる。一般に、ユーザは、１日の間で朝は忙しく余裕のない状態であり、夜は比較的にリラックスして余裕のある状態であると考えられる。
【００４１】
また、他の各種センサ３２として、例えば心拍数、血圧、発汗量などの生体情報を検出する生体情報センサが挙げられる。
【００４２】
一例として、図３に、各種センサ３２で得られる心拍数の測定データの例を示す。グラフの横軸は時間、縦軸は心拍数を示す。
【００４３】
図３に示す心拍数の時間遷移において、心拍数が多い部分と心拍数が少ない部分が見られる。検出された心拍数を予め設定した閾値と比較することにより、ユーザの余裕度を推定することができる。例えば、心拍数ＴＡが閾値Ｔｈより大きい場合は、ユーザが忙しく動き回っていて余裕のない状態（余裕度が小さい状態）と判断できる。一方、心拍数ＴＢが閾値Ｔｈより小さい場合は、ユーザはあまり動き回っておらず落ち着いた余裕のある状態（余裕度が大きい状態）であると判断できる。
【００４４】
また、ユーザの余裕度を示す情報が得られる他のセンサの例としては、撮像装置が考えられる。例えば、室内などの所定の位置にビデオカメラ等の撮像装置を設置し、この撮像装置でユーザの行動を撮影する。そして撮像した画像のフレーム間比較またはフレーム内比較を行い、ユーザの移動方向や移動量などを検出することにより、ユーザの行動を把握し、ユーザの余裕度を推定するようにしてもよい。
【００４５】
制御部４は、チューナ２を介して受信したコンテンツやＨＤＤ９に蓄積したコンテンツ（映像データ、音声データ）等について、センサデータ受信部３３が受信したこれらのセンサデータに基づき、情報処理部および情報出力部を通して後述する所定の処理が行われるように制御する。そして所定の処理がなされた映像データや音声データを出力部へ出力させることにより、ユーザに提示する情報の提示手法（提示形態）を適応的に変更する。
【００４６】
なお、本実施の形態のシステムは、表示部１４と表示装置２１を含むように構成されているが、これらは情報処理装置の外部に設置してもよい。また、このシステムは、出力処理部１３と出力処理部２０を備えているが、これらはいずれか一方のみであってもよい。例えば、表示装置２１は、表示部２１Ａ〜２１ＩからなるいわゆるスケーラブルＴＶシステムであるが、表示部１４がその表示画面を複数の表示領域に分割して表示できるものである場合、表示部１４を表示装置２１の代わりとして使用してもよい。また、その逆に表示装置２１だけを使用するようにしてもよく、この場合は、拡大・縮小処理部１６と、音量調整部１７と、再生速度調整部１８と、テロップ貼付部１９と、出力処理部２０は不要となる。なお、スピーカ１５は表示部１４に対応して設けられているが、複数の表示部１４を設ける場合にそれに対応する台数のスピーカを設けるかどうかは任意に設計できる。
【００４７】
次に、図４〜図１０を参照して、コンテンツ（情報）の各表示形態の例を説明する。
以下の例では、加速度センサ検出部３１で得られる加速度データに基づいて、コンテンツに所定の処理を行う場合を例に説明するが、他のセンサデータにも同様に適用することができる。
【００４８】
図４は、加速度センサ検出部３１で検出された加速度データの加速度変化が小さい場合の例を示すものである。任意の表示部の画面４０には、日本各地の積雪に関して文字情報を含むニュース映像が表示されている。この例では、加速度変化が小さいため通常放送のままである。
【００４９】
図５は、加速度センサ検出部３１で検出された加速度データの加速度変化が大きい場合に、音量を大きくする例を示したものである。任意の表示部の画面４０には、図４と同様に日本各地の積雪に関して文字情報を含むニュース映像が表示されているが、本例では、「日本海側で雪降り続く」という文字情報４１を読み上げる際の音声の音量を調節する。なお、文字情報の読み上げの技術は周知技術を用いて行うことができる。例えばテロップ抽出部７により画像信号から文字情報を抽出し、その内容を制御部４が解析して音声処理部２０を通じて音声信号として出力することにより、文字情報の読み上げが実現できる。
【００５０】
このようにすることにより、ユーザは、積雪の様子等のニュースの内容を離れた場所から音声で聞くことができるようになり、余裕度が小さく画面４０を見ることのできないときでもニュースの内容を把握することができる。
【００５１】
図６は、情報提示形態として音量を調節する場合の再生処理を示すフローチャートである。
【００５２】
ステップＳ１において、センサデータ受信部３３は、加速度センサ検出部３１から加速度データを受信し、ステップＳ２の処理へ進む。
【００５３】
ステップＳ２において、制御部４は、センサデータ受信部３３から加速度データを取得し、その加速度変化がある閾値ＴＨ以上か否かを判定する。加速度変化がある閾値ＴＨより小さいと判定された場合にはそのまま判定処理を継続する。この場合、音量は通常のままである。
【００５４】
ステップＳ３において、ステップＳ２の判定処理で加速度変化が閾値より大きいと判定された場合、制御部４は、ユーザの余裕度が小さいと判断して音量調整部１７に制御データを送信して音声データ（例えば、文字情報４１の内容）の音声ボリュームを上げるよう制御する。この処理が終了後、ステップＳ４の判定処理に進む。この音量をユーザが予め設定できるようにしておくと、より高効率の情報取得が実現できるとともに、使い勝手が向上する。
【００５５】
ステップＳ４において、制御部４は、加速度変化がある閾値ＴＨより小さいか否かを判定する。加速度変化がある閾値ＴＨ以上であると判定された場合にはそのまま判定処理を継続する。この場合、音量は大きい状態である。
【００５６】
ステップＳ５において、ステップＳ４の判定処理で加速度変化が閾値より小さいと判定された場合、制御部４は、ユーザの余裕度が大きいと判断して音量調整部１７に制御データを送信して音声データの音声ボリュームを元に戻すよう制御する。この処理が終了後、音量調節を伴う再生処理を終了する。
【００５７】
加速度センサ検出部３１による加速度データの取得は所定のタイミングまたは定期的に行われる。よって、上記一連の再生処理を終了後、ある時間が経過すると図６に示すフローチャートが再起動し、当該音声調節を伴う再生処理を繰り返す。
【００５８】
このように構成したことにより、ユーザの余裕度、すなわちユーザの行動の様子（状況）に応じて提供する情報（コンテンツ）を適応的に変化させることができる。
【００５９】
なお、この例では、音量を大きくする調整の場合について説明をしたが、より小さい値に設定した閾値と加速度変化とを比較し、加速度変化がその閾値より小さい場合には、音量を小さくするようにしてもよい。また、画面内の文字情報を読み上げる際の音声の音量を調整したが、後述する所定の画面に表示されたテロップを読み上げる際の音量を調節することもできる。また、通常の音声すなわち画面内の番組出演者や背景等の音声の音量を調節するようにしてもよいことは勿論である。
【００６０】
さらに、この例では、表示装置２１に情報を提示するようにしたが、表示部１４に提示するようにしてもよいことは勿論である。
【００６１】
図７は、加速度センサ検出部３１で検出された加速度データの加速度変化が大きい場合に、テロップを子画面表示する例を示したものである。図７（ａ）に示す任意の表示部の画面４０ａには、図４と同様に日本各地の積雪に関して文字情報を含むニュース映像が表示されているが、本例では、「十日町・・・２ｍ７９ｃｍ／長岡・・・１ｍ３０ｃｍ」という文字情報４２をテロップ４３として表示している。図７（ｂ）は、放送番組が変わった後の画面４０ｂにテロップ４３を表示している様子を表している。
【００６２】
このようにすることにより、特徴画像のみ抽出されて所定の子画面にテロップ表示されるので、ユーザは、積雪の様子等のニュースの内容を容易に視認できるようになり、余裕度が小さくゆっくり画面４０ａを見ることのできないときでもニュースの内容を把握することができる。また、積雪情報を伝える映像（図７（ａ））から報道フロアに場面が切り替わった後の映像（図７（ｂ））に積雪情報のテロップ４３を流すことにより、ユーザは、図７（ａ）に示す積雪情報を伝える場面を見逃したとしても、後から積雪情報を知ることができる。
【００６３】
図８は、情報提示形態としてテロップを子画面に貼り付ける場合の再生処理を示すフローチャートである。
【００６４】
ステップＳ１１において、センサデータ受信部３３は、加速度センサ検出部３１から加速度データを受信し、ステップＳ１２の処理へ進む。
【００６５】
ステップＳ１２において、制御部４は、センサデータ受信部３３から加速度データを取得し、その加速度変化がある閾値ＴＨ以上か否かを判定する。加速度変化がある閾値ＴＨより小さいと判定された場合にはそのまま判定処理を継続する。
【００６６】
ステップＳ１３において、ステップＳ１２の判定処理で加速度変化が閾値より大きいと判定された場合、制御部４は、ユーザの余裕度が小さいと判断してテロップ抽出部７に制御データを送信して提示すべき情報（コンテンツ）の映像データからテロップを抽出するよう制御する。この処理が終了後、ステップＳ１４の処理に進む。
【００６７】
ステップＳ１４において、テロップ制御部７は、抽出したテロップ（例えば、文字情報４２の内容）をＨＤＤ９に蓄積し、次のステップＳ１５の処理に進む。
【００６８】
ステップＳ１５において、制御部４は、加速度変化がある閾値ＴＨより小さいか否かを判定する。加速度変化がある閾値ＴＨ以上であると判定された場合にはステップＳ１３の処理に戻り、テロップの抽出を継続する。
【００６９】
ステップＳ１６において、ステップＳ１５の判定処理で加速度変化が閾値より小さいと判定された場合、制御部４は、ユーザの余裕度が大きくユーザが表示部を閲覧できる状態であると判断し、テロップ貼付部１９に制御データを送信してテロップを所定の位置の子画面（図７（ａ）参照）に貼り付けるよう制御する。このとき、蓄積されていたテロップが子画面の所定箇所にまとめて表示される。この処理が終了後、ステップＳ１７の処理へ進む。
【００７０】
ステップＳ１７において、制御部４は、テロップを例えば子画面４３に貼り付けてからの経過時間が閾値ＴＨ以上であるか否かを判定する。経過時間が閾値ＴＨより短いと判定された場合にはステップＳ１６の処理に戻り、子画面へのテロップ表示を継続する（例えば（図７（ｂ）参照）。このようにテロップ表示の経過時間を考慮するようにした場合、ユーザが忙しかったり表示装置２１（または表示部１４）のある部屋とは別の場所にいたりして提示されたテロップを見られない状況だったとしても、余裕ができたところで提示されたテロップを確認することができる。この経過時間の閾値をユーザが予め設定できるようにしておくと、より効率のよい情報取得が実現できるとともに、使い勝手が向上する。
【００７１】
一方、経過時間が閾値ＴＨ以上であると判定された場合には、テロップの子画面貼付処理を伴う再生処理を終了する。
【００７２】
加速度センサ検出部３１による加速度データの取得は所定のタイミングまたは定期的に行われる。よって、上記一連の再生処理を終了後、ある時間が経過すると図８に示すフローチャートが再起動し、当該テロップ子画面表示を伴う再生処理を繰り返す。
【００７３】
このように構成したことにより、ユーザの余裕度、すなわちユーザの行動の様子（状況）に応じて提供する情報（コンテンツ）を適応的に変化させることができる。
【００７４】
なお、この例では、表示装置２１に情報を提示するようにしたが、表示部１４に提示するようにしてもよいことは勿論である。
【００７５】
図９は、加速度センサ検出部３１で検出された加速度データの加速度変化が大きい場合に、テロップを別画面表示する例を示したものである。図９（ａ）に示す表示装置２１の任意の表示部の画面４０には、図４と同様に日本各地の積雪に関して文字情報を含むニュース映像が表示されているが、別画面４４にはあるニュース報道の場面が表示されている。一方、図９（ｂ）に示す表示装置２１の任意の表示部の画面４０には、図４と同様に日本各地の積雪に関して文字情報を含むニュース映像が表示されているが、別画面４５には、図９（ａ）に示したニュース報道の場面ではなく「十日町・・・２ｍ７９ｃｍ／長岡・・・１ｍ３０ｃｍ」という文字情報４２をテロップとして表示している。
【００７６】
このようにすることにより、特徴画像のみ抽出されて別画面にテロップ表示されるので、ユーザは、積雪の様子等のニュースの内容を容易に視認できるようになり、余裕度が小さくゆっくり画面４０ａを見ることのできないときでもニュースの内容を把握することができる。また、別画面の全面にテロップを表示することにより、文字が大きく余裕のないときでもユーザの目にとまりやすくなる。
【００７７】
図１０は、情報提示形態としてテロップを別画面に貼り付ける場合の再生処理を示すフローチャートである。
【００７８】
ステップＳ２１において、センサデータ受信部３３は、加速度センサ検出部３１から加速度データを受信し、ステップＳ２２の処理へ進む。
【００７９】
ステップＳ２２において、制御部４は、センサデータ受信部３３から加速度データを取得し、その加速度変化がある閾値ＴＨ以上か否かを判定する。加速度変化がある閾値ＴＨより小さいと判定された場合にはそのまま判定処理を継続する。
【００８０】
ステップＳ２３において、ステップＳ２２の判定処理で加速度変化が閾値より大きいと判定された場合、制御部４は、ユーザの余裕度が小さいと判断してテロップ抽出部７に制御データを送信して提示すべき情報（コンテンツ）の映像データからテロップを抽出するよう制御する。この処理が終了後、ステップＳ２４の処理に進む。
【００８１】
ステップＳ２４において、テロップ制御部７は、抽出したテロップ（例えば、文字情報４２の内容）をＨＤＤ９に蓄積し、次のステップＳ２５の処理に進む。
【００８２】
ステップＳ２５において、制御部４は、加速度変化がある閾値ＴＨより小さいか否かを判定する。加速度変化がある閾値ＴＨ以上であると判定された場合にはステップＳ２３の処理に戻り、テロップの抽出を継続する。
【００８３】
ステップＳ２６において、ステップＳ２５の判定処理で加速度変化が閾値より小さいと判定された場合、制御部４は、ユーザの余裕度が大きくユーザが表示部を閲覧できる状態であると判断してテロップ貼付部１９に制御データを送信してテロップを所定の別画面（図９（ａ）参照）に貼り付けるよう制御する。このとき、蓄積されていたテロップが別画面の所定箇所にまとめて表示される。この処理が終了後、ステップＳ２７の処理へ進む。
【００８４】
ステップＳ２７において、制御部４は、テロップを例えば別画面４５に貼り付けてからの経過時間が閾値ＴＨ以上であるか否かを判定する。経過時間が閾値ＴＨより短いと判定された場合にはステップＳ２６の処理に戻り、別画面へのテロップ表示を継続する（例えば（図９（ｂ）参照）。図８に示したテロップ子画面貼付の場合と同様に、この経過時間の閾値をユーザが予め設定できるようにしておくと、より効率のよい情報取得が実現できるとともに、使い勝手が向上する。
【００８５】
一方、経過時間が閾値ＴＨより長いと判定された場合には、テロップの別画面貼付処理を伴う再生処理を終了する。
【００８６】
加速度センサ検出部３１による加速度データの取得は所定のタイミングまたは定期的に行われる。よって、上記一連の再生処理を終了後、ある時間が経過すると図１０に示すフローチャートが再起動し、当該テロップ別画面貼付を伴う再生処理を繰り返す。
【００８７】
このように構成したことにより、ユーザの余裕度、すなわちユーザの行動の様子（状況）に応じて提供する情報（コンテンツ）を適応的に変化させることができる。
【００８８】
次に、図１１のフローチャートを参照して、情報提示形態として提示速度調整を行う場合の再生処理を説明する。
【００８９】
ステップＳ３１において、センサデータ受信部３３は、加速度センサ検出部３１から加速度データを受信し、ステップＳ３２の処理へ進む。
【００９０】
ステップＳ３２において、制御部４は、センサデータ受信部３３から加速度データを取得し、その加速度変化がある閾値ＴＨ以上か否かを判定する。加速度変化がある閾値ＴＨより小さいと判定された場合にはそのまま判定処理を継続する。この場合、再生速度は通常のままである。
【００９１】
ステップＳ３３において、ステップＳ３２の判定処理で加速度変化が閾値より大きいと判定された場合、制御部４は、ユーザの余裕度が小さいと判断して再生速度調整部１８に制御データを送信してコンテンツの再生速度を遅くするよう制御する。この処理が終了後、ステップＳ３４の判定処理に進む。この再生速度をユーザが予め設定できるようにしておくと、より効率のよい情報取得が実現できるとともに、使い勝手が向上する。
【００９２】
ステップＳ３４において、制御部４は、加速度変化がある閾値ＴＨより小さいか否かを判定する。加速度変化がある閾値ＴＨ以上であると判定された場合にはそのまま判定処理を継続する。この場合、再生速度は遅い状態である。
【００９３】
ステップＳ３５において、ステップＳ３４の判定処理で加速度変化が閾値より小さいと判定された場合、制御部４は、ユーザの余裕度が大きいと判断して再生速度調整部１８に制御データを送信して再生速度を元に戻すよう制御する。この処理が終了後、再生速度調節を伴う再生処理を終了する。
【００９４】
加速度センサ検出部３１による加速度データの取得は所定のタイミングまたは定期的に行われる。よって、上記一連の再生処理を終了後、ある時間が経過すると図１１に示すフローチャートが再起動し、当該提示速度調整を伴う再生処理を繰り返す。
【００９５】
このように構成したことにより、ユーザの余裕度、すなわちユーザの行動の様子（状況）に応じて提供する情報（コンテンツ）を適応的に変化させることができる。
【００９６】
なお、この例では、表示装置２１に情報を提示するようにしたが、表示部１４に提示するようにしてもよいことは勿論である。
【００９７】
次に、図１２のフローチャートを参照して、情報提示形態としてダイジェスト再生を行う場合の再生処理を説明する。
【００９８】
ステップＳ４１において、センサデータ受信部３３は、加速度センサ検出部３１から加速度データを受信し、ステップＳ４２の処理へ進む。
【００９９】
ステップＳ４２において、制御部４は、センサデータ受信部３３から加速度データを取得し、その加速度変化がある閾値ＴＨ以上か否かを判定する。加速度変化がある閾値ＴＨより小さいと判定された場合にはそのまま判定処理を継続する。この場合、コンテンツは通常のままである。
【０１００】
ステップＳ４３において、ステップＳ４２の判定処理で加速度変化が閾値より大きいと判定された場合、制御部４は、ユーザの余裕度が小さいと判断してダイジェスト作成部８に制御データを送信してコンテンツのダイジェストを作成するよう制御する。作成したダイジェスト版のコンテンツは一時ＨＤＤ９に蓄積する。この処理が終了後、ステップＳ４４の判定処理に進む。
【０１０１】
ステップＳ４４において、制御部４は、加速度変化がある閾値ＴＨより小さいか否かを判定する。加速度変化がある閾値ＴＨ以上であると判定された場合にはそのまま判定処理を継続する。
【０１０２】
ステップＳ４５において、ステップＳ４４の判定処理で加速度変化が閾値より小さいと判定された場合、制御部４は、ユーザの余裕度が大きいと判断してＨＤＤ９に蓄積したダイジェスト版のコンテンツを情報処理部および出力処理部２０を通じて表示装置２１へ出力し、ダイジェスト再生するよう制御する。この処理が終了後、ダイジェスト再生の場合の再生処理を終了する。
【０１０３】
加速度センサ検出部３１による加速度データの取得は所定のタイミングまたは定期的に行われる。よって、上記一連の再生処理を終了後、ある時間が経過すると図１２に示すフローチャートが再起動し、当該ダイジェストによる再生処理を繰り返す。
【０１０４】
このように構成したことにより、ユーザの余裕度、すなわちユーザの行動の様子（状況）に応じて提供する情報（コンテンツ）を適応的に変化させることができる。
【０１０５】
なお、ダイジェスト再生を行う際、複数の画面のそれぞれにリアルタイムの画像（番組）とダイジェストをそれぞれ表示するようにしてもよい。この例では、表示装置２１に情報を提示するようにしたが、表示部１４に提示するようにしてもよいことは勿論である。例えばある画面にダイジェストのみを表示し、リアルタイムの画像を表示しないようにしてもよい。さらに、ユーザが余裕のできたときに送信機５を操作して、作成されたダイジェストの再生を行うようにしてもよい。
【０１０６】
次に、図１３〜図１５を参照して、複数の表示部を有する場合、すなわち表示装置２０を利用した映像データの拡大処理および縮小処理を伴う再生処理を説明する。
【０１０７】
図１３は、加速度センサ検出部３１で検出された加速度データの加速度変化が大きい場合に、表示装置２１の各表示部を利用して表示する番組数を減少させる例を示したものである。本例では、図１３（ａ）→図１３（ｂ）→図１３（ｃ）の順に、画像が拡大表示されている。図１３（ａ）では、画面５０に９つの小画像５０Ａ〜５０Ｉが表示され、図１３（ｂ）では、画面５０に１つの中画像５０Ｄ１と小画像５０Ｃ，５０Ｆ，５０Ｇ〜５０Ｉが表示され、そして図１３（ｃ）では、画面５０に１つの大画像５０Ｄ２が表示されている。
【０１０８】
このようにすることにより、ユーザの状態に応じて画像が大きく表示されるとともに表示番組数が減少するので、ユーザは、表示内容を容易に視認できるようになり、余裕度が小さくゆっくり画面５０を見ることのできないときでも番組の内容を確実に把握することができる。
【０１０９】
拡大表示する番組（放送チャンネル）または表示領域（この例では、小画像５０Ａ）について、その優先度を予め決めておく。例えば、番組（放送チャンネル）等の選択を促すメニュー画面を表示し、拡大表示する番組（放送チャンネル）または表示領域を予めユーザに選択させてＨＤＤ９等に登録しておく。あるいは、過去の視聴履歴などから拡大表示する番組（放送チャンネル）を決定するようにしてもよい。
【０１１０】
図１４は、図１３示した場合と逆の場合であり、加速度センサ検出部３１で検出された加速度データの加速度変化が小さい場合に、表示装置２１の各表示部を利用して表示する番組数を増加させる例を示したものである。本例では、図１４（ａ）→図１４（ｂ）→図１４（ｃ）の順に、画像が縮小表示されている。図１４（ａ）では、画面５０に１つの大画像５０Ｄ２が表示され、図１４（ｂ）では、画面５０に１つの中画像５０Ｄ１と小画像５０Ｃ，５０Ｆ，５０Ｇ〜５０Ｉが表示され、そして図１４（ｃ）では、画面５０に９つの小画像５０Ａ〜５０Ｉが表示されている。
【０１１１】
このようにすることにより、ユーザの状態に応じて画像が小さく表示されるとともに表示番組数が増加するので、ユーザは、余裕度が大きくゆっくり画面５０を見ることのできるときにはより多くの情報が得られるようになり、多くの情報を取得することができる。
【０１１２】
図１５のフローチャートを参照して、情報提示形態として拡大・縮小処理を伴う場合の再生処理を説明する。ここで、現在の情報の提示形態が、図１３（ｂ）または図１４（ｂ）に示す状態であるとする。
【０１１３】
ステップＳ５１において、センサデータ受信部３３は、加速度センサ検出部３１から加速度データを受信し、ステップＳ５２の処理へ進む。
【０１１４】
ステップＳ５２において、制御部４は、ＨＤＤ９または図示しない半導体メモリなどから、現在の情報の表示形態に適した加速度変化の大きさの閾値ＴＨ１（拡大）、閾値ＴＨ２（縮小）を取得する。この処理が終了後、ステップＳ５３の判定処理に進む。
【０１１５】
ステップＳ５３において、制御部４は、センサデータ受信部３３から取得した加速度変化が閾値ＴＨ１（拡大）以上か否かを判定する。加速度変化が閾値ＴＨ１以上であると判定した場合には、ステップＳ５４の処理に進む。一方、加速度変化が閾値ＴＨ１より小さいと判定した場合には、ステップＳ５５の判定処理に進む。
【０１１６】
ステップＳ５４において、ステップＳ５３の判定処理で加速度変化が閾値ＴＨ１以上であると判定された場合、制御部４は、ユーザの余裕度が小さいと判断して拡大・縮小処理部１６に制御データを送信し、コンテンツの再生時の画像サイズを拡大するよう制御する。この画像サイズが拡大処理されたコンテンツが出力処理部２０の画像処理部２０ａを通じて表示装置２１に出力され、複数の表示部を使用して拡大表示が行われる（図１３（ｂ）→図１３（ｃ））。この拡大表示に伴い番組数が減少する。この処理が終了後、拡大・縮小処理を伴う再生処理を終了する。
【０１１７】
ステップＳ５５において、制御部４は、加速度変化が閾値ＴＨ２（縮小）以下か否かを判定する。加速度変化が閾値ＴＨ２以下ではないと判定された場合には、拡大・縮小処理を伴う再生処理を終了する。一方、加速度変化が閾値ＴＨ２以下であると判定した場合には、ステップＳ５６の処理に進む。
【０１１８】
ステップＳ５６において、ステップＳ５５の判定処理で加速度変化が閾値ＴＨ２以下であると判定された場合、制御部４は、ユーザの余裕度が大きいと判断して拡大・縮小処理部１６に制御データを送信し、コンテンツの再生時の画像サイズを縮小して複数の表示部に各々表示するよう制御する。この画像サイズが縮小処理されたコンテンツが出力処理部２０の画像処理部２０ａを通じて表示装置２１に出力され、複数の表示部の各々に縮小表示が行われる（図１４（ｂ）→図１４（ｃ））。この縮小表示に伴い番組数が増加する。この処理が終了後、拡大・縮小処理を伴う再生処理を終了する。
【０１１９】
加速度センサ検出部３１による加速度データの取得は所定のタイミングまたは定期的に行われる。よって、拡大・縮小処理を伴う一連の再生処理を終了後、ある時間が経過すると図１５に示すフローチャートが再起動し、拡大処理または縮小処理の実施の有無が判定される。したがって、図１３（ａ）→図１３（ｂ）→図１３（ｃ）または図１４（ａ）→図１４（ｂ）→図１４（ｃ）のように、ユーザの余裕度に応じて表示形態が適応的に変化する。
【０１２０】
このように構成したことにより、ユーザの余裕度、すなわちユーザの行動の様子（状況）に応じて提供する情報（コンテンツ）を適応的に変化させることができる。
【０１２１】
なお、上述例では現在の情報の提示形態を、図１３（ｂ）または図１４（ｂ）に示す状態と想定したが、現在の提示形態が縮小表示または拡大表示の限度である場合であっても同様に適用できる。例えば、現在の情報の提示形態が図１４（ａ）に示す状態というのは拡大表示の限度であるが、この表示形態に適した閾値ＴＨ１（拡大）、閾値ＴＨ２（縮小）のうち、閾値ＴＨ１（拡大）を非常に大きい値とすることによりこれ以上の拡大処理を実行しないようにする。他の例としては、制御部４が閾値ＴＨ２（縮小）のみを取得し、拡大表示のための判定処理（ステップＳ５３）を飛ばして、縮小表示のための判定処理（ステップＳ５５）のみを行うようにしてもよい。
【０１２２】
また、この例では、表示装置２１に情報を提示するようにしたが、表示部１４に提示するようにしてもよいことは勿論である。
【０１２３】
以上の述べたように、人が保持する加速度センサによる加速度変化や生体情報、あるいは画像情報などによって、人の状況を判断し、例えば連続して映像を視聴可能なシステムにおいては、その映像再生のスピード調整や、音量調整、テロップを抜き出して大きく表示させる等の処理を行う。また、複数の映像提示装置が設置されているシステムにおいては、画像を拡大してマルチ画面表示させるなどの仕組みを用い、ユーザの状況に応じて適応的に情報を取得しやくすることができる。
【０１２４】
なお、上述した実施の形態では、センサデータ受信部で受信したセンサデータに基づいてユーザの余裕度を判定するようにしたが、送信機５を利用してユーザが余裕度を自己申告するようにしてもよい。制御部４は、リモコン受信部６を介して受信したユーザの自己申告による余裕度に基づいて、上述した情報の提示形態を適応的に切り換える。
【図面の簡単な説明】
【０１２５】
【図１】本発明の情報処理装置が適用されたシステムの一実施の形態の構成例を示すブロック図である。
【図２】加速度の測定データ例を示すグラフである。
【図３】心拍数の測定データ例を示すグラフである。
【図４】加速度変化が小さい場合の例（通常放送）を示す図である。
【図５】本発明の一実施の形態に係る加速度変化が大きい場合の例（音量大）を示す図である。
【図６】図５に示した情報提示形態を実現するための再生処理を示すフローチャートである。
【図７】本発明の一実施の形態に係る加速度変化が大きい場合の例（テロップ子画面表示）を示す図である。
【図８】図７に示した情報提示形態を実現するための再生処理を示すフローチャートである。
【図９】本発明の一実施の形態に係る加速度変化が大きい場合の例（テロップ別画面表示）を示す図である。
【図１０】図９に示した情報提示形態を実現するための再生処理を示すフローチャートである。
【図１１】本発明の一実施の形態に係る提示速度調整の場合の再生処理を示すフローチャートである。
【図１２】本発明の一実施の形態に係るダイジェスト再生の場合のフローチャートである。
【図１３】本発明の一実施の形態に係る加速度変化が大きい場合の例（番組数増）を示す図である。
【図１４】本発明の一実施の形態に係る加速度変化が大きい場合の例（番組数減）を示す図である。
【図１５】図１３および図１４に示した情報提示形態を実現するための再生処理を示すフローチャートである。
【符号の説明】
【０１２６】
４…制御部、６…リモコン受信部、７…テロップ抽出部、８…ダイジェスト作成部、９…ＨＤＤ、１０，１７…音量調整部、１１，１８…再生速度調整部、１２，１９…テロップ貼付部、１３，２０…出力処理部、１３ａ，２０ａ…画像処理部、１３ｂ，２０ｂ…音声処理部、１４…表示部、１５…スピーカ、１６…拡大・縮小処理部、２１…表示装置、２１Ａ〜２１Ｉ…表示部、３１…加速度センサ検出部、３３…センサデータ受信部、４０…画面、４０ａ…親画面、４１，４２…文字情報、４３…テロップ、４４，４５…画面、５０…画面、５０Ａ〜５０Ｉ…小画像、５０Ｄ１…中画像、５０Ｄ２…大画像
【図１】
0005061931.tif 000002
【図２】
0005061931.tif 000003
【図３】
0005061931.tif 000004
【図６】
0005061931.tif 000005
【図８】
0005061931.tif 000006
【図１０】
0005061931.tif 000007
【図１１】
0005061931.tif 000008
【図１２】
0005061931.tif 000009
【図１５】
0005061931.tif 000010
【図４】
0005061931.tif 000011
【図５】
0005061931.tif 000012
【図７】
0005061931.tif 000013
【図９】
0005061931.tif 000014
【図１３】
0005061931.tif 000015
【図１４】
0005061931.tif 000016