(57)【要約】 【課題】  音出力手段を備える情報処理装置において、表示部上の物体に対応して音出力手段を制御可能な情報処理装置、情報処理方法およびプログラムを提供する。【解決手段】  センサ６または内蔵カメラ７によって検出される物体３３の位置に基づいて、各スピーカ３０ａ〜３０ｄから出力する音の性状がＣＰＵ１０によって個別に制御される。これによって操作者は、表示部３２上の物体３３の位置を変更して、出力される音を制御することができるので、音の出力を直感的に操作して制御することができる。【選択図】      図１
2008131515.tif 000002
【特許請求の範囲】
【請求項１】
音を出力する音出力手段と、
表示部に画像を表示する表示手段と、
表示部上の物体の位置を検出する位置検出手段と、
位置検出手段によって検出される物体の位置に対応する音を出力するように音出力手段を制御する制御手段とを含むことを特徴とする情報処理装置。
【請求項２】
前記音出力手段は、個別に出力する音を制御可能な複数の音出力部を含み、
前記制御手段は、位置検出手段によって検出される物体の位置に基づいて、各音出力部から出力する音を個別に制御すること特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記音出力手段は、個別に出力する音を制御可能な複数の音出力部を含み、
前記制御手段は、位置検出手段によって検出される物体の位置に表示される画像に基づいて、各音出力部から出力する音を個別に制御すること特徴とする請求項１に記載の情報処理装置。
【請求項４】
表示部上の物体を識別する識別情報を取得する識別手段と、
予め定められる関連音情報を、識別情報に関連付けて記憶する関連音情報記憶手段と、
識別手段が識別情報を取得すると、識別情報に関連付けて記憶される関連音情報を検索する関連音情報検索手段とをさらに含み、
前記制御手段は、位置検出手段によって検出される物体の位置と、関連音情報検索手段によって検索される関連音情報とに基づいて、各音出力部から出力する音を個別に制御すること特徴とする請求項２または３に記載の情報処理装置。
【請求項５】
前記制御手段は、位置検出手段によって検出される物体の位置と、各音出力部との位置との間の距離に基づいて、出力する音量を各音出力部毎に個別に制御することを特徴とする請求項２〜４のいずれか１つに記載の情報処理装置。
【請求項６】
表示部に画像を表示する表示工程と、
表示部上の物体の位置を検出する位置検出工程と、
検出される物体の位置に対応する音を出力する音出力工程とを含むことを特徴とする情報処理方法。
【請求項７】
コンピュータに、請求項１に記載される情報処理装置の機能を実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示部上の物体の位置を検出し、検出した位置に基づいて出力する音を制御する情報処理装置、情報処理方法およびプログラムに関する。
【背景技術】
【０００２】
第１の従来の技術の音の出力を制御する情報処理装置として、送信側から話者の位置を示す話者位置情報と共に音声を送信し、受信側は複数の音声出力用スピーカを備え、話者位置情報に対応したスピーカから受信音声を出力する音声電話会議装置が開示されている（たとえば特許文献１参照）。
【０００３】
第２の従来の技術の情報処理装置は、机の上面部にディスプレイが設けられている。このディスプレイは、種々の画像を表示可能に形成され、物体が載置可能に形成されている。情報処理装置は、ディスプレイに載置される物体の位置を検出し、この検出される物体の位置に基づいて、表示部に表示されている画像の表示領域を変更し、阻害物である物体を避けて前記画像を表示させる。情報処理装置には、ボタンが設けられ、このボタンを操作することによって、ディスプレイに表示されている画像の内容を変更できる（たとえば特許文献２参照）。
【０００４】
【特許文献１】特開平９−２６１３５１号公報
【特許文献２】特開２００４−２７１８６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
第１の従来の技術では、音声を出力するスピーカが切換え可能であるが、スピーカ切換えのために音声情報に話者の位置を示す話者位置情報を付加しておく必要がある。また第１及び第２の従来の技術の情報処理装置では、表示画面上に載置される物体に基づいて音の出力を制御する技術は開示されていない。
【０００６】
上述の通り、従来の技術では表示部上の物体に対応させて音の出力を制御することができない。したがって本発明の目的は、音出力手段を備える情報処理装置において、表示部上の物体に対応して音出力手段を制御可能な情報処理装置、情報処理方法およびプログラムを提供することである。
【課題を解決するための手段】
【０００７】
本発明は、音を出力する音出力手段と、
表示部に画像を表示する表示手段と、
表示部上の物体の位置を検出する位置検出手段と、
位置検出手段によって検出される物体の位置に対応する音を出力するように音出力手段を制御する制御手段とを含むことを特徴とする情報処理装置である。
【０００８】
また本発明は、前記音出力手段は、個別に出力する音を制御可能な複数の音出力部を含み、
前記制御手段は、位置検出手段によって検出される物体の位置に基づいて、各音出力部から出力する音を個別に制御すること特徴とする。
【０００９】
さらに本発明は、前記音出力手段は、個別に出力する音を制御可能な複数の音出力部を含み、
前記制御手段は、位置検出手段によって検出される物体の位置に表示される画像に基づいて、各音出力部から出力する音を個別に制御すること特徴とする。
【００１０】
さらに本発明は、表示部上の物体を識別する識別情報を取得する識別手段と、
予め定められる関連音情報を、識別情報に関連付けて記憶する関連音情報記憶手段と、
識別手段が識別情報を取得すると、識別情報に関連付けて記憶される関連音情報を検索する関連音情報検索手段とをさらに含み、
前記制御手段は、位置検出手段によって検出される物体の位置と、関連音情報検索手段によって検索される関連音情報とに基づいて、各音出力部から出力する音を個別に制御すること特徴とする。
【００１１】
さらに本発明は、前記制御手段は、位置検出手段によって検出される物体の位置と、各音出力部との位置との間の距離に基づいて、出力する音量を各音出力部毎に個別に制御することを特徴とする。
【００１２】
さらに本発明は、表示部に画像を表示する表示工程と、
表示部上の物体の位置を検出する位置検出工程と、
検出される物体の位置に対応する音を出力する音出力工程とを含むことを特徴とする情報処理方法である。
【００１３】
さらに本発明は、コンピュータに、前記情報処理装置の機能を実行させることを特徴とするプログラムである。
【発明の効果】
【００１４】
本発明によれば、位置検出手段によって検出される物体の位置に対応する音を出力するように制御手段によって音出力手段が制御される。したがって表示部上に物体があると、その物体の表示部上の位置に対応する音が音出力手段によって出力されるので、物体の位置を変更することによって出力される音を制御することができる。これによって操作者は、表示部上の物体の位置を変更して、出力される音を制御することができるので、音の出力を直感的に制御することができる。
【００１５】
また本発明によれば、位置検出手段によって検出される物体の位置に基づいて、各音出力部から出力する音の性状が制御手段によって個別に制御される。したがって物体の位置を変更することによって、各音出力部から出力される音の性状を個別に制御することができる。これによって操作者は、物体の位置を変更して、各音出力部から出力される音の性状を制御することができるので、各音出力部の音の出力を直感的に制御することができる。また複数の音出力部を含むので、臨場感のある音を出力することができる。
【００１６】
さらに本発明によれば、位置検出手段によって検出される物体の位置に表示される画像に基づいて、各音出力部から出力する音が制御手段によって個別に制御される。したがって表示部上の異なる画像が表示される位置に物体の位置を変更して、各音出力部から出力される音を個別に制御することができる。これによって操作者は、物体の位置を表示部に表示される画像の位置に変更して、各音出力部から出力される音を制御することができるので、各音出力部の音の出力をより直感的に制御することができる。また複数の音出力部を含むので、臨場感のある音を出力することができる。
【００１７】
さらに本発明によれば、識別手段が識別情報を取得すると、識別情報に関連付けて記憶される関連音情報を検索する。したがって表示部上の物体に関する関連音情報を、関連音情報検索手段によって検索することができる。この検索される関連音情報と、物体の位置とに基づいて、各音出力部から出力する音が制御手段によって個別に制御される。したがって表示部上の物体に関連する音が各音出力部から個別に出力可能であるので、操作者は、物体を別の物体に変更することによって、各音出力部から出力される音を変更することができる。これによって操作者は、物体そのものを変更し、また物体の表示部上の位置を変更することによって、出力される音を変更することができる。したがって操作者は、より直感的に音出力部を個別に制御することができる。
【００１８】
さらに本発明によれば、位置検出手段によって検出される物体の位置と、各音出力部との位置との間の距離に基づいて、出力する音量が各音出力部毎に制御手段によって個別に制御される。したがって表示部上の物体の位置に最も近い音出力部が、最も大きい音量を出力し、距離が大きくなるにつれて、出力される音量が小さくなるように制御することができる。これによって操作者は、物体の位置を変更することによって、音量を大きくしたい音出力部、または音を小さくしたい音出力部を選択することができる。したがって操作者は、直感的に音出力部の音量を制御することができる。
【００１９】
さらに本発明によれば、位置検出工程によって検出される物体の位置に対応する音が音出力工程にて出力される。したがって表示部上に物体があると、その物体の表示部上の位置に対応する音が出力されるので、物体の位置を変更することによって出力される音を制御することができる。これによって操作者は、表示部上の物体の位置を変更して、出力される音を制御することができるので、音の出力を直感的に制御することができる。
【００２０】
さらに本発明によれば、コンピュータに情報処理装置の機能を実行させることができ、音出力手段の制御する労力を低減できる。
【発明を実施するための最良の形態】
【００２１】
以下、図面を参照しながら本発明を実施するための形態を、複数の形態について説明する。各形態で先行する形態で説明している事項に対応している部分には同一の参照符を付し、重複する説明を略する場合がある。構成の一部のみを説明している場合、構成の他の部分は、先行して説明している形態と同様とする。実施の各形態で具体的に説明している部分の組合せばかりではなく、特に組合せに支障が生じなければ、実施の形態同士を部分的に組合せることも可能である。各フローチャートの開始条件は、記載した開始条件だけに必ずしも限定されるものではない。
【００２２】
図１は、本発明の第１の実施の形態の情報処理装置１の電気的構成を示すブロック図である。情報処理装置１は、たとえば机に設けられ、種々の物体３３（図３参照）が机上に配置されると、物体３３が配置された位置に応じて、出力する音を制御するように構成されている。情報処理装置１は、入力・表示系２と制御系３とを有する。入力・表示系２は、液晶ディスプレイ（Liquid Crystal Display；略称：ＬＣＤ）５、センサ６、内蔵カメラ７、光源であるバックライト８および複数のスピーカ３０を有する。制御系３は、制御手段である中央演算処理装置（Central Processing Unit；略称：ＣＰＵ）１０、センサ入力部１１、周辺機器入力部１２、表示制御部１３、主記憶部１４、補助記憶部１５、通信部１６、バス１７および音声制御部３１を有する。
【００２３】
ＬＣＤ５は、表示手段であって、その表示部３２（図３参照）に、電子ファイルなどの情報を画像として表示する。センサ６は、ＬＣＤ５の表示画面上に載置される物体３３、文字およびダグの少なくともいずれか一つのパターンを検出する。表示部３２は、物体３３を載置可能に構成され、机として用いることが可能な強度を有する。
【００２４】
センサ６は、薄膜トランジスタ（Thin Film Transistor；略称：ＴＦＴ）アレイを用いたイメージセンサ、赤外線センサ、デジタイザ、タブレットなどによって実現される。センサ６は、低解像度のセンサと高解像度のセンサとを個別に構成してもよいし、一体形で構成してもよい。内蔵カメラ７は、表示画面上に載置される物体３３、文字およびデータキャリアの少なくともいずれか一つのパターンを検出する。データキャリアは、たとえばＱＲコードおよびバーコードなどであり、このようなデータキャリアが物体３３に形成されていないかを内蔵カメラ７は検出する機能を有する。内蔵カメラ７は、センサ６と一体形で構成してもよい。センサ６または内蔵カメラ７は、位置検出手段としての機能を有し、表示部３２上の物体３３の位置を検出し、検出した位置情報をセンサ入力部１１に与える。
【００２５】
バックライト８は、液晶表示を行うための光源となる。光源としては、バックライト８に限らず、ＬＣＤ５が反射形で構成される場合は、フロントライト方式であってもよい。スピーカ３０は、音出力手段であって、音を出力する。スピーカ３０は、本実施の形態では、複数設けられ、各スピーカ３０ａ〜３０ｄが音出力部として機能する。各スピーカ３０ａ〜３０ｄは、個別に制御可能に構成される。センサ入力部１１には、センサ６および内蔵カメラ７が電気的に接続されている。センサ入力部１１は、センサ６および内蔵カメラ７からの出力を電気信号に変換してデータ化する。周辺機器入力部１２には、キーボード、ポインティングデバイス、外部カメラ、マイクロフォンなどの周辺機器１８がそれぞれ電気的に接続可能に構成されている。周辺機器入力部１２は、周辺機器１８からの出力を電気信号に変換してデータ化する。
【００２６】
表示制御部１３には、ＬＣＤ５およびバックライト８が電気的に接続されている。表示制御部１３は、ＣＰＵ１０からの指令に従って、ＬＣＤ５およびバックライト８を制御する。音声制御部３１には、各スピーカ３０ａ〜３０ｄが電気的に接続されている。音声制御部３１は、ＣＰＵ１０からの指令に従って、各スピーカ３０ａ〜３０ｄを個別に制御する。
【００２７】
主記憶部１４には、情報処理装置１における複数の処理動作を実現させるために必要な動作プログラムが記憶されている。主記憶部１４は、たとえばランダムアクセスメモリ
（Random Access Memory：略称ＲＡＭ）によって実現され、補助記憶部１５に記憶される情報を取得し、または各構成から伝送された情報を、一時的に記憶する。補助記憶部１５は、ハードディスク、デジタル多機能ディスク（Digital Versatile Disc；略称：ＤＶＤ）およびコンパクトディスク（Compact Disk：略称ＣＤ）などの情報記憶媒体によって実現される。補助記憶部１５には、補助的に動作に必要な情報が記憶される。また補助記憶部１５は、関連音情報記憶手段としての機能を有し、本実施の形態では物体３３を識別する識別情報に関連付けられて関連音情報が記憶されている。また補助記憶部１５には、表示部３２に表示される画像に関連付けられて関連音情報が記憶されている。関連音情報は、たとえば物体３３および画像に関連する音情報である。たとえば物体３３が機関車の模型（以下、単に「機関車」ということがある）である場合、関連音情報は機関車が走行するときに生じる音に関する情報であり、またたとえば物体３３が飛行機の模型（以下、単に「飛行機」ということがある）である場合、関連音情報は飛行機が飛行するときに生じる音に関する情報である。また画像が林４１を示す画像である場合、関連音情報は林４１にて生じる鳥の鳴き声、または風が通過する音に関する情報である。通信部１６は、インターネット回線網、公衆回線網およびＬＡＮ（Local Area Network）などの通信回線網に電気的に接続され、外部の機器と通信する機能を有する。
【００２８】
ＣＰＵ１０は、バス１７を介して、センサ入力部１１、周辺機器入力部１２、表示制御部１３、主記憶部１４、補助記憶部１５、通信部１６および音声制御部３１と電気的に接続されている。ＣＰＵ１０は、その内部におよび主記憶部１４に記憶される制御プログラムに基づいて、センサ入力部１１、周辺機器入力部１２、表示制御部１３、主記憶部１４、補助記憶部１５、通信部１６および音声制御部３１を含むハードウェア資源を統括的に制御する。ＣＰＵ１０は、たとえばマイクロコンピュータによって実現される。
【００２９】
またＣＰＵ１０は、センサ６または内蔵カメラ７によって検出される物体３３の位置に対応する音を出力するように、音声制御部３１に指令を与え、各スピーカ３０ａ〜３０ｄを制御する。またＣＰＵ１０は、センサ６または内蔵カメラ７によって検出される物体３３の位置に基づいて、各スピーカ３０ａ〜３０ｄから出力する音を個別に制御する。ここで音を制御するとは、たとえば音の性状を制御することである。音の性状とは、各スピーカ３０ａ〜３０ｄで出力される音の出力状態、および音の特性の少なくとも１つを含む。また音の出力状態は、音量、音の高低および音質のうち、少なくとも１つを含む。また音の特性は、操作者の嗜好度合、種類およびジャンルの少なくとも１つを含む。
【００３０】
図２は、主記憶部１４に記憶される動作プログラム２０の構成を示す図である。本実施の形態の動作プログラム２０は、位置認識処理プログラム２１、方向認識処理プログラム２５、タグ認識処理プログラム２２、形状認識処理プログラム２３、文字認識処理プログラム２６、情報検索処理プログラム２４、画像比較処理プログラム２７および音出力処理プログラム２８を含む。ＣＰＵ１０が位置認識処理プログラム２１を実行することによって、センサ６または内蔵カメラ７によって検出された物体３３の位置を認識する位置認識処理が実現される。物体３３の位置とは、たとえば表示部３２の表示領域３２ａの予め定められる位置を原点とし、物体３３の原点に最も近い部分の位置座標を認識する。原点は、たとえば後述する図３において表示領域３２ａの左下の位置が設定される。
【００３１】
ＣＰＵ１０がタグ認識処理プログラム２２を実行することによって、センサ６または内蔵カメラ７によって検出されたデータキャリアに基づくタグ情報を認識する。データキャリアは、たとえばＱＲコードおよびバーコードなどである。タグ情報には、たとえば識別情報、方向認識情報および形状認識情報などの情報が含まれる。識別情報は、物体３３を識別するための情報であり、方向認識情報は、物体３３の向きを認識するための情報であり、形状認識情報は、物体３３の形状を認識するための情報である。したがってＣＰＵ１０は、物体３３を識別する識別手段としての機能を有する。
【００３２】
ＣＰＵ１０が形状認識処理プログラム２３を実行することによって、センサ６または内蔵カメラ７で読取られた画像の形状を認識する。ＣＰＵ１０が情報検索処理プログラム２４を実行することによって、識別情報に関連付けられる関連音情報を補助記憶部１５から検索する。ＣＰＵ１０が文字認識処理プログラム２６を実行することによって、センサ６または内蔵カメラ７によって検出された文字情報を認識する。ＣＰＵ１０が方向認識処理プログラム２５を実行することによって、画像情報、データキャリアに含まれる方向認識情報または認識された文字に基づいて、物体３３の予め定められる方向、たとえば上下方向または左右方向を認識する。ＣＰＵ１０が画像比較処理プログラム２７を実行することによって、時系列の画像情報の比較を行う画像比較処理が実現される。ＣＰＵ１０が音出力処理プログラム２８を実行することによって、位置認識処理によって認識される物体３３の位置に基づいて、各スピーカ３０ａ〜３０ｄが出力する音を制御する音出力処理が実現される。
【００３３】
図３は、情報処理装置１を示す正面図であって、表示部３２に表示される画面の一例を示す図である。表示部３２は、四角形状であって、四角形状の画像を表示する表示領域３２ａを表面部分に有する。表示部３２は、その４つの角部付近に、４つのスピーカ３０ａ〜３０ｄがそれぞれ設けられる。図３では、物体３３として機関車が表示部３２に載置されている状態を示す。本実施の形態では、上下方向を、図３において紙面上下方向とし、左右方向は、図３において紙面左右方向とする。表示部３２の中心付近を中心とする楕円状の線路の画像が、各角部を近接するように表示される。また図３では、物体３３として機関車が、右下の角部付近に載置される。
【００３４】
図４は、情報処理装置１を示す正面図であって、表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。図４では、理解を容易にするため、右下のスピーカ３０ｂから音が出力されている状態を、音符３４にて可視化して示す。したがって図４では、右下のスピーカ３０ｂからのみ音が出力され、残余の３つのスピーカ３０ａ，３０ｃ，３０ｄからは音は出力されていない。このような音を出力するスピーカ３０の選択は、表示部３２に配置する物体３３である機関車の位置に対応している。本実施の形態では、表示部３２に配置される物体３３から最も近いスピーカ３０のみから音を出力するようにＣＰＵ１０によって制御される。このような処理に関して、フローチャートを用いて説明する。
【００３５】
図５は、ＣＰＵ１０の音出力処理手順を示すフローチャートである。図５に示す音出力処理は、ＣＰＵ１０によって実行される。図５に示す音出力処理は、情報処理装置１の動作中に繰返し実行される。情報処理装置１の動作中は、表示部３２には何らかの画像が表示され、たとえば図４に示す画像が表示される。図５に示す処理は、たとえば情報処理装置１の図示外の主電源をオフからオンにする条件、図示外のタイマーによる一定時間間隔、図示外の人感センサなどによる利用者の接近もしくは動きを検知した条件において、開始される。
【００３６】
ステップａ１では、次のステップａ２で物体３３があるか否かを判断すべく、情報処理装置１の表示手段であるＬＣＤ５の表示画面上の状態をセンサ６または内蔵カメラ７でセンシングして、ステップａ２に移る。ステップａ２では、前記センシングの結果、ＬＣＤ５の表示画面上に物体３３があるか否かを判断し、表示画面上に物体３３があると判断されるとステップａ３に移り、表示画面上に物体３３がないと判断されると本処理を終了する。
【００３７】
ステップａ３では、前述の位置認識処理プログラム２１を実行することによって、物体３３の位置を認識して、ステップａ４に移る。したがってステップａ１〜ａ３は、表示画面上の物体３３の位置を検出する位置検出工程である。ステップａ４では、前述の音出力処理プログラム２８を実行することによって、物体３３の位置に基づいて、最も近接するスピーカ３０を選択し、選択されたスピーカ３０から音を出力するように音声制御部３１に指令を与え、本処理を終了する。したがってステップａ４は、検出される物体の位置に対応する音を出力する音出力工程である。
【００３８】
このような処理によって、表示部３２に物体３３あると、その物体３３の表示部３２上の位置に対応する音がスピーカ３０によって出力されるので、物体３３の位置を変更することによって出力される音を制御することができる。これによって操作者は、表示部３２上の物体３３の位置を変更して、出力される音を制御することができるので、音の出力を直感的に操作して制御することができる。したがってスピーカ３０から出力される音の操作性を向上することができる。
【００３９】
また本実施の形態では、センサ６または内蔵カメラ７によって検出される物体３３の位置に基づいて、各スピーカ３０ａ〜３０ｄから出力する音の性状がＣＰＵ１０によって個別に制御される。したがって物体３３の位置を変更することによって、各スピーカ３０ａ〜３０ｄから出力される音の性状を個別に制御することができる。これによって操作者は、物体３３の位置を変更して、各スピーカ３０ａ〜３０ｄから出力される音の性状を制御することができるので、各スピーカ３０ａ〜３０ｄの音の出力を直感的に制御することができる。また複数のスピーカ３０を含むので、臨場感のある音を出力することができる。
【００４０】
また本実施の形態では、音の性状として、音の出力情報である音の大小が選択可能である。したがって物体３３に最も近接するスピーカ３０の音を大きくし、残余のスピーカ３０から出力される音を可及的に小さく、換言すると音の出力が停止される。したがって音を出力したいスピーカ３０の近くに物体３３を配置することによって、音を出力するスピーカ３０を選択することができるので、操作者は直感的な操作でスピーカ３０を操作することができる。
【００４１】
また本実施の形態では、各スピーカ３０ａ〜３０ｄから出力される音は特に限定せず、音を出力するスピーカ３０を選択する構成に関して説明したが、表示部３２に配置された物体３３に基づく音を出力するのようにしてもよい。ＣＰＵ１０は、前述のステップａ３にて、位置認識処理プログラムと並行して、タグ認識処理プログラムを実行し、物体３３の識別情報を取得する。この識別情報に基づいて、情報検索処理プログラムを実行し、関連付けて補助記憶部１５に記憶される関連音情報を読み出す。この読み出した関連音情報を、ステップａ４にて出力するように音声制御部３１に指令を与える。このような処理によって、物体３３に関連する音を出力することができる。たとえば物体３３が、図４に示すように、機関車である場合、出力される音は、前述したように機関車が走行するときに生じる音である。このように物体３３に関連する音を出力し、さらに物体３３に近接するスピーカ３０から音を出力することによって、表示部３２上のシーンにおいて物体３３があたかもその位置にあるかのような臨場感を得ることができる。
【００４２】
次に本発明の第２の実施の形態に関して説明する。本実施の形態の情報処理装置１では、物体３３が表示部３２に配置されると、その物体３３に関連する音と、その物体３３が配置された位置またはその近傍に表示部３２に表示されている画像に関連する音が出力される点に特徴を有する。図６は、情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図である。図６では、表示部３２に表示される画像として、４つの角部付近に、時計周りに順次、雨雲４０、林４１、湖畔４２、および市街地４３が、一例として表示される。したがって表示部３２には、右上の角部付近に雨雲４０の画像が表示され、右下の角部付近に林４１の画像が表示され、左下の角部付近に湖畔４２の画像が表示され、左上の角部付近に市街地４３の画像が表示される。また表示部３２の中心付近を中心とする楕円状の線路４４の画像が、各角部を近接するように表示される。また図３では、物体３３として機関車が、林４１の画像が表示されている付近に載置される。
【００４３】
図７は、情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。図７では、理解を容易にするため、右下のスピーカ３０ｂから音が出力されている状態を、音符３４にて可視化して示す。したがって図７では、右下のスピーカ３０ｂからのみ音が出力され、残余の３つのスピーカ３０ａ，３０ｃ，３０ｄからは音は出力されていない。このような音を出力するスピーカ３０の選択は、表示部３２に配置する物体３３である機関車の位置に対応している。本実施の形態では、表示部３２に配置される物体３３から最も近いスピーカ３０のみから音を出力するようにＣＰＵ１０によって制御される。また最も近いスピーカ３０から出力される音は、物体３３に関連する音、および物体３３が載置される位置またはその近傍に表示される画像に関連する音が出力される。したがって図７に示すように、物体３３は機関車であり、物体３３が載置される近傍には林４１が表示されるので、右下のスピーカ３０ｂからは、機関車が走行するときに生じる音と、林４１にて生じる音が出力される。このような処理に関して、フローチャートを用いて説明する。
【００４４】
図８は、ＣＰＵ１０の本実施の形態の音出力処理手順を示すフローチャートである。図８に示す音出力処理は、ＣＰＵ１０によって実行される。図８に示す音出力処理は、情報処理装置１の動作中に繰返し実行される。たとえば情報処理装置１の図示外の主電源をオフからオンにする条件、図示外のタイマーによる一定時間間隔、図示外の人感センサなどによる利用者の接近もしくは動きを検知した条件において、図８に示す処理が開始される。
【００４５】
ステップｂ１では、次のステップｂ２で物体３３があるか否かを判断すべく、情報処理装置１の表示手段であるＬＣＤ５の表示画面上の状態をセンサ６または内蔵カメラ７でセンシングして、ステップｂ２に移る。ステップｂ２では、前記センシングの結果、ＬＣＤ５の表示画面上に物体３３があるか否かを判断し、表示画面上に物体３３があると判断されるとステップｂ３に移り、表示画面上に物体３３がないと判断されると本処理を終了する。
【００４６】
ステップｂ３では、前述の位置認識処理プログラム２１を実行することによって、物体３３の位置を認識して、ステップｂ４に移る。ステップｂ４では、前述の音出力処理プログラム２８を実行することによって、物体３３の位置に基づいて、最も近接するスピーカ３０を選択し、ステップｂ５に移る。ステップｂ５では、出力する音を決定し、選択されたスピーカ３０から決定した音を出力するように音声制御部３１に指令を与え、本処理を終了する。このステップｂ５では、タグ認識処理プログラムを実行し、物体３３の識別情報を取得する。この識別情報に基づいて、情報検索処理プログラムを実行し、識別情報に関連付けて補助記憶部１５に記憶される関連音情報を読み出す。また物体３３の位置に表示される画像に基づいて、情報検索処理プログラムを実行し、画像に関連付けて補助記憶部１５に記憶される関連音情報を読み出す。このような関連音情報を出力する音に決定する。このように物体３３に関連する音、および物体３３が配置される音を出力し、さらに物体３３に近接するスピーカ３０から音を出力することによって、表示部３２上のシーンにおいて物体３３があたかもその位置にあるかのような臨場感を得ることができる。
【００４７】
したがって本実施の形態では、センサ６または内蔵カメラ７によって検出される物体３３の位置に表示される画像に基づいて、各スピーカ３０ａ〜３０ｄから出力する音の性状がＣＰＵ１０によって個別に制御される。したがって表示部３２上の異なる画像が表示される位置に物体３３の位置を変更して、各スピーカ３０ａ〜３０ｄから出力される音の性状を個別に制御することができる。これによって操作者は、物体３３の位置を表示部３２に表示される画像の位置に変更して、各スピーカ３０ａ〜３０ｄから出力される音の性状を制御することができるので、各スピーカ３０ａ〜３０ｄの音の出力をより直感的に制御することができる。また複数のスピーカ３０を含むので、臨場感のある音を出力することができる。
【００４８】
また本実施の形態では、表示上の物体３３に関連する音が各スピーカ３０ａ〜３０ｄから個別に出力可能であるので、操作者は、物体３３を別の物体３３に変更することによって、各スピーカ３０ａ〜３０ｄから出力される音を変更することができる。これによって操作者は、物体３３そのものを変更し、また物体３３の表示部３２上の位置を変更することによって、出力される音を変更することができる。したがって操作者は、より直感的にスピーカ３０を個別に制御することができるので、操作性をさらに向上することができる。
【００４９】
次に本発明の第３の実施の形態に関して説明する。本実施の形態の情報処理装置１では、物体３３が表示部３２に配置されると、その物体３３が配置された位置またはその近傍に表示部３２に表示されている画像に基づく音が出力される点に特徴を有する。
【００５０】
図９は、情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図である。図９では、表示部３２に表示される画像として、表示領域３２ａが２行２列に４分割され、各表示領域３２ａに異なる楽器の画像がそれぞれ表示される。本実施の形態では、図９に示すように、右上の表示領域３２ａにピアノ４５の画像が表示され、右下の表示領域３２ａにトランペット４６の画像が表示され、左下の表示領域３２ａに太鼓４７の画像が表示され、左上の表示領域３２ａにギター４８の画像が表示される。また表示部３２の中心付近を中心とする円状の領域４９を示す画像が表示される。
【００５１】
図１０は、情報処理装置１を示す正面図であって、図９に示す表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。図１０では、理解を容易にするため、右上のスピーカ３０ａから音が出力されている状態を、音符３４にて可視化して示す。したがって図１０では、右上のスピーカ３０ａからのみ音が出力され、残余の３つのスピーカ３０ｂ，３０ｃ，３０ｄからは音は出力されていない。また図１０では、物体３３として指差しが、右上のピアノ４５の画像が表示されている表示領域３２ａに載置される。このような音を出力するスピーカ３０の選択は、表示部３２に配置する物体３３の位置に対応している。本実施の形態では、表示部３２に配置される物体３３から最も近いスピーカ３０のみから音を出力するようにＣＰＵ１０によって制御される。また最も近いスピーカ３０から出力される音は、物体３３が載置される位置またはその近傍に表示される画像に関連する音が出力される。したがって図１０に示すように、物体３３が載置される表示領域３２ａにはピアノ４５が表示されるので、右上のスピーカ３０ａからは、ピアノ４５を演奏したときの音が出力される。
【００５２】
図１１は、情報処理装置１を示す正面図であって、図９に示す表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている他の状態を示す。図１１では、理解を容易にするため、スピーカ３０から音が出力されている状態を、音符３４にて可視化して示す。したがって図１１では、４つスピーカ３０から音が出力されている。図１１に示すように、物体３３として指差しは、円状の領域４９を示す画像が表示されている位置に載置される。この円状の領域４９に物体３３を載置すると、全てのスピーカ３０から音が出力するように制御される。
【００５３】
前述したように音を出力するスピーカ３０の選択は、表示部３２に配置される物体３３から最も近いスピーカ３０のみから音を出力するようにＣＰＵ１０によって制御される。図１１に示すように物体３３が配置された位置は、円状の領域４９であり、この領域は全てのスピーカ３０から略等距離にある。このような場合は、全てのスピーカ３０から音を出力する指令であると判断され、各スピーカ３０ａ〜３０ｄから出力される音は、各スピーカ３０ａ〜３０ｄの位置に対応する画像に関連する音が出力される。したがって図１１に示す場合では、右上のスピーカ３０ａからは、ピアノ４５を演奏したときの音が出力される。また右下のスピーカ３０ｂからは、トランペット４６を演奏したときの音が出力される。また左下のスピーカ３０ｃからは、太鼓４７を演奏したときの音が出力される。また左上のスピーカ３０ｄからは、ギター４８を演奏したときの音が出力される。
【００５４】
このような処理は、図８のフローチャートにおける処理と同様の処理によって実現される。具体的には、前述のステップｂ５にて、タグ認識処理プログラムを実行し、物体３３の識別情報を取得する。この識別情報に基づいて、情報検索処理プログラムを実行し、識別情報に関連付けて補助記憶部１５に記憶される関連音情報を読み出す。本実施の形態のように物体３３が指差しである場合、関連音情報としては音を出力しない情報が記憶されている。また物体３３の位置に表示される画像に基づいて、情報検索処理プログラムを実行し、画像に関連付けて補助記憶部１５に記憶される関連音情報を読み出す。このような関連音情報を出力する音に決定する。これによって物体３３が配置される位置に表示される画像に関連する関連音情報が音として出力される。したがって前述の各実施の形態と同様の作用および効果を達成することができる。
【００５５】
また本実施の形態では、物体３３は指差しであるが、このような指差しに限らず、たとえば関連音情報が関連付けて記憶される物体３３であってもよい。たとえば物体３３が、他の楽器、たとえばフルートの模型（以下、単に「フルート」ということがある）である場合、フルートをトランペット４６の画像が表示される領域に配置すると、フルートを演奏したときの音と、トランペット４６を演奏したときの音とを出力するように構成してもよい。
【００５６】
次に本発明の第４の実施の形態に関して説明する。本実施の形態の情報処理装置１では、物体３３が表示部３２に配置されると、物体３３の位置と、各スピーカ３０ａ〜３０ｄとの位置との間の距離に基づいて、出力する音量を各スピーカ３０ａ〜３０ｄ毎に個別に制御する点に特徴を有する。図１２は、本実施の形態の情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。図１２では、図６と同様の画像が表示され、物体３３である機関車が下方であって、左右方向の中心から左寄りに配置される。また図１２では、理解を容易にするため、右下および左下のスピーカ３０ｂ，３０ｃから音が出力されている状態を、音符３４にて可視化して示す。またその音量に比例して、音符３４の数を増加して示す。したがって図１２に示すように、左下のスピーカ３０ｃから出力される音量は、右下のスピーカ３０ｂから出力される音量よりも大きい。このような音を出力するスピーカ３０の選択および音量の選択は、表示部３２に配置する物体３３である機関車の位置に対応している。本実施の形態では、表示部３２に配置される物体３３と各スピーカ３０ａ〜３０ｄとの距離に基づいて音量を調整し、音を出力するようにＣＰＵ１０によって制御される。また右下のスピーカ３０ｂから出力される音は、右下の画像に関連する音と、物体３３に関連する音である。また左下のスピーカ３０ｃから出力される音は、左下の画像に関連する音と、物体３３に関連する音である。したがって図１２に示すような画像が表示部３２に表示され、物体３３として機関車が配置される場合、また右下のスピーカ３０ｂから出力される音は、機関車が走行するときに生じる音と、林４１にて生じる音である。また左下のスピーカ３０ｃから出力される音は、機関車が走行するときに生じる音と、湖畔４２にて生じる音である。このような処理に関して、フローチャートを用いて説明する。
【００５７】
図１３は、ＣＰＵ１０の本実施の形態の音出力処理手順を示すフローチャートである。図１３に示す音出力処理は、ＣＰＵ１０によって実行される。図１３に示す音出力処理は、情報処理装置１の動作中に繰返し実行される。たとえば情報処理装置１の図示外の主電源をオフからオンにする条件、図示外のタイマーによる一定時間間隔、図示外の人感センサなどによる利用者の接近もしくは動きを検知した条件において、図１３に示す処理が開始される。
【００５８】
ステップｃ１では、次のステップｃ２で物体３３があるか否かを判断すべく、情報処理装置１の表示手段であるＬＣＤ５の表示画面上の状態をセンサ６または内蔵カメラ７でセンシングして、ステップｃ２に移る。ステップｃ２では、前記センシングの結果、ＬＣＤ５の表示画面上に物体３３があるか否かを判断し、表示画面上に物体３３があると判断されるとステップｃ３に移り、表示画面上に物体３３がないと判断されると本処理を終了する。
【００５９】
ステップｃ３では、前述の位置認識処理プログラム２１を実行することによって、物体３３の位置を認識して、ステップｃ４に移る。ステップｃ４では、物体３３の位置に基づいて、物体３３の位置と各スピーカ３０ａ〜３０ｄとの距離を演算し、ステップｃ５に移る。ステップｃ５では、前述の音出力処理プログラム２８を実行することによって、物体３３の位置と各スピーカ３０ａ〜３０ｄとの距離に基づいて、音を出力するスピーカ３０を選択し、ステップｃ５に移る。ステップｃ５では、出力する音および音量を決定し、選択されたスピーカ３０から決定した音を決定した音量で出力するように音声制御部３１に指令を与え、本処理を終了する。このステップｃ５では、タグ認識処理プログラムを実行し、物体３３の識別情報を取得する。この識別情報に基づいて、情報検索処理プログラムを実行し、識別情報に関連付けて補助記憶部１５に記憶される関連音情報を読み出す。またステップｃ５にて選択したスピーカ３０に近接する位置に表示される画像に基づいて、情報検索処理プログラムを実行し、画像に関連付けて補助記憶部１５に記憶される関連音情報を読み出す。このような関連音情報を出力する音に決定する。また物体３３の位置と各スピーカ３０ａ〜３０ｄとの距離が小さくなるにつれて、各スピーカ３０ａ〜３０ｄから出力される音量が大きくなるよう音量が決定される。
【００６０】
次に、音量の具体的な決定方法に関して説明する。図１４は、表示部３２およびスピーカ３０を簡略化して示す正面図である。表示部３２の表示領域３２ａを、各スピーカ３０ａ〜３０ｄの配置と数に応じて分割し、物体３３が配置された位置が分割したどの領域なのか検出することによって、スピーカ３０を選択する。各スピーカ３０ａ〜３０ｄは、表示部３２の角部にそれぞれ配置されるので、表示部３２の表示領域３２ａを各スピーカ３０ａ〜３０ｄの位置に応じて、２行２列の４等分に分割して、４つの分割領域５０ａ〜５０ｄを形成する。これによって各スピーカ３０ａ〜３０ｄと各分割領域５０ａ〜５０ｄとを１対１に対応させる。したがって右上の第１分割領域５０ａが右上のスピーカ３０ａと対応する。また右下の第２分割領域５０ｂが右下のスピーカ３０ｂと対応する。また左下の第３分割領域５０ｃが左下のスピーカ３０ｃと対応する。また左上の第４分割領域５０ｄが左上のスピーカ３０ｄと対応する。したがって前述の第１から第３の実施の形態では、各分割領域５０ａ〜５０ｄに物体３３が配置されると、対応する各スピーカ３０ａ〜３０ｄから音を出力するように制御される。たとえば第１分割領域５０ａに物体３３が配置されると、右上のスピーカ３０ａから音を出力するように制御される。
【００６１】
本実施の形態では、物体３３の位置に応じて各スピーカ３０ａ〜３０ｄから出力される音量を個別に制御するために、物体３３が配置される領域と、物体３３が配置される位置から残余の領域までの距離を算出する。図１４に示すように、物体３３が第３分割領域５０ｃに配置されると、物体３３の位置から第１分割領域５０ａ、第２分割領域５０ｂおよび第４分割領域５０ｄまでの距離であって、最小の距離を演算する。最小の距離を演算するために、表示領域３２ａの左下を原点５１とし、物体３３の座標を（ｘ0，ｙ0）とする。また各分割領域５０ａ〜５０ｄの境界の座標を（ｘd，ｙd）とする。物体３３から第１分割領域５０ａまでの距離Ｌ１は、三平方の定理から次式（１）によって演算される。
Ｌ１＝√（（ｘd−ｘ0）2＋（ｙd−ｙ0）2）                        …（１）
【００６２】
また物体３３から第２分割領域５０ｂまでの距離Ｌ２は、次式（２）によって演算される。
Ｌ２＝ｘd−ｘ0                                                  …（２）
【００６３】
また物体３３から第４分割領域５０ｄまでの距離Ｌ４は、次式（３）によって演算される。
Ｌ４＝ｙd−ｙ0                                                  …（３）
【００６４】
このように演算された距離の大小関係を比較すると、図１４に示す例では、Ｌ２＜Ｌ４＜Ｌ１であるので、音量を、物体３３が配置される第３分割領域５０ｃに対応するスピーカ３０ｃを最も大きくし、順次、第２分割領域５０ｂに対応するスピーカ３０ｂ、第４分割領域５０ｄに対応するスピーカ３０ｄ、および第１分割領域５０ａに対応するスピーカ３０ａに小さく設定する。本実施の形態では、予め定める距離より大きい場合、その分割領域に対応するスピーカ３０から出力される音量は０に設定される。したがって左下のスピーカ３０ｃから出力される音量が、右下のスピーカ３０bから出力される音量より大きく設定され、右上のスピーカ３０ａおよび左上のスピーカ３０dから出力される音量は０に設定される。図１４では、物体３３が第３分割領域５０ｃに配置された例に関して説明したが、物体３３が残余の分割領域に配置された場合でも同様の演算によって音量が決定される。
【００６５】
以上説明したように、本実施の形態では、センサ６または内蔵カメラ７によって検出される物体３３の位置と、各スピーカ３０ａ〜３０ｄとの位置との間の距離に比例して、出力する音量が各スピーカ３０ａ〜３０ｄ毎にＣＰＵ１０によって個別に制御される。したがって表示部３２上の物体３３の位置に最も近いスピーカ３０が、最も大きい音量を出力し、距離が大きくなるにつれて、出力される音量が小さくなるように制御される。これによって操作者は、物体３３の位置を変更することによって、音量を大きくしたいスピーカ３０、または音を小さくしたいスピーカ３０を選択することができる。したがって操作者は、直感的にスピーカ３０の音量を制御することができるので、操作性をさらに向上することができる。
【００６６】
また図１３に示す音制御処理は、短時間に繰り返し実行されるので、物体３３を移動させると、その移動に基づいて、出力される音が制御される。したがって図１２に示すように、物体３３が機関車である場合など、機関車を線路４４の上を連続的に移動させることによって、各スピーカ３０ａ〜３０ｄから出力される音が適宜制御される。これによって物体３３の移動に伴って、各スピーカ３０ａ〜３０ｄから出力される音を制御することができる。
【００６７】
また本実施の形態では、物体３３の位置と各スピーカ３０ａ〜３０ｄとの距離に基づいて、音量を決定しているが、音量に限らず、音の特性を決定してもよい。たとえば前述した第３の実施の形態における画像が表示部３２に表示されている場合、物体３３が本実施の形態のように第３分割領域５０ｃに配置されると、各スピーカ３０ａ〜３０ｄとの距離に基づいて、第３分割領域５０ｃに表示される画像に関連する音と、第２分割領域５０ｂに表示される画像に関連する音をミックスした音を左下のスピーカ３０ｃからだけ出力するように制御してもよい。したがって物体３３の位置によってスピーカ３０が１つに選択されるが、出力される音の特性が、物体３３の位置とその表示部３２に表示される画像との距離に基づいてミックスされる。これによって、表示部３２上のシーンにおいて物体３３があたかもその位置にあるかのような臨場感のある音を操作者は得ることができる。
【００６８】
次に本発明の第５の実施の形態に関して説明する。本実施の形態の情報処理装置１では、物体３３が表示部３２に配置、または表示部３２の上方に臨む空間にあると、物体３３の位置に応じて、各スピーカ３０ａ〜３０ｈから出力されている音、および音量の少なくともいずれか一方を制御する点に特徴を有する。前述の各実施の形態では、表示部３２に直接物体３３が配置された２次元空間における場合に関して説明したが、表示部３２に直接配置される場合に限らず、表示部３２が上方の臨む予め定める空間に配置された３次元空間における場合も同様の処理を行うことができる。
【００６９】
図１５は、本実施の形態の情報処理装置１を簡略化して示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。図１６は、表示部３２およびスピーカ３０ａ〜３０ｈを簡略化して示す正面図である。情報処理装置１は、さらに４つのスピーカ３０ｅ〜３０ｈを含んで構成され、前述の表示部３２に設けられる４つのスピーカ３０ａ〜３０ｄの上方にさらに４つのスピーカ３０ｅ〜３０ｈがそれぞれ設けられる。したがって８つのスピーカ３０ａ〜３０ｈによって、図１６に示すように、直方体状の空間の各頂点に各スピーカ３０ａ〜３０ｈが配置された状態となる。図１５では、物体３３として飛行機の模型が、表示部３２が上方に臨む空間を飛行中の場合を示す。また図１５では、表示部３２に表示される画像として、左方から順に、管制塔５２、滑走路５３、および空港ターミナル５４の画像が、一例として表示される。また図１５では、物体３３として飛行機が、滑走路５３の画像が表示されている上方付近であって右寄りにある場合を示す。また図１５では、理解を容易にするため、右上の上方のスピーカ３０ｅから音が出力されている状態を、音符３４にて可視化して示す。したがって図１５では、右上の上方のスピーカ３０ｅからのみ音が出力され、残余の７つのスピーカ３０からは音は出力されていない。
【００７０】
このような音を出力するスピーカ３０の選択は、物体３３である飛行機の位置に対応している。本実施の形態では、物体３３から最も近いスピーカ３０のみから音を出力するようにＣＰＵ１０によって制御される。したがって図１６に示すように、表示部３２の表示領域３２ａが臨む上方の空間を、各スピーカ３０ａ〜３０ｈの配置と数に応じて分割し、物体３３が配置された位置が分割したどの領域になのか検出することによって、スピーカ３０を選択する。各スピーカ３０ａ〜３０ｈは、表示部３２の角部と、その上方にそれぞれ配置されるので、表示部３２の表示領域３２ａが臨む空間を各スピーカ３０ａ〜３０ｈの位置に応じて、２×２×２の８等分に分割して、８つの分割空間を形成する。これによって各スピーカ３０ａ〜３０ｈと各分割空間とを１対１に対応させる。したがって各分割空間に物体３３が配置されると、対応する各スピーカ３０ａ〜３０ｈから音を出力するように制御される。また最も近いスピーカ３０から出力される音は、物体３３に関連する音、および物体３３の位置またはその近傍に表示される画像に関連する音が出力される。したがって図１５に示すように、物体３３は飛行機であり、物体３３は表示部３２から離れているので、右上の上方のスピーカ３０ｅからは、飛行機が飛行するときに生じる音が出力される。またたとえば、物体３３である飛行機が左下に表示される管制塔５２の近傍を飛行している場合、左下のスピーカ３０ｃからは、飛行機が飛行するときに生じる音と、管制塔５２にて生じる音が出力される。したがって前述の各実施の形態と同様の作用および効果を達成することができる。
【００７１】
前述の各実施の形態では、物体３３の方向に基づいて音の出力を制御していないが、さらに物体３３の方向を検出し、検出した方向に基づいて各スピーカ３０ａ〜３０ｄから出力する音の性状を決定してもよい。たとえばある特定の物体３３からは、特定の方向に向かって音が出力されると予め設定しおくことによって、物体３３の方向を検出して、前述の特定の方向に臨む位置に最も近接するスピーカ３０から関連する音を出力するように制御してもよい。またこの場合、物体３３の位置と出力させるスピーカ３０との距離に応じて、出力する音の音量を設定することが好ましい。たとえば物体３３がジェット機の模型である場合、実際のジェット機では後方のエンジン部から音が生じるので、ジェット機の模型が向いている方向に基づいて、ジェット機の模型の後方に臨む位置に近接するスピーカ３０に、ジェット機のエンジン音を出力させることによって、操作者は臨場感のある音を聴くことができる。
【００７２】
また前述の各実施の形態では、物体３３が１つの場合に関して説明したが、物体３３が複数配置される場合であっても、各物体３３に対して同様の処理を行うことができる。
【図面の簡単な説明】
【００７３】
【図１】第１の実施の形態の情報処理装置１の電気的構成を示すブロック図である。
【図２】主記憶部１４に記憶される動作プログラム２０の構成を示す図である。
【図３】情報処理装置１を示す正面図であって、表示部３２に表示される画面の一例を示す図である。
【図４】情報処理装置１を示す正面図であって、表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。
【図５】ＣＰＵ１０の音出力処理手順を示すフローチャートである。
【図６】情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図である。
【図７】情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。
【図８】ＣＰＵ１０の本実施の形態の音出力処理手順を示すフローチャートである。
【図９】情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図である。
【図１０】情報処理装置１を示す正面図であって、図９に示す表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。
【図１１】情報処理装置１を示す正面図であって、図９に示す表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている他の状態を示す。
【図１２】本実施の形態の情報処理装置１を示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。
【図１３】ＣＰＵ１０の本実施の形態の音出力処理手順を示すフローチャートである。
【図１４】表示部３２およびスピーカ３０を簡略化して示す正面図である。
【図１５】本実施の形態の情報処理装置１を簡略化して示す正面図であって、本実施の形態の表示部３２に表示される画面の一例を示す図であり、スピーカ３０から音が出力されている状態を示す。
【図１６】表示部３２およびスピーカ３０ａ〜３０ｈを簡略化して示す正面図である。
【符号の説明】
【００７４】
１  情報処理装置
５  ＬＣＤ
６  センサ
７  内蔵カメラ
１０  ＣＰＵ
１１  センサ入力部
１３  表示制御部
１４  主記憶部
１５  補助記憶部
１６  通信部
３０ａ〜３０ｈ  スピーカ
３１  音声制御部
３２  表示部
３３  物体
【図１】
2008131515.tif 000003
【図２】
2008131515.tif 000004
【図３】
2008131515.tif 000005
【図４】
2008131515.tif 000006
【図５】
2008131515.tif 000007
【図６】
2008131515.tif 000008
【図７】
2008131515.tif 000009
【図８】
2008131515.tif 000010
【図９】
2008131515.tif 000011
【図１０】
2008131515.tif 000012
【図１１】
2008131515.tif 000013
【図１２】
2008131515.tif 000014
【図１３】
2008131515.tif 000015
【図１４】
2008131515.tif 000016
【図１５】
2008131515.tif 000017
【図１６】
2008131515.tif 000018