(57)【要約】【課題】  コンテンツ作成者が難しい設定をすることなく、画像や文字、記号等のオブジェクトに音データを関連付けたマルチメディアデータを効果的に再生することができる情報処理方法及び情報処理装置を提供する。【解決手段】  画像中のオブジェクトとそれに関連付けられた音データとを記憶部１０２が保持する。ここで、オブジェクトのメタデータを参照し、参照されたメタデータに基づいて、オブジェクトに関連付けられた前記音データの出力条件を決定する。そして、出力条件に基づいた音量等で音データがサウンド出力部１０５から出力する。【選択図】  図５
2005141424.tif 000002
【特許請求の範囲】
【請求項１】
画像中のオブジェクトに関連付けられた音データを出力する情報処理方法であって、
前記オブジェクトと該オブジェクトに関連付けられた音データとを取得する取得工程と、
前記オブジェクトのメタデータを参照する参照工程と、
前記参照工程により参照された前記メタデータに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する決定工程と、
前記出力条件に基づいて前記音データを出力する出力工程と
を有することを特徴とする情報処理方法。
【請求項２】
前記参照工程が、前記オブジェクトの前記メタデータのうち、前記画像中において該オブジェクトが配置されている座標を参照し、
前記決定工程が、前記座標に基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する
ことを特徴とする請求項１に記載の情報処理方法。
【請求項３】
前記出力条件が、前記出力工程により出力される前記音データの左右方向の音量バランスであることを特徴とする請求項２に記載の情報処理方法。
【請求項４】
前記出力工程は、前記オブジェクトが前記画像中の右側に位置する場合、該オブジェクトに関連付けられた前記音データの左方向の音量よりも右方向の音量を大きくして出力することを特徴とする請求項３に記載の情報処理方法。
【請求項５】
前記参照工程が、前記オブジェクトの前記メタデータのうち、該オブジェクトの大きさを参照し、
前記決定工程が、前記大きさに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する
ことを特徴とする請求項１に記載の情報処理方法。
【請求項６】
前記出力工程は、大きなオブジェクトに関連付けられた音データを小さなオブジェクトに関連付けられた音データよりも大きな音量で出力することを特徴とする請求項５に記載の情報処理方法。
【請求項７】
前記参照工程が、前記オブジェクトの前記メタデータのうち、該オブジェクトのレイヤーを参照し、
前記決定工程が、前記レイヤーに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する
ことを特徴とする請求項１に記載の情報処理方法。
【請求項８】
前記出力工程は、上位のレイヤーのオブジェクトに関連付けられた音データを下位のレイヤーのオブジェクトに関連付けられた音データよりも大きな音量で出力することを特徴とする請求項７に記載の情報処理方法。
【請求項９】
前記オブジェクトよりも上位のレイヤーに存在する他のオブジェクトとの重なりを検出する検出工程をさらに有し、
前記決定工程は、前記オブジェクトと前記他のオブジェクト同士の重なりの割合に応じて該オブジェクトに関連付けられた前記音データの出力条件を決定する
ことを特徴とする請求項８に記載の情報処理方法。
【請求項１０】
前記参照工程が、前記オブジェクトの前記メタデータのうち、該オブジェクトの遮音性を参照し、
前記決定工程が、前記遮音性に基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する
ことを特徴とする請求項１に記載の情報処理方法。
【請求項１１】
前記画像が、複数のフレーム画像で構成される動画像の一フレーム画像であって、前後フレームの前記オブジェクトが異なるレイヤーに存在する場合、
前記出力工程は、現フレームの前記オブジェクトに関連付けられた音データを、前後フレームの前記オブジェクトに関連付けられた音データを補間処理して決定された音量で出力する
ことを特徴とする請求項７に記載の情報処理方法。
【請求項１２】
前記参照工程が、前記オブジェクトの前記メタデータのうち、該オブジェクトの透明度を参照し、
前記決定工程が、前記透明度に基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する
ことを特徴とする請求項１に記載の情報処理方法。
【請求項１３】
画像中のオブジェクトに関連付けられた音データを出力する情報処理装置であって、
前記オブジェクトと該オブジェクトに関連付けられた音データとを保持する保持手段と、
前記オブジェクトのメタデータを参照する参照手段と、
前記参照手段により参照された前記メタデータに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する決定手段と、
前記出力条件に基づいて前記音データを出力する出力手段と
を備えることを特徴とする情報処理装置。
【請求項１４】
コンピュータに、
画像中のオブジェクトと該オブジェクトに関連付けられた音データとを取得する取得手順と、
前記オブジェクトのメタデータを参照する参照手順と、
前記参照手順により参照された前記メタデータに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する決定手順と、
前記出力条件に基づいて前記音データを出力装置から出力する出力手順と
を実行させるためのプログラム。
【請求項１５】
請求項１４に記載のプログラムを格納したことを特徴とするコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、マルチメディアコンテンツを再生する情報処理技術に関する。
【背景技術】
【０００２】
近年、動画や静止画、文字、記号、図形、音楽、音声等のデータを組み合わせたマルチメディアコンテンツが普及してきており、パーソナルコンピュータ（ＰＣ）や携帯端末を用いて、マルチメディアコンテンツを容易に再生することができる。このように、画像データや音データを効果的に組み合わせて提示することで、画像データのみ、或いは音データのみを提示する場合に比べてコンテンツ提供者は、よりリッチなコンテンツを提供することができる。
【０００３】
このようなマルチメディアコンテンツに関し、映像と音との間に調和が保たれるように提示するためのディスプレイ装置が知られている（例えば、特許文献１参照）。一方、マルチメディアコンテンツを簡単にデザイン・編集するための方法も知られている（例えば、特許文献２参照）。
【特許文献１】国際公開第００／１８１１２号パンフレット
【特許文献２】特開２００２−１５３３３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記特許文献１に記載のディスプレイ装置は、画面を分割した領域ごとに音像を形成させるものであり、より高い臨場感を実現することができる一方で複数の音源を必要とする。もっとも上記ディスプレイ装置は街頭の大型ディスプレイ装置に関する発明であり、一般のユーザを対象にしたものではない。
【０００５】
また、上記特許文献２に記載のマルチメディアコンテンツを簡単にデザイン・編集するための方法においては、ユーザは、画像データや音データ等を配置したい位置に配置することができるが、配置される音と画像との間のデータの関連については考慮されていない。
【０００６】
本発明は、このような事情を考慮してなされたものであり、コンテンツ作成者が難しい設定をすることなく、画像や文字、記号等のオブジェクトに音データを関連付けたマルチメディアデータを効果的に再生することができる情報処理方法及び情報処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明は、画像中のオブジェクトに関連付けられた音データを出力する情報処理方法であって、
前記オブジェクトと該オブジェクトに関連付けられた音データとを取得する取得工程と、
前記オブジェクトのメタデータを参照する参照工程と、
前記参照工程により参照された前記メタデータに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する決定工程と、
前記出力条件に基づいて前記音データを出力する出力工程と
を有することを特徴とする。
【０００８】
また、本発明は、画像中のオブジェクトに関連付けられた音データを出力する情報処理装置であって、
前記オブジェクトと該オブジェクトに関連付けられた音データとを保持する保持手段と、
前記オブジェクトのメタデータを参照する参照手段と、
前記参照手段により参照された前記メタデータに基づいて、前記オブジェクトに関連付けられた前記音データの出力条件を決定する決定手段と、
前記出力条件に基づいて前記音データを出力する出力手段と
を備えることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、コンテンツ作成者が難しい設定をすることなく、画像や文字、記号等のオブジェクトに音データを関連付けたマルチメディアデータを効果的に再生することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照して、本発明を実施するための形態について説明する。
【実施例１】
【００１１】
図１は、本発明の第１の実施例に係る情報処理システムの基本構成を示すブロック図である。図１に示すように、本発明の第１の実施例に係る情報処理システムは、操作部１０１、記憶部１０２、制御部１０３、表示部１０４、サウンド出力部１０５及び音声合成部１０６から構成される。
【００１２】
操作部１０１は、ボタン群やキーボード、マウス、タッチパネル、ペン、タブレット等の入力装置から構成され、各種の指示、テキストデータ等を本情報処理システムに入力するための入力インタフェースとして機能する。
【００１３】
記憶部１０２は、各種情報を保存するためのハードディスクドライブ装置や、情報処理システムに各種の情報を提供するためのＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等の記憶媒体等により構成されている。また、記憶部１０２を実現するハードディスクドライブ装置や記憶媒体等には、各種のアプリケーションプログラム、ユーザインタフェース制御プログラム、そして各プログラムを実行する際に必要な各種のデータ、オブジェクトデータや音データ等から成るマルチメディアデータ等が記憶されており、これらは後段の制御部１０３の制御により、本システムに読み込まれる。
【００１４】
制御部１０３は、ワークメモリやＣＰＵ、ＭＰＵ等により構成されており、記憶部１０２に記憶されたプログラムやデータを読み出して各種の処理を実行する。表示部１０４は、液晶ディスプレイ等の表示装置から構成され、画像や文字等により構成される各種の情報を表示する。尚、表示部１０４としてタッチパネル式の表示装置を用いてもよく、その場合、表示部１０４は操作部１０１としての機能（すなわち、各種の指示を本システムに入力する機能）をも有することになる。
【００１５】
サウンド出力部１０５は、同一の音データであっても左右方向に異った音量で出力するステレオ音声の出力が可能なスピーカやヘッドフォン等により構成されており、音を出力する。音声合成部１０６は、Ｄ／Ａ変換器等により構成されており、制御部１０３の制御により読み上げテキストから音声データを作成してＤ／Ａ変換し、音としてサウンド出力部１０５から外部に出力する処理を行う。尚、上記音声合成技術については公知の技術を利用する。
【００１６】
また、図２は、本発明の第１の実施例に係る情報処理システムの別の基本構成を示す図である。図２に示すように、図１で示した情報処理システムの構成に、さらに音声入力部２０１を付け加えてもよい。音声入力部２０１は、マイクロフォンやＡ／Ｄ変換器等により構成されており、ユーザの音声を入力する。音声入力部２０１より入力された音声に対して録音を行ったり、公知の技術である音声認識技術を利用したりしてもよい。また、操作部１０１から入力されたテキストデータを音声合成部１０６で音声合成することによって音声データを取得するようにしても良い。
【００１７】
次に、上記構成を有する本実施例に係る情報処理システムの動作例を説明する。図３は、本発明の第１の実施例における情報処理システムの動作例を説明するための図である。図３は、木、サル、ウシの画像（オブジェクト）をレイヤーを別に配置し、サルの画像とウシの画像にそれぞれ音データ（例えば、それぞれの鳴き声）を関連付けた例である。図３の３０１は、サルの画像を最前面のレイヤーに、木の画像を中間のレイヤーに、ウシの画像を最背面のレイヤーに配置した例である。この場合、ウシの画像よりもサルの画像の方が前面に配置されているため、３０２に示すように、ウシの画像に関連付けた音データよりもサルの画像に関連付けた音データの方を大きく再生する。尚、本実施形態では、便宜上、レイヤーを３つの階層としているが、当然レイヤーの階層数はそれ以上であっても本発明の適用は同様に可能であり、それ以下であっても同様である。
【００１８】
また、図３の３０３は、ウシの画像を最前面のレイヤーに、木の画像を中間のレイヤーに、サルの画像を最背面のレイヤーに配置した例である。この場合、サルの画像よりもウシの画像の方が前面に配置されているため、３０４に示すように、サルの画像に関連付けた音データよりもウシの画像に関連付けた音データの方を大きく再生する。
【００１９】
上述した画像データや音データの配置方法は、オーサリングツールのようにＧＵＩ（Graphical User Interface）を利用して行う方法等、様々なユーザインタフェースを用いて配置する方法が考えられるが、情報処理システムが保存する内部データとしては、図４に示すように、オブジェクトごとに配置位置や関連付ける音データの情報等のメタデータをもつ必要がある。すなわち、図４は、本発明の第１の実施例における情報処理システムが保持する内部データ例を説明するための図である。図４には、図３の３０１に示す画像データの配置を一例としてＸＭＬで記述した場合の例が示されている。尚、当該内部データは情報処理システムがあらかじめ保持しているものであっても、再生時に他装置等から取得したものを一時的に保持しているものであってもよい。
【００２０】
図４に示すように、img要素をもつタグで画像データを配置しており、src属性で画像データのＵＲＬ（Uniform Resource Locator）を指定、style属性で配置位置（x,y）とサイズ（height,width）、レイヤー（z-index：数が小さいほど前面）を指定、sound属性で関連付ける音データのＵＲＬ（src）、再生回数（repeat：無限に繰り返す場合は−１）、順番（order：数が小さい順に再生）を指定、shutout属性でそのオブジェクトの遮音性を指定（shutout：数が大きいほど遮音性高）している。図４に示す例では、まず、ウシの画像に関連付けられた音データcow.wavを１回再生し、続いてサルの画像に関連付けられた音データmonkey.wavを２回再生する。
【００２１】
本実施例の情報処理システムは、上述したような内部データに基づいて、マルチメディアコンテンツを再生する。尚、マルチメディアコンテンツ自体の再生は制御プログラムが行い、静止画、動画、文字、記号等を表示する。座標等、指定されたデータに基づいて画像等を表示する方法についてはＨＴＭＬを解釈するブラウザ等、既に様々な製品が公開されているので、その技術を利用する。以下では、音データを再生する手順について、図５のフローチャートを用いて説明する。
【００２２】
図５は、本発明の第１の実施例に係る情報処理システムにおける音データの再生処理手順を説明するためのフローチャートである。上述した内部データに基づく再生順や再生回数に従って、制御プログラムから音データの再生が促されると、まずオブジェクトのメタデータ（配置位置、すなわち座標、大きさ、レイヤー、関連付けられた音データの情報等）を参照する（ステップＳ５０１）。
【００２３】
続いて、オブジェクトのサイズに応じて音量を設定する（ステップＳ５０２）。例えば、画像中のオブジェクトの面積が大きい場合は、同一オブジェクトであっても面積が小さい場合よりも音量を大きく設定するようにする。
【００２４】
続いて、オブジェクトの位置座標に応じて左右方向の音量バランスを設定する（ステップＳ５０３）。例えば、関連付けられたオブジェクトが全体の右側に配置されていれば右方向からの音量が左方向からの音量よりも大きく聞こえるように、また、関連付けられたオブジェクトが全体の左側に配置されていれば左方向からの音量が右方向からの音量よりも大きく聞こえるように、出力音声のバランスを設定する。或いは、配置されている方向からのみ音データを再生するようにしてもよい。
【００２５】
続いて、レイヤーの深さに応じて出力時の音量を設定する（ステップＳ５０４）。例えば、最前面のオブジェクトを基準にレイヤーが１段階深くなるごとに１ｄＢ下げる等、関連付けられたオブジェクトが前面（上位レイヤー）にあるほど、その背面（下位レイヤー）にある場合よりも音量を大きく設定する。
【００２６】
続いて、前面に他のオブジェクトが重なっているかどうかをチェックし、重なりの割合等を検出する（ステップＳ５０５）。その結果、重なっている場合（Ｙｅｓ）は、オブジェクトが見える面積・比率に応じて出力時の音量を設定する（ステップＳ５０６）。例えば、オブジェクトが半分だけ見えていれば、音量を現在の設定の半分にする等、オブジェクトの見える面積や、その比率が小さいほど音量を小さくする。
【００２７】
続いて、前面オブジェクトの遮音性に応じて出力時の音量を設定する（ステップＳ５０７）。例えば、前面オブジェクトの遮音性が８に設定されている場合、音量を現在の設定から８ｄＢ下げる等、前面オブジェクトの遮音性が高いほど音量を小さく設定する。また、前面オブジェクトが複数ある場合は、複数のオブジェクトの遮音性の分だけ音量を下げる。例えば、遮音性２のオブジェクトと遮音性３のオブジェクトが前面のレイヤーにある場合、音量を現在の設定から５ｄＢ下げる等の処理を行う。
【００２８】
続いて、設定された音量や左右のバランス等の設定に従って音データを再生する（ステップＳ５０８）。音声合成の場合は再生ではなく、音声合成処理を行って音声出力する。尚、上記音声合成処理は公知の技術を用いる。一方、ステップＳ５０５において重なっていない場合（Ｎｏ）は、現在の設定（すなわち、サイズに応じて設定された音量、レイヤーの深さに応じて設定された音量バランス等）に基づいて音データを再生する（ステップＳ５０８）。
【００２９】
尚、ステップＳ５０２、ステップＳ５０３、ステップＳ５０４、ステップＳ５０６、ステップＳ５０７は、その中のいずれかを用いてもよい。また、音データの再生は音声合成を利用してもよい。
【００３０】
以上のような手順で音データの音量や左右のバランスを設定することで、例えば背面（より深いレイヤー）に配置されたオブジェクトからの音は小さく、左側に配置されたオブジェクトからの音は左側から大きく出力する等、配置されたオブジェクトと音との調和のとれた再生が可能になる。尚、オブジェクト自身は、サウンド出力部１０５から上記音データが再生・出力されるのと同時に、表示部１０４で表示される。
【００３１】
尚、オブジェクトとして画像だけではなく、文字、記号、図形等を配置してもよい。図６は、本発明の第１の実施例における情報処理システムの別の動作例を説明するための図である。例えば、図６に示すように、文字と画像を配置し、図５に示すフローチャートと同様の手順により再生した例を示している。図６の６０１は、木、サルの画像と文字を配置し、サルの画像に音データを関連付け、文字に音声合成を利用した例であり、文字の画像を最前面のレイヤーに、木の画像を中間のレイヤーに、サルの画像を最背面のレイヤーに配置している。この場合、サルの画像よりも文字の方が前面に配置されているため、６０２に示すように、サルの画像に関連付けた音より、文字を音声合成した音の方を大きく出力する。また、サルの画像に関連付けた音は右側から聞こえるように、左右の音量バランスを調整する。
【００３２】
以上説明したように、本発明の第１の実施例における情報処理システムでは、内部データとして保持しているマルチメディアコンテンツにおいて、画像や文字、記号等のオブジェクトと音データとの間で共通のメタデータを用いている。従って、コンテンツ作成者は難しい設定をすることなく、オブジェクトと音とをより効果的に関連付けて当該マルチメディアコンテンツを再生することができる。
【実施例２】
【００３３】
次に、本発明の第２の実施例に係る情報処理システムについて説明する。前述した第１の実施例では、静止画や文字等のオブジェクトに音データを関連付ける例を示した。本実施形態では、アニメーションやスライドの切り替わりなど、動的なオブジェクトに音データを関連付ける例について説明する。以下、本発明の第２の実施例に係る情報処理システムの動作について説明する。
【００３４】
図７は、本発明の第２の実施例に係る情報処理システムの動作例を説明するための図である。図７には、木、サルの画像を配置し、サルの画像に音データを関連付けた例である。ここでサルの画像は動画像であり、７０１の位置から７０３の位置に（図では、木の画像の背面から前面に、全体の右端から中央に）移動する。この場合、上述した図５に示すフローチャートに基づく処理を各フレームごとに行うことで、オブジェクトと音との調和のとれた提示が可能になる。
【００３５】
例えば、サルの画像に割り当てられた音は、７０１から７０３にフレームが移るに従って右方から中央へと音量のバランスを調整する。また、７０１から７０３にフレームが移るに従って、７０２、７０４に示すように、音量も大きくなるように出力する。このときのメタデータを図８に示す。すなわち、図８は、本発明の第２の実施例における情報処理システムが保持する内部データ例を説明するための図である。図８では、８０１が図７の７０１に対応、８０２が７０３に対応している。
【００３６】
また、ページ間のオブジェクトや音ごとに補間処理を行うことで、フレームが切り替わる際の音声出力を滑らかに変化させることができる。上記補間処理は線形補間等、公知の技術を利用する。例えば、図７の７０１から７０３に切り替える際に音量を徐々に上げる等の処理を行う。
【００３７】
また、メタデータ（オブジェクトの属性）としてオブジェクトの透明度を用いてもよい。例えば、透明度１００パーセントのときには音量を０にし、透明度が１パーセント小さくなるにつれて音量を１ｄＢ大きくする等の利用方法が考えられる。但し、オブジェクトの透明度は必ずしも利用する必要はなく、透明度１００パーセントのオブジェクトに関連付けられた音データを、ＢＧＭのように利用してもよい。
【００３８】
以上説明したように、第２の実施例によれば、マルチメディアコンテンツにおいて、画像や文字、記号等のオブジェクトと音データとの間で共通のメタデータを用いるので、コンテンツ作成者は難しい設定をすることなく、動的なオブジェクトに対しても音との関連性をより効果的に提示することができる。本発明の用途としては、例えば、電子的な絵本や電子アルバム、プレゼンテーション等が見込まれる。
【実施例３】
【００３９】
以上、実施形態例を詳述したが、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施態様をとることが可能であり、具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
【００４０】
尚、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラム（実施形態では図に示すフローチャートに対応したプログラム）を、システムあるいは装置に直接あるいは遠隔から供給し、そのシステムあるいは装置のコンピュータが該供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。
【００４１】
従って、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。
【００４２】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であっても良い。
【００４３】
プログラムを供給するための記録媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などがある。
【００４４】
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。
【００４５】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【００４６】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現され得る。
【００４７】
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行ない、その処理によっても前述した実施形態の機能が実現される。
【図面の簡単な説明】
【００４８】
【図１】本発明の第１の実施例に係る情報処理システムの基本構成を示すブロック図である。
【図２】本発明の第１の実施例に係る情報処理システムの別の基本構成を示す図である。
【図３】本発明の第１の実施例における情報処理システムの動作例を説明するための図である。
【図４】本発明の第１の実施例における情報処理システムが保持する内部データ例を説明するための図である。
【図５】本発明の第１の実施例に係る情報処理システムにおける音データの再生処理手順を説明するためのフローチャートである。
【図６】本発明の第１の実施例における情報処理システムの別の動作例を説明するための図である。
【図７】本発明の第２の実施例に係る情報処理システムの動作例を説明するための図である。
【図８】本発明の第２の実施例における情報処理システムが保持する内部データ例を説明するための図である。
【符号の説明】
【００４９】
１０１  操作部
１０２  記憶部
１０３  制御部
１０４  表示部
１０５  サウンド出力部
１０６  音声合成部
２０１  音声入力部
【図１】
2005141424.tif 000003
【図２】
2005141424.tif 000004
【図３】
2005141424.tif 000005
【図４】
2005141424.tif 000006
【図５】
2005141424.tif 000007
【図６】
2005141424.tif 000008
【図７】
2005141424.tif 000009
【図８】
2005141424.tif 000010