(57)【特許請求の範囲】
【請求項１】
音楽部分と非音楽部分とを含む放送アナログ音声であって、該放送アナログ音声の特定の音楽部分が楽曲を含んでいる、放送アナログ音声を受信するための第一の受信機と、
前記楽曲と同時に放送され且つ前記楽曲に関するメタデータを示す文字を含んでいる画像を受信するための、第二の受信機と、
受信された前記アナログ音声をデジタル音声へ変換するためのＡＤ変換器と、
受信された前記画像中の前記文字を認識するための光学文字処理装置と、
認識された前記文字中のメタデータを識別するためのメタデータ抽出装置と、
前記デジタル音声中の前記楽曲を含む前記特定の音楽部分の出だしと終わりとに印を付けるための音声分析装置と、
デジタル音楽ライブラリ中で、前記楽曲を含む前記特定の音楽部分を記憶し、前記記憶された楽曲と前記識別された前記メタデータとをリンクさせるデータベース管理装置と、を具備するデジタル音楽ライブラリ作成装置。
【請求項２】
印を付けられた前記特定の音楽部分を含む前記楽曲をメモリバッファから前記デジタル音楽ライブラリへ書き込むためのデジタル音声書き込み装置を更に具備する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項３】
識別された前記メタデータを前記デジタル音楽ライブラリへ書き込むためのメタデータ書き込み装置を更に具備する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項４】
メタデータが現れる前記画像の領域を示しているテンプレートの補助で前記光学文字処理装置が前記文字を認識する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項５】
前記デジタル音楽ライブラリがファイルシステムとして構成される請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項６】
前記デジタル音楽ライブラリがデータベースとして構成される請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項７】
前記デジタル音楽ライブラリがＭＰ３データベースである請求項６に記載のデジタル音楽ライブラリ作成装置。
【請求項８】
前記デジタル音楽ライブラリがＷＭＡファイルを含む請求項６に記載のデジタル音楽ライブラリ作成装置。
【請求項９】
前記デジタル音楽ライブラリを記憶するためのリムーバブル記憶装置を更に具備する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１０】
前記デジタル音楽ライブラリを記憶するためのハードディスクドライブを更に具備する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１１】
前記メタデータが楽曲タイトルを含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１２】
前記メタデータがアーティスト名を含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１３】
前記メタデータがジャンルを含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１４】
前記メタデータがアルバム名を含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１５】
前記メタデータが楽曲の長さを含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１６】
前記メタデータが日付を含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１７】
前記放送アナログ音声中で楽曲が反復放送された回数を前記メタデータが含んでいる請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項１８】
前記放送アナログ音声中で前記楽曲が反復放送された前記回数に基づいて前記楽曲へのアクセスを制限するためのデジタル著作権管理装置を更に具備する請求項１７に記載のデジタル音楽ライブラリ作成装置。
【請求項１９】
聴取者によって選択された楽曲及びアーティストの基準を満たす音声を前記デジタル音楽ライブラリへ選択的にインポートするための制御装置を更に具備する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項２０】
同じ楽曲が前記デジタル音楽ライブラリ中に既に存在するか否かをその楽曲に関する前記メタデータから前記メタデータ抽出装置が判定する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項２１】
前記第一の受信機と前記第二の受信機とが、同じ放送源から前記アナログ音声と前記画像とを夫々受信する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項２２】
前記第一の受信機と前記第二の受信機とが、一つのテレビ受像機から前記放送アナログ音声と前記画像とを夫々受信する請求項２１に記載のデジタル音楽ライブラリ作成装置。
【請求項２３】
前記第一の受信機と前記第二の受信機とが、異なる放送源から前記放送アナログ音声と前記画像とを夫々受信する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項２４】
前記第二の受信機が、インターネットウェブサイトから前記画像を受信する請求項２３に記載のデジタル音楽ライブラリ作成装置。
【請求項２５】
前記画像が、ラジオ表示画像であり、前記第二の受信機がカメラを使用して前記ラジオ表示画像を撮る請求項２３に記載のデジタル音楽ライブラリ作成装置。
【請求項２６】
前記画像中の前記文字の輪郭を補正するための文字エンハンサを更に具備する請求項１に記載のデジタル音楽ライブラリ作成装置。
【請求項２７】
前記文字エンハンサが、前記画像から輝度カラー成分を抽出し、この抽出された輝度カラー成分を有する前記画像中の前記文字の外観を強調する請求項２６に記載のデジタル音楽ライブラリ作成装置。
【請求項２８】
前記文字エンハンサが、前記楽曲と同時に放送された複数の画像を平均化し、この平均化された前記画像中の前記文字の強調された外観を発生する請求項２６に記載のデジタル音楽ライブラリ作成装置。
【請求項２９】
音楽部分と非音楽部分とを含む放送アナログ音声であって、該放送アナログ音声の特定の音楽部分が楽曲を含んでいる、放送アナログ音声を受信することと、
前記楽曲と同時に送信され且つ前記楽曲に関するメタデータを示す文字を含んでいる画像を受信することと、
受信された前記アナログ音声をデジタル音声へ変換することと、
受信された前記画像中の前記文字を認識することと、
認識された前記文字中のメタデータを識別することと、
前記デジタル音声中の前記楽曲を含む前記特定の音楽部分の出だしと終わりとに印を付けることと、
デジタル音楽ライブラリ中で、前記楽曲を含む前記特定の音楽部分を記憶することと、  前記デジタル音楽ライブラリ中で、前記記憶された楽曲と前記識別されたメタデータとをリンクさせることと
を具備するデジタル音楽ライブラリ作成方法。
【請求項３０】
前記印を付けられた前記楽曲を含む前記特定の音楽部分をメモリバッファから前記デジタル音楽ライブラリへ書き込むことを更に具備する請求項２９に記載の方法。
【請求項３１】
識別された前記メタデータを前記デジタル音楽ライブラリへ書き込むことを更に具備する請求項２９に記載の方法。
【請求項３２】
前記認識することが、メタデータが現れる前記画像の領域を示しているテンプレートの補助で文字を認識する請求項２９に記載の方法。
【請求項３３】
前記デジタル音楽ライブラリがファイルシステムとして構成される請求項２９に記載の方法。
【請求項３４】
前記デジタル音楽ライブラリがデータベースとして構成される請求項２９に記載の方法。
【請求項３５】
前記デジタル音楽ライブラリがＭＰ３データベースである請求項３４に記載の方法。
【請求項３６】
前記デジタル音楽ライブラリがＷＭＡファイルを含む請求項３４に記載の方法。
【請求項３７】
前記メタデータが楽曲タイトルを含んでいる請求項２９に記載の方法。
【請求項３８】
前記メタデータがアーティスト名を含んでいる請求項２９に記載の方法。
【請求項３９】
前記メタデータがジャンルを含んでいる請求項２９に記載の方法。
【請求項４０】
前記メタデータがアルバム名を含んでいる請求項２９に記載の方法。
【請求項４１】
前記メタデータが楽曲の長さを含んでいる請求項２９に記載の方法。
【請求項４２】
前記メタデータが日付を含んでいる請求項２９に記載の方法。
【請求項４３】
前記メタデータを識別することが、前記放送アナログ音声中の楽曲が反復して放送された回数を追跡する請求項２９に記載の方法。
【請求項４４】
前記放送アナログ音声中で楽曲が反復して放送された前記回数に基づいて前記楽曲へのアクセスを制限することを更に具備する請求項４３に記載の方法。
【請求項４５】
聴取者によって選択された楽曲及びアーティストの基準を満たす音声を前記デジタル音楽ライブラリへ選択的にインポートすることを更に具備する請求項２９に記載の方法。
【請求項４６】
同じ楽曲が前記デジタル音楽ライブラリ中に既に存在するか否かをその楽曲に関する前記メタデータから判定することを更に具備する請求項２９に記載の方法。
【請求項４７】
前記放送アナログ音声を受信することと前記画像を受信することとが、同じ放送源から前記放送アナログ音声を受信することと前記画像を受信することとを夫々含んでいる請求項２９に記載の方法。
【請求項４８】
前記放送アナログ音声を受信することと前記画像を受信することとが、一つのテレビ受像機から前記放送アナログ音声を受信することと前記画像を受信することとを夫々含んでいる請求項４７に記載の方法。
【請求項４９】
前記放送アナログ音声を受信することと前記画像を受信することとが、異なる放送源から前記放送アナログ音声と前記画像とを受信する請求項２９に記載の方法。
【請求項５０】
前記画像を受信することが、インターネットウェブサイトから前記画像を受信することを含んでいる請求項４９に記載の方法。
【請求項５１】
前記画像が、ラジオ表示画像であり、前記画像を受信することが、カメラの使用によって前記ラジオ表画像を撮ることを含む、請求項４９に記載の方法。
【請求項５２】
前記文字を認識することの前に前記画像中の前記文字の輪郭を補正することを更に具備する請求項２９に記載の方法。
【請求項５３】
前記文字を強調することが、前記画像から輝度カラー成分を抽出し、この抽出された輝度カラー成分を有する前記画像中の前記文字の外観を強調することを含む請求項５２に記載の方法。
【請求項５４】
前記文字を強調することが、前記アナログ音声に対応する複数の画像を平均化し、この平均化された前記画像中の前記文字の強調した外観を発生することを含む請求項５２に記載の方法。
【請求項５５】
処理装置内で実行されると、
音楽部分と非音楽部分とを含む放送アナログ音声であって、該放送アナログ音声の特定の音楽部分が楽曲を含んでいる、放送アナログ音声を受信することと、
前記楽曲と同時に送信され且つ前記楽曲に関するメタデータを示す文字を含んでいる画像を受信することと、
受信された前記アナログ音声をデジタル音声へ変換することと、
受信された前記画像中の前記文字を認識することと、
認識された前記文字中のメタデータを識別することと、
前記デジタル音声中の前記楽曲を含む前記特定の音楽部分の出だしと終わりとに印を付けることと、
デジタル音楽ライブラリ中で、前記楽曲を含む前記特定の音楽部分を記憶することと、  前記デジタル音楽ライブラリ中で、前記記憶された楽曲と前記識別されたメタデータとをリンクさせることと、
を具備する方法を、前記処理装置に実行させる実行可能なコンピュータプログラム命令を含む、コンピュータが読み出し可能な媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＭＰ３ライブラリの様なデジタル音楽ライブラリの自動生成に関するものである。
【背景技術】
【０００２】
デジタル音楽プレーヤは、ＭＰ３プレーヤの様な独立形消費者電子装置として、携帯情報端末（ＰＤＡ）や携帯電話の様な携帯装置内における付属構成部として、また、家庭内ネットワーク装置として、急増しつつある。聴取者は一般にデジタル楽曲の自分自身の個人的なライブラリを作成し、このライブラリはハードディスクドライブやリムーバブルメモリカードの様な記憶装置に記憶される。デジタル楽曲は、一般に、申し込みサービス及びピアツーピア交換を経るインターネットを介して、またはコンパクトディスク（ＣＤ）からライブラリへ楽曲を変換することによって、入手される。
【０００３】
デジタル楽曲は、音声データと、メタデータと呼ばれていて聴取者のライブラリ中の楽曲に索引を付けるために使用されている周辺データとを、一般に含んでいる。例えば、ＭＰ３ファイル中では、メタデータはＩＤ３タグを介してアクセスされる。楽曲に索引をつけることによって、聴取者は自分のライブラリを探索してそこにある個々の楽曲にアクセスすることができる。一般に、音声プレーヤは、ユーザがメタデータを見るユーザインタフェースを提供している。
【０００４】
図１について述べると、この図１はウィンドウズ（登録商標）メディアプレーヤ用のユーザインタフェースである従来技術の図解であり、ウィンドウフレーム１１０内に表示されているメタデータとウィンドウフレーム１２０内に表示されており個々の楽曲にアクセスするための索引とをこの図解は示している。
【０００５】
デジタル音楽ライブラリを作成するためには多くの作業が必要である。一般に、聴取者は、興味のある一つ以上の楽曲を求めて最初にインターネットを探索し、これらの楽曲の位置を識別して、メディアプレーヤと関連づけられているデータベースへそれらの楽曲をダウンロードする。楽曲は、一般に、ＭＰ３やＷＭＡの様な標準形式に従ってフォーマットされているデジタルファイルとして記憶される。楽曲が一旦ダウンロードされると、聴取者は、その楽曲をコンピュータで演奏するためにウィンドウズ（登録商標）メディアプレーヤ（ＷＭＰ）やＷｉｎａｍｐ（商標）の様なソフトウェアを一般に使用し、またはその代わりに、その楽曲を演奏するためにｉＰｏｄ（商標）やＭＰＥＧプレーヤの様なハードウェア装置を使用する。ＷＭＡファイルは、そのファイル内とそのファイル名自体内とにもメタデータを埋め込んでいる。
【０００６】
個人は、しばしば、お気に入りの楽曲をダウンロードして自分達自身の個人的な音楽ライブラリを作成することに何夜も続けて費やす。インターネットから音楽ファイルをダウンロードすることは、レコード業界に使用料を支払うサービスを介してそのファイルを入手しない限り、著作権を侵害することになるかもしれない。
【０００７】
デジタル音楽の世界における短所は、あつらえの音楽ライブラリを作成するのに多くの労力を必要とすることである。その代わりに他人が作成したライブラリを購入することも考えられるが、他の誰かのライブラリはしばしば聴取者の好みに合わず、聴取者はむしろ自分自身のお気に入りの楽曲を集めるほうを好む。
【０００８】
聴取者が自分のお気に入りの楽曲を聞くための人気のある出所は、音楽放送局である。ケーブル放送、衛星放送、及びインターネットは、殆ど総てのジャンルの音楽−クラシック音楽、ロックンロール、ジャズ、８０年代の音楽、その他−用の音楽チャンネルを提供している。聴取者は、その様な放送サービスに加入することによって、自分の好み通りに音楽を楽しむことができる。
【０００９】
自分の個人的なデジタル音楽ライブラリを作成している聴取者は、その様な放送サービスから自分のお気に入りの楽曲を記録可能であることが理想的であると思っている。しかし、音楽放送局からの生音声の記録は、その様な楽曲をデジタル音楽ライブラリへ組み入れるために必要なメタデータを含んでいない。今日の技術を使用しても、聴取者は、音楽放送局から記録したその様な楽曲の各々を適切なメタデータで苦心して分類すること−数百曲のあまり大きくないライブラリを作成するのにさえも何時間も続くことのある処理−をせざるを得ない。
【発明の開示】
【発明が解決しようとする課題】
【００１０】
本発明は、分類されていて個人的な再生のために容易にアクセスすることのできるデジタル音楽ライブラリを聴取者が容易に作成することを可能にする。本発明は、デジタルケーブルを介するかまたは直接放送衛星（ＤＢＳ）送信によってＭｕｓｉｃ  Ｃｈｏｉｃｅ、ＤＭＸ、及びその他の広告放送のない音楽サービスの様な音楽チャンネルを受信している米国及び世界中の何千万もの家庭に、解決策を提供する。その様な音楽チャンネルは、現在のところ、演奏中の楽曲を音声ファイルが含んでおり且つその楽曲、そのアーティスト、及び放送中の楽曲のレーベルに関する情報を同時の映像ファイルが一般に有している、映像及び音声チャンネルとして放送されている。
【課題を解決するための手段】
【００１１】
好ましい実施形態では、以下において『ファミリーミュージックセンタ』と呼ばれる、本発明を利用している装置は、デジタルケーブルボックスまたはデジタル衛星受信機に、ビデオカセットレコーダ（ＶＣＲ）またはパーソナルビデオレコーダ（ＰＶＲ）が接続されるのと同じやり方で、つまりその受信機の左右の音声出力及び映像出力をこの装置に接続することによって、接続される。ファミリーミュージックセンタは、ＰＶＲとそっくりに、カテゴリに従って記録及び再生する能力を有していることが好ましい。ＰＶＲは、自分が記録しているものを識別し且つ記録したショーに名前を付けるために、電子プログラムガイドを介して受信されるデータに依存するが、ファミリーミュージックセンタは、何が記録されているのかを識別するためにその放送の映像部分中の情報を利用する。
【００１２】
好ましい実施形態では、ファミリーミュージックセンタは聴取者が『全記録』モードか『選択モード』かの何れかで記録することを可能にしている。『全記録』モードでは、聴取者は、自分が楽しむジャンルの音楽を放送している音楽チャンネルに自分の受信機を設定し、その後にファミリーミュージックセンタ上の記録ボタンを押す。すると、聴取者がファミリーミュージックセンタ上の停止を押すことによって記録処理を停止するかまたは自分の受信機のチャンネルを変えるまで、ファミリーミュージックセンタはその記録期間に演奏される総ての楽曲を記録して分類する。
【００１３】
本発明の好ましい実施形態では、ファミリーミュージックセンタは各楽曲を一度記録し、楽曲が二度以上放送されると、その楽曲が再放送されるたびに、実質的には追加回数だけ記録されているとファミリーミュージックセンタがその楽曲に印を付ける。従って、ファミリーミュージックセンタがこのやり方でその聴取者用の個人的なデジタル音楽ライブラリを作成することが分かるであろう。平均的な楽曲は約３分続くと仮定し且つ再放送率が２５％であると仮定すると、ファミリーミュージックセンタは一般的な一日２４時間の動作期間中に約３６０曲を記録することが分かるであろう。従って、もし一つの特定のジャンルチャンネルに接続したままにしておくと、約一週間の昼夜記録期間中に、ファミリーミュージックセンタは２，５００曲超のライブラリを作成する。記録処理は記録中に受信機が音楽チャンネルに設定されていることを必要とし、しかも聴取者がテレビを見たければその聴取者は見ているチャンネルを音楽チャンネルから本来的に変更するであろうから、多くの場合、聴取者は自分が眠っている夜中にしか記録しない。従って、毎日のテレビの視聴が平均的である家庭では、特定のジャンルに関する２，５００曲超のライブラリがファミリーミュージックセンタによって二週間以内に作成される。
【００１４】
『選択モード』では、ファミリーミュージックセンタは特定のアーティストまたは楽曲を記録する様に設定され、その後にそのアーティストまたは楽曲が放送される時にファミリーミュージックセンタがその音楽を記録する。所望の楽曲またはアーティストがジャンルチャンネルの一つで頻繁に演奏されるのであれば、『選択モード』は最も有用である。所望の楽曲またはアーティストがそれほど頻繁には演奏されないのであれば、ファミリーミュージックセンタがその音楽を記録するという保証はない。
【００１５】
ファミリーミュージックセンタに記録された楽曲は、多くの異なるやり方で聞くことができる。ファミリーミュージックセンタ内の楽曲を聴取者の居間で聞く便利な方法は、ファミリーミュージックセンタの音声出力をアンプ及びステレオ装置に接続し、映像出力をテレビに接続することである。聴取者は、その後に、前面パネルインタフェースを介してかまたはテレビインタフェースを介する遠隔操作によるかの何れかで、自分の聞きたい楽曲を選択することができる。聴取者は、プレイリストを作成することができるか、または放送音楽チャンネルによって演奏された順番で楽曲を聞くことを選択することができる。
【００１６】
ファミリーミュージックセンタ内の楽曲を聞くことに加えて、本発明の好ましい実施形態では、聴取者は、『ミュージックカプセル』と呼ばれてファミリーミュージックセンタの一つ以上の結合ポートにプラグを差し込むことのできる携帯デジタル音楽プレーヤに一組の楽曲を『借り出す』ことができる。聴取者が自分のミュージックカプセル内の楽曲を聞き終えると、その特定のプレーヤでもはや聞かれていない楽曲を返却して新しい聴取のための新しい楽曲を借り出すために、聴取者はファミリーミュージックセンタの受け台へ自分のミュージックカプセルを戻すことが好ましい。
【００１７】
本発明の好ましい実施形態では、ファミリーミュージックセンタは、デジタル著作権管理を記録済楽曲に組み入れ、これによってその記録済楽曲の無制限な複製を聴取者が自由に作ることを防止する。特定の楽曲がファミリーミュージックセンタへ放送された総回数までしかその楽曲を借り出せない様に聴取者が制限を受けることが好ましい。
【００１８】
本発明の好ましい実施形態では、ファミリーミュージックセンタは、楽曲記憶用ハードディスク、音声／映像符号及び復号プラットホーム、画面表示構成部、前面パネルナビゲーションボタン及びスクロールホイール、液晶パネル、並びに音声／映像ジャック、ＵＳＢ、ファイヤワイヤ及び電源ジャックを含む種々の外部インタフェースを有する装置を含んでいる。更に、この主ファミリーミュージックセンタ装置は、四つのミュージックカプセル用に結合機構を備える四つのソケットを含んでいることが好ましい。そのソケットには、ミュージックカプセルの再充電とミュージックカプセルとの間での楽曲の転送との両方のための導線があることが好ましい。ファミリーミュージックセンタは、聴取者の受信機からアナログ音声と映像とを受け取って、音声信号と映像信号との両方をリアルタイムで符号化することが好ましい。分類のために、アーティスト名、楽曲名、並びにレーベル及び年を映像放送から抽出するために、信号の映像部分が分析される。アナログ音声は映像とは別個に符号化されることが好ましい。
【００１９】
この様に、アナログ音声をデジタル音声へ変換するためのＡＤ変換器と、画像中の文字を認識するための光学文字処理装置と、認識された文字中で楽曲に関するメタデータを識別するためのメタデータ抽出装置と、デジタル音声中で楽曲の出だしと終わりとに印を付けるための音声分析装置と、識別されたメタデータと印を付けられた楽曲とをデジタル音楽ライブラリ中で関連づけるためのデータベース管理装置と、を含むデジタル音楽ライブラリ作成装置が、本発明の好ましい実施形態に従って提供される。
【００２０】
アナログ音声をデジタル音声へ変換することと、画像中の文字を認識することと、認識された文字中で楽曲に関するメタデータを識別することと、デジタル音声中で楽曲の出だしと終わりとに印を付けることと、識別されたメタデータと印を付けられた楽曲とをデジタル音楽ライブラリ中で関連づけることと、を含むデジタル音楽ライブラリ作成方法が、本発明の好ましい実施形態に従って更に提供される。
【００２１】
処理装置内で実行されると、アナログ音声をデジタル音声へ変換することと、画像中の文字を認識することと、認識された文字中で楽曲に関するメタデータを識別することと、デジタル音声中で楽曲の出だしと終わりとに印を付けることと、識別されたメタデータと印を付けられた楽曲とをデジタル音楽ライブラリ中で関連づけることとを含む方法を、その処理装置に実行させる実行可能なコンピュータプログラム命令を含む、コンピュータが読み出し可能な媒体が、本発明の好ましい実施形態に従って更に提供される。
【００２２】
コンピュータとの間でデータを転送するためのＵＳＢポートと、アナログ音声を受け取るための音声コネクタと、映像フレームを受け取るための映像コネクタとを含むハウジングと、ハウジング内に配置されており映像コネクタによって受け取られた映像フレームをキャプチャするための映像フレームキャプチャ回路と、ハウジング内に配置されておりアナログ音声をデジタル音声へ変換するためのＡＤ音声変換器と、ハウジング内に配置されておりデジタル音声をデジタル音楽形式へ変換するためのデジタル音声信号処理装置と、ハウジング内に配置されておりキャプチャされた映像フレームから楽曲に関するメタデータを抽出するための処理装置と、を含む音楽ライブラリ自動作成装置が、本発明の好ましい実施形態に従って更に提供される。
【００２３】
画像中の文字を認識するための光学文字処理装置と、認識された文字中で楽曲に関するメタデータを識別するためのメタデータ抽出装置と、デジタル音声信号中で楽曲の出だしと終わりとに印を付けるための音声分析装置と、識別されたメタデータと印を付けられた楽曲とをデジタル音楽ライブラリ中で関連づけるためのデータベース管理装置と、を含むデジタル音楽ライブラリ作成装置が、本発明の好ましい実施形態に従って更に提供される。
【００２４】
画像中の文字を認識することと、認識された文字中で楽曲に関するメタデータを識別することと、デジタル音声信号中で楽曲の出だしと終わりとに印を付けることと、識別されたメタデータと印を付けられた楽曲とをデジタル音楽ライブラリ中で関連づけることと、を含むデジタル音楽ライブラリ作成方法が、本発明の好ましい実施形態に従って更に提供される。
【００２５】
処理装置内で実行されると、画像中の文字を認識することと、認識された文字中で楽曲に関するメタデータを識別することと、デジタル音声信号中で楽曲の出だしと終わりとに印を付けることと、識別されたメタデータと印を付けられた楽曲とをデジタル音楽ライブラリ中で関連づけることとを含む方法を、その処理装置に実行させる実行可能なコンピュータプログラム命令を含む、コンピュータが読み出し可能な媒体が、本発明の好ましい実施形態に従って更に提供される。
【００２６】
デジタル音声を受け取るための音声コネクタと、映像フレームを受け取るための映像コネクタとを含むハウジングと、ハウジング内に配置されており映像コネクタによって受け取られた映像フレームをキャプチャするための映像フレームキャプチャ回路と、ハウジング内に配置されておりデジタル音声をデジタル音楽形式へ変換するためのデジタル音声信号処理装置と、ハウジング内に配置されておりキャプチャされた映像フレームから楽曲に関するメタデータを抽出するための処理装置と、を含む音楽ライブラリ自動作成装置が、本発明の好ましい実施形態に従って更に提供される。
【００２７】
デジタル音声を受け取るための音声コネクタと、カメラから画像を受け取るためのカメラインタフェースとを含むハウジングと、ハウジング内に配置されておりデジタル音声をデジタル音楽形式へ変換するためのデジタル音声信号処理装置と、ハウジング内に配置されており画像から楽曲に関するメタデータを抽出するための処理装置と、を含む音楽ライブラリ自動作成装置が、本発明の好ましい実施形態に従って更に提供される。
【００２８】
本発明は、図面と共に解釈される以下の詳細な説明から更に十分に理解され且つ分かるであろう。
【発明を実施するための最良の形態】
【００２９】
本発明は、音楽放送局から記録された楽曲を、聴取者のデジタル音楽ライブラリに索引をつけるために必要なその楽曲のメタデータと共に、聴取者が自分のライブラリへ自動的にインポートすることを可能にする。本発明を使用すれば、聴取者は、探索及び検索のために総てが適切に索引を付けられている自分の選択による何万もの楽曲で大きなデジタル音楽ライブラリを殆ど苦労することなく自動的に作成することができる。
【００３０】
更に、本発明の追加の特徴は、音楽放送局で放送された楽曲の中からどの楽曲が聴取者のライブラリへインポートされるべきかを、ジャンル、楽曲タイトル、アーティスト、アルバム、楽曲の長さ、及びその他の基準のうちの一つ以上に基づいて、聴取者が選択することを可能にする。
【００３１】
本発明は、ケーブル放送局及び衛星放送局によって放送される音楽チャンネルからデジタル音楽ライブラリを自動的に作成するための方法及び装置に関するものである。本発明の好ましい実施形態では、放送されている楽曲が、個々の各楽曲に索引をつけてアクセスし且つ演奏中にその楽曲を表示するのに必要なメタデータと共に、デジタル音楽ライブラリへ記録される。本発明を使用すれば、放送音楽から生成されたデジタル音楽ライブラリは、十分な探索能力付きの個々の楽曲の大きなライブラリとして機能する。
【００３２】
図２について述べると、この図２は、本発明の好ましい実施形態に従って処理するための、楽曲に関するメタデータを表示している見本映像フレーム２１０である。映像フレーム２１０は、『Ｍｕｓｉｃ  Ｃｈｏｉｃｅ』放送局の聴取者へ衛星によって放送されている。ライブ音楽の放送中は、映像フレーム２１０が一般に聴取者のテレビに表示されている。図２に示されている様に、聴取者は、８０年代の楽曲のためのジャンルを選択し、『ライク・ア・バージン』というタイトルのアルバムからアーティスト『マドンナ』による『ライク・ア・バージン』というタイトルの楽曲を現在聞いている。楽曲に関連する種々の書誌的データは、『メタデータ』つまりデジタル音声データ自体に関する書誌的データと呼ばれる。
【００３３】
本発明は、以下に説明されている様に、聴取者が、放送されている各々の楽曲をデジタル音楽ライブラリへ自動的にデジタル的に記録し且つジャンル、楽曲タイトル、アーティスト、及びアルバムタイトルに従って各々の楽曲に索引を付けることを可能にする装置を提供する。更に、本発明は、放送されている楽曲の総てを記録するのではなく、特にジャンル、楽曲タイトル、またはアーティストを指定することによって、自動的に記録されるべき楽曲を聴取者が予め選択することを可能にする。本発明の装置が動作中に聴取者が同席している必要はない。従って、楽曲の大きなライブラリの自動生成を本発明が可能にしていることが分かるであろう。
【００３４】
図３について述べると、この図３は、本発明の好ましい実施形態に従うデジタル音楽ライブラリ作成装置の簡略化されたブロック図である。ケーブルエンターテイメントまたは衛星エンターテイメントを家庭３１０へ放送している放送局３０５が、図３に示されている。放送エンターテイメントは、衛星受信機またはケーブル受信機３１５によって家庭３１０内で受信され、家庭のテレビ３２０またはその他の表示装置によって家庭の視聴者に演奏される。
【００３５】
本発明の好ましい実施形態に従って、テレビ３２０の音声出力はＡ／Ｄ変換器３２５によってアナログからデジタルへ変換される。変換されたデジタル音声はメモリバッファ３３０に書き込まれる。楽曲抽出装置３３５は、デジタル音声を分析して、個々の楽曲の始めと終わりとに印を付ける。楽曲抽出装置３３５は純粋な会話の様な非音楽部分をフィルタにかけてデジタル音声から取り除くことが好ましい。楽曲抽出装置３３５によって印を付けられたその様な各楽曲は、ハードドライブの様な記憶装置であるデジタル音楽ライブラリ３４０に書き込まれ、その次にメモリバッファ３３０から一括消去される。
【００３６】
本発明の好ましい実施形態に従って、図２に図解されている映像フレーム２１０の様な、テレビ３２０に表示されている映像フレームを映像フレームグラバ３４５がキャプチャする。映像フレーム２１０中の文字の様な文字を光学文字認識装置３５０が映像フレームから抽出する。映像フレーム２１０中のジャンル、楽曲タイトル、アーティスト名、及びアルバムタイトルの様な、現在の楽曲に関連するメタデータを、抽出された文字中でメタデータ生成装置３５５が識別する。メタデータ生成装置３５５によって識別されたメタデータは、次にデジタル音楽ライブラリ３４０に書き込まれ、対応する楽曲にリンクされる。
【００３７】
本発明の好ましい実施形態では、音声／映像放送の映像部分からメタデータが抽出される全処理は以下の通りである。一楽曲あたり１０〜２０フレームであることが好ましい多数のフレームが、放送局３０５による映像放送からキャプチャされる。キャプチャされたフレームは、画面の所望の領域の鮮明な画像を作成するために、画像処理アルゴリズムを使用して処理される。鮮明化された画像は、画面上における関連データの位置を指定するために、予め決められているテンプレートに従って縁を切り落とされる。その様なテンプレートは、パターンを確立するために、複数の楽曲からの画面を分析することによって生成されることが好ましい。その結果の縁を切り落とされた画像は、ツートンの白黒画像へ変換されることが好ましい。この白黒画像は光学文字認識装置３５０によって処理され、関連メタデータがメタデータ抽出装置３５５によって抽出される。
【００３８】
本発明の好ましい実施形態では、抽出されたメタデータは、正確さを確保するために、Ｇｒａｃｅｎｏｔｅデータベースの様な内部ＣＤデータベースによって確かめられる。
【００３９】
点線を使用することによって図３中に示されている様に、音声信号と映像フレームとがテレビ３２０からの代わりにケーブル受信機または衛星受信機３１５から抽出されてもよいことが、当業者には分かるであろう。更に、ケーブル受信機または衛星受信機３１５が音声出力用の光接続または同軸接続を含んでいれば、Ａ／Ｄ変換器３２５を必要とすることなく、デジタル音声を直接に抽出することができる。
【００４０】
本発明の好ましい実施形態に従って、放送局３０５によって放送された楽曲をメタデータに従ってフィルタにかけてデジタル音楽ライブラリ３４０へ選択的にインポートすることができる。特にジャンル、楽曲タイトル、アーティスト名、アルバムタイトル、及び楽曲の長さを含む一つ以上のメタデータに基づく基準を、放送された総ての楽曲のうちからインポートされるべき楽曲をフィルタにかけるのに使用することができる。楽曲をフィルタにかける否かを判定しつつその楽曲を記録するために、メモリバッファが使用されることが好ましい。
【００４１】
本発明の好ましい実施形態に従って、デジタル音楽ライブラリ３４０中に既に含まれている楽曲は、聴取者が上書きすることを装置に特別に指示しない限り、上書きされない。
【００４２】
図４について述べると、この図４は、本発明の好ましい実施形態に従ってデジタル音楽ライブラリを作成するための簡略化された動作流れ図である。段階４０５でアナログ音声信号がテレビから受け取られる。段階４１０でそのアナログ信号がデジタル音声へ変換され、このデジタル音声は段階４１５でメモリバッファに記憶される。
【００４３】
段階４２０で楽曲の出だしが判定され、この出だしは段階４２５でテレビからまたはケーブル受信機からまたは衛星受信機からの映像フレームのキャプチャを始動させるために使用される。キャプチャされた映像フレーム中の文字を認識するために段階４３０で文字認識が適用され、この認識された文字から段階４３５でメタデータが識別される。キャプチャされた映像フレーム用のテンプレートが、段階４３０及び４３５で補助として使用されることが好ましい。例えば、図２からの映像フレーム２１０に対応するテンプレートが、関連メタデータが現れる画像の領域を示してよい。識別されたメタデータは段階４４０でデジタル音楽ライブラリに書き込まれる。
【００４４】
段階４４５で、メモリバッファに記憶されているデジタル音声が、個々の楽曲の始めと終わりとに印を付けるために分析される。段階４５０で一つの楽曲の終わりが判定され、この終わりは段階４５５でその楽曲をデジタル音楽ライブラリへ複写しその次にメモリバッファを一括消去することを始動させるために使用される。
【００４５】
デジタル音楽ライブラリ中の楽曲に索引を付けるため、対応する楽曲とメタデータとが段階４６０で互いにリンクされる。
【００４６】
テレビ画面上のインタレースのために、放送中の楽曲に関するメタデータを抽出することが可能であるためには、段階４２５で二つ以上の映像フレームをキャプチャすることが必要かもしれない。認識段階４３０の前に文字の外観の輪郭を補正するために複数のフレームを平均化してもよい。
【００４７】
その代わりに、認識段階４３０の前に文字の輪郭を補正するために、一つ以上のカラー映像フレームの輝度成分を抽出してもよい。輝度の抽出は、光学文字認識の性能を低下させるカラーバースト雑音を除去するのに役立つ。
【００４８】
図４中の段階は図４中で番号を付されている順序とは異なる順序で実行されてもよいことが、当業者には分かるであろう。例えば、音声処理のための段階４０５、４１０及び４１５は、映像処理のための段階４２０、４２５、４３０、４３５及び４４０よりも前または後または同時に実行されてもよい。
【００４９】
本発明は、コンピュータと、ＭＰ３プレーヤ及びその他のデジタル音楽プレーヤと、並びに特に携帯電話、ＰＤＡ、家庭内ネットワーク装置、及びインターネット家電製品を含む内部にＭＰ３プレーヤを含んでいるその他の電子装置と、インタフェースすることのできる、プログラム可能装置中で実施されることが好ましい。第一実施形態では、本発明の装置は衛星受信機／ケーブル受信機３１５（図３）とインタフェースする。第二実施形態では、本発明の装置はテレビ３２０とインタフェースする。第三実施形態では、本発明の装置はＵＳＢ及びファイヤワイヤ接続を経由して種々の外部構成部とインタフェースする。
【００５０】
両方の実施形態において、デジタル音楽ライブラリ３４０を記憶するメモリは、その装置自体の中に配置されている大きなハードディスクか、コンパクトディスクやメモリカードの様なもっと小さな一つ以上のリムーバブル記憶装置か、または、ハードディスクとリムーバブル記憶装置との組合せかの、何れであってもよい。大きなハードディスクの利点は、聴取者の音楽ライブラリがことごとく探索及びアクセスすることのできる単一のライブラリへ統合されることである。コンパクトディスクの様なリムーバブル記憶装置の利点は、ＭＰ３プレーヤの様な携帯プレーヤへ聴取者がそのディスクを挿入することができることである。３０曲が平均して１２８ＭＢのデータを必要とし且つ１時間の聴取に相当する量を含むと仮定すると、５１２ＧＢの大きなハードディスクは約１２万曲のライブラリを保持することができ、６４０ＭＢのコンパクトディスクは約１５０曲つまり７．５時間の聴取に相当する量を保持することができる。
【００５１】
代りの実施形態では、本発明を実施する装置は、この装置に記憶されているデジタル音楽ライブラリから携帯デジタル音楽プレーヤへ楽曲をロードするために、一つ以上の携帯デジタル音楽プレーヤをその装置に接続することのできる『受け台』とも呼ばれる一つ以上の交換ポートを含んでいる。その様な交換ポートは、フィルム缶形状の携帯プレーヤが挿入される円形のポートであってもよい。従って、『ミュージックカプセル』と呼ばれる携帯デジタル音楽プレーヤがその装置に『接続』中に楽曲を『装填』されることが分かるであろう。
【００５２】
図５について述べると、この図５は、本発明の好ましい実施形態に従うミュージックカプセルの簡略化された斜視図である。演奏中の楽曲に関するメタデータを表示するユーザインタフェース５１０を含む携帯ミュージックカプセル５００が図５に示されている。ミュージックカプセルは、ファミリーミュージックセンタから楽曲をロードされ、プレーヤとして機能する。
【００５３】
ファミリーミュージックセンタと呼ばれる、本発明を実施する装置のための一般的な使用概要は、以下の通りである。聴取者は、自分のケーブル受信機ボックスまたは衛星受信機ボックスを特定の放送局に設定して、一つ以上の音楽チャンネルから楽曲をキャプチャするためにその装置を作動させる。ファミリーミュージックセンタは、デジタル音楽ライブラリを自動的に作成して、放送された楽曲をここにインポートする。その後、聴取者は、ファミリーミュージックセンタにミュージックカプセルを接続して、選択した楽曲を音楽ライブラリからミュージックカプセルへロードする。もしファミリーミュージックセンタが聴取者の家庭内ネットワークに接続されていれば、聴取者はそのファミリーミュージックセンタから種々の部屋のスピーカへ音楽を送ってもよい。
【００５４】
図６Ａ−６Ｇについて述べると、これらの図６Ａ−６Ｇは、本発明の好ましい実施形態に従うファミリーミュージックセンタの簡略化された斜視図である。図６Ａは、ボタン６１０及びナビゲーション用のスクロールホイール６１５付きのユーザインタフェース表示装置６０５を含んでおり、且つ四つのミュージックカプセル６２０用のスロットを含んでいる、ファミリーミュージックセンタ６００の正面図である。図６Ｂ、６Ｃ及び６Ｄは、ファミリーミュージックセンタ６００の側面図である。図６Ｃは、メモリカード用のスロット６２５を有するファミリーミュージックセンタ６００の側面を示している。図６Ｄは、直流電源用のスロット６３０、音声入力及び映像入力用のスロット６３５、並びに音声出力及び映像出力用のスロット６４０を有する、ファミリーミュージックセンタ６００の背面を示している。図６Ｅは、ファミリーミュージックセンタ用の基部支持体６４５を示しているファミリーミュージックセンタ６００の右側面図である。図６Ｆ及び６Ｇは、ミュージックカプセル６２０がスロット６５０へ夫々挿入されているか挿入されていない、ファミリーミュージックセンタ６００の平面図である。
【００５５】
ファミリーミュージックセンタ６００は、下記の構成部のうちの一つ以上を含んでいることが好ましい。
１．コンピュータに接続するためのＵＳＢポート。
２．種々のハードウェア装置に接続するためのＩＥＥＥ１３９４ポート。
３．ＭＦカード、ＳＤカード、メモリスティック、コンパクトフラッシュ（登録商標）カード、及びＰＣＭＣＩＡカードの様なリムーバブル記憶装置用のスロット。
４．プログラミング命令を記憶するためのＥ２ＰＲＯＭ。
５．デジタルデータのキャプチャ及び処理のためのＲＡＭ。
６．記憶用メモリ付きの映像キャプチャボード。
７．入力用及び出力用の音声コネクタ及び映像コネクタ。
８．赤外線（ＩＲ）制御装置用または無線周波数（ＲＦ）制御装置用の遠隔制御インタフェース。
９．アナログ音声からデジタル音声への変換器。
１０．音声をＭＰ３形式へ変換するためのデジタル信号処理装置。
１１．電源または電池ケースへの接続。
１２．画面表示及びナビゲーション用の表示ドライバ。
【００５６】
図７について述べると、この図７は、本発明の好ましい実施形態に従う、音楽ライブラリ自動作成装置とその他の装置との相互接続性を図解している簡略化されたブロック図である。放送音楽チャンネルを受信するケーブル受信機または衛星受信機７２０から音声ファイル及び映像ファイルを受け取る音楽ライブラリ自動作成装置７１０が、図７に示されている。音楽ライブラリ作成装置７１０は、好ましくは予め定められている聴取者の設定及び好みに従って放送されている楽曲をフィルタにかけながら、本発明の好ましい実施形態に従ってＭＰ３音楽データベースを生成する。
【００５７】
音楽ライブラリ作成装置７１０は、コンピュータ７３０及び携帯情報端末（ＰＤＡ）７４０と相互接続することが好ましい。聴取者の設定及び好みは、コンピュータ７３０またはＰＤＡ７４０上で設定してそこから音楽ライブラリ作成装置７１０へロードすることができる。コンピュータ７３０またはＰＤＡ７４０を使用することによって、音楽ライブラリ作成装置７１０をプログラム及び制御することができる。赤外線（ＩＲ）信号または無線周波数（ＲＦ）信号を使用する遠隔制御装置７５０を使用することによって、音楽ライブラリ作成装置を制御することもできることが好ましい。
【００５８】
音楽ライブラリ自動作成装置７１０がＭＰ３データベースの様なデジタル音楽データベースを生成した後に、再生のためにそのデータベースをコンピュータ７３０またはＰＤＡ７４０へ転送することができる。その代わりに、コンパクトディスクやメモリカードの様なリムーバブル記憶装置を介して、ＭＰ３プレーヤ能力付き携帯装置７６０へ、そのデータベースを転送することができる。
【００５９】
音楽ライブラリ自動作成装置７１０は、たとえ制限されたユーザインタフェースであっても、聴取者が自分のデジタル音楽ライブラリへ自動的にインポートされる楽曲を選択し且つ分類することを可能にするユーザインタフェースを含んでいることが好ましい。本発明の代りの実施形態では、聴取者は、自分のコンピュータ上またはＰＤＡ上で自分の設定を指定し、その後にＵＳＢケーブルまたはメモリ媒体を使用することによって本発明の装置へこれらの設定をロードすることができる。
【００６０】
そのユーザインタフェースは、現在の楽曲、はい／いいえインジケータ、及び既に記録されている楽曲の累積数を表示することが好ましい。そのユーザインタフェースは、ユーザが現在の記憶装置に記録されている総ての楽曲の索引を見ること及び総ての記憶装置に記録されている総ての楽曲の索引を見ることをも可能にすることが好ましい。
【００６１】
本発明の代わりの実施形態では、音楽ライブラリ自動作成装置７１０はユーザインタフェースを表示するためにテレビ７７０を使用する。ライブラリ自動作成装置７１０はテレビ７７０に接続するのに使用することのできる映像出力コネクタを含んでいることが好ましい。テレビ７７０に表示されているメニュー画面からの選択は遠隔制御装置７５０の様な制御装置を使用することによって行われることが好ましく、この制御装置は左右上下用の方向ボタン及び選択用のボタンを有していることが好ましい。
【００６２】
強化された実施形態では、本発明はデジタル著作権管理を組み入れている。具体的には、楽曲に関するメタデータはその楽曲が放送音楽チャンネルで演奏された回数を含むこともできる。その様な数は、聴取者が別のデジタル音楽プレーヤによって自分の音楽ライブラリからその楽曲にアクセスすることのできる回数を制限するために使用されることが好ましい。
【００６３】
上記の説明を読めば、当業者は、説明されている方法及び装置に適用することのできる多くの明白な変更が存在することを理解するであろう。例えば、メタデータを含むアナログ音声及び映像フレームが、一台のテレビではなく色々な出所からキャプチャされてもよいことが分かるであろう。放送されている楽曲に関するメタデータは、例えば放送局のインターネットサイトで利用可能であってもよい。
【００６４】
その代わりに、放送されている楽曲に関するメタデータは、メタデータを含むラジオの表示画面の写真を撮影するビデオカメラまたは静止画像カメラから抽出されてもよい。例えば、ＸＭ衛星ラジオ及びＳｉｒｉｕｓ衛星ラジオはそれらの画面にメタデータを表示する。放送局はしばしば暗号化形式のメタデータを送信するので、カメラの使用は暗号化データストリームを解読する必要なしにメタデータの判定を可能にする。
【００６５】
本発明の代わりの実施形態では、メタデータが例えば垂直帰線消去（ＶＢ）チャンネル中のデータとして映像放送中に含まれていてもよい。その様な実施形態の場合には、本発明はＶＢチャンネルからの抽出によってメタデータを得る。
【００６６】
本発明のミュージックカプセルがファミリーミュージックセンタに加えてその他の装置からデジタル音楽を受け取ってもよいことが分かるであろう。従って、ミュージックカプセルは、購入の前に楽曲を聞くために使用される、音楽流通店内に配置されている音楽キオスクの様なキオスクと互換性があってもよい。
【００６７】
以上の明細書では、本発明がその具体的な代表実施形態に関して説明された。しかし、添付の特許請求の範囲で詳述されている様に本発明のもっと広い精神及び範囲から逸脱することなくこれらの具体的な代表実施形態に対して種々の改造及び変更が行われてもよいことは明白であろう。従って、明細書及び図面は制限的意味ではなく説明的意味で考察されるべきである。
【図面の簡単な説明】
【００６８】
【図１】ウィンドウズ（登録商標）メディアプレーヤ用のユーザインタフェースである従来技術の図解であり、メタデータと表示されている個々の楽曲にアクセスするための索引とを示している。
【図２】本発明の好ましい実施形態に従って処理するための、楽曲に関するメタデータを表示している見本映像フレームである。
【図３】本発明の好ましい実施形態に従っているデジタル音楽ライブラリ作成装置の簡略化されたブロック図である。
【図４】本発明の好ましい実施形態に従ってデジタル音楽ライブラリを作成するための簡略化された動作流れ図である。
【図５】本発明の好ましい実施形態に従っているミュージックカプセルの簡略化された斜視図である;
【図６Ａ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図６Ｂ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図６Ｃ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図６Ｄ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図６Ｅ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図６Ｆ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図６Ｇ】本発明の好ましい実施形態に従っているファミリーミュージックセンタの簡略化された斜視図である。
【図７】本発明の好ましい実施形態に従っている音楽ライブラリ自動作成装置とその他の装置との相互接続性を図解している簡略化されたブロック図である。
【図１】
0005128049.tif 000002
【図２】
0005128049.tif 000003
【図３】
0005128049.tif 000004
【図４】
0005128049.tif 000005
【図５】
0005128049.tif 000006
【図６Ａ】
0005128049.tif 000007
【図６Ｂ】
0005128049.tif 000008
【図６Ｃ】
0005128049.tif 000009
【図６Ｄ】
0005128049.tif 000010
【図６Ｅ】
0005128049.tif 000011
【図６Ｆ】
0005128049.tif 000012
【図６Ｇ】
0005128049.tif 000013
【図７】
0005128049.tif 000014