(57)【要約】動画データ等の主情報とこれに付帯するメタデータを格納するにおいて、複数の記述形式が存在するメタデータ項目については、項目毎にその記述形式の優先度が設定された優先度テーブルを予め保持しておく。そして、メタデータのデータ収集時間や記述形式に対応した値の算出時間等に起因するメタデータの格納に関る制約条件の下で、優先度テーブルに保持された優先度の高い順にメタデータ項目と記述形式を採用して（Ｓ１２２）メタデータを形成し、これを主情報に対応づけて格納する（Ｓ１２６）。こうして、広汎な機器や制御方式で最低限利用可能な形式の付帯情報を確実に利用可能とするとともに、個々の機器や制御方式の特徴を生かすことのできる付帯情報も利用可能とする。
2004522355.tif 000002
【特許請求の範囲】
【請求項１】
主情報とこれに付帯する付帯情報項目を格納する装置であって、
複数の記述形式が存在する付帯情報項目毎に、該複数の記述形式それぞれに優先度を予め定めておく決定手段と、
前記装置において利用可能な記述形式の中で、前記優先度に従って記録時に使用する記述形式を選択する選択手段と、
選択された記述形式で付帯情報項目を主情報と対応付けて記録する記録手段とを備えることを特徴とする装置。
【請求項２】
前記選択手段は、
前記装置において利用可能な記述形式の中で、優先度の高いものから順に、前記装置の制約を考慮して利用可能な範囲の中で、使用する記述形式を複数選択することを特徴とする請求項１に記載の装置。
【請求項３】
前記選択手段は、
前記装置において利用可能な記述形式の中で、優先度の高いものから順に、前記装置の制約を考慮して利用可能な範囲の中で、使用する記述形式もしくは表現形式を複数選択すると同時に、選択された中で一番低い優先度を持つ記述形式よりも、高い優先度を持つ記述形式がすべて選択されているようにすることを特徴とする請求項１に記載の装置。
【請求項４】
前記選択手段は、
前記装置において利用可能な記述形式の中で、前記装置の制約により、同時に利用できない記述形式がある場合に、その記述形式に関しては優先度の高いものを１つ選択し、そうでないものについては優先度の高いものから順に利用可能な複数の使用する記述形式を選択することを特徴とする請求項１に記載の装置。
【請求項５】
前記選択手段は、
前記装置において利用可能な記述形式の中で、前記装置の制約により、利用できる記述形式の個数や組み合わせに制限がある場合に、その制限内で、可能な限り多くの優先度の高い記述形式が選択されるようにすることを特徴とする請求項１に記載の装置。
【請求項６】
前記選択手段は、
前記装置において利用可能な記述形式の中で、優先度の高いものから順に、前記装置の制約を考慮して利用可能な範囲の中で、使用する記述形式を選択し、その優先度に応じてその付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることを特徴とする請求項１に記載の装置。
【請求項７】
前記選択手段は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、優先度の高い記述形式の付帯情報項目を、容易に格納や取り出しができる格納位置や格納方式にて格納することを特徴とする請求項６に記載の装置。
【請求項８】
前記選択手段は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、記述形式もしくは表現形式の優先度の順に、その付帯情報項目の格納や取り出しがより容易にできる格納位置や格納方式にて付帯情報を格納することを特徴とする請求項６に記載の装置。
【請求項９】
前記選択手段は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、記憶媒体上の複数の格納位置や格納方式に対し、特定の優先度の記述形式を割り当てる規則をあらかじめ定めておき、これに従って格納位置や格納方式を決めることを特徴とする請求項６に記載の装置。
【請求項１０】
前記選択手段は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、記憶媒体上の複数の格納位置や格納方式に対し、特定の優先度の記述形式を、記録する付帯情報項目ごとに割り当てる規則をあらかじめ定めておき、これに従って格納位置や格納方式を決めることを特徴とする請求項６に記載の装置。
【請求項１１】
前記装置が動画像撮像装置であり、
前記主情報は動画像であり、前記付帯情報項目が、撮影時の、撮像機器の情報、光学機器の状態情報、ユーザの操作に関する情報、撮影環境に関する情報、の少なくともいずれかを含むことを特徴とする請求項１に記載の装置。
【請求項１２】
前記付帯情報項目に関連するセンサや機器が複数個ある場合、どのセンサや機器の情報を選択して記憶するかが前記優先度の高い順に決定されることを特徴とする請求項１１に記載の装置。
【請求項１３】
センサや他の機器からの情報の取得に制限がある場合、どのセンサや他の機器の情報を選択して情報を取得するかが、前記優先度の高い順に決定されることを特徴とする請求項１１に記載の装置。
【請求項１４】
前記制限が、センサや他の機器から情報を取得する時間に関する制限であることを特徴とする請求項１３に記載の装置。
【請求項１５】
前記制限が、センサや他の機器から取得した情報を一時的に保存する量に関する制限であることを特徴とする請求項１３に記載の装置。
【請求項１６】
センサや機器からの情報を同時に複数の単位系または精度に直す演算に制限があるときに、 前記優先度の高い順にどの単位系を選択するかを決定することを特徴とする請求項１１に記載の装置。
【請求項１７】
前記制限が、センサや機器からの情報を同時に複数の単位系または精度に演算しなおす時間に関する制限であることを特徴とする請求項１６に記載の装置。
【請求項１８】
前記制限が、演算しなおした情報を一時的に保存する量に関する制限であることを特徴とする請求項１６に記載の装置。
【請求項１９】
前記制限が、センサや他の機器からの情報を同時に複数の単位系または精度に演算しなおす演算能力に関する制限であることを特徴とする請求項１６に記載の装置。
【請求項２０】
前記制限は、センサや他の機器からの情報に未取得のものが含まれていることであることを特徴とする請求項１６に記載の装置。
【請求項２１】
センサや他の機器からの情報を同時に複数の形式で記述できる場合であって、その記述に関する制限がある場合に、どのセンサや他の機器の情報を選択して記憶するかを、前記優先度の高い順に決定することを特徴とする請求項１１に記載の装置。
【請求項２２】
前記制限が、記述に利用できる時間に関する制限であることを特徴とする請求項２１に記載の装置。
【請求項２３】
前記制限が、記述できる情報量に関する制限であることを特徴とする請求項２１に記載の装置。
【請求項２４】
情報の取得の容易性、または、情報の使用頻度に応じて前記優先度が規定されることを特徴とする請求項１１に記載の装置。
【請求項２５】
センサや他の機器からの情報を同時に複数の形式で記述できる場合に、各情報に対して予め規定された優先度ごとに格納領域を分けて各情報が記述されることを特徴とする請求項１１に記載の装置。
【請求項２６】
センサや他の機器からの情報を同時に複数の形式で記述できる場合に、各情報に対して予め規定された格納領域に従って分けて各情報が記述されることを特徴とする請求項１１に記載の装置。
【請求項２７】
情報の取得の容易性、または、情報の使用頻度に応じて各情報の格納領域が規定されることを特徴とする請求項２６に記載の装置。
【請求項２８】
主情報とこれに付帯する付帯情報項目を格納する方法であって、
複数の記述形式が存在する付帯情報項目毎に、該複数の記述形式それぞれに優先度を予め定めておく決定工程と、
前記装置において利用可能な記述形式の中で、前記優先度に従って記録時に使用する記述形式を選択する選択工程と、
選択された記述形式で付帯情報項目を主情報と対応付けて記録する記録工程とを備えることを特徴とする方法。
【請求項２９】
前記選択工程は、
前記装置において利用可能な記述形式の中で、優先度の高いものから順に、前記装置の制約を考慮して利用可能な範囲の中で、使用する記述形式を複数選択することを特徴とする請求項２８に記載の方法。
【請求項３０】
前記選択工程は、
前記装置において利用可能な記述形式の中で、優先度の高いものから順に、前記装置の制約を考慮して利用可能な範囲の中で、使用する記述形式もしくは表現形式を複数選択すると同時に、選択された中で一番低い優先度を持つ記述形式よりも、高い優先度を持つ記述形式がすべて選択されているようにすることを特徴とする請求項２８に記載の方法。
【請求項３１】
前記選択工程は、
前記装置において利用可能な記述形式の中で、前記装置の制約により、同時に利用できない記述形式がある場合に、その記述形式に関しては優先度の高いものを１つ選択し、そうでないものについては優先度の高いものから順に利用可能な複数の使用する記述形式を選択することを特徴とする請求項２８に記載の方法。
【請求項３２】
前記選択工程は、
前記装置において利用可能な記述形式の中で、前記装置の制約により、利用できる記述形式の個数や組み合わせに制限がある場合に、その制限内で、可能な限り多くの優先度の高い記述形式が選択されるようにすることを特徴とする請求項２８に記載の方法。
【請求項３３】
前記選択工程は、
前記装置において利用可能な記述形式の中で、優先度の高いものから順に、前記装置の制約を考慮して利用可能な範囲の中で、使用する記述形式を選択し、その優先度に応じてその付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることを特徴とする請求項２８に記載の方法。
【請求項３４】
前記選択工程は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、優先度の高い記述形式の付帯情報項目を、容易に格納や取り出しができる格納位置や格納方式にて格納することを特徴とする請求項３３に記載の方法。
【請求項３５】
前記選択工程は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、記述形式もしくは表現形式の優先度の順に、その付帯情報項目の格納や取り出しがより容易にできる格納位置や格納方式にて付帯情報を格納することを特徴とする請求項３３に記載の方法。
【請求項３６】
前記選択工程は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、記憶媒体上の複数の格納位置や格納方式に対し、特定の優先度の記述形式を割り当てる規則をあらかじめ定めておき、これに従って格納位置や格納方式を決めることを特徴とする請求項３３に記載の方法。
【請求項３７】
前記選択工程は、
前記付帯情報項目の記憶媒体上の格納位置や格納方式を異ならせることにおいて、記憶媒体上の複数の格納位置や格納方式に対し、特定の優先度の記述形式を、記録する付帯情報項目ごとに割り当てる規則をあらかじめ定めておき、これに従って格納位置や格納方式を決めることを特徴とする請求項３３に記載の方法。
【請求項３８】
前記装置が動画像撮像装置であり、
前記主情報は動画像であり、前記付帯情報項目が、撮影時の、撮像機器の情報、光学機器の状態情報、ユーザの操作に関する情報、撮影環境に関する情報、の少なくともいずれかを含むことを特徴とする請求項２８に記載の方法。
【請求項３９】
前記付帯情報項目に関連するセンサや機器が複数個ある場合、どのセンサや機器の情報を選択して記憶するかが前記優先度の高い順に決定されることを特徴とする請求項３８に記載の方法。
【請求項４０】
センサや他の機器からの情報の取得に制限がある場合、どのセンサや他の機器の情報を選択して情報を取得するかが、前記優先度の高い順に決定されることを特徴とする請求項３８に記載の方法。
【請求項４１】
前記制限が、センサや他の機器から情報を取得する時間に関する制限であることを特徴とする請求項４０に記載の方法。
【請求項４２】
前記制限が、センサや他の機器から取得した情報を一時的に保存する量に関する制限であることを特徴とする請求項４０に記載の方法。
【請求項４３】
センサや機器からの情報を同時に複数の単位系または精度に直す演算に制限があるときに、 前記優先度の高い順にどの単位系を選択するかを決定することを特徴とする請求項３８に記載の方法。
【請求項４４】
前記制限が、センサや機器からの情報を同時に複数の単位系または精度に演算しなおす時間に関する制限であることを特徴とする請求項４３に記載の方法。
【請求項４５】
前記制限が、演算しなおした情報を一時的に保存する量に関する制限であることを特徴とする請求項４３に記載の方法。
【請求項４６】
前記制限が、センサや他の機器からの情報を同時に複数の単位系または精度に演算しなおす演算能力に関する制限であることを特徴とする請求項４３に記載の方法。
【請求項４７】
前記制限は、センサや他の機器からの情報に未取得のものが含まれていることであることを特徴とする請求項４３に記載の方法。
【請求項４８】
センサや他の機器からの情報を同時に複数の形式で記述できる場合であって、その記述に関する制限がある場合に、どのセンサや他の機器の情報を選択して記憶するかを、前記優先度の高い順に決定することを特徴とする請求項３８に記載の方法。
【請求項４９】
前記制限が、記述に利用できる時間に関する制限であることを特徴とする請求項４８に記載の方法。
【請求項５０】
前記制限が、記述できる情報量に関する制限であることを特徴とする請求項４８に記載の方法。
【請求項５１】
情報の取得の容易性、または、情報の使用頻度に応じて前記優先度が規定されることを特徴とする請求項３８に記載の方法。
【請求項５２】
センサや他の機器からの情報を同時に複数の形式で記述できる場合に、各情報に対して予め規定された優先度ごとに格納領域を分けて各情報が記述されることを特徴とする請求項３８に記載の方法。
【請求項５３】
センサや他の機器からの情報を同時に複数の形式で記述できる場合に、各情報に対して予め規定された格納領域に従って分けて各情報が記述されることを特徴とする請求項３８に記載の方法。
【請求項５４】
情報の取得の容易性、または、情報の使用頻度に応じて各情報の格納領域が規定されることを特徴とする請求項５３に記載の方法。
【請求項５５】
請求項２８乃至５４のいずれかに記載の情報格納方法をコンピュータによって実行するための制御プログラム。
【請求項５６】
請求項２８乃至５４のいずれかに記載の情報格納方法をコンピュータによって実行するための制御プログラムを格納する記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、主情報とそれに対応する付帯情報とを格納する情報格納装置及び方法に関する。特に、主情報として動画像データを、付帯情報として撮影装置の状態等を表す情報を記録媒体に格納するのに好適な情報格納装置及び方法に関する。
【背景技術】
【０００２】
従来より、撮影データとともに撮影時における機器の状態などを表す付帯情報を格納することや、その付帯情報を符号化・暗号化する方式が、特許文献１、特許文献２等によって提案されている。これらの提案では、付帯情報を付与・格納するために、付帯情報を種別などの単位でまとめておき、その単位で付帯情報を付与・格納するための情報構造を作成している。
【０００３】
様々な機器や方式で付帯情報を格納することを考えた場合、同一の項目の付帯情報であっても、機器や制御方式ごとに適切な、様々な表現形式や符号化・暗号化の方式が実際には存在することが一般的である。しかしながら、上述した従来技術による付帯情報の格納においては、１つの表現形式や符号化・暗号化方式にしか対応できない。このように、１つの形式のみしか許さない方式においては、その単一の構造や表現形式だけに付帯情報を対応させれば済むという利点があるものの、機器や制御方式の各々の特徴となる点が失われてしまう場合があった。
【特許文献１】
特開平０６−３１８３７３号公報
【特許文献２】
特開平０７−３０３２３９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、上記の課題に鑑みてなされたものであり、広汎な機器や制御方式で最低限利用可能な形式の付帯情報を確実に利用可能とするとともに、個々の機器や制御方式の特徴を生かすことのできる付帯情報も利用可能とすることを目的とする。
【課題を解決するための手段】
【０００５】
上記の目的を達成するための本発明の一態様による装置は、
主情報とこれに付帯する付帯情報項目を格納する装置であって、
複数の記述形式が存在する付帯情報項目毎に、該複数の記述形式それぞれに優先度を予め定めておく決定手段と、
前記装置において利用可能な記述形式の中で、前記優先度に従って記録時に使用する記述形式を選択する選択手段と、
選択された記述形式で付帯情報項目を主情報と対応付けて記録する記録手段とを備える。
【０００６】
また、上記の目的を達成するための本発明の他の態様によれば、
主情報とこれに付帯する付帯情報項目を格納する方法であって、
複数の記述形式が存在する付帯情報項目毎に、該複数の記述形式それぞれに優先度を予め定めておく決定工程と、
前記装置において利用可能な記述形式の中で、前記優先度に従って記録時に使用する記述形式を選択する選択工程と、
選択された記述形式で付帯情報項目を主情報と対応付けて記録する記録工程とを備える方法が提供される。
【０００７】
本発明の他の特徴及び利点は添付の図面を参照してなされる以下の説明により明らかとなろう。なお、各図を通して、同一の参照符号は同一もしくは類似の部分を示す。
【発明の効果】
【０００８】
以上説明したように、本発明によれば、広汎な機器や制御方式で最低限利用可能な形式の付帯情報を確実に利用可能とするとともに、個々の機器や制御方式の特徴を生かすことのできる付帯情報も利用可能にできる。
【発明を実施するための最良の形態】
【０００９】
以下、添付の図面を参照して本発明の好適な実施形態を説明する。
【００１０】
以下に説明する実施形態では、動画像と共に各種センサの情報やユーザによる操作の情報を付帯情報として同時に格納する動画撮像装置の例を述べる。
【００１１】
本実施形態では、動画像撮像装置において撮影時の機器の状態などの付帯情報を符号化・暗号化して画像情報とともに格納する際、複数の表現形式や符号化・暗号化方式によって付帯情報を保存・格納することを許容する。ここで、その複数の表現形式や符号化・暗号化方式に対して優先度を設けることにより、従来どおり、最低対応しておけばよい表現形式や符号化・暗号化方式での付帯情報の格納を保証すると同時に、各機器や制御方式で特徴を出せる表現形式や符号化・暗号化方式による付帯情報を併せて格納することを可能とする。また、その付帯情報を保存・格納する際に、付帯情報に応じて格納位置などを変更可能とし、各利用形態や制御方式に有利な格納位置に付帯情報を格納可能とする。
【００１２】
図１は本実施形態における撮像装置の構成を示すブロック図である。図１において、１１はレンズ部であり、被写体距離を調整するフォーカスレンズと焦点距離を調整するズームレンズとを含み、撮像素子上に被写体像を結像させる。１２は光量を調節する絞り、１３は入力した光を電気信号に変換するＣＣＤからなる撮像素子、１４はサンプルホールドおよびゲイン調整を行うサンプルホールド・ＡＧＣ回路である。
【００１３】
１５はＡ／Ｄ変換部であり、サンプルホールド・ＡＧＣ回路１４よりのアナログ信号に対してアナログデジタル変換（Ａ／Ｄ変換）を行う。また、１６は信号を処理して映像信号を生成する映像信号処理部である。１８はノイズリダクション部（ＮＲ）であり、フィールドメモリを有し、映像信号のノイズを除去する。１７は電子ズーム部であり、フィールドメモリを有し、映像の切り出し、拡大および補間処理を行う。
【００１４】
１９はレンズの位置を検出するレンズ位置検出部、２０はレンズを駆動するレンズ駆動部である。２１はシステム制御部であり、本撮像装置の全体を制御する。図２はシステム制御部２１の構成を示すブロック図である。システム制御部２１はＣＰＵ３１、ＲＯＭ３２、ＲＡＭ３３、Ｉ／Ｏインターフェース３４、およびバス３５を有する。ＲＯＭ３２には、ＣＰＵ３１によって、後述のフローチャートによって説明される処理を実現するための制御プログラムや、各種テーブル値（図６で後述する優先度テーブルや、図７及び図８で後述するグループテーブル）などが格納されている。
【００１５】
図１に戻り、２２はユーザ操作部であり、AEMode（自動露光モード）などの初期設定やズーム動作等、撮像装置の各種制御や各種設定及び各種操作を行うためのユーザインターフェースを備える。２３はその他のセンサを示しており、撮像装置の状態を知るために必要なセンサや、ＧＰＳや温度計等のような撮像装置が置かれた環境状態を検知するためのセンサを含む。
【００１６】
２４は他の機器であり、フラッシュライト、交換レンズなどの撮像装置のアクセサリや、ＩＥＥＥ１３９４、ＵＳＢなどの通信手段２５によって接続された外部コンピュータ（ＰＣ）、他の動画撮像機器、ネットワーク上の機器などが含まれる。
【００１７】
２６は、映像データをMPEGの形式に符号化するMPEG-CODECである。２７は記録部であり、記録媒体２８に情報を記録するドライブなどで構成される。２８は記録媒体であり、例えば光ディスク、磁気ディスク、光磁気ディスク、磁気テープ、ハードディスク、不揮発性の半導体メモリ（フラッシュメモリ等）などである。
【００１８】
以上の構成を備えた本実施形態の撮像装置の動作について説明する。レンズ部１１より受光した被写体からの光は、絞り１２によりその光量が調整され、撮像素子１３の面上に結像する。そして、撮像素子１３によって電気信号に変換された後、サンプルホールド・ＡＧＣ回路１４を介してＡ／Ｄ変換部１５によりＡ／Ｄ変換されてデジタル信号となり、映像信号処理部１６に入力される。映像信号処理部１６では、入力信号に対して輝度および色成分毎にアパーチャ補正、ガンマ補正、ホワイトバランス補正などの処理が施されて映像信号が生成され、ノイズリダクション部１８に出力される。
【００１９】
ノイズリダクション部１８は、システム制御部２１からの制御信号により制御され、入力された映像信号のノイズを除去する。ノイズが除去された映像信号は、電子ズーム部１７に出力される。電子ズーム部１７は、出力映像が入力映像に対してシステム制御部２１からの制御信号に基づいた倍率となるように、フィールドメモリに展開した画像より切り出しを行い、拡大および補間処理を行ってフレーム画像データとしてMPEG-CODEC２６へ出力する。MPEG-CODEC２６では、入力されたフレーム画像データの符号化を行う。このとき、MPEG-CODEC２６は、システム制御部２１から入力されるメタデータ（後述）が符号化されたフレーム画像データと共に格納されるようにデータを生成し、これを記録部２７に出力する。なお、このような撮像装置では、ノイズリダクション部１８と電子ズーム部１７の適用順番が逆に行われる場合もある。すなわち、映像信号処理部１６の処理結果を電子ズーム部１７で処理し、その電子ズーム部１７の処理結果をノイズリダクション部１８で処理し、そのノイズリダクション部１８の処理結果をMPEG-CODEC２６で処理する形態もある。この方式も本実施形態も、一般的な方式であり、これ以外の構成も考えられるが、このような処理の手順がいかなるものであっても、本発明に含まれるものである。
【００２０】
メタデータの格納方法については後述するが、メタデータとは、システム制御部２１が、映像信号処理部１６、ノイズリダクション部１８、電子ズーム部１７、レンズ駆動部２０を制御するときに使用したアパーチャ補正、ガンマ補正、ホワイトバランス補正に関する情報や、レンズ位置検出部１９、及び、その他のセンサ２３のセンサから得た情報、ユーザ操作部２２から得たユーザによる初期設定に関する情報（AEModeの種別など）、ユーザ操作部２２から得たユーザの操作に関する情報、或いは、通信手段２５を介して他の機器２４から得た情報などの各種付帯情報を含むものである。
【００２１】
＜１．メタデータ格納処理＞
図３は、動画像とメタデータの記録時のシステム制御部２１による制御概要を示したフローチャートである。まず、ステップＳ３１において、ユーザがユーザ操作部２２を介して撮像装置の設定を行ったかどうかを判定する。撮像装置の設定とは、例えば、AEModeの設定などである。撮像装置の設定が行われたときは、ステップＳ３２において、当該撮像装置の設定を変更すると同時にＲＡＭ３３などにその設定情報を記憶する。変更された撮像装置の設定情報は、後述のステップＳ３７にてメタデータとしてMPEG-CODEC２６に送られることになる。次にステップＳ３３において、録画ボタンがＯＮされたかどうかをチェックする。ＯＮされていなければ、待機状態であり、ステップＳ３１へ戻る。ＯＮされたならば、ステップＳ３４へ進み、当該撮像装置を録画状態にし、撮像を開始する。このときの録画開始時刻は、後述のステップＳ３７にてメタデータとしてMPEG-CODEC２６に送られることになる。また、撮像中の撮像装置内の変化、例えば、オートフォーカス時のフォーカスの変化、また、撮像装置の置かれた環境の変化、例えばＧＰＳの情報が、後述のステップＳ３７でシステム制御部２１によって収集され、MPEG-CODEC２６へ順次送られることになる。
【００２２】
次に、ステップＳ３５において、ユーザによって撮像装置の操作が行われたかをチェックする。撮像装置の操作とは例えば、ズームボタンのＯＮ／ＯＦＦ、パン、などである。撮像装置の操作が行われた場合はステップＳ３６に進み、システム制御２１がレンズ位置検出部１９やその他のセンサ２３の情報をもとにレンズ駆動部２０などを駆動して撮像装置を制御する。例えばズームが指示されたときは、ズームボタンが押された区間だけ、レンズ駆動部２０によってレンズ１１のズームレンズを動かし、ズームを行う。このときのズームボタンのＯＮ／ＯＦＦや焦点距離などのセンサ情報は、次のステップＳ３７でメタデータとして収集され、MPEG-CODEC２６に送られることになる。
【００２３】
ステップＳ３７においては、図９によって後述するようにメタデータ生成のために情報を収集し、メタデータを生成し、MPEG-CODEC２６へメタデータを送る。MPEG-CODEC２６では、電子ズーム部１７より送られてくる映像データと、システム制御部２１より送られてくるメタデータとを後述する方法（たとえば図４において後述する方法）で結合し、記録部２７へ出力する。そして、記録部２７は、MPEG-CODEC２６より送られてきたデータを記憶媒体２８に記録する。次にステップＳ３８において、録画ボタンがＯＦＦされたかどうかをチェックする。ＯＦＦされていなければ、撮影状態のままであるので、ステップＳ３４へ戻って上述の動作を繰り返す。ＯＦＦされれていれば、ステップＳ３１へ戻って待機状態となる。
【００２４】
図４は、メタデータ格納方法の概念図である。図４において、４０１は動画像を構成するフレーム列である。４０２はフレーム１枚のデータ構成を表している。１枚のフレーム４０２は、画像データのサイズ、符号化に関する情報、フレームのタイムコードなどが格納される管理情報領域４０３と、画像データそのものが入る画像データ領域４０４から構成される。管理情報領域４０３の斜線で図示した部分は未使用部分であり、本実施形態ではこの未使用部分にメタデータ格納領域４０５が設けられる。また、５０１はフレーム４０２に関連するメタデータである。そして、メタデータ格納領域４０５にメタデータ５０１が格納される。具体的には、例えば、MPEG-2ストリームであれば、ピクチャヘッダのユーザデータ領域やＧＯＰ（Group Of Picture）ヘッダのユーザデータ領域に格納することが可能である。
【００２５】
図５は、メタデータのデータ構造の一例を示した図である。メタデータ５０１には、メタデータ項目によって取得の容易さ、使用する際の頻度、などが異なる複数種類のデータが含まれる。よって、取得が容易なもの、使用頻度の高いものほど、データの格納、及び、読み出しが容易である方が望ましい。逆に、比較的まれにしか情報が所得できないもの、比較的まれにしか使用されないものなどは、必要な分だけ格納されていればよい。図５に示されるデータ構造は、この条件を満足するものの一例である。
【００２６】
図５に示したように、メタデータ５０１は、メタデータ管理情報５０２、グループ１に属するメタデータの格納領域５０３、グループ２に属するメタデータの格納領域５０４から構成される。メタデータ管理情報５０２は、メタデータの総サイズ、グループ２へのオフセットからなる。グループ１に属するメタデータの格納領域５０３は、後述する方法によってグループ１に分類されたメタデータ項目を、予め決められた順番に従って、全ての項目を並べて記録する。グループ２に属するメタデータの格納領域５０４は、後述する方法によってグループ２に分類されたメタデータ項目を、メタデータのサイズやタイプなどの情報を格納した管理情報とメタデータとを一組として必要な数だけ並べて格納する。なお、機器の都合によって、予定されたメタデータが取得できない場合もある。その場合には、例えば値がないことを意味する情報を格納する等の処置がなされる。ただし、どのような処置が適切かはメタデータの特性によって異なる場合があり、本願ではこの点は特に規定しない。
【００２７】
よって、グループ１に属するメタデータの格納領域５０３は、データサイズ及び順番が固定されているため、記憶媒体上に一括して読み書きすることが可能である。一方、グループ２に属するメタデータの格納領域５０４は、メタデータ項目ごとひとつひとつに管理情報を作成して書き込み、メタデータ項目ごとひとつひとつの管理情報を解釈しながら読み出す必要がある。よって、グループ２に属するメタデータの格納領域５０４に比べてグループ１に属するメタデータの格納領域５０３の方が、データの読み書きが容易に行うことが可能な構造となっている。
【００２８】
次に、メタデータの記述形式について述べる。単一の情報項目に対して記述形式が複数存在する場合がある。以下の表１〜３において、記述形式を複数持つメタデータの例として、Ｆｏｃｕｓ，Ｚｏｏｍ，Ｐａｎのメタデータの記述形式を示す。
【００２９】
【表１】
2004522355.tif 000003
【００３０】
【表２】
2004522355.tif 000004
【００３１】
【表３】
2004522355.tif 000005
【００３２】
まず、センサの違いによって、値の単位などの形式が異なることがある。例えば、表１において、Focus-Relativeは主にレンズ位置検出部１９がレンズ部１１のフォーカスレンズの可動範囲に対する相対位置を検出する場合の記述形式であり、Focus-Absoluteは主に被写体距離を直接計測するセンサが搭載されたときに対応する記述形式である。
また、値を別な形式に変換できる場合もある。例えば、表２において、Zoom-Relativeは主にレンズ位置検出部１９がレンズ部１１のズームレンズの可動範囲に対する相対位置を検出する場合の記述形式であり、Zoom-Absoluteは主にレンズ位置検出部１９が焦点距離を検出する場合の記述形式であり、Zoom-Normalizedは主にレンズ位置検出部１９が焦点距離を検出しその値を３５mmフィルムのカメラに換算した値を記述する形式である。
【００３３】
また、センサの性能や、値を取得するタイミングなどによって、取得できる値の精度などが異なる場合もある。例えば、表３において、Pan-1はパンの方向のみが取得できた場合の形式であり、Pan-2はパンのスピードが大まかに取得できた場合の形式であり、Pan-3はパンのスピードが厳密に取得できた場合の形式である。
【００３４】
次に、単一のメタデータごとに優先度を決定する。図６は、複数の記述形式をもつメタデータの優先度付けの一例を示す図である。ここで、例えば、優先度１は優先度２よりも優先度が高いものとする。優先度は、各データ項目毎に（たとえばフォーカス、ズーム、パン毎に）設定される。また、優先度を決定する基準には様々なものが考えられる。例えば、広く使われているセンサの出力形式に近い形式は優先度を高くしておき、センサが取得した値を変換しなければならない形式は優先度を低くしておく、或いは厳密な精度をもつ形式の優先度を低くしておく、など情報の取得の容易さで決める方法がある。また、使用頻度の高い形式の優先度を高くしておくという方法もある。
【００３５】
次に、メタデータの格納領域を決定するために、メタデータ項目のグループ分けを行う。グループ分けの方法としては、様々なものがある。まず、単一のメタデータ項目ごとに情報の取得の容易さや使用頻度によってどちらにいれるかを決める方法がある。取得の容易な、または、使用頻度の高いメタデータ項目を第１グループとし、取得が比較的困難な、または、使用頻度が比較的低いメタデータ項目を第２グループとする。図７の例では、ＰａｎはDirectionとSpeedで一組の情報となり使用頻度が高いのでPan-1とPan-2をグループ１とし、厳密なSpeedの情報であるPan-3は、必ずしも必要でないのでグループ２とする。
【００３６】
或いは、優先度によってグループ分けを決定してもよい。図８がその例である。すなわち、優先度１をもつメタデータ項目をグループ１とし、それ以外をグループ２とする。
【００３７】
以上の、図６〜図８に示される各テーブルの規則に従って作成されたプログラムをシステム制御部２１のＲＯＭ３２もしくはＲＡＭ３３に格納するようにする。もしくはこれらのテーブルを、システム制御部２１のＲＯＭ３２、に格納し、これを参照してシステム制御部２１が処理を行うようにする。
【００３８】
次に、メタデータ格納処理について説明する。
【００３９】
まず、図９を用いて、上記ステップＳ３７で実行されるメタデータ格納処理の概要を述べる。ステップＳ９０において、システム制御部２１は、各種センサに問い合わせるなどして、メタデータを取得する。次にステップＳ９１において、変換式などを用いて形式を変換できるメタデータがあれば、それを変換をする。ただし、必ずしも本処理（変換処理）を行う必要はなく、本処理はスキップしても構わない。次に、ステップＳ９２において、メタデータをMPEG-CODEC２６に送ることにより記憶媒体２８に画像データとともにメタデータを格納する。以下、ステップＳ９０からＳ９２のそれぞれにおける処理の詳細について述べる。
【００４０】
まず、ステップＳ９０のメタデータの取得処理についての詳細を、図１０を用いて説明する。ステップＳ１００において、Ｎに１を設定する。次に、ステップＳ１０１において、システム制御部２１がセンサの値の取得を続行できるかどうかを判定する。この判定条件としては、例えば次の２つの制約条件が挙げられる。すなわち、
(1)取得する時間が残っているか？
(2)一時的に保持しておくメモリに余裕があるか？
である。
【００４１】
(1)の制約について説明すると、動画撮影時にフレーム単位にメタデータをリアルタイムに格納するためには、メタデータの取得から格納までの時間に制限がある。ＮＴＳＣであれば、約３０フレーム毎秒であるので、約１/３０秒未満の処理時間という制限がある。(2)の制約は、メタデータを一度に保持しておくメモリの容量に制約がある場合である。
【００４２】
本実施形態では、以上の(1)、(2)の制約条件を満たすとき、更に他のセンサの値を取得することができるとしてステップＳ１０２に処理を進める。ステップＳ１０２において、システム制御部２１は、優先度Ｎの形式に対応するセンサへ問い合わせを行い、情報を取得する。
【００４３】
次にステップＳ１０３において、他に優先度Ｎに対応するセンサが存在するかどうかを判定する。存在すれば、ステップＳ１０１からステップＳ１０２の処理を繰り返す。存在しなければ、ステップＳ１０４に進み、次の優先度でセンサからの情報の取得を行なうべくＮをインクリメントする。ステップＳ１０５において、優先度Ｎの形式をもつメタデータ項目が存在するかどうかを判定し、存在すれば、上記ステップＳ１０１からステップＳ１０４までの処理を繰り返す。
【００４４】
ステップＳ１０１において、制約条件(1)、(2)のいずれかが満足されないと判定された場合、或いは、ステップＳ１０５において優先度Ｎの形式をもつメタデータ項目が存在しないと判定された場合は、本処理を終える。なお、ここでは説明を簡単にするために、センサから得られたメタデータについてのみ述べているが、ユーザ操作部２２や他の機器２４からメタデータを得る場合なども、同様に考えればよい。
【００４５】
以上のような処理により、制約条件が存在する場合であっても、優先度の高いメタデータ項目から優先的に、情報の取得が行われる。
【００４６】
次に、ステップＳ９１のメタデータの記述形式の変換処理についての詳細を、図１１を用いて説明する。この処理では、上記メタデータ取得処理によって取得されたデータ（センサからの出力値）の記述形式の変換を行なう。まず、ステップＳ１１０において、Ｎに１を設定する。次に、ステップＳ１１１において、データ形式（記述形式）の変換を続行できるかどうかを判定する。判定条件としては、例えば、ステップＳ９０のメタデータの取得処理の場合（ステップＳ１０１）と同様に、次の２つの条件、
(1)変換する時間が残っているか？
(2)一時的に保持しておくメモリに余裕があるか？
が挙げられる。もちろん他の条件を用いてもよい。
【００４７】
以上の(1)、(2)の制約条件を満足する場合は次のステップＳ１１２へ進む。次にステップＳ１１２において、今注目しているメタデータが優先度Ｎの形式に変換することのできるメタデータ項目であるかを判定する。この場合の判定条件としては例えば、
(3)システム制御部２１に変換に必要な演算能力があるか？
(4)変換の元となる形式の値が設定されているか？
が挙げられる。
【００４８】
(3)については、システム制御部２１のＣＰＵ３１の演算能力に制約がある場合である。(4)については、センサは、問い合わせるタイミングによっては情報を検出できないために値が設定されないことがある、という制約がある場合である。
【００４９】
本実施形態では、(3)、(4)の制約条件を満たすとき、優先度Ｎの形式への変換が可能であるとしてステップＳ１１３へ進む。また、条件が満足されない場合は、ステップＳ１１３をスキップしてステップＳ１１４へ進む。ステップＳ１１３では、当該データの優先度Ｎの形式（記述形式）への変換が行われる。次に、ステップＳ１１４において、他に優先度Ｎの記述形式への変換が可能なメタデータ項目が取得されているかどうかを判定する。取得されていれば、ステップＳ１１１からステップＳ１１３の処理を繰り返す。当該優先度における他の記述形式への変換が可能なデータが取得されていなければ、ステップＳ１１５に進み、Ｎをインクリメントする。
【００５０】
次にステップＳ１１６において、優先度Ｎの形式をもつメタデータ項目が存在するかどうかを判定し、存在すれば、ステップＳ１１１からステップＳ１１５までの処理を繰り返す。ステップＳ１１１において制約条件(1)、(2)などを満たさないとき、或いは、ステップＳ１１６において優先度Ｎの形式をもつメタデータ項目が存在しないときは、本処理を終える。なお、ここでは説明を簡単にするために、センサから得られたメタデータについてのみ述べているが、ユーザ操作部２２や他の機器２４からメタデータを得る場合なども、同様に考えればよい。
【００５１】
以上のような処理により、制約条件が存在する場合であっても、優先度の高いメタデータ項目から優先的に、形式の変換が行われる。
【００５２】
次に、ステップＳ９２のメタデータの格納処理についての詳細を図１２を用いて説明する。まず、ステップＳ１２０において、Ｎに１を設定する。次にステップＳ１２１において、優先度Ｎの記述形式のメタデータ項目がステップＳ９０のメタデータ取得処理及びステップＳ９１のメタデータ変換処理の結果、存在しているかどうかを判定する。この判定の結果、存在すれば、次のステップＳ１２２に進み、当該記述形式によるメタデータ項目を採用することに決める。
【００５３】
次に、ステップＳ１２３において、更にメタデータの格納が可能であるかどうかを判定する。この判定条件としては、例えば、
(5)あらかじめMPEG CODEC26などから入手しておいた記録に必要な時間に対し、メタデータを格納するのに必要な時間が残っているか？
(6) あらかじめMPEG CODEC26などから入手しておいた記録可能なメタデータ量に対し、一度に格納できるメタデータ量に余裕があるか？
が挙げられる。
【００５４】
(5)は、記憶媒体にデータを格納するには所定の時間が必要であることによる制約である。また、(6)については、一度に格納できるメタデータ量に制限がある場合である。このように予めメタデータ量の制限を越えることがわかっている場合には、メタデータの取得時（ステップＳ９０）に、センサの値を取得しないようにしてもよい。
【００５５】
本実施形態では、上記の(5)及び(6)の制約条件を満足する場合に、更にメタデータを格納することが可能であるとしてステップＳ１２４に進む。ステップＳ１２４では、上記ステップＳ９０のメタデータ取得処理及びステップＳ９１のメタデータ変換処理の結果として、メタデータに採用すべき優先度Ｎの形式のメタデータ項目が残っているかどうかを判定する。存在すれば、ステップＳ１２２からステップＳ１２３を繰り返す。存在していなければ、ステップＳ１２５でＮをインクリメントし、ステップＳ１２１からステップＳ１２４を繰り返す。
【００５６】
また、ステップＳ１２１において優先度Ｎの形式のメタデータ項目が存在しないとき、或いは、ステップＳ１２３において、(5)，(6)の制約条件を満たさないときはステップＳ１２６へ進む。ステップＳ１２６では、上述のステップＳ１２２において、メタデータとして採用するとされたデータ項目が、システム制御部２１からMPEG-CODEC２６に送られる。MPEG-CODEC２６は、図７或いは図８に示した如く設定されたグループ分けに従って、システム制御部２１より受信したメタデータを図５の形式に従って管理情報領域４０３に取り込み、記録部２７にデータ出力する。記録部２７はMPEG-CODEC２６より受信したデータを記憶媒体２８上に記録する。
【００５７】
以上のような処理により、制約条件が存在する場合であっても、優先度の高いメタデータ項目から優先的に、データの格納が行われる。
【００５８】
＜２．メタデータ活用処理＞
次に、上記の如く格納されたメタデータの活用について説明する。説明を簡単にするために、図１３に示した３つの撮像装置（Ａ〜Ｃ）がある場合を説明する。また、メタデータ項目としてＰａｎを取り上げて説明するものとし、この３つの撮像装置（Ａ〜Ｃ）は図６のテーブルの規則にしたがってメタデータを格納しているものとする。図１３に示されるように、撮像装置Ａは、Ｐａｎについては優先度１のPan-1の記述形式のみを格納できる。撮像装置Ｂは、Ｐａｎについては、優先度２までの記述形式、Pan-1,Pan-2の形式を格納できる。更に撮像装置Ｃは、Ｐａｎについては優先度３、すなわちPan-1，Pan-2，Pan-3の記述形式で格納できるものとする。
【００５９】
このとき、各撮像装置のデータを利用できる装置において、フレームをＰａｎの情報で分類し、出力するような場合は、次のような動作となる。撮像装置Ａ，Ｂ，Ｃの全データに対して分類を行う場合は、優先度１のPan-1の記述形式で行う（図１３の１３０１）。こうすることによりＰａｎの方向での分類結果が出力される。よって、ユーザは撮像装置Ａ〜Ｃのどのデータであっても、必ず、優先度１の形式で分類結果を得ることができる。このようにして、単一のビデオ編集装置などで、異なる複数の撮像装置のデータを統一的に扱えるようになる。
【００６０】
次に、撮像装置Ｂ，Ｃの全データに対して分類を行うときは、優先度１のPan-1と優先度２のPan-2の記述形式で分類を行う（図１３の１３０２）。Ｐａｎの方向による分類結果とＰａｎのSpeedによる大まかな分類結果が出力される。
【００６１】
更に、撮像装置Ｃのみのデータに対して分類を行うときは、全ての形式を扱うことが可能なので（図１３の１３０３）、優先度１のPan-1の形式と優先度３のPan-3の形式で分類を行う。この結果、Panの方向とPanの方向による分類結果とSpeedによる詳細な分類結果が出力される。
【００６２】
以上のように、ユーザは撮像装置の能力に応じて、常に、最も精度の高い形式での分類結果を得ることができる。
【００６３】
なお、上記実施形態においては、全てのメタデータはシステム制御部２１を経由しているが、必ずしもこれに限ったものではない。
【００６４】
また、上記実施形態においては、MPEG-CODEC２６においてメタデータを受け取り、画像フレームデータの管理情報領域への組み込みを行なうが、これに限ったものではない。例えば、記録部２７でメタデータを受け取り、映像データ記録後にフレームとの関係を示す情報と共にこのメタデータをまとめて記録するなどの方法がある。
【００６５】
なお、上記実施形態においては、メタデータをフレーム単位に格納しているが、これは一例であり、例えば動画ファイルのフッタ領域に、映像データ中のフレームとの関係を示す情報と共にまとめて格納してもよい。
【００６６】
なお、上記実施形態においては、各グループに属するメタデータを図５の形式で格納したが、アクセスが比較的容易である場所と、比較的難しい場所に分けてもよい。例えば、メタデータを上記の動画ファイルのフッタ領域に格納して記憶媒体に記録する場合は、フッタ領域内でグループごとにまとめて格納し、グループ１に属するメタデータのみを、ディスクの内周部に格納しておく、などの方法もある。
【００６７】
なお、上記実施形態においては、グループ分けは２つとしたが、格納のしやすさや利用頻度などに応じて、または、格納領域の特性などに応じて、３つ以上のグループに分けてももちろん構わない。
【００６８】
以上説明したように本実施形態によれば、どの動画撮像装置で撮像されたデータであっても、優先度の高い記述形式のメタデータ項目が優先的に格納されるので、優先度の高い形式での検索や分類を確実に行うことが可能となる。
【００６９】
また、検索又は分類装置を作成した場合に、優先度は低いが高精度の記述形式のメタデータ項目を利用できるようにすることで、より高精度もしくはより強力な機能を有する検索や分類を行なうことも可能となる。言うまでもないが、この場合でも、優先度の高い記述形式のメタデータも検索や分類に利用することが可能である。
【００７０】
また、単一のデータ構造に対応した検索または分類装置を作成するだけで、優先度が低い形式まで格納されているデータに対しては、優先度が低く設定された形式での検索も可能である。
【００７１】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記憶した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。
【００７２】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【００７３】
プログラムコードを供給するための記憶媒体としては、例えば、フロッピィディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭなどを用いることができる。
【００７４】
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００７５】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００７６】
多くの、広範な実施形態が、本発明の精神及び範囲から逸脱することなくなし得ることが明らかであり、本発明は特定の実施形態によって限定されるものではなく、特許請求の範囲の規定によって限定されるべきである。
【図面の簡単な説明】
【００７７】
本願に組み込まれその一部を構成する添付の図面は、本発明の実施形態を表すものであり、明細書の説明とともに本発明の原理を説明するのに提供される。
【図１】本実施形態における撮像装置の構成を示すブロック図である。
【図２】システム制御部２１の構成を示すブロック図である。
【図３】動画像とメタデータの記録時のシステム制御部２１による制御概要を示したフローチャートである。
【図４】メタデータ格納方法の概念図である。
【図５】メタデータのデータ構造の一例を示した図である。
【図６】複数の記述形式をもつメタデータの優先度付けの一例を示す図である。
【図７】本実施形態におけるメタデータ項目のグループ分けの一例である。
【図８】本実施形態におけるメタデータ項目のグループ分けの一例である。
【図９】図３のステップＳ３７で実行されるメタデータ格納処理の概要を説明するフローチャートである。
【図１０】図９のステップＳ９０におけるメタデータの取得処理を説明するフローチャートである。
【図１１】図９のステップＳ９１におけるメタデータの記述形式の変換処理を説明するフローチャートである。
【図１２】図９のステップＳ９２におけるメタデータの格納処理を説明するフローチャートである。
【図１３】複数の撮像装置におけるメタデータ形式の対応について説明した図である。
【図１】
2004522355.tif 000006
【図２】
2004522355.tif 000007
【図３】
2004522355.tif 000008
【図４】
2004522355.tif 000009
【図５】
2004522355.tif 000010
【図６】
2004522355.tif 000011
【図７】
2004522355.tif 000012
【図８】
2004522355.tif 000013
【図９】
2004522355.tif 000014
【図１０】
2004522355.tif 000015
【図１１】
2004522355.tif 000016
【図１２】
2004522355.tif 000017
【図１３】
2004522355.tif 000018
【国際公開パンフレット】
2004522355.tif 000019
2004522355.tif 000020
2004522355.tif 000021
2004522355.tif 000022
2004522355.tif 000023
2004522355.tif 000024
2004522355.tif 000025
2004522355.tif 000026
2004522355.tif 000027
2004522355.tif 000028
2004522355.tif 000029
2004522355.tif 000030
2004522355.tif 000031
2004522355.tif 000032
2004522355.tif 000033
2004522355.tif 000034
2004522355.tif 000035
2004522355.tif 000036
2004522355.tif 000037
2004522355.tif 000038
2004522355.tif 000039
2004522355.tif 000040
2004522355.tif 000041
2004522355.tif 000042
2004522355.tif 000043
2004522355.tif 000044
2004522355.tif 000045
2004522355.tif 000046
2004522355.tif 000047
2004522355.tif 000048
2004522355.tif 000049
2004522355.tif 000050
2004522355.tif 000051
2004522355.tif 000052
2004522355.tif 000053
2004522355.tif 000054
2004522355.tif 000055
2004522355.tif 000056
2004522355.tif 000057
2004522355.tif 000058
2004522355.tif 000059
2004522355.tif 000060
2004522355.tif 000061
2004522355.tif 000062
2004522355.tif 000063
2004522355.tif 000064
2004522355.tif 000065
2004522355.tif 000066
2004522355.tif 000067
2004522355.tif 000068
2004522355.tif 000069
2004522355.tif 000070
2004522355.tif 000071
2004522355.tif 000072
2004522355.tif 000073
2004522355.tif 000074
【国際公開パンフレット（コレクトバージョン）】
2004522355.tif 000075
2004522355.tif 000076
【国際調査報告】
2004522355.tif 000077
2004522355.tif 000078
2004522355.tif 000079