【手続補正書】
【提出日】平成18年1月25日(2006.1.25)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像検索装置及び画像検索方法
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像データを表示する画像表示手段と、
前記画像データ内のオブジェクト領域を下位領域とし、該下位領域を含む領域を上位領域として、前記画像データ内に含まれるオブジェクト領域に関する下位領域と上位領域との階層関係を階層データとして記憶する階層データ記憶手段と、
前記画像表示手段で表示された前記画像データ内の任意の部分を指定する第１の指定手段と、
前記階層データを用いて、前記第１の指定手段で指定された部分を含む第１のオブジェクト領域を決定する領域決定手段と、
前記領域決定手段で決定された前記第１のオブジェクト領域を強調表示する強調表示手段と、
前記強調表示手段で強調表示された前記第１のオブジェクト領域内の任意の部分を指定する第２の指定手段とを備え、
前記領域決定手段が、前記階層データを用いて、前記第１のオブジェクト領域の下位領域であって、前記第２の指定手段によって指定された部分を含む第２のオブジェクト領域を決定し、
前記強調表示手段が、前記第１のオブジェクト領域に代えて前記第２のオブジェクト領域を強調表示する
ことを特徴とする画像検索装置。
【請求項２】
前記強調表示手段で強調表示された前記第２のオブジェクト領域外の任意の部分を指定する第３の指定手段をさらに備え、
前記領域決定手段が、前記第２のオブジェクト領域の上位領域であって、前記第３の指定手段によって指定された部分を含む第３のオブジェクト領域を決定し、
前記強調表示手段が、前記第２のオブジェクト領域に代えて前記第３のオブジェクト領域を強調表示する
ことを特徴とする請求項１記載の画像検索装置。
【請求項３】
画像データを記憶する画像記憶手段と、
前記画像データに含まれるオブジェクト領域に関する情報を記憶する領域情報記憶手段と、
前記オブジェクト領域と該オブジェクト領域の下位領域又は上位領域との階層関係を階層データとして記憶する階層データ記憶手段と、
前記画像データを表示する画像表示手段と、
前記画像表示手段で表示された前記画像データ内の任意の位置を指定する指定手段と、
前記領域情報記憶手段に記憶された前記オブジェクト領域に関する情報の中から、前記指定手段で指定された位置を含む第１のオブジェクト領域を決定する領域決定手段と、
前記領域決定手段で決定された前記第１のオブジェクト領域を強調表示する強調表示手段と、
前記領域決定手段で決定された前記第１のオブジェクト領域を記憶する決定領域記憶手段とを備え、
前記領域決定手段は、前記指定手段でさらに指定された位置が前記決定領域記憶手段に記憶された前記第１のオブジェクト領域の内部の場合、前記階層データに基づいて、前記オブジェクト領域情報記憶手段から前記第１のオブジェクト領域の下位領域であって前記位置を含む第２のオブジェクト領域を決定し、
前記強調表示手段が、前記領域決定手段で決定された前記第２のオブジェクト領域を強調表示する
ことを特徴とする画像検索装置。
【請求項４】
前記領域決定手段は、前記指定手段でさらに指定された位置が前記決定領域記憶手段に記憶された前記第１のオブジェクト領域の外部の場合、前記階層データに基づいて、前記領域情報記憶手段から前記第１のオブジェクト領域の上位領域であって前記位置を含む第２のオブジェクト領域を決定し、
前記強調表示手段が、前記領域決定手段で決定された前記第２のオブジェクト領域を強調表示する
ことを特徴とする請求項３記載の画像検索装置。
【請求項５】
前記領域決定手段は、前記第１のオブジェクト領域の上位領域であって前記位置を含む領域がない場合、前記オブジェクト領域についての最上位領域を第２のオブジェクト領域として決定することを特徴とする請求項４記載の画像検索装置。
【請求項６】
前記強調表示手段が、決定されたオブジェクト領域の輪郭を強調することを特徴とする請求項１から５までのいずれか１項に記載の画像検索装置。
【請求項７】
前記強調表示手段が、前記画像データにおいて決定されたオブジェクト領域以外の部分について特定のパターンを用いて塗りつぶすことを特徴とする請求項１から５までのいずれか１項に記載の画像検索装置。
【請求項８】
画像データを記憶する画像記憶手段と、
前記画像データに含まれるオブジェクト領域に関する情報を記憶する領域情報記憶手段と、
前記オブジェクト領域と該オブジェクト領域の下位領域又は上位領域との階層関係を階層データとして記憶する階層データ記憶手段と、
前記領域情報記憶手段に記憶されたオブジェクト領域に関する情報と前記階層データとに基づいて、前記画像データに含まれるオブジェクト領域の下位領域又は上位領域に関する画像を階層的に表示する領域画像表示手段と、
前記領域画像表示手段に階層的に表示された前記オブジェクト領域の下位領域又は上位領域の画像の中から一の領域を決定する領域決定手段と
を備えることを特徴とする画像検索装置。
【請求項９】
前記領域画像表示手段に階層的に表示される領域の画像が一定の大きさに統一されたことを特徴とする請求項８記載の画像検索装置。
【請求項１０】
前記オブジェクト領域の下位領域又は上位領域に対応付けられたキーワードを記憶するキーワード記憶手段をさらに備え、
前記領域画像表示手段が、前記オブジェクト領域の下位領域又は上位領域の画像と前記キーワード記憶手段に記憶されているキーワードとを対応させて表示する
ことを特徴とする請求項８又は９に記載の画像検索装置。
【請求項１１】
前記画像記憶手段が複数の画像データを記憶する画像検索装置であって、
前記複数の画像データに含まれるオブジェクト領域に関する特徴を該オブジェクト領域と対応付けて記憶する領域特徴記憶手段と、
前記領域決定手段で決定された領域に関する特徴と前記領域特徴記憶手段に記憶された他の画像データに含まれるオブジェクト領域に関する特徴とを比較して、比較された特徴が一致するオブジェクト領域を含む画像データを検索する画像検索手段と
をさらに備えることを特徴とする請求項１から１０までのいずれか１項に記載の画像検索装置。
【請求項１２】
前記画像検索手段が、前記領域決定手段で決定された領域に関する特徴と前記領域特徴記憶手段に記憶された他の画像データに含まれるオブジェクト領域に関する特徴とを比較して、比較された特徴が類似するオブジェクト領域を含む画像データを検索することを特徴とする請求項１１記載の画像検索装置。
【請求項１３】
複数の画像データを記憶する画像記憶手段と、
前記画像記憶手段に記憶された画像データ内のオブジェクト領域に関する情報を該画像データと対応付けて記憶する領域情報記憶手段と、
前記領域情報記憶手段に記憶された前記オブジェクト領域の特徴を該オブジェクト領域と対応付けて記憶する領域特徴記憶手段と、
検索対象となる画像データの特徴を入力する画像特徴入力手段と、
入力された前記特徴と前記領域特徴記憶手段に記憶されたオブジェクト領域の特徴とが一致する場合、前記画像記憶手段に記憶された画像データのうち前記オブジェクト領域を含む画像データを検索候補画像として決定する候補画像決定手段とを備える画像検索装置であって、
前記画像記憶手段に記憶された画像データを表示する画像表示手段と、
前記画像表示手段で表示された画像データ上の任意の部分を指定する指定手段とをさらに備え、
前記画像特徴入力手段が、前記指定手段で指定された部分を含むオブジェクト領域の特徴を検索対象となる画像データの特徴として入力する
ことを特徴とする画像検索装置。
【請求項１４】
前記オブジェクト領域と該オブジェクト領域の下位領域又は上位領域との階層関係を階層データとして記憶する階層データ記憶手段をさらに備え、
前記画像特徴入力手段が、前記階層データを用いて前記指定手段で指定された部分を含むオブジェクト領域に関する全ての下位領域の特徴を検索対象となる画像データの特徴として入力する
ことを特徴とする請求項１３記載の画像検索装置。
【請求項１５】
前記画像特徴入力手段は、前記検索対象となる画像データの特徴を編集可能であることを特徴とする請求項１３又は１４に記載の画像検索装置。
【請求項１６】
前記領域特徴記憶手段が、領域の画像から得られる概念を表現した概念情報、該概念を言語によって表現した言語情報、領域の画像の特徴を表現した画像特徴、又は、該概念情報と該言語情報と該画像特徴の組み合わせを前記特徴として記憶することを特徴とする請求項１１から１５までのいずれか１項に記載の画像検索装置。
【請求項１７】
画像データを画面上に表示する画像表示工程と、
表示された前記画像データ内の任意の部分を指定する第１の指定工程と、
前記画像データ内のオブジェクト領域を下位領域とし、該下位領域を含む領域を上位領域として、前記画像データ内に含まれるオブジェクト領域に関する下位領域と上位領域との階層関係を示す階層データを用いて、指定された部分を含む第１のオブジェクト領域を決定する第１の領域決定工程と、
決定された前記第１のオブジェクト領域を強調表示する第１の強調表示工程と、
強調表示された前記第１のオブジェクト領域内の任意の部分を指定する第２の指定工程と、
前記階層データを用いて、前記第１のオブジェクト領域の下位領域であって、前記第２の指定工程で指定された部分を含む第２のオブジェクト領域を決定する第２の領域決定工程と、
前記第１のオブジェクト領域に代えて前記第２のオブジェクト領域を強調表示する第２の強調表示工程と
を有することを特徴とする画像検索方法。
【請求項１８】
強調表示された前記第２のオブジェクト領域外の任意の部分を指定する第３の指定工程と、
前記階層データを用いて、前記第２のオブジェクト領域の上位領域であって、前記第３の指定工程によって指定された部分を含む第３のオブジェクト領域を決定する第３の領域決定工程と、
前記第２のオブジェクト領域に代えて前記第３のオブジェクト領域を強調表示する第３の強調表示工程と
をさらに有することを特徴とする請求項１７記載の画像検索方法。
【請求項１９】
画像データを記憶する画像記憶手段と、前記画像データに含まれるオブジェクト領域に関する情報を記憶する領域情報記憶手段と、前記オブジェクト領域と該オブジェクト領域の下位領域又は上位領域との階層関係を階層データとして記憶する階層データ記憶手段と、前記画像データを表示する画像表示手段とを備える画像検索装置の画像検索方法であって、
前記画像表示手段で表示された前記画像データ内の任意の位置を指定する第１の指定工程と、
前記領域情報記憶手段に記憶された前記オブジェクト領域に関する情報の中から、前記第１の指定工程で指定された位置を含む第１のオブジェクト領域を決定する第１の領域決定工程と、
前記第１の領域決定工程で決定された前記第１のオブジェクト領域を強調表示する第１の強調表示工程と、
前記第１のオブジェクト領域の内部の任意の位置を指定する第２の指定工程と、
前記階層データに基づいて、前記領域情報記憶手段から前記第１のオブジェクト領域の下位領域であって前記位置を含む第２のオブジェクト領域を決定する第２の領域決定工程と、
前記第２の領域決定工程で決定された前記第２のオブジェクト領域を強調表示する第２の強調表示工程と
を有することを特徴とする画像検索方法。
【請求項２０】
前記第２のオブジェクト領域の外部の任意の位置を指定する第３の指定工程と、
前記階層データに基づいて、前記第２のオブジェクト領域の上位領域であって前記位置を含む第３のオブジェクト領域を決定する第３の領域決定工程と、
決定された前記第３のオブジェクト領域を強調表示する第３の強調表示工程と
をさらに有することを特徴とする請求項１９記載の画像検索方法。
【請求項２１】
前記第３の領域決定工程は、前記第１のオブジェクト領域の上位領域であって前記位置を含む領域がない場合、前記オブジェクト領域についての最上位領域を第３のオブジェクト領域として決定することを特徴とする請求項２０記載の画像検索方法。
【請求項２２】
前記強調表示が、決定されたオブジェクト領域の輪郭を強調することを特徴とする請求項１７から２１までのいずれか１項に記載の画像検索方法。
【請求項２３】
前記強調表示が、前記画像データにおいて決定されたオブジェクト領域以外の部分について特定のパターンを用いて塗りつぶすことを特徴とする請求項１７から２１までのいずれか１項に記載の画像検索方法。
【請求項２４】
画像データを記憶する画像記憶手段と、
前記画像データに含まれるオブジェクト領域に関する情報を記憶する領域情報記憶手段と、
前記オブジェクト領域と該オブジェクト領域の下位領域又は上位領域との階層関係を階層データとして記憶する階層データ記憶手段と、
前記領域情報記憶手段に記憶されたオブジェクト領域に関する情報と前記階層データとに基づいて、前記画像データに含まれるオブジェクト領域の下位領域又は上位領域に関する画像を階層的に表示する領域画像表示手段とを備える画像検索装置の画像検索方法であって、
前記領域画像表示手段に階層的に表示された前記オブジェクト領域の下位領域又は上位領域の画像の中から一の領域を決定する領域決定工程を有することを特徴とする画像検索方法。
【請求項２５】
前記領域画像表示手段に階層的に表示される領域の画像が一定の大きさに統一されたことを特徴とする請求項２４記載の画像検索方法。
【請求項２６】
前記オブジェクト領域の下位領域又は上位領域に対応付けられたキーワードを記憶するキーワード記憶手段をさらに備え、
前記領域画像表示手段が、前記オブジェクト領域の下位領域又は上位領域の画像と前記キーワード記憶手段に記憶されているキーワードとを対応させて表示する
ことを特徴とする請求項２４又は２５に記載の画像検索方法。
【請求項２７】
前記画像記憶手段が複数の画像データを記憶し、前記複数の画像データに含まれるオブジェクト領域に関する特徴を該オブジェクト領域と対応付けて記憶する領域特徴記憶手段をさらに備える画像検索装置の画像検索方法であって、
決定された領域に関する特徴と前記領域特徴記憶手段に記憶された他の画像データに含まれるオブジェクト領域に関する特徴とを比較して、比較された特徴が一致するオブジェクト領域を含む画像データを検索する画像検索工程をさらに有することを特徴とする請求項１９から２６までのいずれか１項に記載の画像検索方法。
【請求項２８】
前記画像検索工程が、決定された領域に関する特徴と前記領域特徴記憶手段に記憶された他の画像データに含まれるオブジェクト領域に関する特徴とを比較して、比較された特徴が類似するオブジェクト領域を含む画像データを検索することを特徴とする請求項２７記載の画像検索方法。
【請求項２９】
複数の画像データを記憶する画像記憶手段と、前記画像記憶手段に記憶された画像データ内のオブジェクト領域に関する情報を該画像データと対応付けて記憶する領域情報記憶手段と、前記領域情報記憶手段に記憶された前記オブジェクト領域の特徴を該オブジェクト領域と対応付けて記憶する領域特徴記憶手段と、前記画像記憶手段に記憶された画像データを表示する画像表示手段とを備える画像検索装置の画像検索方法であって、
前記画像表示手段で表示された画像データ上の任意の部分を指定する指定工程と、
前記指定工程で指定された部分を含むオブジェクト領域の特徴を検索対象となる画像データの特徴として入力する画像特徴入力工程と、
入力された前記特徴と前記領域特徴記憶手段に記憶されたオブジェクト領域の特徴とが一致する場合、前記画像記憶手段に記憶された画像データのうち前記オブジェクト領域を含む画像データを検索候補画像として決定する候補画像決定工程と
を有することを特徴とする画像検索方法。
【請求項３０】
前記画像特徴入力工程が、前記オブジェクト領域と該オブジェクト領域の下位領域又は上位領域との階層関係を示す階層データを用いて、前記指定工程で指定された部分を含むオブジェクト領域に関する全ての下位領域の特徴を検索対象となる画像データの特徴として入力することを特徴とする請求項２９記載の画像検索方法。
【請求項３１】
前記画像特徴入力工程は、前記検索対象となる画像データの特徴を編集可能であることを特徴とする請求項２９又は３０に記載の画像検索方法。
【請求項３２】
前記領域特徴記憶手段が、領域の画像から得られる概念を表現した概念情報、該概念を言語によって表現した言語情報、領域の画像の特徴を表現した画像特徴、又は、該概念情報と該言語情報と該画像特徴の組み合わせを前記特徴として記憶することを特徴とする請求項２７から３１までのいずれか１項に記載の画像検索方法。
【請求項３３】
コンピュータに、
画像データを画面上に表示する画像表示手順と、
表示された前記画像データ内の任意の部分を指定する第１の指定手順と、
前記画像データ内のオブジェクト領域を下位領域とし、該下位領域を含む領域を上位領域として、前記画像データ内に含まれるオブジェクト領域に関する下位領域と上位領域との階層関係を示す階層データを用いて、指定された部分を含む第１のオブジェクト領域を決定する第１の領域決定手順と、
決定された前記第１のオブジェクト領域を強調表示する第１の強調表示手順と、
強調表示された前記第１のオブジェクト領域内の任意の部分を指定する第２の指定手順と、
前記階層データを用いて、前記第１のオブジェクト領域の下位領域であって、前記第２の指定手順で指定された部分を含む第２のオブジェクト領域を決定する第２の領域決定手順と、
前記第１のオブジェクト領域に代えて前記第２のオブジェクト領域を強調表示する第２の強調表示手順と
を実行させるためのプログラム。
【請求項３４】
コンピュータに、
強調表示された前記第２のオブジェクト領域外の任意の部分を指定する第３の指定手順と、
前記階層データを用いて、前記第２のオブジェクト領域の上位領域であって、前記第３の指定手順によって指定された部分を含む第３のオブジェクト領域を決定する第３の領域決定手順と、
前記第２のオブジェクト領域に代えて前記第３のオブジェクト領域を強調表示する第３の強調表示手順と
をさらに実行させるための請求項３３記載のプログラム。
【請求項３５】
請求項３３又は３４に記載のプログラムを格納したことを特徴とするコンピュータ読み取り可能な記録媒体。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
本発明は、上記課題を解決するためになされたものであり、画像内の領域が階層的に構成されている場合に、より簡単な操作で所望の領域を選択することができ、選択された領域を用いてより簡易に画像を検索することができる画像検索装置及び画像検索方法を提供することを目的とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
【課題を解決するための手段】
上記課題を解決するため、本発明に係る画像検索装置は、画像データを表示する画像表示手段と、前記画像データ内のオブジェクト領域を下位領域とし、該下位領域を含む領域を上位領域として、前記画像データ内に含まれるオブジェクト領域に関する下位領域と上位領域との階層関係を階層データとして記憶する階層データ記憶手段と、前記画像表示手段で表示された前記画像データ内の任意の部分を指定する第１の指定手段と、前記階層データを用いて、前記第１の指定手段で指定された部分を含む第１のオブジェクト領域を決定する領域決定手段と、前記領域決定手段で決定された前記第１のオブジェクト領域を強調表示する強調表示手段と、前記強調表示手段で強調表示された前記第１のオブジェクト領域内の任意の部分を指定する第２の指定手段とを備え、前記領域決定手段が、前記階層データを用いて、前記第１のオブジェクト領域の下位領域であって、前記第２の指定手段によって指定された部分を含む第２のオブジェクト領域を決定し、前記強調表示手段が、前記第１のオブジェクト領域に代えて前記第２のオブジェクト領域を強調表示することを特徴とする。