(57)【特許請求の範囲】
【請求項１】
撮影画像から画像パターンを認識する画像処理装置であって、
前記撮影画像を入力する入力部と、
前記撮影画像から所定の画像パターン条件を満たした注目部位を検出する検出部と、
前記注目部位が所定の割合の大きさで含まれる注目領域を前記撮影画像から抽出して部分画像を生成する生成部と、
前記部分画像から文字情報を検出する文字情報検出部と、
前記文字情報と、前記撮影画像および前記部分画像との対応関係に基づいて関連情報を生成する関連情報生成部と、
前記関連情報に基づいてフォルダを作成し、前記撮影画像、前記部分画像、および前記文字情報を前記フォルダに格納するフォルダ格納部と、
前記撮影画像、前記部分画像および前記文字情報を出力する形式を示す出力形式情報を前記関連情報に基づいて生成する形式情報生成部と、
前記撮影画像、前記部分画像、および前記文字情報を、前記フォルダおよび前記出力形式情報とともに記録媒体に記録する記録部と
を備える画像処理装置。
【請求項２】
前記注目部位は、定規であり、
長尺状の四角形の形状、および複数の異なる色相を有するという特徴を前記定規の画像パターン条件として記憶するパターン条件記憶部をさらに備える請求項１に記載の画像処理装置。
【請求項３】
前記注目部位は、黒板であり、
長方形の輪郭形状、および所定の位置に突形部分を有する輪郭線を前記黒板の画像パターン条件として記憶するパターン条件記憶部をさらに備える請求項１に記載の画像処理装置。
【請求項４】
前記形式情報生成部は、前記出力形式情報に前記撮影画像および前記部分画像を前記関連情報に基づいて埋め込む手段を有する請求項１乃至請求項３のいずれかに記載の画像処理装置。
【請求項５】
前記形式情報生成部は、所定の定型書式に前記撮影画像および前記部分画像を前記関連情報に基づいて埋め込んで前記出力形式情報を生成する手段を有する請求項１乃至請求項４のいずれかに記載の画像処理装置。
【請求項６】
前記形式情報生成部は、前記撮影画像および前記部分画像を縮小させた状態で出力させる前記出力形式情報を前記関連情報に基づいて生成する手段を有する請求項１乃至請求項５のいずれかに記載の画像処理装置。
【請求項７】
前記生成部は、前記撮影画像および前記部分画像を縮小する手段を有し、
前記形式情報生成部は、縮小された前記撮影画像および前記部分画像を出力させる前記出力形式情報を前記関連情報に基づいて生成する手段を有する請求項１乃至請求項６のいずれかに記載の画像処理装置。
【請求項８】
前記形式情報生成部は、縮小された状態の前記撮影画像および前記部分画像のうち少なくともいずれかを拡大した状態で出力させる前記出力形式情報を前記関連情報に基づいて生成する手段をさらに有する請求項６又は請求項７に記載の画像処理装置。
【請求項９】
前記形式情報生成部は、前記出力形式情報に前記文字情報を前記関連情報に基づいて埋め込む手段を有する請求項１乃至請求項８のいずれかに記載の画像処理装置。
【請求項１０】
前記形式情報生成部は、前記文字情報を所望の大きさの文字で出力させる前記出力形式情報を前記関連情報に基づいて生成する手段を有する請求項１乃至請求項９に記載の画像処理装置。
【請求項１１】
前記記録部は、前記文字情報を前記出力形式情報とともに前記記録媒体にさらに記録する手段を有する請求項１乃至請求項１０のいずれかに記載の画像処理装置。
【請求項１２】
前記出力形式情報に基づいて前記撮影画像および前記部分画像を印刷する印刷部をさらに備える請求項１乃至請求項１１のいずれかに記載の画像処理装置。
【請求項１３】
前記印刷部は、前記出力形式情報に基づいて前記文字情報を印刷する手段をさらに有する請求項１２に記載の画像処理装置。
【請求項１４】
前記検出部は、複数の前記撮影画像の各々から前記注目部位を検出する手段を有し、
前記生成部は、前記注目部位が含まれる注目領域を複数の前記撮影画像の各々から抽出して複数の部分画像を生成する手段を有し、
前記関連情報生成部は、複数の前記部分画像の各々が複数の前記撮影画像のうちいずれの前記撮影画像と対応するかを示す関連情報を生成する手段を有し、
前記フォルダ格納部は、前記関連情報に基づいて複数のフォルダを作成し、対応する前記撮影画像と前記部分画像とを、他の撮影画像および他の部分画像が格納されるフォルダと異なる前記フォルダに格納する手段を有する請求項１乃至請求項１３のいずれかに記載の画像処理装置。
【請求項１５】
前記生成部は、前記撮影画像における前記注目領域の位置情報を抽出する位置抽出部をさらに備え、
前記フォルダ格納部は、前記撮影画像および前記部分画像が格納された前記フォルダに前記位置情報をさらに格納する手段を有し、
前記記録部は、前記位置情報を前記フォルダとともに前記記録媒体に記録する手段を有する請求項１乃至請求項１４のいずれかに記載の画像処理装置。
【請求項１６】
前記撮影画像に含まれる前記注目領域を指定する領域指定部をさらに備え、
前記生成部は、前記領域指定部により指定された前記注目領域の位置情報を生成する手段を有し、
前記フォルダ格納部は、前記撮影画像および前記部分画像が格納された前記フォルダに前記位置情報をさらに格納する手段を有し、
前記記録部は、前記位置情報を前記フォルダとともに前記記録媒体に記録する手段を有する請求項１乃至請求項１４のいずれかに記載の画像処理装置。
【請求項１７】
前記形式情報生成部は、前記位置情報を出力する形式をさらに示す前記出力形式情報を前記関連情報に基づいて生成する手段を有する請求項１５または請求項１６に記載の画像処理装置。
【請求項１８】
前記生成部は、前記注目部位が含まれる注目領域を拡大して部分画像を生成する手段をさらに有する請求項１乃至請求項１７のいずれかに記載の画像処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像処理装置に関し、特に、撮影画像から所定の画像パターン条件を満たした注目部位を含む部分画像を抽出して出力形式情報を生成する画像処理装置に関する。
【０００２】
【従来の技術】
従来、画像から所定の画像パターンを認識する方法として、特開平８−３０５８５５号（公開日平成８年１１月２２日）は、画像を精度よくパターン認識し、分類する方法を開示している。特開平９−１１４８５７号（公開日平成９年５月２日）、特開平５−３５８０２号（公開日平成５年２月１２日）、特開平９−６９１１４号（公開日平成９年３月１１日）は、複数の写真から構築する画像データベースを開示している。特開平５−１２３９２号（公開日平成５年１月２２日）は、所望のページタイプに複数の画像を登録するデータベースを開示している。特開平８−１８５４４７号（公開日平成８年７月１６日）、特開平１０−３３４２５５号（公開日平成１０年１２月１８日）、特開平１１−３２２８５号（公開日平成１１年２月２日）は、工事写真アルバム作成システムを開示している。
【０００３】
従来、目前にある複数の被写体に対しそれぞれ個別の写真を得たい場合、得たい写真ごとに撮影を行っていた。また、複数の被写体をそれぞれ撮影し、さらにこれら複数の被写体を一枚の全体写真として得たい場合、全体と一部とを別々に撮影していた。例えば、工事写真の場合、全体写真を撮った後、出来高を証明するために必要な部分を全体写真とは別に拡大写真として撮影し、全体写真と部分拡大写真とを一緒にして工事写真アルバムを作成し、発注者に提出していた。また、ＣＤ−ＲＯＭに収録する電子アルバムの編集は、撮影者が書いたメモの内容や写真に写る黒板に書かれた内容に基づいていた。
【０００４】
【発明が解決しようとする課題】
しかし、多数の写真を得たい場合に写真の数だけ撮影するのは多大な労力を要するので、例えば、工事写真においては、全体写真を１枚撮れば、必要な複数の部分写真を同時に得られる技術の実現が望まれていた。また、写真点数が多数である場合、電子アルバムの編集に多大な労力を要する。さらに、撮影者が写真の撮影状況に関するメモを紛失したりメモを書き忘れたりすると、アルバムを作成するのが困難となっていた。
【０００５】
そこで本発明は、上記の課題を解決することのできる画像処理装置、画像処理方法、及び記録媒体を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明のさらなる有利な具体例を規定する。
【０００６】
【課題を解決するための手段】
上記課題を解決するために、本発明の第１の形態においては、撮影画像から画像パターンを認識する画像処理装置であって、前記撮影画像を入力する入力部と、前記撮影画像から所定の画像パターン条件を満たした注目部位を検出する検出部と、前記注目部位が含まれる注目領域を前記撮影画像から抽出して部分画像を生成する生成部と、前記撮影画像と前記部分画像とが対応する画像であることを示す関連情報を生成する関連情報生成部と、前記撮影画像及び前記部分画像を出力する形式を示す出力形式情報を前記関連情報に基づいて生成する形式情報生成部とを備える。
【０００７】
前記形式情報生成部は、前記出力形式情報に前記撮影画像及び前記部分画像を前記関連情報に基づいて埋め込む手段を有してもよい。前記形式情報生成部は、所定の定型書式に前記撮影画像及び前記部分画像を前記関連情報に基づいて埋め込んで前記出力形式情報を生成する手段を有してもよい。前記形式情報生成部は、前記撮影画像及び前記部分画像を縮小させた状態で出力させる前記出力形式情報を前記関連情報に基づいて生成する手段を有してもよい。前記生成部は、前記撮影画像及び前記部分画像を縮小する手段を有し、前記形式情報生成部は、縮小された前記撮影画像及び前記部分画像を出力させる前記出力形式情報を前記関連情報に基づいて生成する手段を有してもよい。前記形式情報生成部は、縮小された状態の前記撮影画像及び前記部分画像のうち少なくともいずれかを拡大した状態で出力させる前記出力形式情報を前記関連情報に基づいて生成する手段をさらに有してもよい。
【０００８】
前記撮影画像及び前記部分画像を前記出力形式情報とともに記録媒体に記録する記録部をさらに備えてもよい。前記出力形式情報に基づいて前記撮影画像及び前記部分画像を印刷する印刷部をさらに備えてもよい。
【０００９】
前記撮影画像及び前記部分画像のうち一方から文字情報を検出する文字検出部をさらに備え、前記形式情報生成部は、前記文字情報を出力する形式をさらに示す前記出力形式情報を前記関連情報に基づいて生成する手段を有してもよい。前記形式情報生成部は、前記出力形式情報に前記文字情報を前記関連情報に基づいて埋め込む手段を有してもよい。前記形式情報生成部は、前記文字情報を所望の大きさの文字で出力させる前記出力形式情報を前記関連情報に基づいて生成する手段を有してもよい。前記記録部は、前記文字情報を前記出力形式情報とともに前記記録媒体にさらに記録する手段を有してもよい。前記印刷部は、前記出力形式情報に基づいて前記文字情報を印刷する手段をさらに有してもよい。
【００１０】
前記関連情報に基づいてフォルダを作成し、前記撮影画像及び前記部分画像を前記フォルダに格納するフォルダ格納部をさらに備え、前記記録部は、前記撮影画像及び前記部分画像を前記フォルダとともに前記記録媒体に記録する手段を有してもよい。前記フォルダ格納部は、前記文字情報を、対応する前記撮影画像及び前記部分画像が格納される前記フォルダにさらに格納する手段を有し、前記記録部は、前記文字情報を前記フォルダとともに前記記録媒体にさらに記録する手段を有してもよい。
【００１１】
前記検出部は、複数の前記撮影画像の各々から前記注目部位を検出する手段を有し、前記生成部は、前記注目部位が含まれる注目領域を複数の前記撮影画像の各々から抽出して複数の部分画像を生成する手段を有し、前記関連情報生成部は、複数の前記部分画像の各々が複数の前記撮影画像のうちいずれの前記撮影画像と対応するかを示す関連情報を生成する手段を有し、前記フォルダ格納部は、前記関連情報に基づいて複数のフォルダを作成し、対応する前記撮影画像と前記部分画像とを、他の撮影画像及び他の部分画像が格納されるフォルダと異なる前記フォルダに格納する手段を有してもよい。
【００１２】
前記生成部は、前記撮影画像における前記注目領域の位置情報を抽出する位置抽出部をさらに備え、前記格納部は、前記撮影画像及び前記部分画像が格納された前記フォルダに前記位置情報をさらに格納する手段を有し、前記記録部は、前記位置情報を前記フォルダとともに前記記録媒体に記録する手段を有してもよい。前記撮影画像に含まれる前記注目領域を指定する領域指定部をさらに備え、前記生成部は、前記領域指定部により指定された前記注目領域の前記位置情報を生成する手段を有し、前記格納部は、前記撮影画像及び前記部分画像が格納された前記フォルダに前記位置情報をさらに格納する手段を有し、前記記録部は、前記位置情報を前記フォルダとともに前記記録媒体に記録する手段を有してもよい。前記形式情報生成部は、前記位置情報を出力する形式をさらに示す前記出力形式情報を前記関連情報に基づいて生成する手段を有してもよい。
【００１３】
前記生成部は、前記注目部位が含まれる注目領域を拡大して部分画像を生成する手段をさらに有してもよい。
【００１４】
本発明の第２の形態においては、撮影画像から画像パターンを認識する画像処理方法であって、前記撮影画像を入力する段階と、前記撮影画像から所定の画像パターン条件を満たした注目部位を検出する段階と、前記注目部位が含まれる注目領域を前記撮影画像から抽出して部分画像を生成する段階と、前記撮影画像と前記部分画像とが対応する画像であることを示す関連情報を生成する段階と、前記撮影画像及び前記部分画像を出力する形式を示す出力形式情報を前記関連情報に基づいて生成する段階とを備える。
【００１５】
本発明の第３の形態においては、撮影画像から画像パターンを認識するプログラムを記録したコンピュータ読み取り可能な記録媒体であって、前記プログラムが、前記コンピュータに働きかけて、前記撮影画像を入力する手順と、前記コンピュータに働きかけて、前記撮影画像から所定の画像パターン条件を満たした注目部位を検出する手順と、前記コンピュータに働きかけて、前記注目部位が含まれる注目領域を前記撮影画像から抽出して部分画像を生成する手順と、前記コンピュータに働きかけて、前記撮影画像と前記部分画像とが対応する画像であることを示す関連情報を生成する手順と、前記コンピュータに働きかけて、前記撮影画像及び前記部分画像を出力する形式を示す出力形式情報を前記関連情報に基づいて生成する手順とを備える。
【００１６】
なお上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた発明となりうる。
【００１７】
【発明の実施の形態】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００１８】
以下、本発明を工事現場の写真画像の処理に用いた実施形態を説明する。本実施形態においては、画像処理装置が全体写真（撮影画像）から出来高を証明するために必要な部分を自動的に抽出し、これを拡大して部分拡大写真（部分画像）を生成する。そして、撮影画像と部分画像とが対応する画像であることを示す関連情報が生成され、該関連情報に基づいて撮影画像及び部分画像を出力する形式を示す出力形式情報が生成される。工事写真において、出来高を証明するための必要な部分としては、例えば物の高さや距離の測定値を表示する定規の部分、又は工事の内容を文字で表示する黒板の部分等が考えられる。
【００１９】
まず、本発明の第１実施形態を説明する。図１は、画像処理装置の一例としての、写真画像の現像や編集等をして電子アルバムを作成するラボシステムの構成図である。ここで、電子アルバムとは、複数の写真をコンピュータの画面上で閲覧可能な形式に編集したもので、ＣＤ−ＲＯＭ等の記録媒体に記録される。この画像処理装置は、入力部１０と領域指定部１１と処理部２０と記録部４０と印刷部５０と表示部５２とを備える。
【００２０】
入力部１０は、画像処理装置に撮影画像を入力する。銀塩カメラで撮影された撮影画像を画像処理装置に入力する場合、入力部１０には、ネガフイルムやポジフイルム等の写真フイルム上の画像を光学的に走査してデジタル画像データ等の電気的な情報を生成するフイルムスキャナが用いられる。デジタルカメラで撮影されたデジタル画像を画像処理装置に入力する場合、入力部１０には、入力するデジタル画像を格納した記録媒体に応じた各種読取装置が用いられる。例えば、入力部１０には、不揮発性の半導体メモリカード等の着脱自在な記録媒体から画像データを読み取るための読取装置等が用いられる。また、フロッピーディスク、ＭＯ、ＣＤ−ＲＯＭ等から画像データを読み取る場合は、入力部１０としてそれぞれフロッピードライブ、ＭＯドライブ、ＣＤドライブ等が用いられる。
【００２１】
処理部２０は、入力部１０より受け取った撮影画像から、所定の画像パターンを有する注目部位を検出する。ここで注目部位とは、撮影画像の中に写る各被写体のうち、部分画像として抽出しようとする被写体を示す。本実施形態においては、工事写真から抽出しようとする定規や黒板が注目部位である。処理部２０は、注目部位が含まれる注目領域を抽出し、さらに拡大して部分画像を生成する。また、処理部２０は、注目領域又は部分画像から位置情報や文字情報を検出し、さらに、撮影画像、部分画像、位置情報、及び文字情報の対応関係を示す関連情報を生成する。また、処理部２０は、撮影画像及び部分画像を出力する形式を示す出力形式情報を生成する。
【００２２】
領域指定部１１は、撮影画像に含まれる注目領域を指定する。ラボシステムの操作者が領域指定部１１によって注目領域を指定した場合、この注目領域の位置情報を処理部２０が生成する。表示部５２は指定された注目領域の位置情報を処理部２０から受け取って表示する。領域指定部１１は、例えば、マウス等のポインティングデバイスであってもよい。
【００２３】
記録部４０は、処理部２０から受け取った撮影画像、部分画像、位置情報、文字情報、及び関連情報を出力形式情報とともに着脱自在な記録媒体に記録する。記録媒体としては、書き込み可能なＣＤ、ＤＶＤ等の光記録媒体や、ＭＯ等の光磁気記録媒体、フロッピーディスク等の磁気記録媒体等が考えられる。記録部４０としては、ＣＤ−Ｒドライブ、ＤＶＤドライブ、ＭＯドライブ、フロッピードライブ等が用いられる。なお、記録部４０は、半導体メモリ等の記憶装置に撮影画像及び部分画像を記録してもよい。
【００２４】
印刷部５０は、処理部２０から受け取った撮影画像、部分画像、文字情報、及び位置情報を出力形式情報に基づいて印刷用紙に印刷する。印刷部５０としては、例えばデジタルプリンタ、レーザプリンタ、インクジェットプリンタ等のプリンタが用いられる。印刷用紙としては、アルバムシート、プリンタ用紙、感熱紙、熱転写紙、印画紙等が考えられる。表示部５２は、処理部２０から受け取った撮影画像、部分画像、文字情報、及び位置情報を出力形式情報に基づいて画面表示する。表示部５２としては、例えば画像を表示するモニタが用いられる。
【００２５】
図２は、処理部２０の機能ブロック図である。処理部２０は、検出部２１とパターン条件記憶部２２と生成部２３と文字検出部２４と関連情報生成部２５とフォルダ格納部２７と形式情報生成部２８とを有する。検出部２１は、入力部１０より受け取った撮影画像から、パターン条件記憶部２２より受け取る所定の画像パターン条件を満たした注目部位を検出する。パターン条件記憶部２２は、所定の画像パターン条件を記憶する。本実施形態においては、画像パターン条件として、定規や黒板の画像パターンの特徴を定める条件をパターン条件記憶部２２に記憶させておく。
【００２６】
生成部２３は、撮影画像から注目部位が含まれる注目領域を抽出する。ここで生成部２３は、注目部位が所定の割合の大きさで含まれる注目領域を抽出してもよい。例えば、撮影画像から定規が含まれた注目領域を抽出する場合、定規の目盛りが読み易い程度の大きさの割合で生成部２３に注目領域を抽出させてもよい。また例えば、撮影画像から黒板が含まれた注目領域を抽出する場合、黒板以外の背景はさほど必要でないので、黒板が９割程度の大きさで含まれる注目領域を生成部２３に抽出させてもよい。
【００２７】
このように、本実施形態においては、所定の画像パターン条件をパターン条件記憶部２２に記憶させておき、検出部２１が画像パターン条件を満たす注目部位を検出し、生成部２３が注目部位を含む注目領域を抽出する。したがって、例えば工事写真の場合、工事現場の全体写真とは別に定規や黒板の写真を撮らなくとも、全体写真からその部分写真として定規や黒板を自動的に検出し抽出することができる。
【００２８】
生成部２３は、撮影画像における部分画像の位置情報を生成する。即ち、生成部２３は、注目部位が含まれる注目領域の位置情報を抽出する。位置情報としては、例えば注目部位が含まれる矩形領域の撮影画像における位置を示す座標が考えられる。生成部２３により抽出された位置情報は、記録部４０により撮影画像及び部分画像とともに記録媒体に記録される。生成部２３により抽出された位置情報を撮影画像とともに印刷部５０に印刷させてもよい。
【００２９】
生成部２３により抽出された位置情報を、表示部５２により画面表示させてもよい。例えば、表示部５２が撮影画像と部分画像とを画面表示するときに、表示部５２は部分画像の撮影画像における位置情報として座標の数値をさらに画面表示してもよい。例えば、表示部５２は、部分画像の撮影画像における位置情報に基づいて、部分画像として抽出された矩形領域を撮影画像の中に破線表示してもよい。例えば、部分画像として抽出された注目領域をラボシステムの操作者が領域指定部１１により指定したときに、部分画像の位置情報に基づいて注目部位が含まれる領域を表示部５２に破線表示させてもよい。
【００３０】
このように、生成部２３が注目部位を含む注目領域の位置情報を抽出し、記録部４０が位置情報を記録媒体に記録するので、この記録媒体に納められた画像を閲覧する者は、部分画像が撮影画像のどの部分を抽出したものであるかを確認することができる。また、印刷部５０が位置情報を撮影画像とともに印刷するので、印刷物の閲覧者は部分画像が撮影画像のどの部分を抽出したものであるかを確認することができる。また、表示部５２が位置情報を画面に出力するので、ラボシステムの操作者は、部分画像が撮影画像のどの部分を抽出したものであるかを画面上で確認することができる。
【００３１】
生成部２３は、注目部位が含まれる注目領域を拡大して部分画像を生成する。注目部位が含まれる注目領域を拡大する場合、定規の目盛りや黒板に書かれた文字を読み易くするため、生成部２３に部分画像のシャープネス、コントラスト、明るさ、カラーバランス等を補正させてもよい。
【００３２】
このように、生成部２３は注目部位が含まれる注目領域を拡大して部分画像を生成するので、例えば工事写真の場合、工事現場の全体写真から定規や黒板の部分拡大写真を自動的に生成することができる。
【００３３】
生成部２３は、撮影画像及び部分画像のそれぞれに対しファイル名を与えて各画像のデータファイルを生成する。生成部２３は、撮影画像及び部分画像のそれぞれに対し、撮影画像と部分画像とが互いに関連することを示したファイル名を与えてもよい。
【００３４】
文字検出部２４は、生成部２３が生成した部分画像から文字情報を検出する。例えば、部分画像が黒板の画像を含む場合、文字検出部２４は、黒板に表示された文字の画像を認識し、その文字を示す文字コードが含まれる文字情報を生成する。文字情報は印刷部５０によりアルバムシート等の印刷用紙に印刷される。例えば、工事写真アルバムの場合、印刷部５０が工事写真中の黒板の画像から検出された工事状況に関する情報を、アルバムシートの写真を貼り付ける部分の側に印刷してもよい。
【００３５】
このように、文字検出部２４により検出された文字情報を印刷部５０が印刷するので、例えば工事写真アルバムの作成者が工事状況に関する情報を写真から書き写す労力を低減させることができる。
【００３６】
文字検出部２４により検出された文字情報は表示部５２により画面表示される。また、文字情報は記録部４０により記録媒体に記録される。このように、文字検出部２４が部分画像から文字情報を検出し、文字情報を記録部４０が記録媒体に記録するので、撮影画像及び部分画像の閲覧者は、これらの画像が撮影された状況に関する情報を容易に得ることができる。例えば、工事写真の場合、工事名や場所等の工事の状況に関する情報を自動的に記録媒体へ記録させるので、撮影画像及び部分画像の閲覧者は工事に関する情報を容易に得ることができる。
【００３７】
文字検出部２４は、各文字の画像パターンと、各文字の画像パターンに対応する文字コードとを記憶する。通常、黒板には工事名、工種、撮影月日、位置、設計寸法、実測寸法、立会監督員、及び略図といった項目が表示されている。このように記載項目が予め定められているので、書かれる内容は記載項目ごとにある程度推測できる。そこで、記載される可能性の高い文字列の画像パターンと、該画像パターンに対応する文字コードとを文字検出部２４に記憶させておいてもよい。
【００３８】
このように、文字検出部２４が検出する可能性の高い文字列の画像パターンと文字コードとを文字検出部２４に記憶させておくことにより、文字検出部２４の文字認識率を高めることができる。なお、他の形態としては、文字検出部２４は、撮影画像に含まれる注目領域から文字情報を検出してもよい。
【００３９】
関連情報生成部２５は、注目部位が含まれる注目領域を抽出した部分画像と撮影画像との対応関係を示す関連情報を生成する。例えば関連情報生成部２５は、関連情報を所定のデータファイルに収めて生成してもよい。また例えば関連情報生成部２５は、関連情報を撮影画像及び部分画像のうち一方又は双方の画像データ中に含めさせてもよい。
【００４０】
関連情報生成部２５は、撮影画像のファイル名と部分画像のファイル名との対応関係に基づいて関連情報を生成してもよい。また、関連情報生成部２５は、検出部２１が撮影画像から注目部位を検出しなかったことを示す情報を含む関連情報を生成してもよい。さらに、関連情報生成部２５は、位置情報と、撮影画像及び部分画像のうち一方又は双方との対応関係に基づいて関連情報を生成してもよい。またさらに、関連情報生成部２５は、文字情報と、撮影画像及び部分画像のうち一方又は双方との対応関係に基づいて関連情報を生成してもよく、また文字情報と関連情報との対応関係を示す情報を生成してもよい。
【００４１】
このように、関連情報生成部２５が、撮影画像と部分画像との対応関係を示す関連情報を生成するので、撮影画像及び部分画像の閲覧者は、撮影画像と部分画像との対応関係を容易に把握することができる。また、部分画像から検出される文字情報に基づいて撮影画像及び部分画像を関連付けるので、例えば工事写真の場合、黒板に書かれた工事状況に関する情報を用いて撮影画像及び部分画像を関連付けることができる。また、撮影画像、部分画像等が記録された記録媒体において、位置情報又は文字情報に基づいて容易に所望の画像を検索することができる。
【００４２】
フォルダ格納部２７は、関連情報に基づいて撮影画像及び部分画像を格納するフォルダを作成する。ここでフォルダは、所定のファイルの記憶場所（ディレクトリ）を論理的又は視覚的に示す。例えば、パーソナルコンピュータ等の画面上の表示方法（ＧＵＩ：Graphical User Interface）において、フォルダを一つのオブジェクトとしてアイコン表示させてもよい。また、他の形態において、フォルダは、ツリー構造を有する階層化ディレクトリにおける一つの階層であってもよい。入力部１０が複数の撮影画像を入力する場合、フォルダ格納部２７は、撮影画像の数と同じ数のフォルダを作成する。
【００４３】
フォルダ格納部２７は、フォルダに撮影画像及び部分画像を格納する。フォルダ格納部２７は、関連情報に基づいて対応する撮影画像と部分画像とを同じフォルダに格納する。入力部１０が複数の撮影画像を入力する場合、フォルダ格納部２７は、関連情報に基づいて複数の撮影画像を異なるフォルダに格納する。そして、フォルダ格納部２７は、複数の部分画像を関連情報に基づいてそれぞれ対応する撮影画像が格納されたフォルダに格納する。
【００４４】
フォルダ格納部２７は、関連情報を、該関連情報に対応する撮影画像及び部分画像が格納されたフォルダに格納してもよい。フォルダ格納部２７は、文字情報を、該文字情報に対応する撮影画像及び部分画像が格納されたフォルダに格納してもよい。フォルダ格納部２７は、位置情報を、該位置情報に対応する撮影画像及び部分画像が格納されたフォルダに格納してもよい。記録部４０は、フォルダ格納部２７によりフォルダに格納された撮影画像、部分画像、位置情報、文字情報、および関連情報をフォルダとともに記録媒体に記録する。
【００４５】
このように、フォルダ格納部２７は、対応する撮影画像及び部分画像等を対応関係のない画像等と区別して一つのフォルダに格納することができる。
【００４６】
形式情報生成部２８は、フォルダに格納された撮影画像、部分画像、関連情報、位置情報、および文字情報のうち少なくとも一つの出力形式情報を生成する。出力形式情報は、印刷部５０による印刷、又は表示部５２による画面表示における出力内容、配置、および表示寸法のうち少なくとも一つを定める。例えば、形式情報生成部２８は、撮影画像、部分画像、および文字情報のうち少なくとも一つを関連情報に基づいて印刷用紙の所定の位置に印刷させる出力形式情報を生成する。
【００４７】
フォルダに格納された撮影画像及び部分画像等は、出力形式情報とともに記録部４０により記録媒体に記録される。フォルダに格納された撮影画像及び部分画像等は、出力形式情報に基づき印刷部５０により印刷される。フォルダに格納された撮影画像及び部分画像等は、出力形式情報に基づき表示部５２により画面表示される。
【００４８】
形式情報生成部２８は、出力形式情報をＨＴＭＬ（Hyper Text Markup Language）やＸＭＬ（eXtensible Markup Language）等のテキスト記述言語を用いて生成してもよい。ＨＴＭＬやＸＭＬで生成された出力形式情報は、表示する画像のファイル名、配置、寸法、文字等を定めるテキストファイルである。したがって、ＨＴＭＬ等で生成された出力形式情報のファイルには、撮影画像及び部分画像のデータファイル自体は内包されない。
【００４９】
形式情報生成部２８は、出力形式情報に撮影画像及び部分画像を埋め込んでもよい。この場合の出力形式情報は、撮影画像及び部分画像を内包した一つのデータファイルを形成する。
【００５０】
形式情報生成部２８は、所定の定型書式に撮影画像及び部分画像を埋め込んで出力形式情報を生成してもよい。ここでいう定型書式とは、表示する画像の配置や表示寸法が予め定められた書式をいい、テンプレートファイルやひな形ファイル等が考えられる。撮影画像及び部分画像が埋め込まれた定型書式は一つのデータファイルを形成する。
【００５１】
形式情報生成部２８は、撮影画像及び部分画像を大きさを縮小させた状態で出力（以下、「サムネイル表示」という）させる出力形式情報を生成する。例えば、形式情報生成部２８は、撮影画像及び部分画像を表示の際に縮小させる出力形式情報を生成してもよい。また例えば、形式情報生成部２８は、生成部２３が撮影画像及び部分画像を縮小し、この縮小された撮影画像及び部分画像を出力させる出力形式情報を生成してもよい。
【００５２】
形式情報生成部２８は、縮小された状態の撮影画像及び部分画像のうち少なくともいずれかを拡大した状態で出力させる出力形式情報を生成してもよい。例えば、撮影画像及び部分画像をサムネイル表示させ、これらの中から選択されたいずれかの縮小画像を拡大させてもよい。また例えば、撮影画像及び部分画像をサムネイル表示させ、これらの中から選択されたサムネイル画像に対応する縮小前の画像を表示させてもよい。
【００５３】
形式情報生成部は、複数のフォルダのうち少なくとも一つに格納された撮影画像及び部分画像を、他のフォルダに格納された撮影画像及び部分画像を印刷する印刷用紙と異なる印刷用紙に印刷する出力形式情報を生成する。これにより、各印刷用紙には、対応する撮影画像及び部分画像を対応しない画像と区別して１枚に印刷することができる。
【００５４】
図３は、本実施形態における撮影画像、部分画像、文字情報、関連情報、及びフォルダの対応関係を示す。撮影画像としては、撮影画像００１及び００２が入力部１０により入力される。部分画像としては、部分画像００１〜００４が生成部２３により生成される。部分画像００１及び００２は撮影画像００１から抽出され、部分画像００３及び００４は撮影画像００２から抽出される。文字情報としては、文字情報００１及び００２が文字検出部２４により生成される。文字情報００１は部分画像００２から抽出され、文字情報００２は部分画像００４から抽出される。
【００５５】
関連情報としては、関連情報００１及び００２が関連情報生成部２５により生成される。関連情報００１は、撮影画像００１と部分画像００１と部分画像００２との対応関係を示す。関連情報００２は、撮影画像００２と部分画像００３と部分画像００４との対応関係を示す。本実施形態の関連情報は、関連情報生成部２５により所定のデータファイルに収められて生成される。
【００５６】
撮影画像００１は、フォルダ格納部２７によりフォルダ００１へ格納される。部分画像００１及び００２は、撮影画像００１から抽出されるので、撮影画像００１が格納されたフォルダ００１へフォルダ格納部２７により格納される。文字情報００１は、部分画像００２から抽出されるので、部分画像００２が格納されたフォルダ００１へフォルダ格納部２７により格納される。関連情報００１は、撮影画像００１と部分画像００１と部分画像００２との対応関係を示すので、撮影画像００１、部分画像００１及び００２が格納されたフォルダ００１へフォルダ格納部２７により格納される。
【００５７】
撮影画像００２は、フォルダ格納部２７によりフォルダ００２へ格納される。部分画像００３及び００４は、撮影画像００２から抽出されるので、撮影画像００２が格納されたフォルダ００２へフォルダ格納部２７により格納される。文字情報００２は、部分画像００４から抽出されるので、部分画像００４が格納されたフォルダ００２へフォルダ格納部２７により格納される。関連情報００２は、撮影画像００２と部分画像００３と部分画像００４との対応関係を示すので、撮影画像００２、部分画像００３及び００４が格納されたフォルダ００２へフォルダ格納部２７により格納される。
【００５８】
本実施形態においては、フォルダ格納部２７は、関連情報００１に基づいて撮影画像００１、部分画像００１、部分画像００２、関連情報００１、及び文字情報００１をフォルダ００１に格納する。また、フォルダ格納部２７は、関連情報００２に基づいて撮影画像００２、部分画像００３、部分画像００４、関連情報００２、及び文字情報００２をフォルダ００２に格納する。そして、記録部４０は、フォルダ００１とフォルダ００２とを記録媒体に記録する。したがって、対応関係を有する撮影画像及び部分画像等を関連情報に基づいて一つのフォルダに格納して記録媒体に記録することができる。
【００５９】
このように、本実施形態においては、対応関係を有する複数の画像等を関連情報に基づいて一つのフォルダに格納するので、撮影画像及び部分画像等を対応関係のない他の画像等と区別して記録媒体に記録することができる。
【００６０】
図４は、本実施形態における撮影画像、部分画像、文字情報、及び関連情報の対応関係を示す。本実施形態においては、関連情報生成部２５は、文字情報を用いて撮影画像と部分画像との対応関係を示す関連情報を生成する。
【００６１】
撮影画像００１が入力部１０により画像処理装置に入力される。部分画像００１及び００２が生成部２３により生成される。文字情報００１が文字検出部２４により検出される。関連情報００１が関連情報生成部２５により生成される。文字情報には、部分画像００２に写る黒板の画像から検出された、工種（車道工）及び撮影月日（平成１１年○月△日）の情報が含まれる。関連情報００１は、文字情報に基づいて撮影画像００１、部分画像００１及び部分画像００２の対応関係を示す。図に示される通り、撮影画像００１は「車道工０１」として関連情報００１内に示される。部分画像００１は「車道工０２」として関連情報００１内に示されて撮影画像００１と関連付けられる。部分画像００２は「車道工０３」として関連情報００１内に示されて撮影画像００１及び部分画像００１と関連付けられる。
【００６２】
このように、本実施形態においては、関連情報生成部２５が、撮影画像や部分画像を文字情報に基づいて関連付ける。したがって、例えば工事写真において、撮影画像及び部分画像の対応関係を工事の種類や日付等を用いて示すことができる。
【００６３】
図５は、ＨＴＭＬを用いて生成した出力形式情報を示す。形式情報生成部２８は、関連情報に基づいて撮影画像及び部分画像を出力する形式を示す出力形式情報としてＨＴＭＬ文書６９を生成する。関連情報００１は、文字検出部２４により生成された文字情報００１を用いて撮影画像００１、部分画像００１及び００２の対応関係を示す。ＨＴＭＬ文書６９には、出力する内容として画像ファイル名、表示する配置、表示寸法等が記述される。
【００６４】
撮影画像００１には、ファイル名としてS001.jpgが付与される。部分画像００１には、ファイル名としてB001.jpgが付与される。部分画像００２には、ファイル名としてB002.jpgが付与される。関連情報００１には、撮影画像００１、部分画像００１及び００２に対応する文字情報がそれぞれ示される。撮影画像００１には、「車道工０１」の文字が対応付けられる。部分画像００１には、「車道工０２」の文字が対応付けられる。部分画像００２には、「車道工０３」の文字が対応付けられる。
【００６５】
ＨＴＭＬ文書６９には、最初に表示する画像として撮影画像００１を示す「S001.jpg」と、対応する文字である「車道工００１」が記述される。次に表示する画像として、ＨＴＭＬ文書６９には、部分画像００１を示す「B001.jpg」と、対応する文字である「車道工００２」が記述される。最後に表示する画像として、ＨＴＭＬ文書６９には、部分画像００２を示す「B002.jpg」と、対応する文字である「車道工００３」が記述される。各画像の表示寸法として、ＨＴＭＬ文書６９には「HEIGHT="60" WIDTH="100"」（高さ６０ピクセル、幅１００ピクセル）の文字が記述される。各画像の表示配置として、ＨＴＭＬ文書６９には「〜」（中央配置）の文字が記述される。
【００６６】
なお、形式情報生成部２８は、各画像の表示配置が各画像の大きさ等により異なる出力形式情報を生成してもよい。形式情報生成部２８は、各画像の表示寸法が異なる出力形式情報を生成してもよい。形式情報生成部２８は、ＸＭＬを用いて出力形式情報を生成してもよい。ＨＴＭＬ文書６９は、撮影画像及び部分画像とともにフォルダに格納される。
【００６７】
次に、第２実施形態を説明する。本実施形態における出力形式情報には、撮影画像、部分画像、及び文字情報が関連情報に基づいて埋め込まれている。図６は、本実施形態の出力形式情報としての出力文書６８における画像の配置を示す。出力文書６８には、所定のフォルダに格納された撮影画像、部分画像及び文字情報が関連情報に基づいて配置される。撮影画像としては、撮影画像６５ａが配置され、部分画像としては部分画像６５ｂ、ｃが配置される。文字情報としては、文字情報６６ａ〜ｃが配置される。撮影画像６５ａ、部分画像６５ｂ、ｃ、文字情報６６ａ〜ｃの各データはそれぞれ出力文書６８に埋め込まれて内包される。印刷部５０は、出力形式情報に基づき、本図に示される画像の配置で撮影画像等を印刷してもよい。
【００６８】
形式情報生成部２８が撮影画像６５ａ、部分画像６５ｂ、ｃを出力文書６８に埋め込む位置や順序は、関連情報に示される撮影画像６５ａ、部分画像６５ｂ、ｃの対応関係に基づく。形式情報生成部２８は、撮影画像６５ａにおける部分画像６５ｂ、ｃの位置情報（破線６７ａ、ｂ）を出力する出力形式情報を生成してもよい。
【００６９】
このように、形式情報生成部２８は出力文書６８に撮影画像６５ａ、部分画像６５ｂ、ｃ、文字情報６６ａ〜ｃを関連情報に基づいて自動的に配置して埋め込む。したがって、電子アルバムの作成において、写真の順序や配置等を作成者が判断する労力を低減させることができる。
【００７０】
次に、第３実施形態を説明する。本実施形態は、定型書式に撮影画像、部分画像および文字情報を関連情報に基づいて埋め込んで出力形式情報を生成する。図７は、本実施形態における定型書式文書６７を示す。定型書式文書６７は、撮影画像及び部分画像を埋め込む領域として、画像エリア６５ａ、ｂ及びｃを有する。また定型書式文書６７は、文字情報を埋め込む領域として、文字情報エリア６６ａ、ｂ及びｃを有する。関連情報００１には、撮影画像００１、部分画像００１及び００２に関連する文字がそれぞれ文字情報００１に基づいて対応付けられる。撮影画像００１には、「車道工０１」の文字が対応付けられる。部分画像００１には、「車道工０２」の文字が対応付けられる。部分画像００２には、「車道工０３」の文字が対応付けられる。
【００７１】
画像エリア６５ａには、撮影画像００１が埋め込まれる。画像エリア６５ｂには、部分画像００２が埋め込まれる。画像エリア６５ｃには、部分画像００３が埋め込まれる。文字情報エリア６６ａには、文字情報として「車道工０１」の文字が埋め込まれる。文字情報エリア６６ｂには、文字情報として「車道工０２」の文字が埋め込まれる。文字情報エリア６６ｃには、文字情報として「車道工０３」の文字が埋め込まれる。
【００７２】
このように、本実施形態の画像処理装置は、関連情報に基づいて撮影画像、部分画像、及び文字情報を自動的に定型書式に埋め込んだ出力形式情報を生成することができる。
【００７３】
次に、第４実施形態を説明する。本実施形態においては、形式情報生成部２８は、撮影画像及び部分画像をサムネイル表示させる出力形式情報を生成する。図８は、サムネイル表示を用いた出力形式情報を示す。出力文書６８は、サムネイルエリア７０と画像エリア６５と文字情報エリア６６とを有する。サムネイルエリア７０には、撮影画像及び部分画像としてサムネイル７１ａ〜ｅが埋め込まれる。また、形式情報生成部２８は、文字情報を所望の大きさの文字で出力させる出力形式情報を関連情報に基づいて生成する。例えば、サムネイルエリア７０において各画像の下に、各画像に対応する文字情報として小タイトル文字７２ａ〜ｅを小さい文字で埋め込んでもよい。
【００７４】
サムネイル７１ａ〜ｅの各々は、生成部２３により撮影画像及び部分画像が縮小されて生成される。他の形態としては、サムネイル７１ａ〜ｅとして撮影画像及び部分画像を縮小して出力させる出力形式情報を形式情報生成部２８に生成させてもよい。画像エリア６５には、サムネイル７１ａ〜ｅのうちいずれかが出力される。文字情報エリア６６には、画像エリア６５に出力される画像に対応する文字情報が出力される。文字情報エリア６６に出力される文字の大きさは、サムネイルエリア７０に出力される小タイトル文字７２よりも大きい文字が望ましい。本実施形態の出力形式情報の閲覧者が、サムネイルエリア７０に埋め込まれたサムネイル７１ａ〜ｅのうちいずれかを選択すると、選択されたサムネイル７１の拡大画像が画像エリア６５に出力される。また、選択されたサムネイル７１に対応する文字情報が文字情報エリア６６に出力される。
【００７５】
このように、本実施形態の画像処理装置は、関連情報に基づいて自動的に撮影画像及び部分画像をサムネイル表示する出力形式情報を生成することができる。
【００７６】
図９は、表示部５２により画面表示された画像の一例を示す。表示部５２が表示する画像は、撮影画像６０と部分画像６２ａ〜ｄとを含む。例えば表示部５２は、画面に図９のような配置で撮影画像６０と部分画像６２ａ〜ｄとを表示させる。また、撮影画像６０には、部分画像６２ａ〜ｄとして抽出された領域を破線６４ａ〜ｄで表示させてもよい。
【００７７】
このように、表示部５２が撮影画像６０を部分画像６２ａ〜ｄとともに画面表示するので、ラボシステムの操作者は撮影画像６０を部分画像６２ａ〜ｄとの対応関係を容易に把握することができる。また、撮影画像６０に部分画像６２ａ〜ｄとして抽出された領域を破線６４ａ〜ｄで表示する場合には、部分画像６２ａ〜ｄを撮影画像６０のどの領域から抽出したのかを、ラボシステムの操作者が容易に把握することができる。印刷部５０は、本図の配置で撮影画像及び部分画像を印刷してもよい。
【００７８】
図１０は、定規８０の画像パターンを示す図である。本実施形態における画像パターンの一つは、長さを表示する定規８０の画像である。パターン条件記憶部２２には、撮影する定規８０の画像パターンの特徴を定める画像パターン条件を記憶させておく。例えば、複数の異なる色相で配色された定規８０を撮影する場合、パターン条件記憶部２２には、長尺状の四角形の形状、及び複数の異なる色相を有するという特徴を定規８０の画像パターン条件として記憶させておいてもよい。
【００７９】
本実施形態の場合、定規８０の第一色部８１と第三色部８３とには青色を配し、また第二色部８２には赤色を配している。この場合、まず検出部２１が撮影画像から長尺状の四角形の形状を有する被写体を検出する。そして、長尺状の被写体が青色と赤色との配色を有するかを検出部２１が検出する。被写体が青色と赤色との配色を有していた場合、その被写体は画像パターン条件を満たした定規であると判断される。このように、パターン条件記憶部２２に記憶させた画像パターン条件が、複数の異なる色相を交互に配色した定規８０の特徴を定めているので、検出部２１により注目部位を容易に検出することができる。
【００８０】
なお、工事写真において撮影される定規は、物の高さ等を測るために縦に支えられて撮影される場合と、物の幅等を測るために横向きに倒されて撮影される場合とがある。これらいずれの場合であっても検出部２１が定規８０を検出できるよう、パターン条件記憶部２２には定規８０の特徴として縦長の形状と横長の形状との双方の条件を記憶させてもよい。
【００８１】
例えば、画像パターンの内側部分の明度と異なる明度を持つ輪郭線、及び所定の位置に突形部分を含む輪郭線を有するという特徴を定規８０の画像パターン条件として記憶させておいてもよい。本実施形態の場合、定規８０の内側部分に白色を配し、定規の輪郭線８４に黒色を配している。また、輪郭線８４は、内側方向へ突出する所定間隔の目盛り線を含む。さらに、輪郭線８４及び目盛り線は太線で形成される。パターン条件記憶部２２に記憶させた画像パターン条件が、内側部分の明度と異なる明度を持つ輪郭線８４や、目盛り線を含む輪郭線８４を有する定規８０の特徴を定めているので、検出部２１により注目部位を容易に検出することができる。
【００８２】
図１１は、黒板９０の画像パターンを示す図である。本実施形態における画像パターンの一つは、書かれた文字を表示する黒板９０の画像である。パターン条件記憶部２２には、撮影する黒板９０の画像パターンの特徴を定める画像パターン条件を記憶させておいてもよい。例えば、長方形の輪郭形状、画像パターンの内側部分の色相と異なる色相を有する輪郭線、及び所定の位置に突形部分を有する輪郭線を有するという特徴を黒板９０の画像パターン条件として記憶させておいてもよい。
【００８３】
本実施形態の場合、黒板９０の内側部分（文字表示部９３）に濃緑色を配し、黒板９０の輪郭線９１に黄色を配している。また、輪郭線９１は、内側方向へ突出する突形部分９２ａ〜ｄを各辺の略中央にそれぞれ有する。輪郭線９１及び突形部分９２は、黒板９０の検出を容易にするため略幅広に形成される。この場合、検出部２１は、まず略横長の長方形の形状をした被写体を撮影画像から検出する。そして、検出部２１は、内側部分の色相と異なる色相を有する略幅広の輪郭線９１を検出する。さらに、長方形の被写体の輪郭線９１が黄色であり、また文字表示部９３が濃緑色であるかを検出する。さらに、検出部２１は、輪郭線９１の各辺略中央に略幅広の突形部分９２ａ〜ｄを有しているかを検出する。またさらに検出部２１は、輪郭線９１と突形部分９２ａ〜ｄが略幅広であるかを検出する。こうして検出部２１により検出された被写体が、黒板９０であると判断される。
【００８４】
このように、パターン条件記憶部２２に記憶させた画像パターン条件が、内側部分の色相と異なる色相を持つ輪郭線９１、及び突形部分９２を含む輪郭線９１を有する黒板９０の特徴を定めるので、検出部２１により注目部位を容易に検出することができる。
【００８５】
図１２は、画像処理方法を示すフローチャートである。まず、画像処理の動作を開始し（Ｓ１００）、入力部１０が撮影画像を画像処理装置に入力する（Ｓ１０２）。次に、処理部２０は撮影画像から部分画像を生成する（Ｓ１０４）。次に、関連情報生成部２５は撮影画像と部分画像との対応関係を示す関連情報を生成する（Ｓ１０６）。入力部１０により入力された複数の撮影画像の全てを処理するまでＳ１０４の段階とＳ１０６の段階とを繰り返す（Ｓ１０８）。
【００８６】
次に、フォルダ格納部２７がフォルダを作成して撮影画像及び部分画像等を格納する（Ｓ１１０）。次に、形式情報生成部２８が出力形式情報を生成する（Ｓ１１２）。次に、表示部５２が出力形式情報に基づいて撮影画像及び部分画像等を画面表示する（Ｓ１１３）。撮影画像及び部分画像等がフォルダとともに書き込み指定され（Ｓ１１４）、記録部４０により記録媒体に記録される（Ｓ１１６）。次に、撮影画像及び部分画像等を印刷する（Ｓ１１８）。そして、画像処理装置による処理が終了する（Ｓ１２０）。
【００８７】
図１３は、図１２における部分画像生成段階（Ｓ１０４）の詳細な動作を示すフローチャートである。まず、検出部２１が、パターン条件記憶部２２から受け取る画像パターン条件を満たした注目部位を撮影画像から検出する（Ｓ１３０）。次に、生成部２３が注目部位を含む注目領域を撮影画像から抽出する（Ｓ１３２）。次に、生成部２３は、注目部位を含む注目領域の撮影画像における位置情報を抽出する（Ｓ１３４）。次に、生成部２３は、注目部位を含む注目領域を拡大して部分画像を生成する（Ｓ１３６）。次に、文字検出部２４が部分画像から文字情報を検出する（Ｓ１３８）。全ての注目部位に対し部分画像を生成するまで、Ｓ１３２からＳ１３８までの段階を繰り返す（Ｓ１４０）。
【００８８】
次に、第５実施形態を説明する。本実施形態の基本的な構成及び動作は、図１乃至図１３に示される基本的な構成及び動作と同様である。本実施形態は、処理部２０としてパーソナルコンピュータやワークステーション等の電子計算機を用いる。
【００８９】
図１４は、第５実施形態における処理部２０のハードウェア構成図である。ＣＰＵ３０はＲＯＭ３２およびＲＡＭ３４に格納されたプログラムに基づいて動作する。入力装置３１を介して操作者によりデータが入力される。入力装置３１は領域指定部１１から受け取る信号に基づいてデータを入力してもよい。ハードディスク３３は、画像等のデータ、及びＣＰＵ３０を動作させるプログラムを格納する。ＣＤ−ＲＯＭドライブ３５はＣＤ−ＲＯＭ１００からデータ又はプログラムを読み取り、ＲＡＭ３４、ハードディスク３３及びＣＰＵ３０の少なくともいずれかに提供する。
【００９０】
図１５は、ＣＰＵ３０が実行するソフトウエアの機能構成を示すブロック図である。これらのソフトウエアは、ＣＤ−ＲＯＭ１００等の記録媒体に格納されて利用者に提供される。記録媒体に格納されたソフトウエアは圧縮されていても非圧縮であってもよい。ソフトウエアは記録媒体からハードディスク３３にインストールされ、ＲＡＭ３４に読み出されてＣＰＵ３０により実行される。
【００９１】
記録媒体に格納されて提供されるソフトウエア、即ちハードディスク３３にインストールされるソフトウェアは、機能構成として検出モジュール１２１とパターン条件モジュール１２２と生成モジュール１２３と文字検出モジュール１２４と関連情報生成モジュール１２５とフォルダ格納モジュール１２７と形式情報生成モジュール１２８とを備える。
【００９２】
パターン条件モジュール１２２には、画像パターン条件が含まれる。検出モジュール１２１は、入力部１０より受け取る撮影画像から、パターン条件モジュール１２２より受け取る画像パターン条件を満たした注目部位を検出する。生成モジュール１２３は、撮影画像から注目部位が含まれる注目領域を抽出して拡大した部分画像を生成する。文字検出モジュール１２４は、部分画像から文字情報を検出する。文字検出モジュール１２４は、部分画像から検出する可能性の高い文字の画像パターンと文字コードとを記憶する。関連情報生成モジュール１２５は、撮影画像と部分画像とが対応する画像であることを示す関連情報を生成する。フォルダ格納モジュール１２７は、関連情報に基づいてフォルダを作成して撮影画像及び部分画像等を格納する。形式情報生成モジュール１２８は、フォルダに格納された撮影画像及び部分画像等の出力形式情報を生成し、記録部４０と印刷部５０と表示部５２とに出力する。
【００９３】
記録媒体の一例としてのＣＤ−ＲＯＭ１００には、本出願で説明した処理部２０の動作の一部又は全ての機能を格納することができる。またＣＤ−ＲＯＭ１００には他の装置の動作の一部又は全ての機能を格納することができる。これらのプログラムは記録媒体から直接ＲＡＭ３４に読み出されて実行されてもよい。
【００９４】
記録媒体としては、ＣＤ−ＲＯＭ１００の他にも、ＤＶＤやＰＤ等の光学記録媒体、フロッピーディスクやミニディスク（ＭＤ）等の磁気記録媒体、ＭＯ等の光磁気記録媒体、テープ状記録媒体、不揮発性の半導体メモリカード等を用いることができる。上記のプログラムを格納した記録媒体は、画像処理装置を製造するためにのみ使用されるものであり、そのような記録媒体の業としての製造および販売等が本出願に基づく特許権の侵害を構成することは明らかである。
【００９５】
なお、第１〜第４実施形態においてはラボシステムを、第５実施形態においては電子計算機を例にして本発明の画像処理装置を説明したが、他の形態としては、本発明の画像処理装置はデジタルカメラ等のカメラであってもよい。
【００９６】
以上のように、第１〜４実施形態によれば、所定の画像パターン条件をパターン条件記憶部２２に記憶させておき、検出部２１が画像パターン条件を満たす注目部位を検出し、生成部２３が注目部位を含む領域を抽出する。したがって、例えば工事写真の場合、全体写真とは別に定規や黒板の写真を撮らなくとも、全体写真からその一部として定規や黒板を自動的に検出し抽出することができる。
【００９７】
また、本実施形態によれば、生成部２３が注目部位を含む領域の位置情報を抽出し、印刷部５０が位置情報を撮影画像とともに印刷するので、印刷物の閲覧者は部分画像が撮影画像のどの部分を抽出したものであるかを確認することができる。また、表示部５２が位置情報を画面に出力するので、ラボシステムの操作者は、部分画像が撮影画像のどの部分を抽出したものであるかを画面上で確認することができる。また、記録部４０が位置情報を記録媒体に記録するので、この記録媒体に納められた画像を閲覧する者は、部分画像が撮影画像のどの部分を抽出したものであるかを確認することができる。
【００９８】
また、本実施形態によれば、生成部２３は注目部位が含まれる領域を拡大して部分画像を生成するので、例えば工事写真の場合、工事現場の全体写真から定規や黒板の部分拡大写真を自動的に生成することができる。
【００９９】
また、本実施形態によれば、文字検出部２４により検出された文字情報を印刷部５０が印刷するので、例えば工事写真アルバムの作成者が工事状況に関する情報を写真から書き写す労力を低減させることができる。
【０１００】
また、本実施形態によれば、文字検出部２４が部分画像から文字情報を検出し、文字情報を記録部４０が記録媒体に記録するので、撮影画像及び部分画像の閲覧者は、これらの画像が撮影された状況に関する情報を容易に得ることができる。
【０１０１】
また、本実施形態によれば、文字検出部２４が検出する可能性の高い文字列の画像パターンと文字コードとを文字検出部２４に記憶させておくことにより、文字検出部２４の文字認識率を高めることができる。
【０１０２】
また、本実施形態によれば、関連情報生成部２５が、撮影画像と部分画像との対応関係を示す関連情報を生成するので、撮影画像及び部分画像の閲覧者は、撮影画像と部分画像との対応関係を容易に把握することができる。また、部分画像から検出される文字情報に基づいて撮影画像及び部分画像を関連付けるので、例えば工事写真において黒板に書かれた工事状況に関する情報を用いて撮影画像及び部分画像を関連付けることができる。また、撮影画像、部分画像等が記録された記録媒体において、位置情報又は文字情報に基づいて容易に所望の画像を検索することができる。
【０１０３】
また、本実施形態によれば、フォルダ格納部２７は、複数の部分画像を関連情報に基づいてそれぞれ対応する撮影画像が格納されたフォルダに格納する。したがって、フォルダ格納部２７は、対応する撮影画像及び部分画像等を対応関係のない画像等と区別して一つのフォルダに格納し、該フォルダを記録部４０により記録媒体に記録させることができる。
【０１０４】
また、本実施形態によれば、印刷部５０は出力文書６８に撮影画像６５ａ、部分画像６５ｂ、ｃを関連情報に基づいて自動的に印刷する。したがって、アルバムの作成において、写真の順序や配置等を作成者が判断する労力を低減させることができる。
【０１０５】
また、本実施形態の画像処理装置は、関連情報に基づいて撮影画像、部分画像、及び文字情報を自動的に定型書式に埋め込んだ出力形式情報を生成することができる。したがって、電子アルバムの作成において、写真の順序や配置等を作成者が判断する労力を低減させることができる。
【０１０６】
また、本実施形態の画像処理装置は、関連情報に基づいて自動的に撮影画像及び部分画像をサムネイル表示する出力形式情報を生成することができる。したがって、電子アルバムの作成において、写真の順序や配置等を作成者が判断する労力を低減させることができる。
【０１０７】
また、本実施形態によれば、パターン条件記憶部２２に記憶させた画像パターン条件が、内側部分の明度と異なる明度を有する輪郭線８４や、目盛り線が書かれた輪郭線８４を有する定規８０の特徴を定めているので、検出部２１により注目部位を容易に検出することができる。
【０１０８】
また、本実施形態によれば、パターン条件記憶部２２に記憶させた画像パターン条件が、内側部分の色相と異なる色相を有する輪郭線９１や、突形部分９２を有する輪郭線９１を有する黒板９０の特徴を定めているので、検出部２１により注目部位を容易に検出することができる。
【０１０９】
また、本実施形態によれば、入力部１０としてフイルムスキャナを用いることにより銀塩フイルムの画像から部分画像を生成することができる。
【０１１０】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることができることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【発明の効果】
上記の説明から明らかなように、本発明によれば、撮影画像と、撮影画像から抽出された部分画像とを出力する形式を示す出力形式情報を生成することができる。
【図面の簡単な説明】
【図１】ラボシステムの構成図である。
【図２】処理部２０の機能ブロック図である。
【図３】撮影画像、部分画像、文字情報、関連情報、及びフォルダの対応関係を示す。
【図４】撮影画像、部分画像、文字情報、及び関連情報の対応関係を示す。
【図５】ＨＴＭＬを用いて生成した出力形式情報を示す。
【図６】第２実施形態の出力文書６８における画像の配置を示す。
【図７】第３実施形態の定型書式文書６７を示す。
【図８】第４実施形態のサムネイル表示を用いた出力形式情報を示す。
【図９】表示部５２により画面表示された画像の一例を示す。
【図１０】定規８０の画像パターンを示す図である。
【図１１】黒板９０の画像パターンを示す図である。
【図１２】画像処理方法を示すフローチャートである。
【図１３】図１２における部分画像生成段階（Ｓ１０４）の詳細な動作を示すフローチャートである。
【図１４】第５実施形態における処理部２０のハードウェア構成図である。
【図１５】ＣＰＵ３０が実行するソフトウエアの機能構成を示すブロック図である。
【符号の説明】
１０  入力部
２０  処理部
２１  検出部
２２  パターン条件記憶部
２３  生成部
２４  文字検出部
２５  関連情報生成部
２７  フォルダ格納部
２８  形式情報生成部
３０  ＣＰＵ
３１  入力装置
３２  ＲＯＭ
３３  ハードディスク
３４  ＲＡＭ
３５  ＣＤ−ＲＯＭドライブ
４０  記録部
５０  印刷部
５２  表示部
６０  撮影画像
６２  部分画像
６４  破線
６５  画像エリア
６６  文字情報エリア
６７  定型書式文書
６８  出力文書
６９  ＨＴＭＬ文書
７０  サムネイルエリア
７１  サムネイル
７２  小タイトル文字
８０  定規
８１  第一色部
８２  第二色部
８３  第三色部
８４  輪郭線
９０  黒板
９１  輪郭線
９２  突形部分
９３  文字表示部
１００  ＣＤ−ＲＯＭ
１２１  検出モジュール
１２２  パターン条件モジュール
１２３  生成モジュール
１２４  文字検出モジュール
１２５  関連情報生成モジュール
１２７  フォルダ格納モジュール
１２８  形式情報生成モジュール
【図１】
0004294805.tif 000002
【図２】
0004294805.tif 000003
【図３】
0004294805.tif 000004
【図４】
0004294805.tif 000005
【図５】
0004294805.tif 000006
【図６】
0004294805.tif 000007
【図７】
0004294805.tif 000008
【図８】
0004294805.tif 000009
【図９】
0004294805.tif 000010
【図１０】
0004294805.tif 000011
【図１１】
0004294805.tif 000012
【図１２】
0004294805.tif 000013
【図１３】
0004294805.tif 000014
【図１４】
0004294805.tif 000015
【図１５】
0004294805.tif 000016