(57)【要約】【課題】名刺画像の中の氏名領域等の特徴領域を、より見やすくなるように一覧表示する。【解決手段】輝度画像変換部２０は、撮像した名刺画像を輝度画像に変換する。輝度分布取得部２１は、輝度画像の輝度分布を取得する。氏名領域推定部２２により、輝度分布を輝度分布記録部２５のデータベースと照合し、照合結果に基づいて、名刺上の氏名が記されている氏名領域を推定する。メモリ１０は、推定した氏名領域の名刺画像全体における座標と当該名刺画像とを関連付けてに保存する。画像補間部２３は、氏名領域の座標に基づいて名刺画像から氏名領域の画像を切り出し、氏名表示領域のサイズに合わせるように、氏名領域の画像に対して補正・超解像処理を施す。表示部１１は、氏名領域の画像と名刺画像とを一覧表示する。【選択図】図１
2013069206.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像を記憶する第１の記憶手段と、
前記第１の記憶手段により記憶された複数の画像の各々から、特徴領域を検出する検出手段と、
前記検出手段により検出された、前記複数の画像の各々の特徴領域を抽出する抽出手段と、
前記抽出手段により抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を一覧表示する表示手段と
を備えることを特徴とする画像処理装置。
【請求項２】
前記表示手段により前記複数の画像の各々の特徴領域の大きさが均一になるように前記特徴領域を表示させる際に、前記抽出手段により抽出された特徴領域に対して画素補間をする画素補間処理手段を更に備え、
前記表示手段は、画素補間処理手段により画素補間がされた前記特徴領域を一覧表示することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記第１の記憶手段に記憶されている前記複数の画像の各々における特徴領域を検出するための輝度分布を複数記憶する第２の記憶手段と、
前記第１の記憶手段に記憶された前記複数の画像を輝度画像に変換する変換手段と、
前記変換手段により変換された輝度画像の輝度分布を取得する取得手段とを更に備え、
前記検出手段は、前記第２の記憶手段により記憶された輝度分布と前記取得手段により取得された輝度分布とを照合することで前記特徴領域を検出することを特徴とする請求項１または２記載の画像処理装置。
【請求項４】
前記第１の記憶手段に記憶されている前記複数の画像の縮小画像を生成する生成手段を更に備え、
前記表示手段は、前記生成手段により生成された、前記複数の画像の各々の縮小画像と、前記抽出手段により抽出された、前記複数の画像の各々の特徴領域とを対応付けて一覧表示することを特徴とする請求項１から３のいずれかに記載の画像処理装置。
【請求項５】
撮像手段を更に備え、
前記複数の画像は、前記撮像手段によって撮像された画像であることを特徴とする請求項１から４のいずれかに記載の画像処理装置。
【請求項６】
前記複数の画像は、名刺画像であり、
前記特徴領域は、前記名刺画像の氏名領域であることを特徴とする請求項１から５のいずれかに記載の画像処理装置。
【請求項７】
複数の画像を記憶している記憶手段と表示手段とを備える画像処理装置での画像処理方法であって、
前記記憶手段に記憶されている複数の画像の各々から、特徴領域を検出する検出ステップと、
前記検出ステップで検出された、前記複数の画像の各々の特徴領域を抽出する抽出ステップと、
前記抽出ステップで抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を前記表示手段に一覧表示する表示制御ステップと
を含むことを特徴とする画像処理方法。
【請求項８】
複数の画像を記憶している記憶手段と表示手段とを備える画像処理装置のコンピュータを、
前記記憶手段に記憶されている前記複数の画像の各々から、特徴領域を検出する検出手段、
前記検出手段で検出された、前記複数の画像の各々の特徴領域を抽出する抽出手段、
前記抽出手段で抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を前記表示手段に一覧表示させる表示制御手段
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、及びプログラムに関する。
【背景技術】
【０００２】
従来の技術として、複数の名刺等の画像をスキャナで逐次スキャンした後に、当該スキャンされた複数の名刺画像に対応する縮小画像を表示頻度順にパネルに一覧表示させる技術が知られている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１２０２３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記特許文献では、名刺全体の縮小画像がパネルに一覧表示させるため、一つ一つの名刺画像における氏名等がユーザにとって視認しにくくなるという虞があった。
【０００５】
そこで本発明は、名刺画像の中の氏名領域等の特徴領域を、より見やすく一覧表示することができる画像処理装置、画像処理方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
この発明は、複数の画像を記憶する第１の記憶手段と、前記第１の記憶手段により記憶された複数の画像の各々から、特徴領域を検出する検出手段と、前記検出手段により検出された、前記複数の画像の各々の特徴領域を抽出する抽出手段と、前記抽出手段により抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を一覧表示する表示手段とを備えることを特徴とする画像処理装置である。
【発明の効果】
【０００７】
この発明によれば、名刺画像の中の氏名領域等の特徴領域を、より見やすくなるように一覧表示することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施形態によるデジタルカメラの構成を示すブロック図である。
【図２】本実施形態によるデジタルカメラの動作（名刺撮像モード）を説明するためのフローチャートである。
【図３】本実施形態によるデジタルカメラの動作（氏名領域推定処理）を説明するためのフローチャートである。
【図４】本実施形態によるデジタルカメラの動作（名刺画像表示処理）を説明するためのフローチャートである。
【図５】本実施形態によるデジタルカメラの表示例を示す模式図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施の形態を、図面を参照して説明する。
【００１０】
Ａ．実施形態の構成
図１は、本発明の実施形態によるデジタルカメラの構成を示すブロック図である。図において、デジタルカメラ１は、撮像部２、撮像制御部３、画像処理部４、ＣＰＵ７、ＲＡＭ８、ＲＯＭ９、メモリ１０、表示部１１、及びキー入力部１２を備えている。
【００１１】
撮像部２は、フォーカスレンズ、ズームレンズなどのレンズ群、撮像素子（ＣＣＤなど）を含み、撮像制御部３からの制御信号に従って、オートフォーカシング、絞り、ズーミングなどを調整し、撮像素子によりレンズ群を介して投影された被写体の光を電気信号に変換し、撮像信号として出力する。撮像制御部３は、ＣＰＵ７の制御の下、撮像部２の撮像動作を制御する。
【００１２】
画像処理部４は、撮像部２により撮像された画像データの画像処理（画素補間処理、γ補正、輝度色差信号の生成、ホワイトバランス処理、露出補正処理等）、画像データの圧縮・伸張（例えば、ＪＰＥＧ形式やＭｏｔｉｏｎ−ＪＰＥＧ形式又はＭＰＥＧ形式の圧縮・伸張）の処理、複数の撮像画像を合成する処理などを行う。
【００１３】
特に、本発明の実施形態では、画像処理部４は、輝度画像変換部２０と、輝度分布取得部２１と、氏名領域推定部２２と、画素補間部２３とを備えている。輝度画像変換部２０は、撮像部２により撮像された名刺画像を輝度画像に変換する。輝度分布取得部２１は、変換された輝度画像の輝度分布を取得する。氏名領域推定部２２は、輝度分布に基づいて、氏名領域を推定する。画素補間部２３は、画素補間して氏名領域の画像の拡大（超解像度処理）や、名刺画像の縮小などを行う。
【００１４】
ＣＰＵ７は、デジタルカメラ１の各部を制御するワンチップマイコンである。特に、本実施形態では、ＣＰＵ７は、画像処理部４の、輝度画像変換部２０と、輝度分布取得部２１と、氏名領域推定部２２と、画素補間部２３を制御し、名刺の撮像から氏名領域の推定、データベース化などする。
【００１５】
ＲＡＭ８は、撮像部２によって撮像された画像データを一時記憶するバッファメモリとして使用されるとともに、ＣＰＵ７のワーキングメモリとして使用される。ＲＯＭ９は、ＣＰＵ７によるデジタルカメラ１の各部の制御に必要なプログラム、及び各部の制御に必要なデータが記録されている。ＣＰＵ７は、このプログラムに従って処理を行う。
【００１６】
メモリ１０は、撮像部２によって撮像された画像データを記録する。特に、メモリ１０は、撮像された名刺画像と該名刺画像全体に対する推定された氏名領域の座標とを順次記録する。また、該メモリ１０は、輝度分布取得部２１により取得された輝度分布を記録する輝度分布記録部２５を備えている。該輝度分布記録部２５は、過去に読み込んだ名刺画像の輝度分布のデータベースである。画像処理部４の氏名領域推定部２２は、新たに撮像した名刺画像のどの部分に氏名領域があるかを、データベースを参照して過去の輝度分布から推定するようになっている。
【００１７】
表示部１１は、カラーＬＣＤとその駆動回路を含み、撮像待機状態にあるときには、撮像部２によって撮像された被写体をスルー画像として表示し、記録画像の再生時には、記録部１０から読み出され、伸張された記録画像を表示する。特に、本実施形態では、後述する名刺画像表示処理において、撮像した名刺画像から推定した氏名領域の画像（すなわち、氏名）や、名刺画像の一覧表示や、選択された特定の氏名領域に対応する名刺画像の全画面表示などを行う。キー入力部１２は、シャッタＳＷ（スイッチ）、ズームＳＷ、モードキー、ＳＥＴキー、十字キー等の複数の操作キーを含み、ユーザのキー操作に応じた操作信号をＣＰＵ７に出力する。
【００１８】
Ｂ．実施形態の動作
次に、上述した実施形態の動作について説明する。
図２は、本実施形態によるデジタルカメラの動作（名刺撮像モード）を説明するためのフローチャートである。ユーザにより名刺撮像モードが指定されると、まず、ＣＰＵ７は、ユーザによるシャッタの半押し、全押しを含む撮像指示があると、撮像制御部３を制御して撮像部２により、名刺に合焦して撮像する（ステップＳ１０）。
【００１９】
次に、撮像画像から矩形領域（名刺部分）を抽出し（ステップＳ１２）、抽出した矩形領域（名刺部分）のうち、氏名が記された氏名領域を推定する氏名領域推定処理を行う（ステップＳ１４）。該氏名領域推定処理の詳細については後述する。次に、ユーザ操作により撮像が終了したか否かを判断し（ステップＳ１６）、撮像が終了していなければ、ステップＳ１０に戻り（ステップＳ１６のＮＯ）、上述した処理を繰り返す。一方、撮像が終了すれば（ステップＳ１６のＹＥＳ）、当該処理を終了する。
【００２０】
図３は、本実施形態によるデジタルカメラの動作（氏名領域推定処理）を説明するためのフローチャートである。氏名領域推定処理では、まず、輝度画像変換部２０により、撮像した名刺画像を輝度画像に変換し（ステップＳ２０）、輝度分布取得部２１により、輝度画像の輝度分布を取得する（ステップＳ２２）。次に、氏名領域推定部２２により、輝度分布を輝度分布記録部２５のデータベースと照合し（ステップＳ２４）、照合結果に基づいて、氏名領域を推定する（ステップＳ２６）。
【００２１】
次に、推定した氏名領域を、氏名領域として決定してよいかを、表示部１１に表示するなどしてユーザに通知する（ステップＳ２８）。ユーザは、正しく氏名領域として推定されいることが確認されれば、その旨をキー入力部１２から入力する。ＣＰＵ７は、ユーザから氏名領域としてよい旨の指示があったか否かを判断し（ステップＳ３０）、ユーザから氏名領域としてよい旨の指示がなかった場合には（ステップＳ３０のＮＯ）、表示部１１に撮像した名刺画像を表示し、ユーザにより矩形領域（氏名領域）を手動で設定させる（ステップＳ３２）。
【００２２】
一方、ユーザから氏名領域としてよい旨の指示があった場合（ステップＳ３０のＹＥＳ）、あるいは、ユーザにより氏名領域が設定された後（ステップＳ３２の終了後）、推定した氏名領域、あるいは設定された氏名領域の名刺画像全体における座標と当該名刺画像（例えばＪＰＥＧ形式）とを関連付けてメモリ１０に保存する（ステップＳ３４）。そして、当該処理を終了し、メインルーチンに戻る。
【００２３】
図４は、本実施形態によるデジタルカメラの動作（名刺画像表示処理）を説明するためのフローチャートである。まず、ＣＰＵ７は、ユーザによる名刺画像表示モードの起動指示を検出したか否かを判断する（ステップＳ４０）。ユーザによる名刺画像表示モードの起動指示が検出されない場合には（ステップＳ４０のＮＯ）、当該処理を終了する。
【００２４】
一方、ユーザによる名刺画像表示モードの起動指示が検出された場合には（ステップＳ４０のＹＥＳ）、メモリ１０から名刺画像と該名刺画像に対応付けられた氏名領域の座標とを呼び出す（ステップＳ４２）。次に、図５に示すように、名刺プレビュー画面として、氏名領域の座標に基づいて、名刺画像から氏名領域の画像を切り出し、氏名表示領域のサイズに合わせるように、氏名領域の画像と名刺画像とに対して補正・超解像処理を施して表示部１１に一覧表示する（ステップＳ４４）。
【００２５】
この結果、図５に示すように、名刺プレビュー画面の氏名表示領域１１１には、これまで撮像した名刺毎に、推定もしくは設定された氏名領域の画像、すなわち氏名が表示され、その横の名刺表示領域１１２には、撮像した名刺画像全体の縮小画像が表示される。なお、本実施形態による超解像処理とは、氏名領域が氏名表示領域に比べて小さいため、氏名表示領域に表示するには拡大する必要があるが、氏名領域を単純に拡大すると、画素が粗くなって見難くなるので、画素をずらして補間することで画素の粗さによる見難さを防止するための処理である。
【００２６】
ユーザは、容易に名刺交換した相手の氏名を確認することができる。なお、図示の例では、４人分の氏名が表示されているが、キー入力部１２からの上下のスクロール操作に応じて、他の氏名をスクロールして表示したり、ページをめくるような操作に応じて、他の氏名の一覧に切換表示するようにしてもよい。
【００２７】
次に、ＣＰＵ７は、上記一覧表示された氏名領域のいずれかに対する選択操作が検出されたか否かを判断する（ステップＳ４６）。そして、選択操作が検出されない場合には（ステップＳ４６のＮＯ）、ステップＳ４４に戻る。一方、ユーザにより一覧表示された氏名領域のいずれかに対する選択操作が検出されない場合には（ステップＳ４６のＹＥＳ）、選択操作が検出された氏名領域に対応する名刺画像を表示部１１に全画面表示する（ステップＳ４８）。
【００２８】
上述した実施形態によれば、様々な書式により記された名刺を撮像した複数の名刺画像の中の氏名領域等の特徴領域を大きさが均一となるように一覧表示するようにしたので、より見やすくできる。
【００２９】
また、氏名領域等の特徴領域を大きさを均一となるように表示する際に、画素補間するようにしたので、画素の粗さによる見難さを防止することができる。
【００３０】
また、過去の名刺画像から取得した輝度分布を記憶しておき、該過去の輝度分布に基づいて、名刺画像から特徴領域を検出するようにしたので、より確実に氏名領域等の特徴領域を検出することができる。
【００３１】
また、氏名領域等の特徴領域とともに、縮小した名刺画像を対応付けて一覧表示するようにしたので、より見やすくできる。
【００３２】
なお、上述した実施形態においては、メモリ１０の輝度分布記録部２５に、過去に読み込んだ名刺画像の輝度分布をデータベースとして記録しているが、新たに撮像した名刺画像が新たな輝度分布を有している場合には、これを新たに記録することでデータベースをに更新するようにしてもよい。
【００３３】
また、名刺においては、縦書きで氏名などを表記しているものもあるので、表示する場合には、縦表記を横表記に変換するようにしてもよい。
【００３４】
また、名刺がカラー画像であった場合には、モノクロ（２値化）に変換してから、輝度分布取得や、氏名領域の推定などを行うようにしてもよい。
【００３５】
また、上述した実施形態では、デジタルカメラを例に説明したが、これに限らず、撮像機能を備える、携帯電話や、ＰＤＡ（Personal Data
Assistant）、タブレット端末などであってもよい。
また、上述した実施形態では、名刺についての処理について説明したがこれに限らず、チェーン店で発行されるメンバーズカード等、ある程度記載内容の配置に規則性があるものに対しても本発明を適用ができることはいうまでもない。
【００３６】
以上、この発明のいくつかの実施形態について説明したが、この発明は、これらに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下に、本願出願の特許請求の範囲に記載された発明を付記する。
【００３７】
（付記１）
付記１に記載の発明は、複数の画像を記憶する第１の記憶手段と、前記第１の記憶手段により記憶された複数の画像の各々から、特徴領域を検出する検出手段と、前記検出手段により検出された、前記複数の画像の各々の特徴領域を抽出する抽出手段と、前記抽出手段により抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を一覧表示する表示手段とを備えることを特徴とする画像処理装置である。
【００３８】
（付記２）
付記２に記載の発明は、前記表示手段により前記複数の画像の各々の特徴領域の大きさが均一になるように前記特徴領域を表示させる際に、前記抽出手段により抽出された特徴領域に対して画素補間をする画素補間処理手段を更に備え、前記表示手段は、画素補間処理手段により画素補間がされた前記特徴領域を一覧表示することを特徴とする付記１記載の画像処理装置である。
【００３９】
（付記３）
付記３に記載の発明は、前記第１の記憶手段に記憶されている前記複数の画像の各々における特徴領域を検出するための輝度分布を複数記憶する第２の記憶手段と、前記第１の記憶手段に記憶された前記複数の画像を輝度画像に変換する変換手段と、前記変換手段により変換された輝度画像の輝度分布を取得する取得手段とを更に備え、前記検出手段は、前記第２の記憶手段により記憶された輝度分布と前記取得手段により取得された輝度分布とを照合することで前記特徴領域を検出することを特徴とする付記１または２記載の画像処理装置である。
【００４０】
（付記４）
付記４に記載の発明は、前記第１の記憶手段に記憶されている前記複数の画像の縮小画像を生成する生成手段を更に備え、前記表示手段は、前記生成手段により生成された、前記複数の画像の各々の縮小画像と、前記抽出手段により抽出された、前記複数の画像の各々の特徴領域とを対応付けて一覧表示することを特徴とする付記１から３のいずれかに記載の画像処理装置である。
【００４１】
（付記５）
付記５に記載の発明は、撮像手段を更に備え、前記複数の画像は、前記撮像手段によって撮像された画像であることを特徴とする付記１から４のいずれかに記載の画像処理装置である。
【００４２】
（付記６）
付記６に記載の発明は、前記複数の画像は、名刺画像であり、前記特徴領域は、前記名刺画像の氏名領域であることを特徴とする付記１から５のいずれかに記載の画像処理装置。
【００４３】
（付記７）
付記７に記載の発明は、複数の画像を記憶している記憶手段と表示手段とを備える画像処理装置での画像処理方法であって、前記記憶手段に記憶されている複数の画像の各々から、特徴領域を検出する検出ステップと、前記検出ステップで検出された、前記複数の画像の各々の特徴領域を抽出する抽出ステップと、前記抽出ステップで抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を前記表示手段に一覧表示する表示制御ステップとを含むことを特徴とする画像処理方法である。
【００４４】
（付記８）
付記８に記載の発明は、複数の画像を記憶している記憶手段と表示手段とを備える画像処理装置のコンピュータを、前記記憶手段に記憶されている前記複数の画像の各々から、特徴領域を検出する検出手段、前記検出手段で検出された、前記複数の画像の各々の特徴領域を抽出する抽出手段、前記抽出手段で抽出された、前記複数の画像の各々の特徴領域の大きさが均一となるように前記特徴領域を前記表示手段に一覧表示させる表示制御手段として機能させることを特徴とするプログラムである。
【符号の説明】
【００４５】
１  デジタルカメラ
２  撮像部
３  撮像制御部
４  画像処理部
７  ＣＰＵ
８  ＲＡＭ
９  ＲＯＭ
１０  記録部
１１  表示部
１２  キー入力部
２０  輝度画像変換部
２１  輝度分布取得部
２２  氏名領域設定部
２３  画素補間部
２５  輝度分布記録部
【図１】
2013069206.tif 000003
【図２】
2013069206.tif 000004
【図３】
2013069206.tif 000005
【図４】
2013069206.tif 000006
【図５】
2013069206.tif 000007