(57)【要約】  【課題】  被写体として人物の顔を含む画像の天地方向を正確に判定すること。  【解決手段】  人物の顔を含む顔画像を取得し（Ｓ２）、取得した顔画像から目および口を検出し（Ｓ４）、顔画像における目の位置に対する口の位置に基づいて顔画像の天地方向を判定する（Ｓ８）。天地方向が判定された顔画像は、回転して（Ｓ１２）、保存する（Ｓ１６）。回転しないで、天地方向を画像とともに保存するようにしてもよい。取得した顔画像の天地方向が様々であっても回転された顔画像が表示される。【選択図】  図３
2005202477.tif 000002
【特許請求の範囲】
【請求項１】
被写体として人物の顔を含む顔画像を取得するステップと、
前記顔画像から目および口を検出するステップと、
前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定するステップと、
を含むことを特徴とする顔画像の天地方向判定方法。
【請求項２】
前記天地方向を判定するステップは、目と口で構成される三角形における目を結ぶ線分を底辺として口を頂点とし、底辺に対して頂点が上、下、左、右のどちらの位置にあるかを判定することにより前記天地方向を判定することを特徴とする請求項１に記載の顔画像の天地方向判定方法。
【請求項３】
被写体として人物の顔を含む顔画像を取得する画像取得手段と、
前記顔画像から目および口を検出する検出手段と、
前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定する方向判定手段と、
判定された天地方向に基づいて前記顔画像を回転する画像回転手段と、
回転された顔画像を所定の記録媒体に記録する画像記録手段と、
を備えたことを特徴とする画像記録装置。
【請求項４】
被写体として人物の顔を含む顔画像を取得する画像取得手段と、
前記顔画像から目および口を検出する検出手段と、
前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定する方向判定手段と、
前記顔画像とともに該顔画像に関連付けて前記天地方向を所定の記録媒体に記録する画像記録手段と、
を備えたことを特徴とする画像記録装置。
【請求項５】
被写体として人物の顔を含む顔画像を取得する画像取得手段と、
前記顔画像から目および口を検出する検出手段と、
前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定する方向判定手段と、
判定された天地方向に基づいて前記顔画像を回転する画像回転手段と、
回転された画像を表示する画像表示手段と、
を備えたことを特徴とする画像再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は顔画像の天地方向判定方法、画像記録装置および画像再生装置に係り、特に被写体として人物の顔を含む顔画像の天地方向を判定する顔画像の天地方向判定方法、その天地方向判定方法を用いた画像記録装置および画像再生装置に関する。
【背景技術】
【０００２】
従来、被写体として人物を撮影した入力画像から顔を検出する技術として、入力画像を小領域に分割し、各小領域の輝度特徴から目の候補領域と目の間の候補領域とを検出し、これらの目の候補領域と目の間の候補領域との互いの位置関係から目の間の領域を決定し、この目の間の領域を含むように顔の領域を決定するようにしていた。
【０００３】
なお、特許文献１には、顔の認識結果に基づいて、絞りやピント位置合わせなどのカメラの撮影機能の制御を行うようにしたものが記載されている。具体的には、複数画素単位でまとめた各ブロックの輝度が低輝度（瞳または髪と推定）、中輝度（瞳、髪以外の顔部分と推定）、高輝度（背景と推定）のいずれであるかを判定し、低輝度の領域と中輝度の領域が隣接するブロック群とその周辺のみを顔認識対象とし、この顔認識対象において肌色領域の抽出およびエッジの検出を行い、そして予め用意された顔のテンプレート画像とのマッチング処理を行うことにより、顔領域を判定する。
【０００４】
特許文献２、３には、文字を含む画像において、文字の認識率の高低に基づいて、天地方向を判定するようにしたものが記載されている。
【特許文献１】特開２００１−３３０８８２号公報
【特許文献２】特開平８−２７４９８０号公報
【特許文献３】特開平６−１０３４１０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかし、様々な撮影機会に対して、顔および目のみの認識に基づいて顔画像の天地方向を正確に判定することは困難であった。
【０００６】
特許文献１には、目と髪を基準に顔認識するものが記載されており、どのような顔部品を基準にどのような天地方向判定を行えば、正確な天地方向が導き出されるのかについて示唆する記載がない。特許文献２，３に記載されたものは、文字を含まない画像の天地方向を判定することができない。
【０００７】
本発明はこのような事情に鑑みてなされたもので、被写体として人物の顔を含んで撮影して得られた画像の天地方向を正確に判定することができる顔画像の天地方向判定方法、画像記録装置および画像再生装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
前記目的を達成するために、請求項１に記載の発明は、被写体として人物の顔を含む顔画像を取得するステップと、前記顔画像から目および口を検出するステップと、前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定するステップを含む構成となっている。
【０００９】
この構成によって、顔画像から目および口が検出され、目の位置に対する口の位置に基づいて天地方向が判定されるので、画像の天地方向が正確かつ容易に判定される。
【００１０】
請求項２に記載の発明は、請求項１に記載の発明において、前記天地方向を判定するステップは、目と口で構成される三角形における目を結ぶ線分を底辺として口を頂点とし、底辺に対して頂点が上、下、左、右のどちらの位置にあるかを判定することにより前記天地方向を判定する構成となっている。
【００１１】
請求項３に記載の発明は、被写体として人物の顔を含む顔画像を取得する画像取得手段と、前記顔画像から目および口を検出する検出手段と、前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定する方向判定手段と、判定された天地方向に基づいて前記顔画像を回転する画像回転手段と、回転された顔画像を所定の記録媒体に記録する画像記録手段を備えた構成となっている。
【００１２】
請求項４に記載の発明は、被写体として人物の顔を含む顔画像を取得する画像取得手段と、前記顔画像から目および口を検出する検出手段と、前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定する方向判定手段と、前記顔画像とともに該顔画像に関連付けて前記天地方向を所定の記録媒体に記録する画像記録手段を備えた構成となっている。
【００１３】
請求項５に記載の発明は、被写体として人物の顔を含む顔画像を取得する画像取得手段と、前記顔画像から目および口を検出する検出手段と、前記顔画像における目の位置に対する口の位置に基づいて前記顔画像の天地方向を判定する方向判定手段と、判定された天地方向に基づいて前記顔画像を回転する画像回転手段と、回転された画像を表示する画像表示手段を備えた構成となっている。
【発明の効果】
【００１４】
本発明によれば、被写体として人物の顔を含んで撮影して得られた画像の天地方向を正確に判定することができる。
【発明を実施するための最良の形態】
【００１５】
以下、添付図面に従って、本発明を実施するための最良の形態について詳細に説明する。
【００１６】
図１（ａ）は、本発明を適用したデジタルカメラの正面図であり、図１（ｂ）はそのデジタルカメラの背面図である。
【００１７】
図１（ａ）および（ｂ）において、デジタルカメラ１には、被写体を撮影するための撮影レンズ１２、撮影して得られた画像を表示する画像表示装置１５、撮影範囲を目で確認するためのファインダ１７、撮影モードおよび再生モードを切り替えるためのモード切替スイッチ１１１、画像の倍率を変えるためのズームスイッチ１１２、および、撮影開始を指示するためのレリーズスイッチ１１３が設けられている。
【００１８】
図２は、デジタルカメラ１の具体的な内部構成の例を示すブロック図である。
【００１９】
図２において、撮影レンズ１２は、主として、複数の光学レンズ（ズームレンズ１２１およびフォーカスレンズ１２２）、露出の光量を調節するためのアイリス１２３、焦点距離を変化させて撮影倍率を変化させるためにズームレンズ１２１の位置を移動させるズームモータ１２４、焦点合わせのためにフォーカスレンズ１２２の位置を移動させるフォーカスモータ１２５、アイリス１２３の絞り値を変化させるアイリスモータ１２６、および、被写体像をアナログの画像信号として出力する固体撮像素子１２７によって構成されている。
【００２０】
モータドライバ１３は、ズームモータ１２４を電気的に駆動するズームモータドライバ１３１、フォーカスモータ１２５を電気的に駆動するフォーカスモータドライバ１３２、および、アイリスモータ１２６を電気的に駆動するアイリスドライバ１３３によって構成されている。
【００２１】
アナログ処理部１４は、固体撮像素子１２７から出力されたアナログ信号を、画素ごとにサンプリングホールドして増幅した後、デジタル信号に変換するものである。
【００２２】
外部記録装置１６は、画像その他のデータを記憶するものである。
【００２３】
コントロールユニット１０は、主として、キーコントローラ１０１、画像信号処理部１０２、バッファメモリ１０３、画像表示コントローラ１０４、メディアコントローラ１０５、システムコントローラ１０６、ＡＦ・ＡＥ演算部１０６１、顔領域検出部１０６２、方向判定部１０６３、画像回転部１０６４、画像圧縮・伸長部１０６５、および、内部メモリ１０７によって構成されている。
【００２４】
キーコントローラ１０１は、モード切替スイッチ１１１、ズームスイッチ１１２、および、レリーズスイッチ１１３を監視して、ユーザからの指示の入力を検出するものである。
【００２５】
画像信号処理部１０２は、アナログ処理部１４によってデジタル信号に変換された画像に対して、ガンマ補正などの画像処理を施すものである。
【００２６】
バッファメモリ１０３は、画像表示装置１５へ出力する画像をバッファリングするものである。
【００２７】
画像表示コントローラ１０４は、画像表示装置１５を制御して画像表示装置１５に画像を表示させるものである
メディアコントローラ１０５は、外部記録装置１６への画像の書き込み、および、外部記録装置１６からの画像の読み取りを行うものである。
【００２８】
システムコントローラ１０６は、デジタルカメラ１の全体を統括制御するものである。
【００２９】
ＡＦ・ＡＥ演算部１０６１は、自動焦点調節（ＡＦ）演算および自動露出（ＡＥ）演算を行うものである。
【００３０】
顔領域検出部１０６２は、固体撮像素子１４（またはメディアコントローラ１０５）により取得された被写体の画像において、顔の検出と、目および口の検出を行うものである。
【００３１】
方向判定部１０６３は、顔領域検出部１０６２により顔が検出された場合、目の位置に対する口の位置に基づいて、画像の天地方向を判定するものである。ここで、「天地方向」とは、頭頂部のある方向を「天」として顎のある方向を「地」とした方向である。目と口との関係では、右目と左目の中心点を「天」、口の中心点を「地」とした方向である。
【００３２】
ところで、顔部品のうち、耳を検出して耳の位置を天地方向判定の基準にしようとした場合、耳は髪に隠れている場合があり、このような場合には耳の正確な検出が困難なので、天地方向の正確な判定が困難になる。また、顔部品のうち、眉も同様に髪に隠れている場合があり、同様に天地方向の正確な判定が困難になる。また、髪は、個人によって様々なスタイルがあり、天地方向の正確な判定が困難になる。また、鼻や鼻の穴は、鼻形状の個人差や撮影角度、照明の具合によっては検出が困難な場合があり、天地方向の正確な判定が困難になる。以上の顔部品（耳、眉、髪、鼻）に対して、目（特に瞳）および口（特に唇）は、その周囲部分との対比により、顔画像からの検出が確実かつ容易であって、しかも、代表点の選定も容易であり、天地方向の判定の基準として優れている。そこで、本実施形態では、瞳および唇を基準として天地方向を判定する。
【００３３】
画像回転部１０６４は、方向判定部１０６３によって判定された天地方向に基づいて、画像を回転するものである。
【００３４】
画像圧縮・伸長部１０６５は、ＪＰＥＧ（Joint Photographic coding Experts Group）等の所定の圧縮および伸長方式で、画像の圧縮および画像の伸長を行うものである。
【００３５】
内部メモリ１０７は、画像記録処理や画像再生処理などの各処理の実行に必要な情報や、各処理時の処理対象の画像を記憶するものである。
【００３６】
次に、前述のデジタルカメラ１における画像記録処理の流れについて説明する。
【００３７】
モード切替スイッチ１１１により撮影モードが選択されると、固体撮像素子１２７の受光面に結像された被写体の画像は固体撮像素子１２７からアナログ信号として出力され、アナログ処理部１４でデジタル信号に変換された後、内部メモリ１０７に順次格納される。内部メモリ１０７に順次格納された画像は、画像信号処理部１０２によってガンマ補正などの所定の信号処理が施された後、バッファメモリ１０３を介して、画像表示コントローラ１０４の制御により画像表示装置１５に表示されるようになっており、ユーザは、ファインダ１７を覗く以外にも、画像表示装置１５に表示された画像を見ることにより被写体の撮影範囲を確認できるようになっている。
【００３８】
このような撮影モードにおいてレリーズスイッチ１１３が押されると、ＡＦ・ＡＥ演算部１０６１により自動焦点調節演算および自動露出演算が行われ、このような演算に基づく自動焦点調節処理および自動露出処理が施された状態において、固体撮像素子１２７により取得された画像が内部メモリ１０７に順次格納されていく。
【００３９】
このような内部メモリ１０７に格納された画像を外部記録装置１６に記録する態様（画像記録態様）には、第１に、画像の天地方向を判定して画像を回転して記録する態様と、第２に、画像の回転は行わないで、天地方向を示す天地方向情報を画像とともに記録する態様がある。
【００４０】
図３は、第１の画像記録態様（画像を回転して記録する態様）について、画像記録処理の例の要部を示したフローチャートである。
【００４１】
焦点調節処理および露出処理が施された状態において固体撮像素子１２７により取得された画像が内部メモリ１０７に格納されると（Ｓ２）、画像の全領域の中から、顔の領域、目の領域、および、口の領域がそれぞれ検出される（Ｓ４）。具体的には、図４に示すように、画像の全領域２００の中から、コントラストに基づいて顔の部分である顔領域２１０を判定し、この顔領域２１０を、それぞれ複数画素からなる複数のブロックに細かく分割する。そして各ブロックには各ブロックを識別する符号をそれぞれ付与しておく。次に、顔領域２１０において、赤色の領域とその領域の周囲（例えば肌色領域）との境界、すなわち唇の輪郭を検出する。図５では、第１の境界線２２１、第２の境界線２２２、第３の境界線２２３および第４の境界線２２４が唇とその周囲との境界を示す。口領域２２０は、第１の境界線２２１および第４の境界線２２４を含むブロックと両境界線２２１および２１４で囲まれたブロックとを含むブロック群であって、各ブロックの符号で表すと、第２５乃至２７、第３１乃至３７、第３９乃至６５、および、第６７乃至７３の複数ブロックからなる領域が該当する。そして、口領域２２０のうち、境界線２２１乃至２２４の最左端２２５（第５７ブロック）と最右端２２６（第５６ブロック）とが、唇のエッジと判定され、内部メモリ１０７に記憶される。また、両エッジ２２５および２２６の略中央にあるブロック（第５２ブロック）が、口領域の中心点と判定され、内部メモリ１０７に記憶される。
【００４２】
また、一端のエッジ（例えば左エッジ２２５）から各境界線２２１乃至２２４をたどって、境界線の本数を数えることにより、開いた状態の口であるか、あるいは、閉じた状態の口であるかを判定することも可能である。例えば、図５に示すように境界線が４本であれば開いた状態の口であり、境界線が３本であれば閉じた状態の口であると判定される。すなわち、口の開閉に関わらず正確に口領域を検出することができる。なお、開いた状態の口の場合には、さらに、歯または舌の存在を確認することにより、より正確に口領域を検出するようにしてもよい。
【００４３】
検出された顔領域がある場合には、まず、画像の天地方向を判定する（Ｓ８）。具体的には、各目領域から１点ずつ選択した合計２点と、口領域から選択した１点とについて、目領域の２点を結ぶ線分を底辺として口領域の点を頂点とし、底辺に対して頂点が上、下、左、右のどちらの位置にあるかを判定することにより、画像の天地方向を判定する。例えば、左の瞳の中心点２３１があるブロックの位置を左目領域の代表点とし、右の瞳の中心点２３２があるブロックの位置を右目領域の代表点とし、唇の両エッジ２２５、２２６の略中央にあるブロックの位置を口領域の代表点とする。そして、両目の代表点を結ぶ線分（底辺）に対して、口の代表点（頂点）が上、下、左、右のどちらにあるかを判定する。
【００４４】
次に、顔画像の回転角を求めて（Ｓ１０）、顔画像を回転する（Ｓ１２）。具体的には、両目の点を結ぶ線分（底辺）に対して口の点（頂点）が、図６（ａ）に示すように下のときにはｔ＝０とし、図６（ｂ）に示すように右のときにはｔ＝１とし、図６（ｃ）に示すように上のときにはｔ＝２とし、図６（ｄ）に示すように左のときにはｔ＝−１として、時計回りを正とした回転角α＝（π／２）×ｔを求め、画像をα回転する。すなわち、図６（ａ）に示すように口の位置が下のときには画像を０度回転し（すなわち回転せず）、図６（ｂ）に示すように口の位置が右のときには画像を時計回りに９０度回転し、図６（ｃ）に示すように口の位置が上のときには画像を時計回りに１８０度回転し、図６（ｄ）に示すように口の位置が左のときには画像を反時計回りに９０度回転（すなわち時計回りに２７０度回転）する。
【００４５】
上下左右の判定については、例えば、図７に示すように、左目の代表点２３１（左の瞳の中心点である）と右目の代表点２３２（右の瞳の中心点である）との略中央にある中心点２３３に対して、口の代表点２２７（唇の両エッジの中心点である）の角度を求めて、―４５度以上４５度未満であれば上、４５度以上１３５度未満であれば右、１３５度以上２２５度未満であれば下、２２５度以上３１５度未満であれば左であると判定する。
【００４６】
回転が施された画像は、画像圧縮・伸長部１０６５によりＪＰＥＧ等の所定の圧縮方式でデータ圧縮が施されて（Ｓ１４）、メディアコントローラ１０５の制御により外部記録装置１６に保存される（Ｓ１６）。
【００４７】
なお、ステップＳ６で顔領域がないと判定された画像に対しては、画像の回転は行わないで、データ圧縮を施して（Ｓ１４）、外部記録装置１６に保存する（Ｓ１６）。
【００４８】
モード切替スイッチ１１１により再生モードが選択されると、外部記録装置１６に保存された画像（天地方向に基づいて回転が施された画像である）が、メディアコントローラ１０５の制御により外部記録装置１６から取り出されて、内部メモリ１０７に一時的に格納される。内部メモリ１０７に格納された画像は、画像圧縮・伸長部１０６５により所定の方式でデータ伸長が施され、バッファメモリ１０３を介して、画像表示コントローラ１０４の制御により画像表示装置１５に表示される。
【００４９】
図８は、第２の画像記録態様（天地方向情報を画像とともに記録する態様）について、画像記録処理の例の要部を示したフローチャートである。
【００５０】
図８において、固体撮像素子１２７により取得された画像が内部メモリ１０７に格納されると（Ｓ２）、画像の全領域の中から、顔の領域、目の領域、および、口の領域がそれぞれ検出され（Ｓ４）、顔領域の有無を判定した後（Ｓ６）、顔領域がある場合には、画像の天地方向を判定して（Ｓ８）、画像の天地方向を示す天地方向情報を生成する（Ｓ１０）。
【００５１】
具体的には、例えば、両目の位置を結ぶ線分（底辺）に対して口の位置（頂点）が、図６（ａ）に示すように下のときにはｔ＝０とし、図６（ｂ）に示すように右のときにはｔ＝１とし、図６（ｃ）に示すように上のときにはｔ＝２とし、図６（ｄ）に示すように左のときにはｔ＝−１とし、上下左右を示す情報（ｔ）を天地方向情報とする。図７に示すように、左目の代表点２３１と右目の代表点２３２との中心点２３３に対する、口の代表点２２７（唇の両エッジの中心点である）の角度を天地方向情報としてもよい。
【００５２】
そして、顔画像は、画像圧縮・伸長部１０６５によりＪＰＥＧ等の所定の圧縮方式でデータ圧縮が施されて（Ｓ２４）、メディアコントローラ１０５の制御により外部記録装置１６に保存される。ここで、天地方向情報は、各画像と関連付けられて、外部記録装置１６に保存される（Ｓ２６）。例えば、画像を格納するファイルのヘッダ領域に天地方向情報を書き込むようにする。詳細には、例えば、ファイルがExif（Exchangeable image format）の形式である場合には、タグ情報のひとつとして天地方向情報を当該ファイルのヘッダ領域に書き込むようにする。このように顔画像と天地方向情報とを同一ファイルに記録する態様以外にも、顔画像と天地方向情報とを別ファイルに記録する態様がある。
【００５３】
モード切替スイッチ１１１により再生モードが選択されると、外部記録装置１６に保存された画像（未回転の画像である）が、天地方向情報とともに、メディアコントローラ１０５の制御により外部記録装置１６から取り出されて、内部メモリ１０７に一時的に格納される。内部メモリ１０７に格納された画像は、画像圧縮・伸長部１０６５により所定の方式でデータ伸長が施され、画像回転部１０６４により天地方向情報に基づいて回転処理が施された後、バッファメモリ１０３を介して、画像表示コントローラ１０４の制御により画像表示装置１５に表示される。
【００５４】
具体的には、図６（ａ）に示すように口の位置が下（ｔ＝０）のときには画像を０度回転し（すなわち回転せず）、図６（ｂ）に示すように口の位置が右（ｔ＝１）のときには画像を時計回りに９０度回転し、図６（ｃ）に示すように口の位置が上（ｔ＝２）のときには画像を時計回りに１８０度回転し、図６（ｄ）に示すように口の位置が左（ｔ＝−１）のときには画像を反時計回りに９０度回転する。
【００５５】
以上、画像を記録する際に天地方向を判定するようにした場合を例に説明したが、本発明はこれに限るものではなく、画像を再生する際に天地方向を判定して画像を回転するようにしてもよい。
【００５６】
図９は、外部記録装置１６に保存されている画像を再生する際に天地方向を検出して画像を回転する処理の例の要部を示すフローチャートである。
【００５７】
モード切替スイッチ１１１により再生モードが選択されると、外部記録装置１６に保存された画像（未回転の画像である）が、メディアコントローラ１０５の制御により外部記録装置１６から取得されて、内部メモリ１０７に一時的に格納される（Ｓ４２）。内部メモリ１０７に格納された画像は、画像圧縮・伸長部１０６５により所定の方式でデータ伸長が施される（Ｓ４４）。
【００５８】
次に、画像の全領域の中から、顔の領域、目の領域、および、口の領域がそれぞれ検出され（Ｓ４６）、顔領域の有無を判定した後（Ｓ４８）、顔領域がある場合には、画像の天地方向を判定し（Ｓ５０）、顔画像の回転角度を求めて（Ｓ５２）、顔画像を回転する（Ｓ５４）。
【００５９】
具体的には、両目の位置を結ぶ線分（底辺）に対して口の位置（頂点）が、図６（ａ）に示すように下のときにはｔ＝０とし、図６（ｂ）に示すように右のときにはｔ＝１とし、図６（ｃ）に示すように上のときにはｔ＝２とし、図６（ｄ）に示すように左のときにはｔ＝−１として、時計回りを正とした回転角α＝（π／２）×ｔを求め、画像をα回転する。すなわち、図６（ａ）に示す場合には画像を０度回転し（すなわち回転せず）、図６（ｂ）に示す場合には画像を時計回りに９０度回転し、図６（ｃ）に示す場合には画像を時計回りに１８０度回転し、図６（ｄ）に示す場合には画像を反時計回りに９０度回転する。
【００６０】
回転が施された画像は、バッファメモリ１０３を介して、画像表示コントローラ１０４の制御により画像表示装置１５に表示される（Ｓ５６）。
【００６１】
なお、天地方向を判定する際に、瞳の略中央を目の代表点とし、唇の両エッジの略中央を口の代表点として、これらの３点（両目および口の各代表点）に基づいて天地方向を判定する場合を例に説明したが、本発明はこれに限定されるものではない。例えば、左目の左エッジおよび右目の右エッジをそれぞれ各目の代表点としてもよく、左目の右エッジおよび右目の左エッジをそれぞれ各目の代表点としてもよい。また、両目の各代表点（２点）および唇の両エッジ（２点）の合計４点から直接的に天地方向を判定しても同様な効果が得られる。
【００６２】
また、図４乃至図６は、顔を正面から撮影した場合について説明したが、顔を横から撮影した場合には、片目の領域の１点と唇の領域の１点の合計２点から画像の天地方向を判定するようにしてもよい。
【００６３】
また、画像の天地方向の判定の際に、上、下、左、右の４つに分類する場合を例に説明したが、本発明はこれに限るものではない。例えば、図７において、左目と右目の中心点２３３に対する口の代表点の角度に基づいて、その角度分画像を回転するようにしてもよい。具体的には角度に応じて口の代表点がちょうど真下にくるように画像を回転する。回転後の画像の四隅はトリミングして除去し、さらに必要に応じて画像に拡大処理を施す。
【００６４】
以上、本発明をデジタルカメラに適用した場合を例に説明したが、本発明は、これに限るものではなく、被写体として人物の顔を含む顔画像を扱うその他の画像処理装置に適用してよいことは言うまでもない。例えば、画像記録機能を有さない画像再生専用の画像処理装置に適用してもよい。
【図面の簡単な説明】
【００６５】
【図１】本発明に係る一実施形態の画像処理装置の内部構成を示すブロック図
【図２】デジタルカメラの外観図
【図３】画像記録処理の第１態様を示すフローチャート
【図４】目および口の検出についての説明に用いる説明図
【図５】口の位置の検出についての説明に用いる説明図
【図６】顔画像の回転についての説明に用いる説明図
【図７】顔画像の角度の説明に用いる説明図
【図８】画像記録処理の第２態様を示すフローチャート
【図９】画像再生処理の一態様を示すフローチャート
【符号の説明】
【００６６】
１５…画像表示装置、１６…外部記録装置、１０６２…顔領域検出部（検出手段）、１０４…画像表示コントローラ、１０５…メディアコントローラ（画像記録手段、画像取得手段）、１０６３…方向判定部、１０６４…画像回転部、１０７…内部メモリ、１２７…固体撮像素子（画像取得手段）
【図１】
2005202477.tif 000003
【図２】
2005202477.tif 000004
【図３】
2005202477.tif 000005
【図４】
2005202477.tif 000006
【図５】
2005202477.tif 000007
【図６】
2005202477.tif 000008
【図７】
2005202477.tif 000009
【図８】
2005202477.tif 000010
【図９】
2005202477.tif 000011