(57)【要約】【課題】再生時に外部表示装置の画面を有効に活用できる画像記録を行うカメラ、画像を出力をする画像出力装置、画像記録方法、画像出力方法、プログラムおよび記録媒体を提供する。【解決手段】アスペクト比が４：３のカメラ撮影画像の一部分を、外部表示装置のアスペクト比（例えば１６：９）にあわせてサイズを変更して、外部表示装置に出力する。縦構図の撮影画像については、向きを９０度変換した画像（Ａ）と、この向きを変換した画像の一部分を外部表示装置の左右（２３ａ）の空白が少なくなるように次第にアスペクト比を変更して画像（（Ｂ）、（Ｃ））を、一定時間間隔で順次外部表示装置に出力する。【選択図】図４
2007336515.tif 000002
【特許請求の範囲】
【請求項１】
記録された画像を外部表示装置に出力する出力部と、
被写体像を撮像する撮像素子と、
上記撮像素子の撮像面の全体を撮影領域とする全体画像から、この全体画像と上記外部表示装置のアスペクト比の差に応じて、全体画像の１部分の画像であるサイズ変更画像を作成するサイズ変更部と、
上記全体画像及びサイズ変更画像を記録するよう制御する制御部と、を備える
ことを特徴とするカメラ。
【請求項２】
上記サイズ変更部は、上記全体画像についてはカメラの撮影時の向きを加味したアスペクト比を適用して、上記サイズ変更画像を作成する
ことを特徴とする請求項１に記載のカメラ。
【請求項３】
上記撮像素子により撮像される画像を撮影時にモニタ画像として表示する表示部と、
上記サイズ変更部によって作成されるサイズ変更画像の範囲を示す範囲情報を、モニタ画像上に表示する表示制御部とを備える
ことを特徴とする請求項１に記載のカメラ。
【請求項４】
被写体の顔を検出する顔検出部を備え、
上記表示制御部は、画面内の顔位置の変化に応じて上記範囲情報を移動して表示する
ことを特徴とする請求項３に記載のカメラ。
【請求項５】
画像を表示する表示部と、
全体画像とサイズ変更画像を領域を分けて上記表示部に表示させる表示制御部を備える
ことを特徴とする請求項１に記載のカメラ。
【請求項６】
外部表示装置に画像を出力する画像出力装置において、
記録された撮影画像の一部から、上記外部表示装置に応じたアスペクト比で構成されるサイズ変更画像を作成するサイズ変更部と、
上記サイズ変更画像と記録された撮影画像を上記外部表示装置に出力するよう制御する制御部を備える
ことを特徴とする画像出力装置。
【請求項７】
上記サイズ変更部は上記アスペクト比を段階的に変化させて複数のサイズ変更画像を作成し、
上記制御部は、この複数のサイズ変更画像を順次出力するよう制御する
ことを特徴とする請求項６に記載の画像出力装置。
【請求項８】
撮影時のカメラの向きが縦横いずれかを判定する縦横判定部を備え、
上記サイズ変更部は、記録された撮影画像が縦向き撮影の場合には、撮影画像を縦長の向きにした状態で、上記外部表示装置の横長のアスペクト比に応じたアスペクト比で、サイズ変更画像を作成する
ことを特徴とする請求項６に記載の画像出力装置。
【請求項９】
記録媒体に記録された撮影画像を外部表示装置に出力するカメラにおける画像記録方法において、
撮像素子から出力される撮影画像の一部から、撮影画像と異なるアスペクト比でサイズを変更したサイズ変更画像を作成し、上記外部表示装置への出力用画像として、撮影画像とともにサイズ変更画像を記録する
ことを特徴とする画像記録方法。
【請求項１０】
外部表示装置に画像を出力する画像出力方法において、
記録された画像の一部を切出して、記録された画像のアスペクト比と異なる上記外部表示装置に対応するアスペクト比で構成されるサイズ変更画像を作成し、
このサイズ変更画像と記録された画像を上記外部表示装置に出力する
ことを特徴とする画像出力方法。
【請求項１１】
画像を外部表示装置に出力する処理をコンピュータに実行させるプログラムにおいて、
記録された画像の一部を切出して、記録された画像のアスペクト比と異なる上記外部表示装置に対応するアスペクト比で構成されるサイズ変更画像を作成する工程と、
このサイズ変更画像と記録された画像を上記外部表示装置に出力する工程をコンピュータに実行させる
ことを特徴とするプログラム。
【請求項１２】
画像を外部表示装置に出力する処理をコンピュータに実行させるプログラムが格納された記録媒体において、
記録された画像の一部を切出して、記録された画像のアスペクト比と異なる上記外部表示装置に対応するアスペクト比で構成されるサイズ変更画像を作成する工程と、
このサイズ変更画像と記録された画像を上記外部表示装置に出力する工程をコンピュータに実行させるプログラムが格納された
ことを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、外部表示装置のアスペクト比に対応した画像を出力するカメラや画像出力装置に関する。
【背景技術】
【０００２】
デジタルカメラによって得られた撮影画像については、従来銀塩カメラと同じにプリントにされるだけではなく、ＴＶやパソコンモニタで表示されるという鑑賞スタイルもある。
【０００３】
撮影された画像をＴＶ等で鑑賞する際の問題の一つに、カメラで縦撮影された画像をそのまま画面に表示されると、像が横になった状態になってしまうという問題がある。そこで、構え方によって縦構図か横長構図かを検出し、撮影と再生の状況のつじつまを合わせて、再生時に反映させるカメラが提案されている（特許文献１）。
【０００４】
一方、家庭内のデジタルコンテンツ再生環境が整備されてくると、大型画面のＴＶの前で画像を楽しむ機会が増加するものと考えられる。大型画面のＴＶの場合はハイビジョン（ＨＤ）画質ものが増加中であり、そのアスペクト比は１６：９の横長画面である。対して、カメラの撮像素子は、プリント用の４：３のアスペクト比で、アスペクト比の違いによる問題が生じる。この問題の解決策のひとつとして、アスペクト比自体を切り替えるカメラが提案されている（特許文献２）。
【０００５】
そして、このような大型画面のＴＶで縦撮影の静止画像が９０度向きを変えて再生されると、大きな非表示部分が左右に生じてしまう。そこで、ワイド画面の左右の空白画面を有効に利用する提案もある（特許文献３）。特許文献３では、縦構図の画像については、２つの画像を並べて表示させる画像表示制御に関する技術が開示されている。
【特許文献１】特開２００３−６０９４０号公報
【特許文献２】特開平８−３７６１１号公報
【特許文献３】特開２００６−１０９３６０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上記で説明したように、ワイド画面でのカメラの画像再生時には、画面左右に空白が発生するという問題が避けられず、縦撮影画像の場合には特に顕著になる。特許文献３のように２つの縦画像を並べて表示する方法もあるが、この手法は常に利用できるわけではない。今後、デジタルカメラにハイビジョン用のＴＶが接続され再生される場面も増加すると考えられるから、このようなアスペクト比が大きく異なるワイド画面での再生でも、ワイド画面を有効に利用するカメラや再生装置の開発が望まれる。
【０００７】
本発明は、以上の課題に鑑み、再生時に外部表示装置の画面を有効に活用できるような画像記録を行うカメラ、画像を出力する画像出力装置、画像記録方法、画像出力方法、プログラムおよび記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、第1の発明によるカメラは、記録された画像を外部表示装置に出力する出力部と、被写体像を撮像する撮像素子と、上記撮像素子の撮像面の全体を撮影領域とする全体画像から、この全体画像と上記外部表示装置のアスペクト比の差に応じて、全体画像の１部分の画像であるサイズ変更画像を作成するサイズ変更部と、上記全体画像及びサイズ変更画像を記録するよう制御する制御部を備えるものである。
【０００９】
また、第２の発明による画像出力装置は、外部表示装置に画像を出力する画像出力装置において、記録された撮影画像の一部から、上記外部表示装置に応じたアスペクト比で構成されるサイズ変更画像を作成するサイズ変更部と、上記サイズ変更画像と記録された撮影画像を上記外部表示装置に出力するよう制御する制御部を備えるものである。
【００１０】
また、第３の発明による画像記録方法は、記録媒体に記録された撮影画像を外部表示装置に出力するカメラにおける画像記録方法において、撮像素子から出力される撮影画像の一部から、撮影画像と異なるアスペクト比でサイズを変更したサイズ変更画像を作成し、上記外部表示装置への出力用画像として、撮影画像とともにサイズ変更画像を記録するものである。
【００１１】
また、第４の発明による画像出力方法は、外部表示装置に画像を出力する画像出力方法において、記録された画像の一部を切出して、記録された画像のアスペクト比と異なる上記外部表示装置に対応するアスペクト比で構成されるサイズ変更画像を作成し、このサイズ変更画像と記録された画像を上記外部表示装置に出力するものである。
【００１２】
また、第５の発明によるプログラムは、画像を外部表示装置に出力する処理をコンピュータに実行させるプログラムにおいて、記録された画像の一部を切出して、記録された画像のアスペクト比と異なる上記外部表示装置に対応するアスペクト比で構成されるサイズ変更画像を作成する工程と、このサイズ変更画像と記録された画像を上記外部表示装置に出力する工程をコンピュータに実行させるものである。
【発明の効果】
【００１３】
本発明によれば、再生時に外部表示装置の画面を有効に活用できるような画像記録を行うカメラ、画像を出力する画像出力装置、画像記録方法、画像出力方法、プログラム及び記録媒体を提供することができる。
【発明を実施するための最良の形態】
【００１４】
以下本発明を実施するための最良の形態を図面を参照して説明する。
（第１実施形態）
図１は、本発明が適用されるカメラ１の全体ブロック図である。カメラ１にはレンズ部２、撮像素子３、アナログフロントエンド（以下、ＡＦＥと略す）部４、画像処理部５、圧縮部６、記録再生部７、メディア８が設けられる。レンズ部２は、入射した被写体２０の像を撮像素子３に結像する。撮像素子３は、ＣＣＤやＣＭＯＳからなり、結像された被写体像を電気信号に変換する。ＡＦＥ部４は、撮像素子３から出力されるアナログの信号をデジタルの画像信号に変換して、画像処理部５に入力させる。また、ＡＦＥ部４は、撮像素子３の出力する信号を取捨選択する機能も有し、全部の受光面から限られた画素データのみを抽出することができる。
【００１５】
画像処理部５は、画像データに各種処理を施す。画像処理部５は、画像データに対して色補正、平滑化処理、コントラスト強調処理などの各種処理を行う。また、画像処理部５には、サイズ変更部５ａが設けられる。サイズ変更部５ａは、撮影時及びまたは再生時に、原画像の一部から、適宜アスペクト比を変えたサイズの画像（サイズ変更画像）を作成する。撮影時には、サイズ変更部５ａはＡＦＥ部４から出力された画像データ（全画像と呼ぶ）の指定された一部を、指定されたアスペクト比で切り出して、サイズ変更画像を作成する。全画像のアスペクト比は、撮像素子３の撮像面のアスペクト比に等しく、横長の４：３が一般的である。なお、以下でアスペクト比は、特に断りのない場合には、横：縦で表示するものとする。
再生時には、サイズ変更部５ａはメディア８から読み出され伸長処理された記録画像について、同様に指定された範囲を指定されたアスペクト比で切り出して、サイズ変更画像を作成する。サイズ変更画像は、部分画像またはトリミング画像とも呼ぶ。また、アスペクト比の指定は、ユーザーが直接指定してもよいし、カメラ１がＴＶ２１とＨＤＭＩ（High-Definition Multimedia Interface）等で接続されていれば、ＨＤＭＩを通じて入手されるＴＶ２１のアスペクト情報を使用することもできる。
【００１６】
圧縮伸長部６には、画像処理された画像について、静止画用の圧縮伸長を行う静止画圧縮伸長部６ａ、同じく動画圧縮を行う動画圧縮伸長部６ｂが設けられる。静止画圧縮伸長部６ａはＪＰＥＧ（Joint Photographic Coding Experts Group）などの静止画用の圧縮伸長回路を有する。動画圧縮伸長部６
ｂは、ＭＰＥＧ（Motion Picture Experts Group）やＨ．２６４の動画圧縮伸長回路を有する。記録再生部７は、撮影時には圧縮処理された画像データを記録媒体であるメディア８に記録し、再生時にはメディア８から画像データを読み出す。メディア８は、画像を保存記録する記録媒体である。
【００１７】
また、カメラ１には、表示制御部１２と表示部１３及び出力部１４が設けられる。表示制御部１２は、再生時にはメディア８に記録された画像および撮影時にはモニタ画像を、関連する情報を重畳させて表示するよう表示部１３を制御する。表示部１３は、例えばＬＣＤから構成され、撮影時にモニタ画像を表示し、再生時には伸張処理された記録画像を表示する。撮影時にはユーザーは、表示部１３に表示されるモニタ画像を見ながら、構図やタイミングを決めて撮影操作を行う。
【００１８】
出力部１４は、画像処理部５から出力される記録画像（全体画像）やサイズ変更画像を、接続される外部表示装置２１に合わせたＮＴＳＣ信号やハイビジョン信号に変換して、出力する。外部表示装置（以下ＴＶと略す）２１は、ＮＴＳＣタイプのＴＶやハイビジョンタイプのＴＶである。
【００１９】
また、カメラ１には、ＭＰＵ１０、ＲＯＭ１１、操作部１６が設けられる。ＭＰＵ（マイクロコントローラ）１０は、プログラムに従って撮影や再生等カメラ１の全体の制御を司る制御部である。ＲＯＭ１１は、不揮発性でかつ記録可能なメモリで例えばフラッシュＲＯＭからなり、カメラ１の制御処理を行う制御用のプログラムが格納される。操作部１６は、撮影者の指示をＭＰＵ１０に通知するものである。操作部１６の１例としてスイッチ１６ａ、１６ｂ、１６ｃを図１に示す。例えばスイッチ１６aはレリーズスイッチで、その他に撮影／再生モード切替や撮影モードの切替などのスイッチもある。ＭＰＵ１０は、スイッチ１６ａ、１６ｂ、１６ｃにより撮影や表示などのユーザーの指示を検出する。
【００２０】
また、カメラ１には、縦横判定部１７および顔検出部１５が設けられる。縦横判定部１７は、撮影時のカメラの向き（構図）が縦か横かを判定するものである。判定方式は、傾きセンサーにより自動判定する方式や撮影者の指示により判定する方式、あるいは再生時に画像の特徴から判定する方式のいずれでもよい。ＭＰＵ１０は、撮影時検出する方式の場合にはこの結果を撮影画像データに書き込む。またこの結果が、ＭＰＵ１０によるＡＦＥ部４や画像処理部５の制御に反映される。
顔検出部１５は、撮影時のモニタ画像あるいは再生時の記録画像に対する画像処理結果にしたがって、画像信号から撮像された像信号を分析し、そこに顔特有の目鼻や輪郭などが含まれるかを検出して、その画面内での顔の大きさや位置をＭＰＵ１０に出力する。
【００２１】
図２は、ユーザーの画像鑑賞場面の一例を示す図である。ユーザーは従来と同じように、撮影画像をプリント２２で楽しむ場面は多いが、加えてユーザーは、大型画面のＴＶ２１の前で撮影した画像コンテンツを楽しむ機会が増加するものと考えられる。使用されるＴＶ２１はハイビジョン（ＨＤ）画質ものが増加中なので、ＴＶ２１のアスペクト比も１６：９の横長画面が多くなる。それに対して、上述したようにカメラの撮像素子のアスペクト比は４：３（プリント２２も同じ）が多いので、そのずれが問題になる。
【００２２】
図３は縦構図撮影の場面を示す図である。縦に構えられたカメラ１により、被写体２０が撮影される。図４はアスペクト比が１６：９のワイド画面のＴＶ２１で表示される各種画像を示す図である。人物を撮影するときには、図３のような縦構図でのカメラ使用が多く、図４（Ａ）は、この縦構図で撮影された画像が表示される例である。図４（Ａ）のように、プリントを前提として撮影された縦長の静止画像がＴＶ２１の画面で再生されると、画面の左右に大きな非表示部分２３ａが生じる。
【００２３】
１６：９の画像に対し３：４の画面が表示されるので、この非表示部分２３ａは大きいものとなる。縦が９に対し、３：４が対応すると横が１６に対して、３×９／４＝６．８しかなく、無駄が多い。また仮に縦画像を並列に２つ並べても、６．８×２＝１３．６＜１６と、横を満たすことができない。いずれにしても、効率の悪さは無視できない。せっかくの大画面ＴＶで見るのであるから、画面をフルに利用して迫力ある表示をすることが望ましいが、図４（Ａ）のような表示では、ものたらないとの印象が強いであろう。
【００２４】
そこで、本発明では同じ画像について、図４（Ａ）→（Ｂ）→（Ｃ）のように、顔を中心に拡大した画像を順番に表示させる。図４（Ｂ）の画像は、アスペクト比が５：４で、（Ａ）の原画像を上半身を中心に切出したサイズ変更画像である。図４（Ｃ）の画像は、（Ａ）の原画像をＴＶ２１と同じ１６：９のアスペクト比で顔を中心にして、更に拡大して切出したサイズ変更画像である。なお、このサイズ変更画像は、再生時に記録された原画像を切出し処理しても良いし、予め撮影時に原画像とともに記録しておいて利用しても、いずれでも良い。このような表示を行うことにより迫力のある画面表示が可能になる。
【００２５】
図５は、ＴＶ２１の画面に表示される画像のサイズと、対応して表示に使用する画素の関係を示す図である。ここで、図５（Ａ−１）、（Ａ−２）、（Ａ−３）の画像は、それぞれ図４（Ａ）、（Ｂ）、（Ｃ）の各画像に対応する画像である。また、図５(Ａ−２)以降では破線の枠が原撮影画像である全体画像の範囲を示し、実線の枠がＴＶ２１へ表示されるサイズ変更画像の範囲を示す。
【００２６】
また、図５（Ｂ−１）から（Ｂ−４）は、画像データの画素マップの一部を示す概念図で、1区画が1画素を表し、再生時に間引き読み出しされる割合を示す図である。図５（Ｂ−１）から（Ｂ−４）は、（Ａ−１）から（Ａ−４）にそれぞれ対応する。ただし、以下で説明する読み出し画素の割合は、あくまで例示である。
【００２７】
静止画としての全体画像の画素数は、プリントにも耐えるようにとの要請から、撮像素子のフル画素（例えば１０００万画素）が選択されることが多い。一方、ＴＶ２１はアスペクト比だけでなく、再生できる画素数も、撮像素子自体よりかなり少ない。例えばフルハイビジョンでも１０８０×１８２０で約２００万画素でずっと少ないので、出力部１４からＴＶ２１に出力される画像も少ない画素数で十分である。その方が送信時間も短くて済む。例えば、出力画像が図５（Ａ）のような全体画像のときは、画像処理部５が図５（Ｂ−１）のように、斜線で示される画素の割合（８画素に１画素の割合）で画素を取り出して、補間処理をする。つまり、ＴＶ２１の再生能力に合わせて、必要十分な画素数に落とされた画像を出力するのが効率的である。
【００２８】
次に、図５（Ａ−２）の画像は、全体画像から上半身部分が拡大された画像である。図５（Ａ−２）のような画像を表示する場合に、サイズ変更部５ａが全体画像から所定範囲を切出しする際に、拡大分を考慮して間引き率を低下させて作成する。つまり、ＴＶ２１での表示面積が増加するので、図４（Ｂ）のように全画素中表示に使用する画素の割合を増やす。ここでは、例えば図５（Ｂ−２）のように、全体画像データの４画素に１画素の割合で使用する。上記図５（Ａ）の既に大きく間引きされた画像をそのまま拡大すると、せっかくＴＶ２１が高精細な表示能力を持っていても、あるいは全体画像が豊富な情報を持っていても、粗い画面しか再生できないからである。
【００２９】
図５（Ａ−３）は更なる拡大画像である。図５（Ａ−３）は、全体画像の顔部分領域で、アスペクト比はＴＶ２１のアスペクト比と同じ１６：９である。そして、サイズ変更部５ａは、使用する画素数も上記（Ａ−１）と(Ａ−２)に比べて増やすようにする。例えば、図５（Ｂ−３）のように、全体画像の画素を全て利用する。以上のように、切出す画像のサイズに応じて間引きする割合を変えるので、画面上の高精細感が維持される。
【００３０】
以上は、１６：９ワイド画面のＴＶに対し、極端に表示領域が異なる縦構図の例を示した。なお、図５（Ａ−４）は、通常の横構図で撮影した画像（４：３）をＴＶ２１に表示する例である。このときも、図５（Ｄ）の実線のような領域のみ（１６:９）の表示しかできないので、実線のような限定領域の表示を行う必要がある。この際の間引きは、図５（Ｂ−４）のような割合（４画素に１画素）を採用する。以上によりＴＶ２１の再生能力をフルに活用して、美しい高精細画像を楽しむことができる。
【００３１】
図６は、再生時にサイズ変更データを作成して画像出力処理の手順を説明するフローチャートである。この画像出力処理は、プログラムに従ったＭＰＵ１０、画像処理部５、サイズ変更部５ａおよび出力部１４により主に実行される。
【００３２】
まず、再生される画像が、動画か静止画かを判定する（ステップＳ１１）。動画の場合には（ステップＳ１１ＹＥＳ）、動画表示用の出力処理を行う（ステップＳ２１）。静止画と判定すると（ステップＳ１１ＮＯ）、メディア８から記録再生部７を介して、静止画像データを読み出す（ステップＳ１２）。次に、この画像の撮影構図が縦か横かを判定する（ステップＳ１３）。縦横の判定は、縦横判定部１７によって撮影時に画像データに添付された縦横データから判定する。あるいは、縦横データがなければ、再生時に画像処理部５によって画像の特徴から判定してもよい。
【００３３】
サイズ変更部５ａが縦横判定結果に基づいて以下のサイズ変更処理を行い、出力部１４がその画像をＴＶ２１に出力する。上記図４や図５で説明した処理である。まず、縦構図でなければ（ステップＳ１３ＮＯ）、つまり通常の横画面であれば、サイズ変更部５ａは、接続されたＴＶのアスペクト比に応じて図５（Ａ−４）の実線で示した領域を切出して、出力部１４がサイズ変更した画像をＴＶ信号に変換して出力する（ステップＳ２２）。出力された画像がＴＶ２１に表示される。以下の説明では、１６：９のアスペクト比のＴＶに出力するものとする。またアスペクト比は、ＴＶ２１からアスペクト比情報が送信されればこれを利用し、その情報がなければユーザーの指定に応じれば良い。
【００３４】
縦構図の写真のときは（ステップＳ１３ＹＥＳ）、図４（Ａ）→（Ｂ）→（Ｃ）で示すような画像を一定時間で順次繰り返すような表示を行う。画面を急激に変化させないようにするためである。画像処理部５は、読み出した画像データを縦横の向きを変えてから、図４（Ａ）のような全体画像として出力する（ステップＳ１４）。このアスペクト比（横：縦）は３：４のままである。所定時間表示したら（ステップＳ１５ＹＥＳ）、図４（Ｂ）のようなサイズの画像に切替える。サイズ変更部５ａが、読み出した全体画像から、アスペクト比を５：４に変更し、顔検出情報に基づいて上半身に相当する領域を設定して、この領域を切出して（トリミング）、出力する（ステップＳ１６）。ここで５：４のアスペクト比は、ＭＰＵ１０が撮像素子３とＴＶ２１のアスペクト比から自動的に設定して、サイズ変更部５ａに通知する。
さらに、所定時間表示したら（ステップＳ１７ＹＥＳ）、図４（Ｃ）のようなサイズの画像に切替える。サイズ変更部５ａが、アスペクト比を１６：９に変更し、顔検出情報に基づいて顔に相当する領域を設定して、この範囲を全体画像から切出して（トリミング）出力する（ステップＳ１８）。
【００３５】
図４（Ｃ）のような画像表示中に、終了の指示操作があれば（ステップＳ１９ＹＥＳ）、終了処理する。また、別画像表示への切換え指示があれば（ステップＳ２０ＹＥＳ）、ステップＳ１１にもどる。なお、再生時の表示の順番は、図４（Ａ）→（Ｂ）→（Ｃ）の順番でなく、逆に（Ｃ）→（Ｂ）→（Ａ）の順番としてもよい。ここで、画像ファイルは動画や静止画も一緒になってカメラのメディアに記録されているので、ユーザーの画像ファイルの切換え操作に従って、操作が動画か静止画を判定して、表示方法を切換えるようにした。また、３：４と１６：９の間のアスペクト比の画像として、上記フローチャートでは５：４の画像のみを示したが、これ以外に細かく設定しても当然に良い。例えば、３：４、４：４、５：４、６:４、１６：９のように途中に３段階を設定してもよい。
なお、上記画像出力処理は、カメラ１の撮影系（レンズ２、撮像素子３、ＡＦＥ部４）以外の部分によって実行されるので、ＭＰＵ１０、画像処理部５、サイズ変更部５ａ、顔検出部１５、記録再生部７、出力部１４等から構成されるユニットも本発明を構成する。このユニットを画像出力装置と称す。
【００３６】
上記説明では、再生時にサイズ変更画像を作成してこれを表示装置に出力することを説明した。これに限らず撮影時にサイズ変更画像を同時に生成して記録するようにしても良い。これを以下に説明する。
【００３７】
図７は、撮影時にサイズ変更画像もあわせて記録する画像記録処理の手順を説明するフローチャートである。この処理は、プログラムに従ったＭＰＵ１０、画像処理部５およびサイズ変更部５ａ等により主に実行される。
【００３８】
撮影された原画像は、不図示の一時記憶メモリに記憶される。そして、記憶された原画像はプリントに耐えるようなフル画素あるいは多画素の画像として圧縮される（ステップＳ３１）。次に、この撮影画像が縦構図かで処理を変える。縦横判定部１７の判定により、縦構図かを判定する（ステップＳ３２）。縦構図でなく（ステップＳ３２ＮＯ）、横構図であれば、サイズ変更部５ａが、一時記憶メモリに記憶された圧縮前の原画像から図５（Ａ−４）の実線のような横長のサイズ変更画像を生成して、記録再生部７がサイズ変更画像を原画像とともにメディア８に記録する（ステップＳ３６）。
【００３９】
一方、縦構図のときは（ステップＳ３２ＹＥＳ）、まず図４（Ａ）のような被写体全体を表示する画像である上記圧縮された原画像を記録再生部７がメディア８に記録する（ステップＳ３３）。続いて、サイズ変更部５ａが、原撮影画像から図４（Ｂ）のようなアスペクト比（５:４）を変更した中間的な画像を生成し、記録再生部７がこれを記録する（ステップＳ３４）。アスペクト比はＭＰＵ１０が撮像素子３とＴＶ２１のアスペクト比から決定する。さらにサイズ変更部５ａが、上記撮影画像から図４（Ｃ）のようなＴＶ画面全体を有効利用するような、アスペクト比が１６：９の画像を生成し、記録再生部７がこれを記録する（ステップＳ３５）。
【００４０】
ここで、３段階で切換えて表示するように３段階の画像を記録するようにしたが、ステップＳ３３とステップＳ３５の２段階記録にしても良い。注視されることが少ない途中の段階の画像は、第１段階の画像から再生時に電子ズームで作成してもよいからである。
【００４１】
以上のように、撮影時にサイズ変更画像も記録するようにしたので、再生のたびにフル画素の画像をいろいろサイズ変更して表示するようなプロセスが不要になり、再生側に特別な回路が不要になる。なお、上記例ではサイズを３段階で示したが、３段階以上のサイズに変更しても当然良い。
【００４２】
次に、上記第１実施形態の変形例について図８、９を用いて説明する。図４（Ａ）のように、画面の両サイドを完全に画像なしの黒い表示にすると、見栄えが良くないと感ぜられる。そこで、この変形例では、再生表示時に画像を表示するときに、余白の部分を有効活用する例である。図８はこの合成処理の手順を説明するフローチャートである。図９は、ＴＶ２１に表示される画像を示す図である。
【００４３】
本例では、画面両サイドに別画像を添付した合成画像を作成し表示する（図９）。ただし、添付する別画像は現画像鑑賞の邪魔にならないような画像が望ましい。つまり、添付する別画像はあまり煩雑なものやわかりにくい画像は不向きである。例えば、別画像としては、撮影した画像やその一部を縮小した画像からイラスト風に単純化あるいは抽象化した画像が望ましい。カメラにあらかじめイラスト画像を記録して、これを別画像として利用するようにしてもよい。
【００４４】
図８のフローチャートに沿って合成処理の手順を簡単に説明する。撮影されてメディア８に記録されている原画像データを読み出し伸長する。サイズ変更部５ａがこの原画像のサイズ変更処理を行う（ステップＳ４１）。上記別画像がメディア８あるいはＲＯＭ１１に記録されていて、上記別画像の中から、ユーザーに指定されあるいは自動的選択された画像を、余白域に用いる別画像として読み出し伸長する（ステップＳ４２）。画像処理部５がサイズ変更処理された原画像にこの別画像を合成して合成画像を作成し、静止画圧縮伸長部６ａがこの合成画像を圧縮し、記録再生部７が合成画像をメディア８に記録する（ステップＳ４３）。ユーザーから表示指示があれば、この合成画像が読み出されＴＶ２１に表示される。以上の処理によって、さらにワイド画面を有効に利用して効果的な表示を行うことができる。
【００４５】
(第２実施形態)
次に第２実施形態について、図１０、１１および１２を用いて説明する。第２実施形態は、ＴＶ再生時の拡大部分を撮影する際に、顔の画像を判定してその部分を重視するような撮影を行う例である。縦長画像、特にポートレイト写真においては、一般的に人物の顔が重要になるので、図４（Ｃ）のように、顔部分を拡大撮影や表示するのが効果的だからである。なお本発明が適用されるカメラのブロック図は、図１と同様であるので省略する。また、撮像素子および表示予定のＴＶ２１のアスペクト比も同じく、それぞれ４：３、１６：９とする。
【００４６】
図１０は、縦構図撮影時に表示部１３に表示されるモニタ画像の２例である。図１０（Ａ）の画面は、全体画像とその中で拡大記録される領域を示す情報が表示された画面である。
表示制御部１２は、拡大記録される領域を示す情報として、画面上部に破線枠２３ｂを表示する。枠２３ｂの領域部分が、図４（Ｃ）のように拡大される。枠２３ｂの縦横比は、ＴＶ２１に合わせて１６：９の比率である。
【００４７】
一方、図１０（Ｂ）の画面はマルチ表示の例である。静止画用の撮影画像（全体画像）２３ｃとＴＶ表示に利用するサイズ変更画像２３ｄが表示部１３にマルチ表示される。サイズ変更画像２３ｄのアスペクト比は、１６：９である。全体画像とサイズ変更される画像の両方が同時に表示されるので、撮影に都合がよい。このとき、ＴＶ表示の時に拡大される部分をさらに枠２３ｂとして表示してもよい。ここで、枠２３ｂの位置は、ユーザーがスイッチ等の操作で位置シフトできるようにしてもよい。さらに、一度設定された枠２３ｂの位置が、顔検出技術を応用して、顔の位置が変わっても自動的に追尾するような構成であればより望ましい。
【００４８】
図１２は、上記モニタ画像を用いた撮影処理の手順を説明するためのフローチャートである。ここでは、分かりやすくするために、縦構図撮影時の場面に絞って説明する。この処理は、プログラムに従ったＭＰＵ１０、サイズ変更部５ａ、表示制御部１２により主に実行される。
【００４９】
まず、全体画像を表示部１３に表示する（ステップＳ５１）。シャッターチャンスや構図を判断させるためである。ＴＶ画面に表示するためのサイズ変更画面の領域を示す情報としての枠２３ｂも表示させる（ステップＳ５２）。つまり、図１０（Ａ）のような画像を表示する。もちろん、図１０（Ｂ）のようなマルチ表示でもかまわない。
【００５０】
ユーザーの撮影指示を待つ（ステップＳ５３）。適切なタイミング、構図になったと判
断したユーザーにより、レリーズスイッチ（例えばスイッチ１６ａ）が操作される。操作指示があると（ステップＳ５３ＹＥＳ）、全画面（全体画像）相当の静止画撮影を行う（ステップＳ５４）。そして、ステップＳ５２の枠２３ｂで示される領域内の撮影を行う（ステップＳ５５）。ステップＳ５５の撮影では、サイズ変更部５ａによりＴＶ２１の再生能力に合わせたサイズに変更された画像を記録する。これによって、ＴＶ２１を用いたときには、図４（Ａ）に示した画面と図４（Ｃ）に示した画面を切換えて、または自動的に遷移させて楽しむことができる。
【００５１】
撮影に先立って枠２３ｂの位置について、撮影者が気に入らなければ、操作部１６に属するＸＹ方向操作キーによって変更できる。ユーザーのＸＹ方向操作キーによる変更操作を判断する（ステップＳ５６）。枠２３ｂの位置の変更するようなユーザーの切換え操作があれば（ステップＳ５６ＹＥＳ）、操作に従って枠２３ｂの位置を移動する（ステップＳ５７）。この切換え操作がなければ（ステップＳ５６ＮＯ）、ステップＳ５８にジャンプする。そして、ユーザーがその位置で枠２３ｂのロック操作を行うと（ステップＳ５８ＹＥＳ）、枠内の画像を記憶する（ステップＳ５９）。すると、カメラの向きを変えて画像の位置が変化しても（ステップＳ６０ＹＥＳ）、その像のある画面内の位置を検出して、その位置に枠の位置を追従させる（ステップＳ６１）。枠２３ｂの位置の追従は、例えば顔検出部１５の検出に基づいて行う。なお、ロック操作（ステップＳ５８ＮＯ）や画像変化がなければ（ステップＳ６０ＮＯ）、ステップ５１に戻る。
【００５２】
図１１は、枠２３ｂの移動例を示す図である。このように枠２３ｂが画像に従って移動するようにすれば、図１１（Ａ）から図１１（Ｂ）のように構図が変化しても、類似の画像がある位置に枠２３ｂが移動する。ユーザーがいちいち枠位置を変更しなくても、カメラ１が像を判定してサイズ変更画像の位置を切換えるので、ユーザーは撮影に専念することができる。
【００５３】
以上説明したように、第２実施形態によれば、ＴＶで拡大表示される画像をモニタ画像上で確認しながら撮影できるようになる。
【００５４】
以上の各実施形態よれば、ユーザーは撮影段階からプリントで楽しむ時と大型ＴＶ画面上で迫力ある再生を楽しむ時の両方の楽しみ方を考えながら撮影を行える。また、上記実施形態では、ＴＶ２１とカメラの撮像素子３のアスペクト比が異なる例で説明したが、これにかぎらず、同一のアスペクト比でも縦構図画像であれば、アスペクト比が変更され拡大されたサイズ変更された画像を表示することは有効である。
【００５５】
なお上記各実施形態において、上記各実施形態で説明したＭＰＵ１０処理に関しては、一部または全てをハードウェアで構成してもよい。逆に顔検出部１５および縦横判定部１７等をソフトウェアで構成しても良い。具体的な構成は設計事項である。そして、ＭＰＵ１０による各制御処理は、ＲＯＭ１１に格納されたソフトウェアプログラムがＭＰＵに供給され、供給されたプログラムに従って上記動作させることによって実現されるものである。従って、上記ソフトウェアのプログラム自体がＭＰＵ１０の機能を実現することになり、そのプログラム自体は本発明を構成する。また、そのプログラムを格納する記録媒体も本発明を構成する。記録媒体としては、フラッシュメモリ以外でも、ＣＤ−ＲＯＭ、ＤＶＤ等の光学記録媒体、ＭＤ等の磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、各実施形態では本願発明をデジタルカメラに適用した例を説明したが、これに限らず例えば携帯電話のカメラ部に適用しても良い。
【００５６】
さらに、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【００５７】
【図１】第１実施形態において、本発明が適用されるカメラ１の全体ブロック図。
【図２】第１実施形態において、ユーザーの画像鑑賞場面の一例を示した図。
【図３】第１実施形態において、縦構図撮影の場面を示す図。
【図４】第１実施形態において、ワイド画面のＴＶ２１で表示される各種画像を示す図。
【図５】第１実施形態において、ＴＶ２１の画面に表示される画像のサイズと、対応して表示に使用する画素の関係を示す図。
【図６】第１実施形態において、画像出力処理の手順を説明するフローチャート。
【図７】第１実施形態において、撮影時にサイズ変更画像もあわせて記録する画像記録処理の手順を説明するフローチャート。
【図８】第１実施形態において、画像の合成処理の手順を説明するフローチャート。
【図９】第１実施形態において、ＴＶ２１に表示される画像を示す図。
【図１０】第２実施形態において、撮影時に表示部に表示されるモニタ画像の２例。
【図１１】第２実施形態において、構図変更時の枠２３ｂの追従を示す図。
【図１２】第２実施形態において、撮影処理の手順を説明するフローチャート。
【符号の説明】
【００５８】
1…カメラ、２…レンズ部、３…撮像素子、４…アナログフロントエンド部、５…画像処
理部、
５ａ…サイズ変更部、６…圧縮伸長部、６ａ…静止画圧縮伸長部、６ｂ…動画圧縮伸長部、
７…記録再生部、８…メディア、１０…ＭＰＵ、１１…ＲＯＭ、１２…表示制御部、１３…表示部、
１４…出力部、１５…顔検出部、１６…操作部、１６ａ…レリーズスイッチ、１６ｂ、１６ｃ…切換スイッチ、１７…縦横判定部、２０…被写体、２１…外部表示装置、２２…プリント、
２３ａ…非表示部分、２３ｂ…枠、２３ｃ…静止画用の撮影画像、２３ｄ…サイズ変更画像
【図１】
2007336515.tif 000003
【図２】
2007336515.tif 000004
【図３】
2007336515.tif 000005
【図４】
2007336515.tif 000006
【図５】
2007336515.tif 000007
【図６】
2007336515.tif 000008
【図７】
2007336515.tif 000009
【図８】
2007336515.tif 000010
【図９】
2007336515.tif 000011
【図１０】
2007336515.tif 000012
【図１１】
2007336515.tif 000013
【図１２】
2007336515.tif 000014