(57)【要約】【課題】表示画面の縦横比に応じて、効率的に画像を表示することが可能な画像処理装置及び画像処理システムを提供すること。【解決手段】画像データ入力装置から入力された入力画像と、直前に入力された画像の形状を判定する。ここで、画像データ入力装置から入力された入力画像と、入力画像の直前に入力された画像とが共に所定の形状である場合には、両方の画像を配置した表示用画像を作成し出力する。また、入力画像と、直前に入力された画像とが所定の形状でない場合は、入力画像のみを配置した表示用画像を作成し出力する。【選択図】図５
2007292939.tif 000002
【特許請求の範囲】
【請求項１】
入力画像を入力する画像入力手段と、
前記画像入力手段により入力された入力画像を表示するための表示領域に関する表示領域情報を取得する表示領域情報取得手段と、
前記表示領域情報取得手段により取得された表示領域情報に基づいて、前記入力画像の形状又は大きさを処理する画像処理手段と、
前記画像処理手段により処理された画像を出力画像として出力する画像出力手段と、
を備える画像処理装置。
【請求項２】
前記表示領域情報は、前記入力画像を表示するための表示領域の形状もしくは大きさ、又は該表示領域に既に表示されている画像の形状もしくは大きさであることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像処理手段は、前記画像出力手段により既に出力画像が出力されている場合において、前記出力画像の形状若しくは大きさに基づいて、前記入力画像のみを出力するための処理を行うか又は前記出力画像及び前記入力画像を出力するための処理を行うか、を判定する処理を行うことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記画像処理手段は、前記画像出力手段により既に縦長の出力画像が出力されている場合において、前記入力画像が縦長である場合には、前記出力画像と前記入力画像とから出力画像を生成する処理を行い、前記入力画像が縦長でない場合には、前記入力画像のみから出力画像を生成する処理を行うことを特徴とする請求項２に記載の画像処理装置。
【請求項５】
前記画像処理手段は、前記画像出力手段により既に横長の出力画像が出力されている場合において、前記入力画像が横長である場合には、前記出力画像と前記入力画像とから出力画像を生成する処理を行い、前記入力画像が横長でない場合には、前記入力画像のみから出力画像を生成する処理を行うことを特徴とする請求項２に記載の画像処理装置。
【請求項６】
前記画像処理手段は、前記画像出力手段により既に出力画像が出力されており、前記出力画像と前記入力画像とから新たに出力画像を生成する処理を行う場合において、前記出力画像及び前記入力画像の縦横比を保持しつつ、前記出力画像及び前記入力画像の縦辺の長さは、前記表示領域の縦辺の長さ以下であり、前記出力画像及び前記入力画像の横辺の長さは、前記表示領域の横辺の長さ以下であることを満たした上で、前記出力画像及び前記入力画像が互いに重ならない最大の倍率で前記出力画像及び前記入力画像を拡大し、新たに出力画像を生成する処理を行うことを特徴とする請求項３から５のいずれか一項に記載の画像処理装置。
【請求項７】
前記画像処理手段は、前記画像出力手段により既に出力画像が出力され、前記出力画像と前記入力画像とから新たに出力画像を生成する処理において、
前記表示領域の縦横比（横／縦）をｎ、前記出力されている画像及び前記入力されている画像の縦横比（横／縦）をａとするときに、
２＊ａ≦ｎの場合には、前記出力画像及び前記入力画像を横に並べて表示領域内に配置可能な大きさの出力画像を生成し、
ａ≧２＊ｎの場合には、前記出力画像及び前記入力画像を縦に並べて表示領域内に配置可能な大きさの出力画像を生成し、
ｎ＜２＊ａかつａ＜２＊ｎの場合には、前記入力画像のみが表示領域内に配置可能な大きさの出力画像を生成することを特徴とする請求項２に記載の画像処理装置。
【請求項８】
前記入力画像に対して、画像表示をする際の優先度を決定する優先度決定手段を備え、
前記画像処理手段は、前記優先度に応じて、前記入力画像の大きさに対して重み付けを行い、前記入力画像を出力するか否か選択し、新たに出力する出力画像を生成する処理を更に行うことを特徴とする請求項１から７のいずれか一項に記載の画像処理装置。
【請求項９】
前記優先度決定手段は、前記画像入力手段にて入力された順序に基づいて、入力画像の優先度を決定することを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
請求項１または請求項８のいずれか１項に記載の画像処理装置と、
前記画像処理装置に画像を入力する画像入力装置と、
前記画像処理装置から出力された画像を表示する画像表示装置と
を有することを特徴とする画像処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及び画像処理システムに関し、特に、複数入力された画像から表示する画像を選択し、配置する技術に関する。
【背景技術】
【０００２】
近年のデジタルカメラの普及により、写真をデジタルデータとして蓄積・閲覧する機会が多くなってきた。従来、デジタル写真の閲覧には専らＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ：パソコン）が利用されてきてきたが、テレビの高機能化に伴い、テレビに表示させて閲覧することも可能になっている。
【０００３】
近年のテレビは多くが縦横比１６：９（横対縦）のワイド画面となっているが、写真は多くの場合縦横比４：３（横対縦）であることが多い。そのため、ワイド画面における写真表示において、そのまま表示すると左右に空白が生じるという問題がある。これに関しては、縦横比４：３のテレビ放送をワイド画面で見るときと同様に、左右に引き伸ばして表示する方法が知られている。例えば、左右いずれかの一辺に縦横比４：３の画像を寄せて表示し、余白領域に縦横比４：３の別の小画像を表示することにより余白を減らす発明や（例えば、特許文献１参照）、縦長の画像入力に対し、上下をトリミングしたり、縦サイズを揃えるように縮小することで、縦長の画像を横長の画面上で見やすくする発明（例えば、特許文献２参照）が知られている。
【特許文献１】特開平４−２５７１７３号公報
【特許文献２】特開平１−１３５２７８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところが実際の写真には、縦長の写真、縦横比３：４（横対縦）と横長の写真、縦横比４：３（横対縦）が混在することが考えられる。また、パノラマ写真のように縦横比が異なる写真が含まれる場合もある。そのため、余白領域の形状や大きさも状況に応じて大きく異なる場合がある。しかし、上述したような従来の技術ではこのような状況が想定されていなかった。
【０００５】
さらに、テレビによる写真表示の形態を想定すると、なるべく大画面で表示できるように、複数の写真を次々と切り替えてスライドショウのように表示する利用形態が多いと考えられる。この場合、大きさの異なる写真を混在して表示する場合について、効率良く表示させることができなかった。
【０００６】
そこで、本発明の目的は、表示画面の縦横比に応じて、効率的に画像を表示することが可能な画像処理装置及び画像処理システムを提供することである。
【課題を解決するための手段】
【０００７】
上述した課題を解決するために、第１の発明の画像処理装置は、入力画像を入力する画像入力手段と、前記画像入力手段により入力された入力画像を表示するための表示領域に関する表示領域情報を取得する表示領域情報取得手段と、前記表示領域情報取得手段により取得された表示領域情報に基づいて、前記入力画像の形状又は大きさを処理する画像処理手段と、前記画像処理手段により処理された画像を出力画像として出力する画像出力手段と、を備えることを特徴とする。
【０００８】
また、第２の発明は、第１の発明の画像処理装置において、前記表示領域情報は、前記入力画像を表示するための表示領域の形状もしくは大きさ、又は該表示領域に既に表示されている画像の形状もしくは大きさであることを特徴とする。
【０００９】
また、第３の発明は、第２の発明の画像処理装置において、前記画像処理手段は、前記画像出力手段により既に出力画像が出力されている場合において、前記出力画像の形状若しくは大きさに基づいて、前記入力画像のみを出力するための処理を行うか又は前記出力画像及び前記入力画像を出力するための処理を行うか、を判定する処理を行うことを特徴とする。
【００１０】
また、第４の発明は、第２の発明の画像処理装置において、前記画像処理手段は、前記画像出力手段により既に縦長の出力画像が出力されている場合において、前記入力画像が縦長である場合には、前記出力画像と前記入力画像とから出力画像を生成する処理を行い、前記入力画像が縦長でない場合には、前記入力画像のみから出力画像を生成する処理を行うことを特徴とする。
【００１１】
また、第５の発明は、第２の発明の画像処理装置において、前記画像処理手段は、前記画像出力手段により既に横長の出力画像が出力されている場合において、前記入力画像が横長である場合には、前記出力画像と前記入力画像とから出力画像を生成する処理を行い、前記入力画像が横長でない場合には、前記入力画像のみから出力画像を生成する処理を行うことを特徴とする。
【００１２】
また、第６の発明は、第３から第５の発明のうち、いずれかの発明の画像処理装置において、前記画像処理手段は、前記画像出力手段により既に出力画像が出力されており、前記出力画像と前記入力画像とから新たに出力画像を生成する処理を行う場合において、前記出力画像及び前記入力画像の縦横比を保持しつつ、前記出力画像及び前記入力画像の縦辺の長さは、前記表示領域の縦辺の長さ以下であり、前記出力画像及び前記入力画像の横辺の長さは、前記表示領域の横辺の長さ以下であることを満たした上で、前記出力画像及び前記入力画像が互いに重ならない最大の倍率で前記出力画像及び前記入力画像を拡大し、新たに出力画像を生成する処理を行うことを特徴とする。
【００１３】
また、第７の発明は、第２の発明の画像処理装置において、前記画像処理手段は、前記画像出力手段により既に出力画像が出力され、前記出力画像と前記入力画像とから新たに出力画像を生成する処理において、前記表示領域の縦横比（横／縦）をｎ、前記出力されている画像及び前記入力されている画像の縦横比（横／縦）をａとするときに、２＊ａ≦ｎの場合には、前記出力画像及び前記入力画像を横に並べて表示領域内に配置可能な大きさの出力画像を生成し、ａ≧２＊ｎの場合には、前記出力画像及び前記入力画像を縦に並べて表示領域内に配置可能な大きさの出力画像を生成し、ｎ＜２＊ａかつａ＜２＊ｎの場合には、前記入力画像のみが表示領域内に配置可能な大きさの出力画像を生成することを特徴とする。
【００１４】
また、第８の発明は、第１から第７の発明のうち、いずれかの発明の画像処理装置において、前記入力画像に対して、画像表示をする際の優先度を決定する優先度決定手段を備え、前記画像処理手段は、前記優先度に応じて、前記入力画像の大きさに対して重み付けを行い、前記入力画像を出力するか否か選択し、新たに出力する出力画像を生成する処理を更に行うことを特徴とする。
【００１５】
また、第９の発明は、第８の発明の画像処理装置において、前記優先度決定手段は、前記画像入力手段にて入力された順序に基づいて、入力画像の優先度を決定することを特徴とする。
【００１６】
第１０の発明の画像処理システムは、第１から第８の発明のうち、いずれか一つの発明の画像処理装置と、前記画像処理装置に画像を入力する画像入力装置と、前記画像処理装置から出力された画像を表示する画像表示装置とを有することを特徴とする。
【発明の効果】
【００１７】
本発明によれば、表示画面の縦横比に応じて、効率的に画像を表示することが可能な画像処理装置及び画像処理システムを提供することができる。
【発明を実施するための最良の形態】
【００１８】
以下、本発明に係る画像処理装置及び画像処理システムの実施形態について、その一例を、図面を用いて詳細に説明する。
【００１９】
〔第１実施形態〕
図１は、本実施形態における画像処理システムの接続構成の一例を示す図である。図１に示すように、画像処理システム７は、画像処理装置１と、画像データ入力装置２と、画像データ記憶媒体６と、画像表示装置３とを備えて構成されている。
【００２０】
画像処理装置１は、入力画像、出力画像および入力画像表示領域の形状をもとに、表示用画像を作成し、データ出力する装置である。例えば、画像データ入力装置２および画像表示装置３との画像データ通信機能を備えたアダプタや、携帯電話端末、デジタルカメラ、コンピュータなどにより構成される。
【００２１】
なお、本実施形態において、「入力画像」とは、画像処理装置１に入力された画像データのことをいい、「表示用画像」とは、画像処理装置が出力する画像データのことをいう。また、「出力画像」とは、前記入力画像のうち、出力中の表示用画像が作成される際に用いられた画像データのことをいう。
【００２２】
また、「入力画像表示領域」とは、画像処理装置１が出力する画像の領域サイズのことをいう。なお、当該入力画像表示領域は、画像表示装置３がもつ画像表示領域と同一でなくてもいいことは勿論である。
【００２３】
画像データ入力装置２は、画像処理装置１に画像データを送信する為の画像入力装置である。例えば、画像処理装置１とのデータ通信機能を備えた携帯電話端末、コンピュータ、デジタルカメラ、スキャナ等により構成される。
【００２４】
画像表示装置３は、画像処理装置１から出力された表示用画像を表示する装置である。例えば、画像処理装置１とのデータ通信機能を備えた、携帯電話端末、液晶表示装置、テレビ、ディスプレイ装置等により構成される。
【００２５】
画像データ４は、画像処理装置１と画像データ入力装置２との間で通信される画像データである。画像データ入力装置２から入力された画像データ４は、例えば、赤外線通信経路、インターネット、無線ＬＡＮ、携帯電話回線網、映像信号伝送ケーブルなどのデータ信号伝達経路を介して伝送される。
【００２６】
表示用画像データ５は、画像処理装置１と画像表示装置３との間で通信される画像データである。画像処理装置１において出力された表示用画像データ５は、例えば、Ｄ端子ケーブル、コンポーネントケーブル、Ｓ映像ケーブルなどの、映像信号伝送ケーブルや、インターネット、無線ＬＡＮ、携帯電話回線網、赤外線通信経路などのデータ信号伝達経路を介して伝送される。
【００２７】
画像データ記憶媒体６は、画像処理装置１によって読み取り可能な、画像データ４を記憶する記憶媒体であり、磁気テープやカセットテープなどのテープ系、フロッピー（登録商標）ディスクやハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＤＶＤなどの光ディスクなどからなるディスク系、ＩＣカードや光カード等のカード系、マスクＲＯＭ、ＦＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュＲＯＭ等による半導体メモリを含めた固定的に記録する媒体などにより構成される。
【００２８】
なお、上述した、画像処理装置１、画像データ入力装置２、画像表示装置３又は画像データ記憶媒体６は、別の装置として実現しなくてもよく、上記機能を備えていれば、ひとつの装置として構成してもよいことは勿論である。
【００２９】
つづいて、本実施形態における、画像処理システムの接続構成の一例を図２に示す。図２は、本発明に係る画像処理システムの接続構成の一例を簡単に説明するための形態図である。
【００３０】
図２における画像処理システムは、画像処理装置１として、赤外線通信機能および画像データ出力用端子を備えたアダプタ１０と、画像データ入力装置２として赤外線通信機能を備えた携帯電話端末２０と、画像表示装置３として画像データ入力用端子および画像表示機能を備えたテレビ３０とを備えて構成される。
【００３１】
携帯電話端末２０は、ユーザの操作によって、該携帯電話端末２０に記憶された画像データを、赤外線通信機能をもって、アダプタ１０に送信する。
【００３２】
赤外線通信により画像データを受信したアダプタ１０は、該画像データと、出力中の画像データとをもとに、新たに出力する表示用画像データを作成し、画像データ出力用端子より出力をする。そして、出力された表示用画像データは、テレビ３０に入力され、入力された表示用画像データの表示をおこなう。
【００３３】
続いて、図３は、赤外線信号を受光して、映像もしくは音声もしくはその両方の信号を出力するアダプタ１０の形態図である。
【００３４】
ここで、アダプタ１０の筐体２００１は、赤外線の受光を行う集光レンズ２０１１ａ、２０１１ｂ及び２０１１ｃを備えて構成されている。本図においては、異なる角度からの光を受光するために、異なる角度で３つの集光レンズ２０１１ａ、２０１１ｂ及び２０１１ｃが取り付けられている。典型的にはプラスマイナス１５度の指向角を持つレンズおよび受光デバイスを３０度ずつ指向をずらして３つ付けることによりほぼ９０度の領域をカバーすることが可能になる。
【００３５】
上述したアダプタの筐体２００１をテレビ３０の前面のうち、テレビ視聴に邪魔にならない箇所に貼り付け、映像出力端子（コンポジット端子またはＳ端子またはＤ端子）をテレビ３０の映像入力端子に接続する。貼り付け箇所としては、テレビの赤外線リモコン信号受光部の近くに配置し、テレビに対する赤外線リモコン信号を集光レンズにて受信できるようにする。
【００３６】
この赤外線通信アダプタを用いて、信頼性の高い近距離の無線通信が可能である。ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ）は、赤外線を利用した近距離のデータ通信を行なう技術仕様を策定する業界標準化団体であり、同団体が定めた赤外線通信のプロトコルもＩｒＤＡの名で呼ばれる。また、さらにＩｒＤＡ方式のプロトコルを効率化してデータ転送速度を高速化したＩｒＳｉｍｐｌｅというプロトコルも存在し、業界標準化団体ＩｒＤＡにて規格化されている。本実施形態では、画像データの受信にはＩｒＤＡまたはＩｒＳｉｍｐｌｅを用いるものとして説明を行なうが、他の通信方式を用いても良い。赤外線通信プロトコルＩｒＤＡやＩｒＳｉｍｐｌｅは、双方向に赤外線のパケットを送受信することによりデータ通信を行なうため、ＩｒＤＡやＩｒＳｉｍｐｌｅを用いる場合には、赤外線通信デバイスは赤外線の受光部のみならず、発光部も備えている必要がある。
【００３７】
なお、本実施形態では、画像処理装置１をアダプタ形状とし、データ通信を行なう無線媒体として赤外線を用いて説明を行なうが、画像処理装置１はアダプタの様態でなくてよく、画像表示装置３に内蔵されている等としてもよい。また、他の通信手段を用いてデータ通信を行なってもよい。特に、赤外線を含む光通信は指向性がある無線媒体であるため、方向を定めて送信を行なうことで簡単に送信先を定めることができるため、携帯端末２０（画像入力装置２）からアダプタ１０（画像処理装置１）に画像ファイルを送信するのに適することとなる。
【００３８】
次に、本実施形態における画像処理装置の機能構成の一例を図４に示す。図４は、本発明に係る画像処理装置の構成の一例を示す機能ブロック構成図で、図４の中央部分は画像処理装置１の構成を示しており、当該画像処理装置１は、画像受信部１０１０と、入力画像記憶処理部１０２０と、画像処理手段１１００と、画像出力部１０７０等とから構成され、画像処理手段１１００は画像データ記憶部１０３０と、画像形状判定部１０４０と、画像表示様式決定部１０５０と、表示用画像作成部１０６０と、表示領域情報取得部１０８０とを備えて構成されている。
【００３９】
画像受信部１０１０は、画像入力装置２により入力された画像データ、または画像処理装置１の内部若しくは外部に接続された画像データ記憶媒体６に記憶された画像データを読み取ることによって、当該画像処理装置１が画像データを受信するための機能部である。
【００４０】
入力画像記憶処理部１０２０は、画像データ記憶部１０３０に対し、記憶されている画像記憶情報を参照するとともに、画像受信部１０１０で受信した画像データを記憶し、画像記憶情報を画像形状判定部１０４０または画像表示様式決定部１０５０に伝える機能部である。ここで、画像記憶情報とは、画像データ記憶部１０３０に記憶されている画像データに関する情報であり、例えば、画像データ記憶部１０３０に記憶されている画像データが何枚あるかといった情報である。
【００４１】
画像データ記憶部１０３０は、画像受信部１０１０にて受信した画像データを、入力画像記憶処理部１０２０を介して記憶する機能部である。
【００４２】
画像形状判定部１０４０は、画像データ記憶部１０３０に記憶された出力候補となる画像が、所定形状であるかどうかを判定する機能部である。画像形状判定部１０４０の動作の詳細については、後述する。
【００４３】
画像表示様式決定部１０５０は、画像形状判定部１０４０にて判定された所定形状判定結果および出力領域サイズ、または入力画像記憶処理部１０２０より受けた画像記憶情報を基に、記憶されている画像を出力画像領域に配する様式を決定する機能部である。
【００４４】
表示用画像作成部１０６０は、画像表示様式決定部１０５０にて決定された画像データ、配置に従い出力画像を作成する機能部である。
【００４５】
画像出力部１０７０は、表示用画像作成部１０６０によって作成された画像を出力する部位であり、液晶ディスプレイやＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）モニタなどに画像データを出力する機能部である。
【００４６】
表示領域情報取得部１０８０は、画像処理装置１が出力した画像を画像表示装置３にて表示する場合における表示領域に関する情報を取得する機能部である。
【００４７】
〔処理の流れ〕
図５は、本発明に係る画像処理装置１において、画像を選択してから、出力する画像を作成し、画像出力をおこなうまでの処理の一例を、フローチャートで図示したものである。
【００４８】
まず、画像入力装置２にて画像データが伝送されると、画像受信部１０１０にて画像データが受信・入力される（ステップＳ１１０）。ここで、入力された画像データを、「画像２」とする。また、画像データを入力する方法としては、種々の方法が考えられるが、例えば、赤外線信号受信などにより新たに画像データを受信することとしても良いし、ＣＤ、ＨＤＤなどの記憶媒体に記録されている画像データなどを選択操作によって入力することとしてもよい。
【００４９】
つづいて、入力画像記憶処理部１０２０が、画像データ記憶部１０３０に画像２を記憶するとともに、画像２以外の画像データが画像データ記憶部１０３０に記憶されているか否かを判定する（以下、この画像データを「画像１」とする。）。そして、画像データ記憶部１０３０に画像１が記憶されていないときは（ステップＳ１２０；Ｎｏ）、ステップＳ１５０の処理に移行する。
【００５０】
ここで、画像データ記憶部１０３０に、画像１が記憶されている場合（ステップＳ１２０；Ｙｅｓ）、画像形状判定部１０４０は、画像１及び画像２の形状が共に所定の形状であるか否かを判定する（ステップＳ１３０）。
【００５１】
具体的には、表示領域情報取得部１０８０が、画像処理装置１が出力した画像を画像表示装置３にて表示する表示領域に関する情報を取得し、画像形状判定部１０４０にて、画像１と、入力された画像２とが、ともに前記表示領域に対して、各画像データが形状所定の条件を満たすかどうか判定をおこない、画像１及び画像２がともに形状について所定の条件を満たすか否かを判定する。ここで、所定の条件を満たす場合は（ステップＳ１３０；Ｙｅｓ）、ステップＳ１４０に処理が移行し、所定の条件を満たさない場合は（ステップＳ１３０；Ｎｏ）、ステップＳ１５０に処理を移行する。
【００５２】
なお、本実施形態において、画像１及び画像２について、画像に外接する該矩形領域の幅がａ、矩形領域の高さがｂであり、出力画像領域の幅がｎ、高さがｍであるとき、２ａｍ≦ｂｎ（以下縦長）となる画像を所定形状の画像とする。
【００５３】
続いて、画像１及び画像２が所定の形状であると判定された場合、画像表示様式決定部１０５０は、画像１と画像２をともに配置した表示用画像を作成するよう表示用画像作成部１０６０に通知する。そして、表示用画像作成部１０６０は、当該通知された画像表示様式に従い、画像１及び画像２を配置した表示用画像を作成する（ステップＳ１４０）。
【００５４】
他方、画像１及び画像２が所定の形状ではないと判定された場合、画像表示様式決定部１０５０は、画像２のみを配置した表示用画像を作成するよう表示用画像作成部１０６０に通知する。そして、表示用画像作成部１０６０は、当該通知された画像表示様式に従い、画像２のみを配置した表示用画像を作成する（ステップＳ１５０）。
【００５５】
つづいて、画像データ記憶部１０３０に、画像１が記憶されていれば、画像１を破棄する処理を実行する（ステップＳ１６０）。そして、作成した前記表示用画像を画像出力部１０７０より画像表示装置３に出力することにより、画像表示装置３が表示画像の表示をおこなう（ステップＳ１７０）。
【００５６】
そして、引き続き画像入力を受け付けるかどうかの判定をおこない、更に画像入力を受け付ける場合は（ステップＳ１８０；Ｙｅｓ）、ステップＳ１１０から処理を繰り返し実行し、画像入力の受付を終了するときは処理を終了する。
【００５７】
〔具体例〕
上記処理によって実現可能となる一例として、デジタルカメラやカメラ機能付携帯電話端末によって記録された写真（以下デジカメ写真）を、赤外線データ通信を用いてワイドテレビのディスプレイに表示する例について以下説明する。
【００５８】
デジタルカメラによって記録される写真画像の縦横比（横対縦）は、通常、パソコン画面や従来のノーマルテレビと同じ４：３であり、ユーザが縦長の写真を記録する際は、カメラを横にして、縦横比（横対縦）が３：４となるように撮影される。また、カメラ機能付携帯電話端末によって記録される写真画像も、縦横比（横対縦）が、４：３または３：４であるものが多い。一方、ワイドテレビの画面の縦横比（横対縦）は１６：９である。
【００５９】
図６（ａ）は、縦横比（横対縦）が３：４のデジカメ写真（以下、縦横比（横対縦）が３：４のデジカメ写真を「縦写真」という。）をワイドテレビの画面（横対縦が１６：９）に１枚表示した場合の一例を示す図である。このように、ワイドテレビに縦写真を表示する場合、縦横比を固定し、かつ画面におさまるように拡大表示すると、左右に大きな余白領域が生じ、出力領域を有効に使えない。
【００６０】
ここで、縦横比（横対縦）が３：４の前記デジカメ写真（以下縦写真）は、前記と同様に拡大しても、ワイドテレビ画面に、重ねずに２枚並べて表示することができ、余白となってしまう領域を有効に使うことができる。この場合、テレビ画面に表示した一例として図６（ｂ）のように表示される。
【００６１】
図６（ｃ）は、縦横比（横対縦）が４：３のデジカメ写真（以下、縦横比（横対縦）が４：３のデジカメ写真を「横写真」という。）をワイドテレビの画面に１枚表示した場合の一例を示す図である。このように、横写真の場合は、前記と同様に拡大すると、１枚しか表示することできない。
【００６２】
そこで、直前に表示している写真がなければ、新たに写真を表示する際に、当該写真のみを中央に表示し、直前に表示している写真がある状態で、新たに表示する写真の縦横比を変えずに表示する場合、当該２つの写真を並べて表示できるかどうかを判定し、可能なら（当該写真が２つのともに縦写真である場合）左右に並べて表示し、不可能なら（当該写真のうち、少なくとも一方が横写真なら）新たに表示する写真のみを中央に表示するという処理を行なう。
【００６３】
図７は、上記処理を実現した結果として、現在表示されている画像、新たに入力された画像、新たに表示する画像の関係を具体例として示した図表である。各ケース毎に、現在表示している画像と、新たに選択された画像（次に表示される画像）と、新たに表示する画像（選択された後に表示される画面状態）を示している。
【００６４】
ここで、画像１は直前に表示されている画像、画像２は新たに表示される画像で、図５の動作フローで説明したものと同じである。画像２は図５におけるステップＳ１１０の画像、画像１は図５のステップＳ１２０における画像を示している。また、画像１以前に表示されていた画像を画像０とする。
【００６５】
また、新たに表示する画像は、図５のステップＳ１４０及びＳ１５０にて作成される表示用画像を示している。
【００６６】
まず、ケース１及びケース２は、直前に入力された画像が表示されていない場合であり（ステップＳ１２０；Ｎｏ）、この場合、画像２のみを中央に配した画像を出力する（ステップＳ１５０）。
【００６７】
また、ケース３、ケース４、ケース６及びケース８は、直前に入力された画像が表示されており、画像１、画像２がともに所定の形状でないと判定される場合であり（ステップＳ１２０；Ｙｅｓ→ステップＳ１３０；Ｎｏ）、この場合画像２のみを中央に配した画像を出力する（ステップＳ１５０）。
【００６８】
また、ケース５及びケース７は、直前に入力された画像が表示されており、画像１、画像２がともに所定の形状であると判定される場合であり（ステップＳ１２０；Ｙｅｓ→ステップＳ１３０）、画像１と画像２を左右に配した画像を出力する（ステップＳ１４０）。
【００６９】
ここで、各ケースの詳細を説明すると、
現在表示している画像がなにもない状態において、新たに縦写真である画像２が選択されると、新たに画像２が表示画面中央に表示される（ケース１）。
【００７０】
現在表示している画像がなにもない状態において、新たに横写真である画像２が選択されると、新たに画像２が表示画面中央に表示される（ケース２）。
【００７１】
現在横写真である画像１のみが表示されている状態において、新たに縦写真である画像２が選択されると、画像１の表示は消去され、新たに画像２が表示画面中央に表示される（ケース３）。
【００７２】
現在横写真である画像１のみが表示されている状態において、新たに横写真である画像２が選択されると、画像１の表示は消去され、新たに画像２が表示画面中央に表示される（ケース４）。
【００７３】
現在縦写真である画像１のみが表示されている状態において、新たに縦写真である画像２が選択されると、画像１は表示画面中央から表示画面内左方に配置が変更され、画像２が表示画面内右方に配置され、表示される（ケース５）。
【００７４】
現在縦写真である画像１のみが表示されている状態において、新たに横写真である画像２が選択されると、画像１の表示は消去され、新たに画像２が表示画面中央に表示される（ケース６）。
【００７５】
現在縦写真である画像０と縦写真である画像１が表示されている状態において、新たに縦写真である画像２が選択されると、画像０の表示は消去され、画像１は表示画面内右方から表示画面内左方に配置が変更され、画像２が表示画面内右方に配置され、表示される（ケース７）。
【００７６】
現在縦写真である画像０と縦写真である画像１が表示されている状態において、新たに横写真である画像２が選択されると、画像０、画像１の表示はともに消去され、新たに表示画面中央に画像２が表示される（ケース８）。
【００７７】
となる。以上の処理により、テレビ画面に表示する縦写真または横写真を、表示されない領域が生じないよう、縦横比を変えず、かつ最大限拡大して表示する際に、横写真を受信したら該写真のみを表示し、縦写真を２枚続けて受信したら当該２枚の写真をともに表示することで、通常生じる余白を、効率的に用いることが可能となる。
【００７８】
図８に、表示用画像の例を示す。上述した説明のように、入力画像の形状は図８（ａ）のような矩形に限るものではなく、例えば、図８（ｂ）に示すように、円形や多角形などであってもいい。
【００７９】
また、画像１と画像２をともに配した出力画像、画像２のみを配した出力画像は、実施例に挙げた図８（ａ）のような配置方法でなくてもよく、図８（ｃ）のように、出力画像領域の上や下に余白領域を設けたり、図８（ｄ）のように、片方の画像が、もう一方よりも小さく表示されるようにしたり、図８（ｅ）のように、片方の画像の外周に枠を表示したり、図８（ｆ）のように片方の画像の領域の一部がもう片方の画像の領域によって非表示となる、などしてもいい。
【００８０】
上記配置方法によって、最も最近選択された画像がどちらの画像であるか明示できるといった効果や、該出力方法によって確保される余白領域に、画像名や操作方法などの情報を表示することが可能になる、などの効果が得られる。
【００８１】
なお、前述した処理手順のステップＳ１３０において画像１、画像２に対して判定をおこなう所定の形状の定義は、画像に外接する該矩形領域の幅がａ、矩形領域の高さがｂであり、出力画像領域の幅がｎ、高さがｍであるときに、２ａｍ≦ｂｎ（以下縦長）となる画像（以下所定形状基準１）として説明したが、これに限られる訳ではない。
【００８２】
例えば、画像に外接する該矩形領域の幅がａ、矩形領域の高さがｂであり、出力画像領域の幅がｎ、高さがｍであるとき、ａｍ≧２ｂｎ（以下横長）となる画像（所定形状基準２）としたり、ａ＞ｂとなる画像（所定形状基準３）としたり、ｂ＞ａとなる画像（所定形状基準４）などとしてもいい。
【００８３】
また、画像１、画像２がともに上記所定形状基準１を満たすか、またはともに所定形状基準２を満たすか、少なくともいずれか一方となるときに、画像１、画像２がともに所定の形状である、などとしてもいい（所定形状基準５）。
【００８４】
上記のような処理判定基準を設定することにより、例えば、所定形状基準２では、画像１、画像２について、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の幅が出力領域の幅と同じになるように拡大縮小処理を施したときに、重ねずに２枚縦に並べて表示することが可能である。
【００８５】
具体的には、図５におけるステップＳ１２０において、直前に入力された画像が表示されており、図５のステップＳ１３０において画像１、画像２がともに横長である場合のみ、図８（ｇ）のごとく画像１と画像２を上下に配した画像を出力し、それ以外の場合は、画像１のみを中央に配した画像を出力する、という処理をおこなうことができる。
【００８６】
また、所定形状基準３では、例えば出力画像領域中に、縦横比（横／縦）が２である画像配置領域を設けることで、画像１、画像２について、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の高さが画像配置領域の高さと同じになるように拡大縮小処理を施し、重ねずに２枚横に並べて表示することができる。
【００８７】
また、所定形状基準４では、例えば出力画像領域中に、縦横比（縦／横）が２である画像配置領域を設けることで、画像１、画像２について、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の幅が画像配置領域の幅と同じになるように拡大縮小処理を施し、重ねずに２枚縦に並べて表示することができる。
【００８８】
また、所定形状基準５では、画像１、画像２について、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の高さが出力領域の高さと同じになるように拡大縮小処理を施したときに、図８（ｈ）のごとく、重ねずに２枚横に並べて表示したり、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の幅が出力領域の幅と同じになるように拡大縮小処理を施したときに、重ねずに２枚縦に並べて表示したり等といったことができる。
【００８９】
このように、第１実施形態によれば、画像データに縦横比の異なる画像データが混在していたとしても、直前に表示されている画像と、現在表示しようとしている画像とに基づいて適切に表示することが可能となる。
【００９０】
〔第２実施形態〕
続いて、第２実施形態として、複数枚の画像を同時に表示する処理を実現する場合について説明する。なお、第１実施形態と構成等は同一であり、図５の処理手順を、図９の処理手順に置き換えたものと同じであるため、図９における処理手順について説明する。
【００９１】
図９は、第２実施形態における画像処理装置１において、画像を入力してから、出力する画像を作成し、出力するまでの処理の一例を、フローチャートで図示したものである。
【００９２】
まず、画像受信部１０１０にて画像が入力される（ステップＳ２１０）。次に、入力画像記憶処理部１０２０が、入力された画像それぞれの表示優先度を設定する（ステップＳ２２０）。具体的には、入力された画像を画像データ記憶部１０３０に記憶すると併せて、表示優先度の設定を行う。表示優先度の設定は、画像データ記憶部１０３０に表示優先度とともに記憶されている画像の優先度を１段階ずつ下げ、新たに受信した画像（以下、「画像Ａ」とする）を表示優先度「１」とする。
【００９３】
ここで、表示優先度は、例えば画像名、画像の大きさ、形状などに準じて設定しても良く、あらかじめ画像データにメタデータとして表示優先度を付加しておき、それを読みこむようにしても良い。また、画像データ記憶部１０３０に記憶する画像の上限をあらかじめ定めておき、上限を超えた枚数が入力されたときには、表示優先度の最も低い画像を画像データ記憶部１０３０から削除する、などしてもいい。
【００９４】
次に、入力画像記憶処理部１０２０は、画像データ記憶部１０３０に記憶されている全ての入力画像を出力候補とする（ステップＳ２３０）。
【００９５】
そして、入力画像記憶処理部１０２０は、画像形状判定部１０４０に、出力候補画像の情報を通知するとともに、表示領域情報取得部１０８０は、画像処理装置１が出力した画像を画像表示装置３にて表示する表示領域に関する情報を通知する。そして、画像形状判定部１０４０は、所定形状判定条件Ａ及びＢを満たすか否かを判定する（ステップＳ２４０）。具体的な、条件の一例として、以下のような条件式に基づいて判定する。
【００９６】
画像データ記憶部１０３０に記憶されている出力候補画像が全ｓ枚であり、該出力候補画像を、前記表示優先度の高い順に、第１の画像、第２の画像、・・・第ｓの画像としたときに、前記画像出力部の表示領域の縦横比（横／縦）がｎ、縦横比（縦／横）がｍで、
第１の画像の縦横比（横／縦）がａ［１］、縦横比（縦／横）がｂ［１］で、
第２の画像の縦横比（横／縦）がａ［２］、縦横比（縦／横）がｂ［２］で、
・・・
第ｓの画像の縦横比（横／縦）がａ［ｓ］、縦横比（縦／横）がｂ［ｓ］である場合、
あらかじめ定められた、値が正である重み係数ａ［０］，ｂ［０］，ｗ［１］，ｗ［２］に対して、
ａ［ｋ］  ≦  ａ［０］  ｛ｋ＝１，２，…，ｓ｝（条件式Ａ）
ａ［１］＋ａ［２］＋・・・＋ａ［ｓ］  ≦  ｎ＊ｗ［１］（条件式Ｂ）
を満たすかどうか判定する。
【００９７】
当該条件式を満たす場合には（ステップＳ２４０；Ｙｅｓ）、画像表示様式決定部１０５０が、画像データ記憶部１０３０に、出力候補画像として記憶されている画像全てが、横並びに配置するよう表示用画像作成部１０６０に指示し、表示用画像を作成する（ステップＳ２６０）。
【００９８】
他方、所定形状判定条件Ａ及びＢを満たさないと判定された場合（ステップＳ２４０；Ｎｏ）、所定形状判定条件Ｃ及びＤを満たすか否かを判定する（ステップＳ２５０）。具体的な条件の一例として、以下のような条件式に基づいて判定する。
【００９９】
ｂ［ｋ］  ≦  ｂ［０］  ｛ｋ＝１，２，…，ｓ｝  （条件式Ｃ）
ｂ［１］＋ｂ［２］＋・・・＋ｂ［ｓ］  ≦  ｍ＊ｗ［２］（条件式Ｄ）
を満たすかどうか判定する。当該条件式を満たす場合には（ステップＳ２５０；Ｙｅｓ）、画像表示様式決定部１０５０は、画像データ記憶部１０３０に、出力候補画像として記憶されている画像全てが、縦並びに配置された表示用画像を作成するよう、表示用画像作成部１０６０に指示する（ステップＳ２７０）。
【０１００】
また、ステップＳ２５０において条件式を満たさないと判定された場合には（ステップＳ２５０；Ｎｏ）、入力画像記憶処理部１０２０は、出力候補画像のうち、表示優先度が最も低い画像を出力候補画像から除外し(ステップＳ２８０)、ステップＳ２４０の処理に戻る。
【０１０１】
そして、表示用画像作成部１０６０にて作成した表示用画像を、画像出力部１０７０にて出力する（ステップＳ２９０）。改めて画像入力を受け付けるかどうかの判定をおこない、入力を受け付けるときは（ステップＳ３００；Ｙｅｓ）ステップＳ２１０から処理を繰り返し実行し、入力受け付けを終了するときは（ステップＳ３００；Ｎｏ）フローを終了する。
【０１０２】
なお、重み係数ｗ［１］，ｗ［２］は、正の値であれば任意に定めてよいが、以下に挙げる理由から、「１」に近い値（およそ「０．５」から「２」）であることが望ましい。
【０１０３】
ｗ［１］またはｗ［２］（以下「ｗ」とする。）を「１」としたときは、出力候補画像全てについて、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の高さが出力領域の高さと同じになるように拡大縮小処理を施したときに、または、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の幅が出力領域の幅と同じになるように拡大縮小処理を施したときに、全ての出力候補画像がお互い重ならないように配置し、出力画像領域をもっとも効率よく利用することが可能となる。
【０１０４】
ｗを「１」以下としたときは、出力候補画像全てについて、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の高さが出力領域の高さと同じになるように拡大縮小処理を施したときに、または、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の幅が出力領域の幅と同じになるように拡大縮小処理を施したときに、全ての出力候補画像がお互い重ならないように配置することが可能であり、かつ画像と画像の間に境界を設けることが可能となる。ｗの値が「１」にくらべて非常に小さいと、該境界を大きく設けることができるが、入力画像に対する縦横比の制限が厳密になり、より細長い画像でないと並べて表示されなくなるため、「１」に近い値とすることが望ましい。
【０１０５】
ｗを「１」より大きい値としたときは、出力候補画像全てについて、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の高さが出力領域の高さと同じになるように拡大縮小処理を施したときに、または、該画像の縦横比を維持し、かつ該画像に外接する矩形領域の幅が出力領域の幅と同じになるように拡大縮小処理を施したときに、図１０（ａ）のように全ての出力候補画像がお互い重ならないように配置する、という処理ができない場合がある。その際には、例えば表示優先度が低い画像、または全ての画像について、図１０（ｂ）または図１０（ｃ）のように、前記拡大縮小倍率よりも小さめに拡大縮小をおこなう。また、図１０（ｄ）のように、画像領域の一部を重複させることによって、全ての出力候補画像を出力画像領域内に収めることが可能となる。ここで、ｗの値が「１」にくらべて非常に大きいと、より多くの枚数の入力画像を配置することができるが、その分、入力画像の拡大縮小倍率を小さくする、または重複する画像領域を大きくする必要があるため、「１」に近い値とすることが望ましい。
【０１０６】
また、重み係数ａ［０］およびｂ［０］は、例えば、ａ［０］が十分に大きいと、「ｎ＝１６／９」、「ｗ＝１」、「ａ［１］＝４／３」、「ａ［２］＝１６／１」というように、出力画像領域に対してやや小さい縦横比をもつ画像と、縦横比が極端に大きい画像２枚は、条件式Ａ、条件式Ｂをともに満たすものの、実際に出力表示したとき、図１０（ｅ）のようにバランスが悪くなることがあることを考慮したものである。例えば、「ａ［０］＝ｂ［０］＝１」としたり、「ａ［０］＝ｎ、ｂ［０］＝ｍ」としたりしてもいい。
【０１０７】
「ａ［０］＝２ｎ、ｂ［０］＝２ｍ」とし、条件Ｂ、条件Ｄを適用せず、入力画像の上限を２枚とすると、先に説明した実施処理例と同機能の画像処理装置となる。
【０１０８】
また、上記バランスを考慮せずに実施する際は、条件式Ａ、条件式Ｃは適用せず、条件式Ｂ、条件式Ｄのみを適用してもよい。
【０１０９】
以上説明した処理によれば、複数の画像が選択されたときに、表示する画像の取捨、画像の配置をもって、出力領域に生じる余白領域を減らすことができ、出力領域を有効につかうことができる。
【図面の簡単な説明】
【０１１０】
【図１】本発明に係る画像表示システムの構成の一例を示す模式図である。
【図２】本発明に係る画像表示システムの構成の一例を示す形態図である。
【図３】本発明に係る画像処理装置の一例を示す形態図である。
【図４】本発明に係る画像処理装置の構成の一例を示す機能ブロック構成図である。
【図５】本発明に係る画像処理装置において画像を出力するまでの処理の一例を示すフローチャートである。
【図６】本発明に係る画像処理装置が出力する画像の一例を示す模式図である。縦横比（横／縦）１６：９のディスプレイに縦横比（横／縦）が４：３または３：４の画像を表示している状態を示している。
【図７】本発明に係る画像処理装置において、現在表示している画像、新たに選択された画像、出力する画像の関係の一例を示す図表である。
【図８】本発明に係る画像処理装置が出力する画像の一例を示す模式図である。
【図９】本発明に係る画像処理装置において画像を出力するまでの処理の一例を示すフローチャートである。
【図１０】本発明に係る画像処理装置が出力する画像の一例を示す模式図である。
【符号の説明】
【０１１１】
１  画像処理装置
２  画像データ入力装置
３  画像表示装置
４  画像データ
５  表示用画像データ
６  画像データ記憶媒体
１０１０  画像受信部
１０２０  入力画像記憶処理部
１０３０  画像データ記憶部
１０４０  画像形状判定部
１０５０  画像表示様式決定部
１０６０  表示用画像作成部
１０７０  画像出力部
１０８０  表示領域情報取得部
【図４】
2007292939.tif 000003
【図５】
2007292939.tif 000004
【図９】
2007292939.tif 000005
【図１】
2007292939.tif 000006
【図２】
2007292939.tif 000007
【図３】
2007292939.tif 000008
【図６】
2007292939.tif 000009
【図７】
2007292939.tif 000010
【図８】
2007292939.tif 000011
【図１０】
2007292939.tif 000012