(57)【要約】【課題】本発明は、簡易な構成で、画像の送信量を抑えることができる撮影カメラを提供することを目的とする。【解決手段】撮影カメラ２は、撮影カメラ２が画像表示装置３に送信する要素画像の位置と数とを示す送信要素画像情報を記憶する記憶手段２２と、被写体Ｈを撮影する撮影素子２３と、撮影素子２３が撮影した要素画像群に幾何補正及び色補正の少なくとも一方を行う補正手段２４と、撮影素子２３が撮影して補正手段２４が補正した後の要素画像群を、各要素画像に分解する分解手段２５と、記憶手段２２が記憶する送信要素画像情報に設定された要素画像の位置と数とに基づいて、分解手段２５が分解した要素画像のうち、画像表示装置３に送信する要素画像を選択する選択手段２６と、選択手段２６が選択した要素画像を画像表示装置３に送信する符号化手段２７とを備える。【選択図】図２
2010026332.tif 000002
【特許請求の範囲】
【請求項１】
複数の要素レンズを同一平面上に配置したレンズアレイを備え、被写体の要素画像群を撮影して前記要素画像群の一部の要素画像を画像表示装置に送信する撮影カメラであって、
前記レンズアレイを介して、前記要素画像群を撮影する撮影素子と、
前記撮影カメラが前記画像表示装置に送信する前記要素画像の位置と数とを示す予め設定された送信要素画像情報を記憶する記憶手段と、
前記撮影素子が撮影した要素画像群を前記要素画像に分解する分解手段と、
前記送信要素画像情報に設定された前記要素画像の位置と数とに基づいて、前記分解手段が分解した要素画像のうち、前記画像表示装置に送信する前記要素画像を選択する選択手段と、
前記選択手段が選択した前記要素画像を前記画像表示装置に送信する送信手段と、を備えることを特徴とする撮影カメラ。
【請求項２】
前記画像表示装置が中継機器を介して前記撮影カメラに複数接続される場合、
前記送信手段は、前記要素画像を前記複数の画像表示装置にマルチキャストで送信することを特徴とする請求項１に記載の撮影カメラ。
【請求項３】
前記送信手段は、前記要素画像を符号化して前記画像表示装置に送信することを特徴とする請求項１又は請求項２に記載の撮影カメラ。
【請求項４】
前記送信手段は、複数の前記要素画像をまとめて符号化して前記画像表示装置に送信することを特徴とする請求項１又は請求項２に記載の撮影カメラ。
【請求項５】
前記記憶手段は、前記要素画像の数が２以上を示す前記送信要素画像情報を記憶し、
前記選択手段は、前記送信要素画像情報に基づいて、２以上の前記要素画像を選択し、
前記送信手段は、前記選択手段が選択した２以上の前記要素画像を前記画像表示装置に送信することを特徴とする請求項１から請求項４のいずれか一項に記載の撮影カメラ。
【請求項６】
前記撮影手段が撮影した要素画像群に、幾何補正及び色補正の少なくとも一方を行う補正手段、をさらに備えることを特徴とする請求項１から請求項５のいずれか一項に記載の撮影カメラ。
【請求項７】
複数の要素レンズを同一平面上に配置したレンズアレイを備える撮影カメラによって撮影された被写体の要素画像群の一部の要素画像を受信する画像表示装置であって、
前記撮影カメラが前記画像表示装置に送信する前記要素画像の位置と数とを示す予め設定された送信要素画像情報を、前記撮影カメラに送信する送信要素画像情報送信手段と、
前記送信要素画像情報に設定された前記要素画像の位置と数とに基づいて前記撮影カメラが選択した前記要素画像を受信し、当該要素画像から表示画像を生成する画像生成手段と、
前記画像生成手段が生成した表示画像を表示する表示手段と、
を備えることを特徴とする画像表示装置。
【請求項８】
前記送信要素画像情報送信手段は、前記要素画像の数が２以上を示す前記送信要素画像情報を前記撮影カメラに送信し、
前記画像生成手段は、前記撮影カメラから２以上の前記要素画像を受信して前記表示画像を生成することを特徴とする請求項７に記載の画像表示装置。
【請求項９】
請求項１から請求項６のいずれか一項に記載の撮影カメラと、
請求項７又は請求項８に記載の画像表示装置と、
を備えることを特徴とする画像表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、レンズアレイを備える撮影カメラが撮影した要素画像を、画像表示装置に送信する技術に関する。
【背景技術】
【０００２】
従来から、立体撮影の方法として、被写体の多視点画像を撮影する方法が知られている。この多視点画像の撮影には、複数台の撮影カメラが各視点（画像）を撮影するマルチカメラ、又は、レンズアレイを前面に配置した単一カメラを用いることができる（例えば、特許文献１参照）。特許文献１に記載の単一カメラは、複数のマイクロレンズを平面上に２次元的に配置したマイクロレンズアレイを備えるものである。
【特許文献１】特開２００１−１２８０７１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかし、マルチカメラで多視点画像を撮影する場合、必要な視点（画像）のみを表示装置に送信できるが、複数台の撮影カメラが必要となり、撮影装置が大規模化し、その設置や運営に多大な時間や労力が必要となる問題がある。一方、単一カメラで多視点画像を撮影する場合、撮影した画像に全視点（全要素画素）が含まれているため、必要とする視点（要素画素）のみを表示装置に送信することができず、マルチカメラに比べて画像の送信量が多くなるという問題がある。
【０００４】
そこで、本発明は、簡易な構成で、画像の送信量を抑えることができる撮影カメラ、画像表示装置及び画像表示システムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
前記した課題を解決するため、請求項１に係る撮影カメラは、複数の要素レンズを同一平面上に配置したレンズアレイを備え、被写体の要素画像群を撮影して前記要素画像群の一部の要素画像を画像表示装置に送信する撮影カメラであって、前記レンズアレイを介して、前記要素画像群を撮影する撮影素子と、前記撮影カメラが前記画像表示装置に送信する前記要素画像の位置と数とを示す予め設定された送信要素画像情報を記憶する記憶手段と、前記撮影素子が撮影した要素画像群を前記要素画像に分解する分解手段と、前記送信要素画像情報に設定された前記要素画像の位置と数とに基づいて、前記分解手段が分解した要素画像のうち、前記画像表示装置に送信する前記要素画像を選択する選択手段と、前記選択手段が選択した前記要素画像を前記画像表示装置に送信する送信手段と、を備える構成とした。
【０００６】
かかる構成によれば、撮影カメラは、記憶手段によって、被写体を撮影する前に、画像表示装置が必要とする要素画像を示す送信要素画像情報を記憶しておく。この送信要素画像情報は、画像表示装置から送信されても良い。また、撮影カメラは、撮影素子によって、レンズアレイを介して被写体を撮影することで、要素画像で構成される被写体の要素画像群を、１台の撮影カメラで撮影できる。また、撮影カメラは、分解手段によって、撮影素子が撮影した要素画像群を要素画像に分解、例えば、要素画像群を要素レンズの数で等分、要素画像群を予め定めた位置で分解、又は、要素画像群に含まれるマーカを基準に要素画像群を分解し、各要素画像を得ることができる。
【０００７】
また、撮影カメラは、選択手段によって、送信要素画像情報に設定された要素画像の位置と数とに基づいて、分解手段が分解した要素画像のうち、画像表示装置が必要とする要素画像のみを選択できる。そして、撮影カメラは、送信手段によって、画像表示装置が必要としない要素画像を送信することなく、画像表示装置が必要とする要素画像のみを画像表示装置に送信できる。
【０００８】
また、請求項２に係る撮影カメラは、前記画像表示装置が中継機器を介して前記撮影カメラに複数接続される場合、前記送信手段が、前記要素画像を前記複数の画像表示装置にマルチキャストで送信することを特徴とする。
【０００９】
かかる構成によれば、撮影カメラは、送信手段によって、各画像表示装置が必要とする要素画像のみを、各画像表示装置に送信することができる。
【００１０】
また、請求項３に係る撮影カメラは、前記送信手段が、前記要素画像を符号化して前記画像表示装置に送信することを特徴とする。
【００１１】
かかる構成によれば、撮影カメラは、送信手段によって、例えば、要素画像を動画として送信するときはＭＰＥＧ（Moving Picture Experts Group）方式、要素画像を静止画として送信するときはＪＰＥＧ（Joint Photographic Experts Group）方式で要素画像を符号化する。
【００１２】
また、請求項４に係る撮影カメラは、前記送信手段が、複数の前記要素画像をまとめて符号化して前記画像表示装置に送信することを特徴とする。
【００１３】
かかる構成によれば、撮影カメラは、送信手段によって、例えば、ＭＶＣ（multi-view video coding）方式で、複数の前記要素画像をまとめて符号化する。このＭＶＣ方式は、撮影カメラが撮影した要素画像群の各要素画像が類似することを利用して符号化を行うものである。
【００１４】
また、請求項５に係る撮影カメラは、前記記憶手段は、前記要素画像の数が２以上を示す前記送信要素画像情報を記憶し、前記選択手段は、前記送信要素画像情報に基づいて、２以上の前記要素画像を選択し、前記送信手段は、前記選択手段が選択した２以上の前記要素画像を前記画像表示装置に送信することを特徴とする。
【００１５】
かかる構成によれば、撮影カメラは、送信手段によって、２以上の要素画像を送信するので、これを受信した画像表示装置において、多視点画像を表示させることができる。
【００１６】
また、請求項６に係る撮影カメラは、前記撮影手段が撮影した要素画像群に、幾何補正及び色補正の少なくとも一方を行う補正手段、をさらに備えることを特徴とする。
【００１７】
かかる構成によれば、撮影カメラは、補正手段によって、要素画像群に含まれるレンズ歪や色ずれを除去し、歪みの少ない要素画像を送信できる。特に、要素画像群の端に近づく程、レンズ歪や色ずれの影響が大きくなるが、この場合でも、レンズ歪や色ずれを少なくすることができる。
【００１８】
また、請求項７に係る画像表示装置は、複数の要素レンズを同一平面上に配置したレンズアレイを備える撮影カメラによって撮影された被写体の要素画像群の一部の要素画像を受信する画像表示装置であって、前記撮影カメラが前記画像表示装置に送信する前記要素画像の位置と数とを示す予め設定された送信要素画像情報を、前記撮影カメラに送信する送信要素画像情報送信手段と、前記送信要素画像情報に設定された前記要素画像の位置と数とに基づいて前記撮影カメラが選択した前記要素画像を受信し、当該要素画像から表示画像を生成する画像生成手段と、前記画像生成手段が生成した表示画像を表示する表示手段と、を備える構成とした。
【００１９】
かかる構成によれば、画像表示装置は、送信要素画像情報送信手段によって、撮影カメラが被写体を撮影する前に、画像表示装置が必要とする要素画像を示す送信要素画像情報を、撮影カメラに送信要素画像情報を送信する。また、画像表示装置は、画像生成手段によって、画像表示装置が必要としない要素画像を含む要素画像群を受信することなく、１台の撮影カメラから画像表示装置が必要とする要素画像のみを受信し、この要素画像から表示画像を生成する。そして、画像表示装置は、表示手段によって、画像生成手段が生成した表示画像を表示する。
【００２０】
また、請求項８に係る画像表示装置は、前記送信要素画像情報送信手段が、前記要素画像の数が２以上を示す前記送信要素画像情報を前記撮影カメラに送信し、前記画像生成手段が、前記撮影カメラから２以上の前記要素画像を受信して前記表示画像を生成することを特徴とする。
【００２１】
かかる構成によれば、画像表示装置は、画像生成手段によって、撮影カメラから２以上の要素画像を受信するので、多視点画像を表示することができる。
【００２２】
また、請求項９に係る画像表示システムは、請求項１から請求項５のいずれか一項に記載の撮影カメラと、請求項６又は請求項７に記載の画像表示装置と、を備えることを特徴とする。
【発明の効果】
【００２３】
本発明によれば、以下のような優れた効果を奏する。
請求項１，７，９に係る発明によれば、１台の撮影カメラで要素画像群を撮影できると共に、画像表示装置が必要とする要素画像のみを選択して画像表示装置に送信できるため、複数台の撮影カメラで構成される従来のマルチカメラに比べて、簡易な構成とすることができ、画像表示装置が必要としない要素画像を送信する従来の単一カメラに比べて、画像の送信量を抑えることができる。
【００２４】
請求項２に係る発明によれば、各画像表示装置が必要とする要素画像のみを、各画像表示装置に送信できるため、画像の送信量をより抑えることができる。
請求項３に係る発明によれば、要素画像を符号化するため、画像の送信量をより抑えることができる。
請求項４に係る発明によれば、複数の要素画像をまとめて符号化するため、符号化効率を高めると共に、画像の送信量をより抑えることができる。
【００２５】
請求項５に係る発明によれば、画像表示装置に多視点画像を表示させることができる。
請求項６に係る発明によれば、歪みの少ない要素画像を送信できるため、画像表示装置に高品質な多視点画像を表示させることができる。
請求項８に係る発明によれば、画像表示装置が多視点画像を表示することができる。
【発明を実施するための最良の形態】
【００２６】
以下、本発明の実施形態について、適宜図面を参照しながら詳細に説明する。なお、各実施形態において、同一の機能を有する手段及び部材には同一の符号を付し、説明を省略した。
【００２７】
（第１実施形態）
［画像表示システムの概略］
図１は本発明の実施形態に係る画像表示システムの概略を説明する図であり、（ａ）は画像表示システムの概略図であり、（ｂ）は撮影カメラが撮影した要素画像群を説明する図であり、（ｃ）は撮影カメラが画像表示装置に送信する要素画像を説明する図である。
【００２８】
図１（ａ）に示すように、画像表示システム１は、撮影カメラ２と、画像表示装置（クライアントＰＣ）３とを備える。
撮影カメラ（単一カメラ）２は、レンズアレイ２１を前面に有し、被写体Ｈの要素画像群を撮影するデジタルカメラである（図１では、一部の要素レンズ２１ａのみ図示）。ここでは、レンズアレイ２１は、縦３個×横４個、計１２個の要素レンズ２１ａが同一平面上に配置されたものである。また、撮影カメラ２は、例えば、有線ＬＡＮ（Local Area Network）、無線ＬＡＮ、イントラネット等のネットワーク５を介して、画像表示装置３と接続され、その一部の要素画像を画像表示装置３に送信する。
画像表示装置３は、撮影カメラ２から送信された要素画像から表示画像を生成し、これを表示するものである。
【００２９】
まず、画像表示装置３は、被写体Ｈを撮影する前に、ネットワーク５を介して、撮影カメラ２が画像表示装置３に送信する要素画像の位置と数とを示す送信要素画像情報を撮影カメラ２に送信する。ここで、送信要素画像情報は、例えば、要素画像群の中央に位置する２個の要素画像を示すものとする。
【００３０】
次に、送信要素画像情報を受信したら、撮影カメラ２は、送信要素画像情報を記憶し、被写体Ｈを撮影する。前記したように、撮影カメラ２は、１２個の要素レンズ２１ａを備えるため、図１（ｂ）に示すように、１２個の要素画像で構成される要素画像群を撮影する。ここで、送信要素画像情報として、要素画像群の中央に位置する２個の要素画像が設定されているため、撮影カメラ２は、図１（ｃ）に示すように、図１（ｂ）の要素画像群のうち、中央に位置する２個の要素画像のみを画像表示装置３に送信する（図１（ｂ）の太枠部分）。
【００３１】
つまり、撮影カメラ２が、図１（ｃ）の要素画像を画像表示装置３に送信するため、画像表示システム１は、図１（ｂ）の要素画像群を送信する場合と比べて、画像の送信量を少なくすることができる。
【００３２】
［撮影カメラの構成］
図２は、図１の撮影カメラの構成を示すブロック図である。図２に示すように、撮影カメラ２は、記憶手段２２と、撮影素子２３と、補正手段２４と、分解手段２５と、選択手段２６と、符号化手段（送信手段）２７と、送信要素画像情報受信手段２８とを備える。なお、図２では、レンズアレイ２１の図示を省略した。
【００３３】
送信要素画像情報受信手段２８は、撮影カメラ２で撮影を行う前に、ネットワーク５を介して、画像表示装置３から送信要素画像情報を受信するものである。
記憶手段２２は、送信要素画像情報受信手段２８が受信した送信要素画像情報を記憶するものであり、ＲＡＭ（Random Access Memory）及びＨＤＤ（Hard Disk Drive）等で構成される。また、記憶手段２２は、要素レンズ２１ａの数（縦横の数）、要素レンズ２１ａの大きさ、及び、撮影カメラ２から被写体Ｈまでの距離等の撮影カメラ２の設置条件を含むパラメータを記憶しても良い。
【００３４】
送信要素画像情報は、撮影カメラ２が画像表示装置３に送信する要素画像の位置と数とを示すものである。画像表示装置３が多視点画像を表示するためには、送信要素画像情報は、任意の位置の要素画像の数を２以上、設定する。例えば、自由視点の平面画像を画像表示装置３が表示する場合、送信要素画像情報は、自由視点の平面画像を生成するための要素画像の数を４（４視点分）設定する。なお、送信要素画像情報は、隣接する要素画像を複数設定しても良く、互いに離れた要素画像を複数設定しても良い。
【００３５】
また、例えば、左右眼用画像（両眼視差を用いた立体画像）を画像表示装置３が表示する場合、送信要素画像情報は、左眼用画像を生成するための要素画像の数を２（２視点分）、右眼用画像を生成するための要素画像の数を２（２視点分）設定する。なお、送信要素画像情報は、左眼用画像を生成するための要素画像及び右眼用画像を生成するための要素画像として、隣接する位置の要素画像を複数設定しても良く、離れた位置の要素画像を複数設定しても良い。また、送信要素画像情報は、左眼用画像を生成するための要素画像及び右眼用画像を生成するための要素画像として、同一の要素画像を含むように複数設定しても良い。つまり、左眼用画像を生成するための要素画像と右眼用画像を生成するための要素画像とが重複するように、送信要素画像情報において、要素画像の位置が設定される。
【００３６】
また、送信要素画像情報は、要素画像群の最左上部の要素画像の基準とし、画像表示装置３に送信する各要素画像の位置を要素画像（ｘ，ｙ）という座標系で表現しても良い（ｘは要素画像の横方向の位置、ｙは要素画像の縦方向の位置）。例えば、図１（ｂ）の要素画像群では、最左上部の要素画像の位置は、要素画像（１，１）となり、最右下部の要素画像の位置は、要素画像（４，３）となる。
【００３７】
なお、後記するマルチキャスト送信を行う場合、記憶手段２２は、マルチキャストで送信を行う画像表示装置３のＩＰ（Internet Protocol）アドレスを有するマルチキャスト情報を記憶しても良い。この場合、マルチキャスト情報は、予め、オペレータによって設定される。
【００３８】
撮影素子２３は、被写体Ｈを撮影するものであり、例えば、ＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）で構成される。ここで、撮影素子２３は、レンズアレイ２１を介して被写体Ｈを撮影するので、レンズアレイ２１の各要素レンズ２１ａに対応する要素画像で構成される被写体Ｈの要素画像群を撮影できる。
【００３９】
補正手段２４は、撮影素子２３が撮影した要素画像群に、幾何補正及び色補正の少なくとも一方を行うものである。補正手段２４は、例えば、レンズアレイ２１が撮影素子２３に垂直でない場合又はレンズアレイ２１の光軸が一致しない場合、要素画像群を拡大、縮小、回転、平行移動させて幾何補正を行う。この幾何補正としては、例えば、アフィン変換、擬似アフィン変換、射影変換、変換マップを利用した変換がある。また、補正手段２４は、例えば、要素画像群にたる型歪み等のレンズ歪みがある場合、高次項を利用した変換、変換マップを利用した変換等の幾何補正を行う。
【００４０】
また、補正手段２４は、要素画像群の撮影状態に応じて、要素画像群の濃度、コントラスト、彩度、色相等の色補正を行っても良い。例えば、補正手段２４は、要素画像群のコントラストが低い場合、要素画像群の濃度やコントラストを補正する。また、補正手段２４は、例えば、被写体Ｈが人物又は動物の目が赤く撮影された場合（赤目）、この赤目部分を黒色に補正する色補正を行う。なお、補正手段２４は、幾何補正又は色補正の一方のみを行っても良く、幾何補正及び色補正の両方を行っても良い。
【００４１】
分解手段２５は、撮影素子２３が撮影して補正手段２４が補正した後の要素画像群を、各要素画像に分解するものである。ここで、分解手段２５は、記憶手段２２が記憶するパラメータを参照し、要素レンズ２１ａの数を求めて、要素画像群を要素レンズ２１ａの数で等分（分解）しても良い。また、分解手段２５は、要素画像群において各要素画像が予め定めた位置で撮影されるように撮影カメラ２を設置し、要素画像群を予め定めた位置で分解しても良い。なお、この場合、要素画像群を分解する位置は、撮影カメラ２の設置条件から求めることができる。
【００４２】
また、分解手段２５は、要素画像群に各要素画像を分解する基準となるマーカが含まれる場合、このマーカを基準として要素画像群を分解すれば良い。図３は図１の分解手段の詳細を説明する図であり、（ａ）はレンズアレイの一例を示す図であり、（ｂ）はこのレンズアレイを介して撮影された要素画像群を説明する図である。図３（ａ）に示すように、レンズアレイ２１の各要素レンズ２１ａ同士間に、撮影素子２３と略垂直な枠２１ｂを設ける。そして、図３（ａ）のレンズアレイ２１を介して被写体Ｈを撮影した場合、撮影素子２３は、図３（ｂ）に示すように、要素レンズ２１ａ同士間に枠２１ｂが格子状で写された要素画像群を撮影する。この場合、分解手段２５は、枠２１ｂの色を抽出する処理（例えば、黒色領域抽出）を行って、要素画像群に写された枠２１ｂをマーカとして抽出し、この枠２１ｂ（マーカ）を基準に要素画像群を分解する。
【００４３】
例えば、図３（ａ）のレンズアレイ２１は、例えば、要素レンズ２１ａを、縦３個×横４個、計１２個、紫外線硬化接着剤で接着したものである。各要素レンズ２１ａは、例えば、それぞれが枠２１ｂを有し、大きさが縦１ｍｍ×横１ｍｍで、材料が透明プラスチック又は石英ガラスである。なお、要素レンズ２１ａの大きさ、材料及び個数はこれに限定されない。例えば、レンズアレイ２１は、１枚の透明プラスチック板又は石英ガラス板の両面に、要素レンズ２１ａとして、球面レンズを所定の間隔で形成したものでも良い。
【００４４】
図２の選択手段２６は、記憶手段２２が記憶する送信要素画像情報に基づいて、分解手段２５が分解した要素画像のうち、画像表示装置３に送信する要素画像を選択するものである。ここで、選択手段２６は、送信要素画像情報で２以上の要素画像が設定されている場合、設定された全要素画像を選択する。
【００４５】
符号化手段２７は、選択手段２６が選択した要素画像を画像表示装置３に送信するものである。また、符号化手段２７は、例えば、この要素画像を動画として送信するときはＭＰＥＧ方式で、要素画像を静止画として送信するときはＪＰＥＧ方式で符号化して画像表示装置３に送信する。なお、符号化手段２７が、請求項に記載の送信手段に相当する。
【００４６】
また、符号化手段２７は、複数の要素画像をまとめて、例えば、ＭＶＣ方式で符号化して画像表示装置３に送信する。なお、従来では、ＭＶＣ方式は、マルチカメラで多視点画像を撮影する際、被写体に対して各カメラの撮影アングルが近似するときに各カメラの画像が類似することを利用して符号化を行うものであり、マルチカメラを対象とすると考えられていた。ここで、本発明者らは、撮影カメラ２が撮影した要素画像群に含まれる各要素画像が類似することに着目し、マルチカメラが対象であると考えられるＭＶＣ方式を、単一カメラである撮影カメラ２に適用した。
【００４７】
なお、図２では、撮影カメラ２は、分解手段２５によって、補正手段２４が補正した後の要素画像群を各要素画像に分解するものとして説明したが、これに限定されない。例えば、撮影カメラ２は、分解手段２５が要素画像群を各要素画像に分解した後、補正手段２４が送信要素画像情報を参照して、画像表示装置３に送信する要素画像だけを補正しても良い（不図示）。これによって、撮影カメラ２は、全ての要素画像を補正する必要がなくなり、要素画像の補正処理の演算量を抑制することができる。
【００４８】
［画像表示装置の構成］
図４は、図１の画像表示装置の構成を示すブロック図である。図４に示すように、画像表示装置３は、送信要素画像情報送信手段３１と、復号化手段３２と、画像生成手段３３と、表示手段３４と、記憶手段３５とを備える。
【００４９】
送信要素画像情報送信手段３１は、撮影カメラ２で撮影を行う前に、ネットワーク５を介して、前記した送信要素画像情報を撮影カメラ２に送信するものである。ここで、送信要素画像情報送信手段３１は、撮影カメラ２が被写体Ｈを撮影する前に送信要素画像情報を撮影カメラ２に送信しておけば良く、その送信タイミング及び送信回数は、特に制限されない。例えば、送信要素画像情報送信手段３１は、送信要素画像情報が変更された都度、撮影カメラ２に送信する。また、例えば、送信要素画像情報送信手段３１は、オペレータからの指令により、送信要素画像情報を撮影カメラ２に送信する。
【００５０】
また、例えば、送信要素画像情報送信手段３１は、一定の時間間隔（例えば、１時間毎）に、送信要素画像情報を撮影カメラ２に送信する。さらに、送信要素画像情報送信手段３１は、送信要素画像情報の送信が成功したか否かを判定し、この送信が失敗したと判断したときに、送信要素画像情報を撮影カメラ２に再送しても良い。これによって、撮影カメラ２が送信要素画像情報を記憶していない事態を防ぐことができる。なお、送信要素画像情報は、例えば、オペレータによって、予め設定される。
【００５１】
復号化手段３２は、送信要素画像情報に設定された要素画像の位置と数とに基づいて撮影カメラ２が選択した要素画像を撮影カメラ２から受信するものである。また、復号化手段３２は、要素画像がＭＰＥＧ又はＪＰＥＧで符号化されている場合、受信した要素画像を復号化する。
【００５２】
画像生成手段３３は、復号化手段３２が受信した要素画像から表示画像を生成するものである。例えば、撮影カメラ２から右眼用の要素画像（例えば、２視点）と、左眼用の要素画像（例えば、２視点）とを受信した場合、画像生成手段３３は、２視点分の右眼用の要素画像を用いて、右目位置での奥行き情報を算出し、この奥行き情報から右目用の表示画像を生成する。そして、画像生成手段３３は、右目用の表示画像と同様に、２視点分の左眼用の要素画像を用いて、左目用の表示画像を生成する。さらに、表示手段３４が立体画像を表示する場合、画像生成手段３３は、復号化手段３２が受信した要素画像から被写体Ｈの３次元座標（縦、横、奥行き）を算出し、この結果を用いて立体画像（表示画像）を生成しても良い。
【００５３】
表示手段３４は、画像生成手段３３が生成した表示画像を表示するものであり、例えば、ブラウン管ディスプレイ、液晶ディスプレイである。また、表示手段３４は、画像生成手段３３が生成した表示画像を表示するだけでなく、記憶手段３５が記憶する表示画像を表示しても良い。
記憶手段３５は、画像生成手段３３が生成した表示画像、及び、復号化手段３２が受信した要素画像を記憶するものであり、図２の記憶手段２２と同様にＨＤＤ等で構成することができる。
【００５４】
［撮影カメラの動作］
図５は、図２の撮影カメラの動作を示すフローチャートである（適宜図２参照）。なお、図５では、予め、画像表示装置３から送信要素画像情報が送信され、これを記憶手段２２に記憶しているものとして説明する。
【００５５】
まず、撮影カメラ２は、撮影素子２３によって、被写体Ｈの要素画像群を撮影する（ステップＳ１１）。撮影カメラ２は、補正手段２４によって、撮影素子２３が撮影した要素画像群に、幾何補正及び色補正の少なくとも一方を行う。ここで、撮影カメラ２は、補正手段２４によって、要素画像群の撮影状態に応じて、要素画像群の濃度、コントラスト、彩度、色相等の色補正を行う（ステップＳ１２）。
【００５６】
ステップＳ１２の処理に続いて、撮影カメラ２は、分解手段２５によって、撮影素子２３が撮影して補正手段２４が補正した後の要素画像群を、各要素画像に分解する。ここで、撮影カメラ２は、分解手段２５によって、要素画像群を要素レンズ２１ａの数で等分（分解）しても良く、要素画像群を予め定めた位置で分解しても良く、又は、要素画像群に写された枠２１ｂ（マーカ）を基準として要素画像群を分解しても良い（ステップＳ１３）。
【００５７】
ステップＳ１３の処理に続いて、撮影カメラ２は、選択手段２６によって、記憶手段２２が記憶する送信要素画像情報に基づいて、分解手段２５が分解した要素画像のうち、画像表示装置３に送信する要素画像を選択する（ステップＳ１４）。また、撮影カメラ２は、符号化手段２７によって、選択手段２６が選択した要素画像を画像表示装置３に送信する。ここで、撮影カメラ２は、符号化手段２７によって、要素画像をＭＰＥＧ方式又はＪＰＥＧ方式で符号化してから送信しても良い。さらに、撮影カメラ２は、符号化手段２７によって、複数の要素画像をまとめてＭＶＣ方式で符号化して画像表示装置３に送信しても良い（ステップＳ１５）。
【００５８】
以上の処理によって、撮影カメラ２は、画像表示装置３が必要とする要素画像のみを画像表示装置３に送信するので、画像の送信量を抑えることができる。
なお、図５では、撮影カメラ２は、ステップＳ１２の処理に続いて、ステップＳ１３の処理を行うこととして説明したが、これに限定されない。例えば、撮影カメラ２は、図５のステップＳ１３の処理と、ステップＳ１２の処理とを入れ替えて動作しても良い（不図示）。
【００５９】
［画像表示装置の動作］
図６は、図４の画像表示装置の動作を示すフローチャートである（適宜図４参照）。
画像表示装置３は、送信要素画像情報送信手段３１によって、ネットワーク５を介して、前記した送信要素画像情報を撮影カメラ２に送信する（ステップＳ２１）。
【００６０】
ステップＳ２１の処理に続いて、画像表示装置３は、復号化手段３２によって、送信要素画像情報に応じて撮影カメラ２が選択した要素画像を撮影カメラ２から受信する。ここで、画像表示装置３は、復号化手段３２によって、受信した要素画像がＭＰＥＧ方式又はＪＰＥＧ方式で符号化されている場合、要素画像をＭＰＥＧ方式又はＪＰＥＧ方式で復号化する。また、画像表示装置３は、復号化手段３２によって、受信した要素画像がＭＶＣ方式で符号化されている場合、要素画像をＭＶＣ方式で復号化する。そして、画像表示装置３は、画像生成手段３３によって、復号化手段３２が受信した要素画像から表示画像を生成する（ステップＳ２２）。
【００６１】
ステップＳ２２の処理に続いて、画像表示装置３は、表示手段３４によって、画像生成手段３３が生成した表示画像を表示する（ステップＳ２３）。
以上の処理によって、画像表示装置３が必要とする要素画像のみを撮影カメラ２から受信して表示画像を表示するので、画像の送信量を抑えることができる。
【００６２】
（第２実施形態）
図７は、本発明の第２実施形態に係る画像表示システムの概略を説明する図である。
図７の画像表示システム１ａは、１台の撮影カメラ２と２台の画像表示装置３ａ，３ｂが、ハブ等の中継機器４を介して、ネットワーク接続されている。ここで、画像表示装置３ａ，３ｂを区別しない場合、単に画像表示装置３と記す。なお、撮影カメラ２及び画像表示装置３の各手段は、図２及び図４と同様のものであるため、説明を省略する（適宜図２、図４参照）。
【００６３】
以下、撮影カメラ２は、横一列に配置された５個の要素レンズ２１ａを有するレンズアレイ２１を有し、横一列に並ぶ５個の要素画像で構成される要素画像群を撮影する例で説明する。ここで、撮影カメラ２は、送信要素画像情報を画像表示装置３毎に記憶、例えば、５個の要素画像のうち、１番目と２番目の要素画像を画像表示装置３ａに送信し、３番目と４番目の要素画像を画像表示装置３ｂに送信すると記憶しても良い。なお、撮影カメラ２は、異なる位置及び数の要素画像を画像表示装置３ａ，３ｂに送信しても良く、同じ位置及び数の要素画像を画像表示装置３ａ，３ｂに送信しても良い。
【００６４】
図７に示すように、画像表示装置３が中継機器４を介して撮影カメラ２に複数接続される場合、撮影カメラ２は、符号化手段２７によって、要素画像を複数の画像表示装置３にマルチキャストで送信する。ここで、マルチキャストで送信とは、撮影カメラ２が、記憶手段２２のマルチキャスト情報に設定された画像表示装置３に対して、要素画像をマルチキャストで送信することである。これによって、画像表示システム１ａは、撮影カメラ２と中継機器４との間では画像の送信量を全要素画像までに抑えることができ、中継機器４と各画像表示装置３との間では、各画像表示装置３が必要とする要素画像だけを送信するので、画像の送信量を最小限に抑えることができる。
【００６５】
なお、本発明の各実施形態では、撮影カメラ２を１台として説明したが、撮影カメラ２を複数台としても良い。この場合、複数の撮影カメラ２に対し、１台の画像表示装置３が接続されても良く、２台以上の画像表示装置３が接続されても良い。
【００６６】
なお、本発明の各実施形態では、画像表示装置３を独立した装置として説明したが、一般的なコンピュータを、画像表示装置３の前記した各手段として機能させるプログラムによって動作させることもできる。このプログラムは、通信回線を介して配布しても良く、ＣＤ−ＲＯＭやフラッシュメモリ等の記録媒体に書き込んで配布しても良い。
【図面の簡単な説明】
【００６７】
【図１】本発明の実施形態に係る画像表示システムの概略を説明する図であり、（ａ）は画像表示システムの概略図であり、（ｂ）は撮影カメラが撮影した要素画像群を説明する図であり、（ｃ）は撮影カメラが画像表示装置に送信する要素画像を説明する図である。
【図２】図１の撮影カメラの構成を示すブロック図である。
【図３】図１の分解手段の詳細を説明する図であり、（ａ）はレンズアレイの一例を示す図であり、（ｂ）はこのレンズアレイを介して撮影された要素画像群を説明する図である。
【図４】図１の画像表示装置の構成を示すブロック図である。
【図５】図２の撮影カメラの動作を示すフローチャートである。
【図６】図４の画像表示装置の動作を示すフローチャートである。
【図７】本発明の第２実施形態に係る画像表示システムの概略を説明する図である。
【符号の説明】
【００６８】
１，１ａ  画像表示システム
２        撮影カメラ
２１      レンズアレイ
２１ａ    要素レンズ
２１ｂ    枠
２２      記憶手段
２３      撮影素子
２４      補正手段
２５      分解手段
２６      選択手段
２７      符号化手段（送信手段）
２８      送信要素画像情報受信手段
３        画像表示装置
３１      送信要素画像情報送信手段
３２      復号化手段
３３      画像生成手段
３４      表示手段
３５      記憶手段
４        中継機器
５        ネットワーク
【図１】
2010026332.tif 000003
【図２】
2010026332.tif 000004
【図３】
2010026332.tif 000005
【図４】
2010026332.tif 000006
【図５】
2010026332.tif 000007
【図６】
2010026332.tif 000008
【図７】
2010026332.tif 000009