(57)【要約】  本発明は、移動機器用立体画像生成チップ及びこれを用いた立体画像表示方法に関するものである。本発明は、移動機器に挿入された立体画像生成チップを用いて立体画像をディスプレイし、撮影された左側画像と右側画像を直ちに交互に配置する形態で合成して格納／画像処理するのでなく、サイド―バイ―サイド方式で連結して格納／画像処理を行い、以後、ディスプレイ段階で立体画像生成チップの左右画像を交互に配置する合成段階を通して、ディスプレイされる立体画像の品質を向上させることができる。また、上述した立体画像生成チップを通して、一般の２Ｄ画像の３Ｄディスプレイが可能である。
2011525075.tif 000002
【特許請求の範囲】
【請求項１】
画像処理が可能なバックエンド及び２個のカメラモジュールを含む移動機器に挿入された立体画像生成チップを通して立体画像を表示する方法において、
（１）前記移動機器の２個のカメラモジュールを通して撮影された左側画像と右側画像を前記立体画像生成チップに入力する段階と、
（２）前記入力された左側画像と右側画像を前記立体画像生成チップによってサイド―バイ―サイド方式で連結し、これら画像を前記移動機器のバックエンドに出力する段階と、
（３）前記バックエンドで画像処理された、サイド―バイ―サイド方式で連結された左側画像と右側画像を前記バックエンドから前記立体画像生成チップに入力する段階と、
（４）前記立体画像生成チップを通して、前記左側画像と前記右側画像を縦方向の複数のイメージにそれぞれ分割し、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ交互に配置する方式で合成する段階と、
（５）前記合成されたイメージをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールを通してディスプレイする段階と、
を含む、立体画像表示方法。
【請求項２】
前記（５）段階の前に、
（４―１）前記合成されたイメージ内で、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージを左右方向のうち互いに異なる方向にそれぞれシフトさせることによって深さ感を調整する段階をさらに含む、請求項１に記載の立体画像表示方法。
【請求項３】
前記（３）段階は、
前記バックエンドで画像処理された２次元画像を前記立体画像生成チップに入力する段階を含み、
前記（４）段階は、
前記２次元画像を前記立体画像生成チップを通して縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする段階を含み、
前記（４―１）段階は、
前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する段階を含み、
前記（５）段階は、
前記深さ感が調整された前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記立体画像ディスプレイモジュールを通してディスプレイする段階を含む、請求項２に記載の立体画像表示方法。
【請求項４】
前記（４―１）段階は、
前記移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、
前記左側画像が分割された複数のイメージ又は前記擬似左側画像イメージ組み合わせ、及び前記右側画像が分割された複数のイメージ又は前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して行われる、請求項２又は３に記載の立体画像表示方法。
【請求項５】
前記（２）段階は、
前記立体画像生成チップのカウンターから生成された時間同期を用いて、前記入力された左側画像と右側画像の撮影時間同期に合わせ、前記入力された左側画像と右側画像を連結する、請求項１に記載の立体画像表示方法。
【請求項６】
前記２個のカメラモジュールは、待機又は電源解除のうち一つ以上の機能を含む一時停止機能を含み、
前記（２）段階は、
前記２個のカメラモジュールから入力された前記左側画像と前記右側画像の同期が合わない場合、前記２個のカメラモジュールの前記一時停止機能を使用して前記左側画像と前記右側画像を一時停止させた後、同期が合うように前記左側画像と前記右側画像を同時に再開する段階を含む、請求項５に記載の立体画像表示方法。
【請求項７】
２次元画像を縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする段階と、
前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせをそれぞれ左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する段階と、
前記深さ感が調整された擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールを通してディスプレイする段階と、を含む、二次元画像の立体画像表示方法。
【請求項８】
前記２次元画像は、前記移動機器の画像処理が可能なバックエンドで画像処理された後、前記移動機器に設置された立体画像生成チップに入力された２次元画像であって、
前記マッピング段階及び前記深さ感調整段階は、前記立体画像生成チップによって行われる、請求項７に記載の二次元画像の立体画像表示方法。
【請求項９】
前記深さ感調整段階は、
移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して行われる、請求項７又は８に記載の二次元画像の立体画像表示方法。
【請求項１０】
画像処理が可能なバックエンド及び２個のカメラモジュールを含む移動機器に挿入されて立体画像表示機能を行う立体画像生成チップにおいて、
前記移動機器の２個のカメラモジュールを通して撮影された左側画像と右側画像の入力を受けるためのカメラ入力部と、
前記入力された左側画像と右側画像をサイド―バイ―サイド方式で連結する処理を行う画像連結モジュールと、
前記画像連結モジュールによってサイド―バイ―サイド方式で連結された前記左側画像と右側画像を前記移動機器のバックエンドに出力するためのカメラ出力部と、
前記バックエンドで画像処理された、サイド―バイ―サイド方式で連結された左側画像と右側画像の入力を前記バックエンドから受けるためのディスプレイ入力部と、
前記サイド―バイ―サイド方式で連結された左側画像と右側画像を縦方向の複数のイメージにそれぞれ分割し、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ交互に配置する方式で合成する合成モジュールと、
前記合成モジュールを通して合成されたイメージをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールに出力するためのディスプレイ出力部と、を含む、移動機器用立体画像生成チップ。
【請求項１１】
前記合成モジュールによって合成された前記イメージ内で、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージを左右方向のうち互いに異なる方向にそれぞれシフトさせることによって深さ感を調整する深さ感調整モジュールをさらに含む、請求項１０に記載の移動機器用立体画像生成チップ。
【請求項１２】
前記ディスプレイ入力部は、前記バックエンドで画像処理された２次元画像の入力を追加で受け、
前記合成モジュールは、前記２次元画像を縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする機能を追加で行い、
前記深さ感調整モジュールは、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを左右方向のうち互いに異なる方向にそれぞれシフトさせることによって深さ感を調整する機能を追加で行い、
前記ディスプレイ出力部は、前記深さ感調整モジュールによって深さ感が調整された前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記立体画像ディスプレイモジュールに出力する機能を追加で行う、請求項１１に記載の移動機器用立体画像生成チップ。
【請求項１３】
前記深さ感調整モジュールは、
前記移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、
前記左側画像が分割された複数のイメージ又は前記擬似左側画像イメージ組み合わせ、及び前記右側画像が分割された複数のイメージ又は前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して深さ感調整を行う、請求項１１又は１２に記載の移動機器用立体画像生成チップ。
【請求項１４】
前記立体画像生成チップの時間同期を生成するためのカウンターをさらに含み、
前記画像連結モジュールは、前記カウンターから生成された時間同期を用いて、前記入力された左側画像と右側画像の撮影時間同期に合わせ、前記入力された左側画像と右側画像を連結する、請求項１０に記載の移動機器用立体画像生成チップ。
【請求項１５】
前記２個のカメラモジュールは、待機又は電源解除のうち一つ以上の機能を含む一時停止機能を含み、
前記画像連結モジュールは、
前記２個のカメラモジュールから入力された前記左側画像と前記右側画像の同期が合わない場合、前記２個のカメラモジュールの前記一時停止機能を使用して前記左側画像と前記右側画像を一時停止させた後、同期が合うように前記左側画像と前記右側画像を同時に再開することによって、前記左側画像と右側画像を撮影時間同期に合わせて連結する、請求項１４に記載の移動機器用立体画像生成チップ。
【請求項１６】
２次元画像を縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする合成モジュールと、
前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する深さ感調整モジュールと、
前記深さ感が調整された擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールに出力するディスプレイ出力部と、を含む、移動機器用立体画像生成チップ。
【請求項１７】
前記２次元画像は、前記移動機器の画像処理が可能なバックエンドで画像処理された後、前記立体画像生成チップに入力された２次元画像である、請求項１６に記載の移動機器用立体画像生成チップ。
【請求項１８】
前記深さ感調整モジュールは、
前記移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して前記深さ感調整を行う、請求項１６又は１７に記載の移動機器用立体画像生成チップ。
【請求項１９】
第１の機器を通して立体画像を表示する方法において、
（１）第２の機器の２個のカメラモジュールを通して撮影された左側画像と右側画像をサイド―バイ―サイド方式で連結した状態で前記第１の機器に入力する段階と、
（２）前記第１の機器で前記入力された左側画像と前記右側画像を縦方向の複数のイメージにそれぞれ分割し、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ交互に配置する方式で合成する段階と、
（３）前記合成されたイメージを前記第１の機器のパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールを通してディスプレイする段階と、
を含む、立体画像表示方法。
【請求項２０】
前記サイド―バイ―サイド方式で連結された左側画像と右側画像は、前記第１の機器と前記第２の機器との間の連結手段を通して前記第１の機器に入力される、請求項１９に記載の立体画像表示方法。
【請求項２１】
前記第１の機器は移動機器であって、
前記連結手段は有線連結手段及び無線連結手段を含む、請求項２０に記載の立体画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、移動機器を用いた立体画像生成チップ及びこれを用いた立体画像表示方法に関するもので、より具体的には、移動機器内の立体画像生成チップの立体画像処理機能を強化することによって立体画像の品質を向上させ、２Ｄイメージを３Ｄとして認識できるように処理する技術に関するものである。
【背景技術】
【０００２】
一般に、立体画像（又は３Ｄ画像）を具現する方法は、人間の二つの目に互いに異なる画像を照明することによって具現され、立体画像表示装置は、このように二つの目に互いに異なる画像を照明するために別途の眼鏡着用が必要であるかどうかによって、大きく眼鏡式立体画像表示装置と非眼鏡式（裸眼方式）立体画像表示装置に区分される。
【０００３】
眼鏡式立体画像表示装置によれば、観察者が特殊の眼鏡を着用すべきであるという不便さがあるが、非眼鏡式立体画像表示装置によれば、上述した眼鏡を着用せずに直接スクリーンを注視するだけで立体画像を感じることができ、眼鏡式立体画像表示装置の短所を解消することができる。そのため、非眼鏡式立体画像表示装置に対する研究が大いに進行されている。非眼鏡式立体画像表示装置は、レンチキュラ（ｌｅｎｔｉｃｕｌａｒ）方式による装置とパララックス―バリア（ｐａｒａｌｌａｘ―ｂａｒｒｉｅｒ）方式による装置に大きく区分される。
【０００４】
以下、パララックス―バリア方式による立体画像表示装置の動作を図１及び図２を参照して説明する。
【０００５】
図１は、パララックス―バリアを用いた立体画像表示装置の断面図で、図２は、パララックス―バリアを用いた立体画像表示装置の斜視図である。
【０００６】
パララックス―バリア方式による立体画像表示装置は、図１及び図２に示すように、左／右の二つの目にそれぞれ対応する垂直方向（図２のＹ―Ｙ'方向）に向かう左側画像（Ｌ）と右側画像（Ｒ）を水平方向（図２のＸ―Ｘ'方向）に交互に配置したディスプレイモジュール１０と、この前側に配置した、バリア２０と呼ばれる垂直方向に向かう棒状の遮断膜と、を含む。このような立体画像表示装置は、図１に示すように、左側画像（Ｌ）に該当する光は左眼のみに入射され、右側画像（Ｒ）に該当する光は右眼のみに入射されるように前記ディスプレイモジュール１０及びバリア２０を配置し、これを通して、分割された２個の左側及び右側画像（Ｌ、Ｒ）が分離された状態で観測され、立体感を感じさせる方式である。
【０００７】
上述したような立体画像を具現するためには、左側画像と右側画像が交互に配置されて格納された立体画像コンテンツが必要である。ただし、現在、このような立体画像コンテンツは、立体画像を撮影するための装備が高価でかつ大衆化されていないので、特定サービス提供者のみによって提供されており、一般のユーザによって広く活性化されていない。
【０００８】
したがって、携帯電話を含む既存の移動機器を用いて高い品質の立体画像を容易に生成する技術に対する期待が大きい。また、ユーザが一定程度の立体感を感じるように既存の２Ｄイメージを調整してディスプレイすることができれば、３Ｄ技術に対する需要が増大するはずである。
【０００９】
併せて、立体画像の場合、左右側画像の特殊な処理方式によって圧縮及び圧縮されたイメージのデコーディングにおける品質が左右されるので、立体画像コンテンツの特性に合う立体画像生成チップ又はモジュールが必要である。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】韓国特許出願第２００５−０１２７６３１号
【発明の概要】
【発明が解決しようとする課題】
【００１１】
上述したような問題を解決するために、本発明の目的は、既存のカメラモジュールを２個装着した移動機器を用いて一般ユーザが容易に立体画像コンテンツを製作するとともに、立体画像の撮影時、実際にディスプレイされる立体画像を確認し、深さ感を調節しながらコンテンツを生成することによって、より高い品質の立体画像を製作する方法を提供することにある。
【００１２】
特に、本発明では、上述した移動機器を用いた立体画像を、移動機器に装着された立体画像生成チップを用いて生成し、立体画像コンテンツ固有の特性を考慮した上で画像処理手順を改善することによって、ディスプレイされる立体画像の品質を簡単に向上させる方法を提供しようとする。
【００１３】
併せて、ユーザが一定程度の立体感を感じるように既存の２Ｄ画像をディスプレイすることによって、立体画像技術の活用度を増加させる方法を提供しようとする。
【課題を解決するための手段】
【００１４】
上述したような目的を達成するための本発明の一実施形態では、画像処理が可能なバックエンド及び２個のカメラモジュールを含む移動機器に挿入された立体画像生成チップを通して立体画像を表示する方法であって、（１）前記移動機器の２個のカメラモジュールを通して撮影された左側画像と右側画像を前記立体画像生成チップに入力する段階、（２）前記入力された左側画像と右側画像を前記立体画像生成チップによってサイド―バイ―サイド方式で連結し、これら画像を前記移動機器のバックエンドに出力する段階、（３）前記バックエンドで画像処理された、サイド―バイ―サイド方式で連結された左側画像と右側画像を前記バックエンドから前記立体画像生成チップに入力する段階、（４）前記立体画像生成チップを通して、前記左側画像と前記右側画像を縦方向の複数のイメージにそれぞれ分割し、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ交互に配置する方式で合成する段階、及び（５）前記合成されたイメージをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールを通してディスプレイする段階によって立体画像を表示する方法を提案する。
【００１５】
このとき、前記（５）段階の前に、（４―１）前記合成されたイメージ内で、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する段階をさらに含むことができる。ここで、「深さ感」とは、画像がスクリーンに比べて突出したり、画像がスクリーンの後方に位置するとユーザによって認識される程度を意味するものと仮定する。
【００１６】
また、前記（３）段階が、前記バックエンドで画像処理された２次元画像を前記立体画像生成チップに入力する段階を含み、前記（４）段階が、前記２次元画像を前記立体画像生成チップを通して縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似（ｐｓｅｕｄｏ）左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする段階を含み、前記（４―１）段階が、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する段階を含み、前記（５）段階が、前記深さ感が調整された前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記立体画像ディスプレイモジュールを通してディスプレイする段階を含むように設定することによって、一般の２Ｄ画像も、ユーザが立体感を感じるようにディスプレイすることができる。
【００１７】
また、前記（４―１）段階は、前記移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、前記左側画像が分割された複数のイメージ又は前記擬似左側画像イメージ組み合わせ、及び前記右側画像が分割された複数のイメージ又は前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して行われることが望ましい。
【００１８】
また、前記（２）段階では、前記立体画像生成チップのカウンターから生成された時間同期を用いて、前記入力された左側画像と右側画像の撮影時間同期に合わせて、前記入力された左側画像と右側画像を連結することができる。具体的に、前記２個のカメラモジュールは、待機（Ｒｅａｄｙ）又は電源解除（ｐｏｗｅｒ  ｄｏｗｎ）のうち一つ以上の機能を含む一時停止機能を含み、前記（２）段階では、前記２個のカメラモジュールから入力された前記左側画像と前記右側画像の同期が合わない場合、前記２個のカメラモジュールの前記一時停止機能を使用して前記左側画像と前記右側画像を一時停止させた後、同期が合うように前記左側画像と前記右側画像を同時に再開する段階を含むように設定されることもある。
【００１９】
一方、上述したような課題を解決するための本発明の他の一実施形態では、２次元画像を縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする段階、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせをそれぞれ左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する段階、及び前記深さ感が調整された擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールを通してディスプレイする段階を含む二次元画像の立体画像表示方法を提供する。
【００２０】
このとき、前記２次元画像は、前記移動機器の画像処理が可能なバックエンドで画像処理された後、前記移動機器に設置された立体画像生成チップに入力された２次元画像であって、前記マッピング段階及び前記深さ感調整段階は、前記立体画像生成チップによって行われる。
【００２１】
また、前記深さ感調整段階は、移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して行われる。
【００２２】
一方、上述したような課題を解決するための本発明の更に他の一実施形態では、画像処理が可能なバックエンド及び２個のカメラモジュールを含む移動機器に挿入され、立体画像表示機能を行う立体画像生成チップであって、前記移動機器の２個のカメラモジュールを通して撮影された左側画像と右側画像の入力を受けるためのカメラ入力部と、前記入力された左側画像と右側画像をサイド―バイ―サイド方式で連結する処理を行う画像連結モジュールと、前記画像連結モジュールによってサイド―バイ―サイド方式で連結された前記左側画像と右側画像を前記移動機器のバックエンドに出力するためのカメラ出力部と、前記バックエンドで画像処理された、サイド―バイ―サイド方式で連結された左側画像と右側画像の入力を前記バックエンドから受けるためのディスプレイ入力部と、前記サイド―バイ―サイド方式で連結された左側画像と右側画像を縦方向の複数のイメージにそれぞれ分割し、前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ交互に配置する方式で合成する合成モジュールと、前記合成モジュールを通して合成されたイメージをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールに出力するためのディスプレイ出力部と、を含む移動機器用立体画像生成チップを提供する。
【００２３】
このとき、前記合成モジュールによって合成された前記イメージ内で前記左側画像が分割された複数のイメージと前記右側画像が分割された複数のイメージをそれぞれ左右方向のうち互いに異なる方向にシフトさせることによって、深さ感を調整する深さ感調整モジュールをさらに含むことができる。
【００２４】
また、前記ディスプレイ入力部は、前記バックエンドで画像処理された２次元画像の入力を追加で受け、前記合成モジュールは、前記２次元画像を縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする機能を追加で行い、前記深さ感調整モジュールは、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせをそれぞれ左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する機能を追加で行い、前記ディスプレイ出力部は、前記深さ感調整モジュールによって深さ感が調整された前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記立体画像ディスプレイモジュールに出力する機能を追加で行うことができる。
【００２５】
また、前記深さ感調整モジュールは、前記移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、前記左側画像が分割された複数のイメージ又は前記擬似左側画像イメージ組み合わせ、及び前記右側画像が分割された複数のイメージ又は前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定して深さ感調整を行うものである。
【００２６】
併せて、前記立体画像生成チップの時間同期を生成するためのカウンターをさらに含み、前記画像連結モジュールは、前記カウンターから生成された時間同期を用いて、前記入力された左側画像と右側画像の撮影時間同期に合わせて、前記入力された左側画像と右側画像を連結するものである。具体的に、前記２個のカメラモジュールは、待機（Ｒｅａｄｙ）又は電源解除（ｐｏｗｅｒ  ｄｏｗｎ）のうち一つ以上の機能を含む一時停止機能を含み、前記画像連結モジュールは、前記２個のカメラモジュールから入力を受けた前記左側画像と前記右側画像の同期が合わない場合、前記２個のカメラモジュールの前記一時停止機能を使用して前記左側画像と前記右側画像を一時停止させた後、同期が合うように前記左側画像と前記右側画像を同時に再開することによって、前記左側画像と右側画像の撮影時間同期に合わせて連結するものである。
【００２７】
最後に、上述したような課題を解決するための本発明の更に他の一実施形態では、２次元画像を縦方向の複数のイメージに分割し、前記分割された複数のイメージを擬似左側画像イメージ組み合わせと擬似右側画像イメージ組み合わせとして順次交互にマッピングする合成モジュールと、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを左右方向のうち互いに異なる方向にシフトさせることによって深さ感を調整する深さ感調整モジュールと、前記深さ感が調整された擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせをパララックスバリア又はレンチキュラレンズアレイを含む立体画像ディスプレイモジュールに出力するディスプレイ出力部と、を含む移動機器用立体画像生成チップを提案する。
【００２８】
このとき、前記２次元画像は、前記移動機器の画像処理が可能なバックエンドで画像処理された後、前記立体画像生成チップに入力された２次元画像である。
【００２９】
併せて、前記深さ感調整モジュールは、前記移動機器の液晶にディスプレイされる立体画像を確認したユーザが前記移動機器の入力装置を通して入力した制御情報によって、前記擬似左側画像イメージ組み合わせ及び前記擬似右側画像イメージ組み合わせを前記互いに異なる方向にシフトさせる程度を決定し、前記深さ感調整を行うものである。
【発明の効果】
【００３０】
上述したような本発明の実施形態によれば、既存の２個のカメラモジュールを装着した移動機器を用いて一般ユーザが容易に立体画像コンテンツを製作するとともに、立体画像の撮影時、実際にディスプレイされる立体画像を確認し、深さ感を調節しながらコンテンツを生成することによって、より高い品質の立体画像を製作することができる。
【００３１】
特に、上述した移動機器を用いた立体画像を、移動機器に装着された立体画像生成チップを用いて生成し、立体画像コンテンツ固有の特性、すなわち、左側画像と右側画像が交互に配置された形態でなければならないという特性及びこれに対する画像処理時の影響を考慮した上で画像処理手順を改善することによって、ディスプレイされる立体画像の品質を簡単に向上させることができる。
【００３２】
併せて、ユーザが一定程度の立体感を感じるように既存の２Ｄ画像をディスプレイすることによって、立体画像技術の活用度を増加させることができる。
【図面の簡単な説明】
【００３３】
【図１】パララックス―バリアを用いた立体画像表示装置の断面図である。
【図２】パララックス―バリアを用いた立体画像表示装置の斜視図である。
【図３】２個のカメラモジュールを用いて撮影した左側画像と右側画像をそれぞれ示した図である。
【図４】２個のカメラモジュールを用いて撮影した左側画像と右側画像を立体画像生成チップで合成した画像を示した図である。
【図５】移動機器に挿入された立体画像生成チップを用いて立体画像をディスプレイする一般的な方法を説明するための図である。
【図６】本発明の一実施形態によって、移動機器に挿入された立体画像生成チップを用いて立体画像をディスプレイする方法を説明するための図である。
【図７】本発明の一実施形態によって、撮影された左側画像と右側画像の深さ感を立体画像生成チップによって調節する原理を説明するための図である。
【図８】本発明の一実施形態によって２次元イメージを３次元的に示すための方法を説明する図である。
【図９】本発明の一実施形態に係る立体画像生成チップが２Ｄ画像及び／又は３Ｄ画像を処理する概念を示した概念図である。
【図１０】本発明の一実施形態によって、メモリモジュールがない場合、２個のカメラモジュールを通して撮影した左側画像と右側画像の同期を合わせる方法を説明するための図である。
【図１１】本発明の一実施形態に係る立体画像生成チップの移動機器内の配置関係を説明するための図である。
【発明を実施するための形態】
【００３４】
以下、本発明に係る好適な実施形態を添付の図面を参照して詳細に説明する。添付の図面と共に以下で開示する詳細な説明は、本発明の例示的な実施形態を説明するためのものであって、本発明が実施され得る唯一の実施形態を示すためのものではない。
【００３５】
以下の詳細な説明は、本発明の完全な理解を提供するために具体的な詳細事項を含む。しかし、当業者であれば、本発明がこのような具体的な詳細事項なしも実施され得ることを知ることができる。いくつかの場合、本発明の概念が曖昧になることを避けるために、公知の構造及び装置が省略されたり、各構造及び装置の核心機能を中心にしたブロック図の形式で示される。また、本明細書全般にわたって同一の構成要素については、可能な限り、同一の図面符号を使用して説明する。
【００３６】
図３は、２個のカメラモジュールを用いて撮影した左側画像と右側画像をそれぞれ示した図である。
【００３７】
本発明の一実施形態によれば、画像撮影機能を有する携帯電話などの既存の移動機器用カメラモジュールを２個用いて図３の（１）のような左側画像（Ｌ）と図３の（２）のような右側画像（Ｒ）をそれぞれ撮影する。一方、既存の画像処理機能を有する移動機器は、１個のカメラモジュールを通して撮影された画像を前記移動機器のバックエンドチップセット（ｂａｃｋ―ｅｎｄ  ｃｈｉｐｓｅｔ）又は簡単にバックエンドを通して処理する機能のみを含み、本発明の一実施形態で意図するように、２個のカメラモジュールを通して撮影された左側画像と右側画像をこれらの同期を合わせて合成し、立体感を調整することができない。したがって、本発明の一実施形態では、このような移動機器に立体画像生成チップを挿入し、これを通して立体画像を生成することができる。
【００３８】
一方、図３に示すような左側画像（Ｌ）と右側画像（Ｒ）は、停止画像又は動画像であり、それぞれのカメラモジュールを通した一般的な画像コンテンツに該当する。また、それぞれのカメラモジュールは、ＣＭＯＳ又はＣＣＤをサポートすることができ、これは選択的な事項に該当する。
【００３９】
図４は、２個のカメラモジュールを用いて撮影した左側画像と右側画像を立体画像生成チップで合成した画像を示した図である。
【００４０】
具体的に、図３の（１）及び（２）に示すような２個のカメラモジュールによって撮影された左側画像と右側画像は、立体画像生成チップに入力され、それぞれ縦方向の列単位で分割され、横方向に交互に配置されて合成される。このように空間的に交互に配置された左右画像は、図１及び図２のようなパララックスバリアを用いたディスプレイモジュールを通してユーザの左眼には左側画像のみが見え、右眼には右側画像のみが見えるようになり、全体的に立体画像として認知されるようになる。
【００４１】
以下では、このような立体画像生成方法に関する一般論に基づいて移動機器に立体画像生成チップを挿入して立体画像を生成し、立体画像コンテンツの固有特性を考慮した上で、高い品質の立体画像ディスプレイを可能にする改善された立体画像生成チップ及びこれを用いた方法について説明する。このために、まず、移動機器に挿入された立体画像生成チップを用いて立体画像を生成する一般的な方法及びその問題を説明する。
【００４２】
図５は、移動機器に挿入された立体画像生成チップを用いて立体画像をディスプレイする一般的な方法を説明するための図である。
【００４３】
一般的に、移動機器を用いた立体画像の生成のためには、既存の移動機器に装着されたカメラモジュールを２個（４０１ａ、４０１ｂ）に拡張し、既存の移動機器で処理不可能な立体画像合成などの機能を行うために立体画像生成チップ４０２の挿入が必要である。もちろん、既存のバックエンド４０３に対応するモジュールにソフトウェア形式で立体画像生成チップ４０２の機能を追加することも可能であり、本発明がこれを排除することはない。すなわち、本発明の各実施形態に係る方法は、立体画像生成チップによって行われたり、全体の段階又は部分的な段階がソフトウェア的に行われる。ただし、本発明の好適な一実施形態では、立体画像の合成及び処理過程を別途の立体画像生成チップによるハードウェア的な処理を通して行うことによって処理速度を増加させ、より安定的に立体画像を生成する方法を考慮する。
【００４４】
まず、２個のカメラモジュール４０１ａ、４０２ｂは、人間の左右側目に対応して左側画像（Ｌ）と右側画像（Ｒ）をそれぞれ撮影し、これら画像を立体画像生成チップ４０２に伝達する。左側画像（Ｌ）及び右側画像（Ｒ）を受けた立体画像生成チップ４０２は、以後、図４に示すように、左右側画像を横方向に交互に配置する方式で合成し、合成画像（Ｃ）を生成することができる。このように生成された合成画像（Ｃ）は、以後、移動機器のバックエンド４０３に伝達される。
【００４５】
このように合成画像（Ｃ）を受けた移動機器のバックエンド４０３は、合成画像（Ｃ）に対する多様な画像処理を行う。このような画像処理には、画像の圧縮過程、圧縮されたコンテンツの格納過程、格納された画像のデコーディング過程などが含まれる。
【００４６】
これらのうち画像の圧縮方式としては、停止画像と動画像によって多様な方式が規定されている。簡単な説明のために、以下では、停止画像に対する圧縮方式を例に挙げて概略的に説明する。
【００４７】
停止画像に対する圧縮は、画像を小さいピクセル単位で細分化し、各ピクセルの画像データ値を予め定められた順に判読した後、各判読データ値の連続した形態を、一定の基準によって定められたコード値にマッピングして圧縮するようになる。このとき、画像圧縮において「０」の反復は重要な意味を有し、例えば、「０」が１０回反復された形態は、「０」を１０回並べるのでなく、反復される「０」の回数を別途の信号値として示すことによって画像データを圧縮することができる。
【００４８】
ただし、図４に示すように、左側画像（Ｌ）と右側画像（Ｒ）が交互に反復された立体画像コンテンツの場合、左側画像と右側画像との間に多数の境界領域を有し、これら境界領域は、画像の不連続性を増加させるようになる。このように画像の不連続性が増加する場合、これによって画像圧縮過程での圧縮率が減少するようになり、圧縮されたコンテンツの容量が増加するようになる。したがって、立体画像コンテンツの格納のために、容量の大きい格納媒体が必要になる。また、分けられた各画素の相関度の減少と伴い、圧縮された画像の品質が減少するようになる。
【００４９】
一方、格納媒体に格納された立体画像コンテンツは、デコーディング過程を経てディスプレイモジュール４０４を通してディスプレイされる。このようなデコーディング過程においても、各コンテンツデータ間の低い相関度によってデコーディング画像の品質が低下するおそれがある。したがって、図５において、バックエンド４０３から立体画像ディスプレイモジュール４０４に伝達されるデコーディング画像（Ｃ'）は、同一の条件下でも、２Ｄ画像に比べて品質が低下するようになる。
【００５０】
したがって、本発明の一実施形態では、移動機器のバックエンドに伝達される立体画像コンテンツの上述した不連続性又は低い相関度による上述した問題を解決するために、次のような方式を提案する。
【００５１】
図６は、本発明の一実施形態によって、移動機器に挿入された立体画像生成チップを用いて立体画像をディスプレイする方法を説明するための図である。
【００５２】
本実施形態においても、移動機器に装着された２個のカメラモジュール４０１ａ、４０１ｂは、左側画像（Ｌ）と右側画像（Ｒ）をそれぞれ撮影し、これら画像を立体画像生成チップ５０２に伝達する（Ｓ５０１）。ただし、本実施形態に係る立体画像生成チップ５０２は、この左側画像（Ｌ）と右側画像（Ｒ）を直ちに図４に示すようにＬ、Ｒ、Ｌ、Ｒ、…の反復形態で合成するのでなく、左側画像全体と右側画像全体をサイド―バイ―サイド方式で合成することを提案する。以下で、「サイド―バイ―サイド」方式は、２以上の画像が左右側方向にそのまま連結された形態を称するものと規定する。２個のカメラモジュール４０１ａ、４０１ｂを通して撮影された左側画像（Ｌ）と右側画像（Ｒ）が動画像である場合、これら画像は、立体画像生成チップ５０２のカウンターを用いて時間同期に合わせて連結されるが、これについては後で説明する。このようにサイド―バイ―サイド方式で連結された左側画像（Ｌ）と右側画像（Ｒ）は、以後、移動機器のバックエンド４０３に伝達され（Ｓ５０２）、これについては、上述したような多様な画像処理が行われる。
【００５３】
サイド―バイ―サイド方式で左側画像（Ｌ）と右側画像（Ｒ）が連結された立体画像コンテンツの場合、左側画像（Ｌ）と右側画像（Ｒ）が図４に示すように交互に配置された立体画像コンテンツに比べて画像データの不連続性が小さいので、高い圧縮率を獲得することができる。これによって、圧縮された画像の容量がより小さくなり、限定されている移動機器の格納媒体により多くのコンテンツを格納することができる。また、画像データの高い相関度によって、圧縮及びデコーディング過程での画像データ損失を減少させることができる。
【００５４】
一方、本実施形態では、上述したような圧縮、格納、デコーディングなどの画像処理過程を経た立体画像コンテンツが、以後、再び立体画像生成チップ５０２に入力されるように設定することを提案する（Ｓ５０３）。すなわち、図４に示すように、移動機器内で一般的な立体画像ディスプレイ過程でバックエンドで画像処理された立体画像が直ちに立体画像ディスプレイモジュール４０４に伝達されていたのに反して（すなわち、立体画像ディスプレイモジュール駆動機能が立体画像生成チップでない移動機器のバックエンドにあるのに反して）、本実施形態では、立体画像ディスプレイモジュール駆動機能を立体画像生成チップ５０２が含むことを提案する。また、本実施形態に係る立体画像生成チップ５０２は、次のように立体画像コンテンツの合成機能を追加で行うことが要求される。
【００５５】
すなわち、バックエンド４０３で画像処理された、サイド―バイ―サイド方式で連結された立体画像コンテンツ（Ｓｃ'）は、パララックス―バリア又はレンチキュラ方式の立体画像ディスプレイモジュール４０４のディスプレイ方式に合わせて左側画像と右側画像が交互に配置された形態に変換されることが望ましい。これによって、本実施形態に係る立体画像生成チップ５０２は、入力された立体画像コンテンツの左側画像（Ｌ）部分と右側画像（Ｒ）部分を縦方向の複数のイメージにそれぞれ分割し、左側画像が分割された複数のイメージと右側画像が分割された複数のイメージをそれぞれ横方向に交互に配置する方式で合成するようになる。このように合成された立体画像コンテンツ（Ｉｃ）は立体画像ディスプレイモジュール４０４に伝達され、図１〜図３と関連して説明したようなパララックス―バリア方式の立体画像ディスプレイ又はレンチキュラレンズアレイ方式の立体画像ディスプレイが行われる（Ｓ５０４）。
【００５６】
上述したように、本実施形態によって立体画像コンテンツの容量を減少させ、より高い品質の立体画像表示が可能になる。ただし、ディスプレイ手段及びユーザによって認知される立体感が互いに異なることがある。すなわち、ユーザによっては、より強い深さ感を感じることを望む場合もあり、認知過程での不便さなどの理由でより弱い深さ感を感じることを望む場合もある。ここで、「深さ感」とは、画像がスクリーンと比べて突出したり、画像がスクリーンの後方に位置するとユーザによって認識される程度を意味するものと仮定する。したがって、本発明の好適な一実施形態では、ユーザが立体画像を確認し、それぞれのユーザに合わせて深さ感を別途に調整することによって、より効率的に立体感を感じさせることができる。
【００５７】
図７は、本発明の一実施形態によって、撮影された左側画像と右側画像の深さ感を立体画像生成チップによって調節する原理を説明するための図である。
【００５８】
図７に示すように、立体画像を構成する左側画像と右側画像の合成位置によって、ユーザは、該当の事物がスクリーン４０１の前面（例えば、左側画像と右側画像が「４０２」と示された位置）に位置するものと認知したり、スクリーン４０１の後面（例えば、左側画像と右側画像が「４０３」と示された位置）に位置するものと認知することができる。本発明の一実施形態によれば、上述したように合成された左側画像と右側画像の左右配置の相対的なシフトを通して深さ感を調整することによって、ユーザによって立体感を調整することを提案する。
【００５９】
このような左側画像と右側画像の合成及び相対的なシフトを通した立体感の調整は、既存の移動機器の構成において、本発明の一実施形態に係る立体画像生成チップの立体画像プロセッサ、具体的に、立体画像プロセッサの立体感調整モジュールを通して具現されたり、又は、移動機器に設置されるソフトウェアによって具現されるが、これについては後で説明することにする。
【００６０】
具体的に、合成された左側画像と右側画像の配置関係によってスクリーン４０１の前面（「４０２」と示された位置）に事物が位置すると認知される場合、右側画像を左右方向のうち右側方向である「Ａ」方向にシフトし、左側画像を左側方向である「Ａ'」方向にシフトすれば、ユーザには、左右画像間の間隔によってこれら左側画像と右側画像が「４０２ａ」と示された位置に位置すると認知され、結果的に、事物がさらにスクリーン４０１から遠ざかる方向（すなわち、「ａ」方向）に移動するのと同一の効果を有するようになる。また、同一の画像内でスクリーン４０１の後面（「４０３」と示された位置）に位置すると認知される事物に対して、右側画像を「Ａ」方向にシフトし、左側画像を「Ａ'」方向にシフトすれば、ユーザには、左右画像間の間隔によってこれら右側画像と右側画像が「４０３ａ」と示された位置に位置すると認知され、結果的に、事物がスクリーン４０１側（すなわち、「ａ」方向）に移動するのと同一の効果を有するようになる。
【００６１】
結局、右側画像を「Ａ」方向にシフトし、左側画像を「Ａ'」方向にシフトする場合、事物を全体的に「ａ」方向に移動させる効果を有するようになり、全体的な深さ感を調整することができる。
【００６２】
その一方、スクリーン４０１の前面（「４０２」と示された位置）に事物が位置すると認知される場合、右側画像を左側方向である「Ｂ」方向に、左側画像を右側方向である「Ｂ'」方向に互いに反対方向にシフトすれば、ユーザには、これら画像が「４０２ｂ」の位置に位置すると認知され、結果的に、スクリーン４０１側（すなわち、「ｂ」方向）に移動するのと同一の効果を有するようになる。また、スクリーン４０１の後面（「４０３」示された位置）に事物が位置すると認知される場合も、右側画像を「Ｂ」方向にシフトし、左側画像を「Ｂ'」方向にシフトすれば、ユーザには、これら画像が「４０３ｂ」の位置に位置すると認知され、結果的に、スクリーン４０１から遠ざかる方向（すなわち、「ｂ」方向）に移動するのと同一の効果を有するようになる。
【００６３】
結局、右側画像を「Ｂ」方向にシフトし、左側画像を「Ｂ'」方向にシフトする場合、事物を全体的に「ｂ」方向に移動させる効果を有するようになり、全体的な立体感を調整することができる。
【００６４】
図７と関連して説明したような深さ感の調整は、本発明の一実施形態で、移動機器の液晶を通して撮影された立体画像の立体感を確認しながら行うことができ、これによって、ディスプレイモジュール及びユーザによって異なるように要求される立体感を調整し、立体画像を生成することができる。
【００６５】
このように、格納されたコンテンツは、深さ感が調整されて直ちにディスプレイされたり、深さ感が調整された状態で再び格納され、以後の再生時に直ちに用いることもできる。これを通して、本実施形態に係る立体画像生成方法及び立体画像生成チップは、各ユーザの条件に合わせて最適化された立体画像をディスプレイすることができる。
【００６６】
併せて、図７に示すような深さ感の調整方式は、次のように２Ｄ画像の深さ感を任意に調整し、ユーザが一定程度の立体感を感じるように２Ｄ画像をディスプレイすることができ、このような技術は、以下で本発明の更に他の一実施形態として説明する。
【００６７】
図８は、本発明の一実施形態によって２次元イメージを３次元的に示すための方法を説明する図である。
【００６８】
図８の（ａ）に示した２Ｄ画像は、移動機器のバックエンドで画像処理された２Ｄ画像であったり、移動機器のいずれか一つのカメラモジュールを通して撮影された画像であったり、他の媒体によって画像処理された画像である。このような２Ｄ画像の入力を受けた本実施形態に係る立体画像生成チップは、まず、２次元画像を図８の（ａ）に示すように縦方向の複数のイメージに分割し、分割されたそれぞれの画像部分を左側画像部及び右側画像部として順次交差的にマッピングする。以下の説明においては、撮影された左側画像と右側画像が交互に配置された元の形態と容易に区分するために、上述したように２Ｄ画像を分割し、左側画像部分にマッピングされた組み合わせを「擬似（Ｐｓｅｕｄｏ）左側画像イメージ組み合わせ」と称し、右側画像部分にマッピングされた組み合わせを「擬似右側画像イメージ組み合わせ」と称することにする。このような擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせによって、図８の（ｂ）及び（ｃ）に示すように深さ感が調整される。
【００６９】
図８の（ｂ）は、擬似左側画像イメージ組み合わせを右側方向に、擬似右側画像イメージ組み合わせを左側方向に相対的にシフトすることを示している。このように擬似左側画像イメージ組み合わせを右側方向にシフトし、擬似右側画像イメージ組み合わせを左側方向にシフトする場合、図７に示した形態では、画像がスクリーンの後方に移動する方向（すなわち、「ｂ」方向）に移動するようになる。
【００７０】
また、図８の（ｃ）は、擬似左側画像イメージ組み合わせを左側方向に、擬似右側画像イメージ組み合わせを右側方向に相対的にシフトすることを示している。このように擬似左側画像イメージ組み合わせを左側方向にシフトし、擬似右側画像イメージ組み合わせを右側方向にシフトする場合、図７に示した形態では、画像がスクリーンの前方に移動する方向（すなわち、「ａ」方向）に移動するようになる。このような方式で深さ感が調整された擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせによって、パララックス―バリア方式又はレンチキュラアレイ方式の立体画像ディスプレイモジュールを通して擬似左側画像イメージ組み合わせが左眼のみに照明され、擬似右側画像イメージ組み合わせが右眼のみに照明されることによって、ユーザは立体感を感じるようになる。
【００７１】
このような２Ｄ画像の立体化は、上述した一般の３Ｄ画像ディスプレイと独立した形態又は結合された形態で使用される。
【００７２】
図９は、本発明の一実施形態に係る立体画像生成チップが２Ｄ画像及び／又は３Ｄ画像を処理する概念を示した概念図である。
【００７３】
すなわち、本発明に係る立体画像生成チップ５０２'は、移動機器のバックエンドからサイド―バイ―サイド方式で左右側画像が結合された３Ｄコンテンツ又は一般の２Ｄコンテンツを受けることができる。このとき、３Ｄコンテンツ／２Ｄコンテンツは、望ましくはバックエンドで画像処理されたコンテンツである。このようなコンテンツを受けた立体画像生成チップ５０２'は、３Ｄコンテンツに対しては、左側画像部と右側画像部を複数のイメージに分割し、これらを交互に配置して合成する処理を行い、２Ｄコンテンツに対しては、図８と関連して説明したように縦方向に分割された複数のイメージをそれぞれ擬似左側画像イメージ組み合わせ及び擬似右側画像イメージ組み合わせにマッピングする処理を行うことができる。これによって、立体画像ディスプレイモジュールに出力される画像（Ｉｃ'）は、左側画像／擬似左側画像と右側画像／擬似右側画像が交互に配置された形態を有するようになり、その結果、パララックスバリア／レンチキュラレンズアレイ方式のディスプレイモジュールを通してユーザの左眼と右眼に区分されてディスプレイされる。
【００７４】
一方、本発明の好適な一実施形態では、一般の２Ｄ画像と３Ｄ画像を結合してディスプレイすることもできる。すなわち、一つ以上の特定対象（Ｏｂｊｅｃｔ）の場合、２個のカメラモジュールを通して撮影された左側画像と右側画像の結合形態で処理され、該当対象の各部分によって深さ感が異なるようにディスプレイすることができ、これら対象を一般の２Ｄ画像背景下でディスプレイすることができる。このとき、背景に該当する２Ｄ画像も、全体的に図８と関連して説明したように深さ感が調整され、これによって、ユーザは実感あふれる立体画像を楽しむことができる。
【００７５】
上述した説明では、パララックスバリア方式の立体画像ディスプレイモジュールにおいて、図１及び図２に示すように、左側画像と右側画像がそれぞれ縦方向の列単位で分割され、横方向に配置されて合成された立体画像のみがユーザによって立体画像として認知される形態のみを説明した。ただし、本発明者によって発明され、本出願人によって出願された「セル構造のパララックス―バリア及びこれを用いる立体画像表示装置（特許文献１）」によれば、上述したパララックスバリアをセル方式で具現し、これを横方向又は縦方向に選択的に駆動することができる。したがって、本発明の一実施形態によって立体画像を合成する場合、合成の方向が横方向又は縦方向のいずれか一方向に限定される必要はなく、立体画像を合成する方向と立体映像を上映するのに用いられるパララックスバリア方式のディスプレイモジュールのバリア方向を調節し、立体画像を上映することができる。
【００７６】
一方、２個のカメラモジュールを通して撮影した左右画像が動画像である場合、それぞれの画像は、上述した立体画像生成チップで時間同期に合わせて合成されなければならない。このような時間同期は、本発明の一実施形態に係る立体画像生成チップのカウンターによって生成された時間同期を用いて、左右画像の同期が合わない場合、左右画像のうちいずれか一つを立体画像生成チップのメモリに一時格納した後、同期を合わせて合成したり、又は、既存の２個のカメラモジュールに含まれた待機（ｒｅａｄｙ）又は電源解除（ｐｏｗｅｒ  ｄｏｗｎ）機能などを含む一時停止機能を用いて、左右画像による電圧に変化があるとき、左右画像を全て一時停止してから、これら二つの同期が合うように同時に再開することによって獲得され、以下でより具体的に説明することにする。
【００７７】
まず、本発明の一実施形態に係る立体画像生成チップは、左側画像と右側画像の同期が合わない場合、これらのうちいずれか一つを一時格納するためのメモリモジュールを含むことができる。このメモリモジュールは、２個のカメラモジュールを通して撮影した左側画像と右側画像の同期が合わない場合、これら間の同期を合わせるために同期が速い画像を一時格納するバッファ機能を行うことができ、これを通して、左右画像をこれらの同期を合わせて合成することができる。
【００７８】
一方、本発明の他の一実施形態では、上述したように、立体画像生成チップが別途のメモリモジュールを含まないとしても、次のような方法によって左右画像の同期を合わせることができる。
【００７９】
図１０は、本発明の一実施形態によって、メモリモジュールがない場合、２個のカメラモジュールを通して撮影した左側画像と右側画像の同期を合わせる方法を説明するための図である。
【００８０】
具体的に、２個のカメラモジュールを通して撮影された左側画像と右側画像の同期をそれぞれ「ＣＨ１カメラｓｙｎｃ」及び「ＣＨ２カメラｓｙｎｃ」と示し、両画像の同期が合わない場合、既存のカメラモジュールの一時停止機能を用いて同期を合わせる過程を示した。
【００８１】
既存のカメラモジュールは、画像撮影の便宜のために待機又は電源解除などの一時停止機能を含むことができる。したがって、本発明の一実施形態では、立体画像生成チップに左右画像のうちいずれか一つの一時格納のためのメモリモジュールがないとしても、２個のカメラモジュールから入力された左右画像の同期が合わない場合、両画像の同期にイベントがあるとき、すなわち、図１０に示すように、電圧が「ｈｉｇｈ」から「ｌｏｗ」に変換される時点又は「ｌｏｗ」から「ｈｉｇｈ」に変換される時点に、左右画像を一時停止してから、両画像の同期を合わせ、これら画像を同時に再開することによって同期を合わせることができる。
【００８２】
このように、２個のカメラモジュールの一時停止機能を用いて、立体画像生成チップがメモリモジュールを含まない場合にも左右画像の同期を合わせる機能は、以下で具体的に説明する立体画像生成チップの立体画像プロセッサによって行われるが、上述した方式を行える限り、これに限定される必要はない。
【００８３】
一方、以下では、上述した本発明の各実施形態に係る立体画像生成チップが移動機器内でどのように配置可能であるかについて説明する。
【００８４】
図１１は、本発明の一実施形態に係る立体画像生成チップの移動機器内の配置関係を説明するための図である。
【００８５】
図１１は、基本的に図６にブロック図の形式で示した各構成に対応する。すなわち、２個のカメラモジュール４０１ａ、４０２ｂは、「ＣＡＭ１」及び「ＣＡＭ２」と示し、立体画像生成チップ５０２は、「３Ｄ  ＭＵＸＥＲ」と示した。一方、移動機器のバックエンド４０３は、「ＣＰＵ」と示しており、立体画像ディスプレイモジュール４０４は、「ＬＣＤ」及び「ＴＮ  ＬＣＤ」と示している。図１１では、このような対応関係に基づいて図面符号が示されている。
【００８６】
以下、図１１と関連した具体的な動作を図６と関連して説明する。２個のカメラモジュールＣＡＭ１  ４０１ａ、ＣＡＭ２  ４０１ｂを通して撮影された左側画像と右側画像は、それぞれ立体画像生成チップ機能を行う３Ｄ  ＭＵＸＥＲ５０２に入力される。このとき、カメラの出力信号は、３Ｄ  ＭＵＸＥＲ５０２の２個のカメラ入力部ＣＡＭ１、ＣＡＭ２を通して入力される。カメラモジュールから左側画像と右側画像の入力を受けた３Ｄ  ＭＵＸＥＲ５０２は、左右側画像をサイド―バイ―サイド方式で結合することができる。このとき、各画像が動画像である場合、同期を合わせる必要がある。このように結合された画像は、３Ｄ  ＭＵＸＥＲ５０２のカメラ出力部（ＣＡＭ  ＯＵＴ）を通して移動機器のバックエンド、すなわち、ＣＰＵ４０３にカメラインターフェースを介して入力される。
【００８７】
これを通して、移動機器のＣＰＵ４０３は、立体画像コンテンツの多様な画像処理を行うことができる。例えば、ＣＰＵ４０３は、立体画像コンテンツの圧縮、圧縮された画像の格納、格納された画像のデコーディングなどの手順を行うことができる。このような画像処理が行われた３Ｄコンテンツは、ディスプレイモジュール入力部、例えば、ＬＣＤ入力部（ＬＣＤ  ＩＮ）を通して再び３Ｄ  ＭＵＸＥＲ５０２に入力される。また、本発明の一実施形態で、３Ｄ  ＭＵＸＥＲ５０２がＣＰＵ４０３から３Ｄコンテンツのみならず一般の２Ｄコンテンツの入力を受け、深さ感調整機能を行うこともできることは上述した通りである。
【００８８】
このように画像処理された３Ｄコンテンツ／２Ｄコンテンツの入力を受けた３Ｄ  ＭＵＸＥＲ５０２は、３Ｄコンテンツに対しては、上述したように左側画像と右側画像を交互に配置する形態で合成する過程を行うことができ、２Ｄコンテンツに対しては、上述したように画像を縦方向の複数のイメージに分割し、それぞれを擬似左側画像イメージ組み合わせ、擬似右側画像イメージ組み合わせにマッピングする過程を行うことができる。このように合成／マッピングされた情報は、以後、ディスプレイ出力部、例えば、ＬＣＤ出力部（ＬＣＤ  ＯＵＴ）を通して立体画像ディスプレイモジュール、例えば、ＬＣＤ及びＴＮ  ＬＣＤに伝達される。
【００８９】
上述した図１１は、当業者が本発明を容易に実施するように図６に示した各機能ブロックの具体的な形態を示したもので、本発明の範囲がこれに限定される必要はない。すなわち、図６に示した各機能ブロックが、同一又は均等な機能を行う限り、他の部品又は名称と称され得ることは当業者にとって自明である。
【００９０】
また、上述したような本発明の各実施形態に係る立体画像表示方法は、次のように修正されて実施される。すなわち、本発明の他の一実施形態では、携帯電話、ＵＭＰＣなどの移動機器の２個のカメラを通して撮影された左側画像と右側画像が該当の移動機器によってサイド―バイ―サイド方式で連結された後、他の媒体に伝達されてディスプレイされることもある。以下、本実施形態では、立体画像がディスプレイされる装置を「第１の機器」と称し、左側画像と右側画像を撮影してコンテンツを生成する装置を「第２の機器」と称する。
【００９１】
まず、第２の機器は、２個のカメラモジュールを含むことが望ましい。これら２個のカメラモジュールを通して左側画像と右側画像がそれぞれ撮影される。その後、撮影された左右画像は、第２の機器でサイド―バイ―サイド方式で連結される処理を経ることができ、第２の機器が本発明の上述した実施形態に係る移動機器である場合、立体画像生成チップによって左右画像のサイド―バイ―サイド方式の連結が行われる。
【００９２】
これを通して立体画像コンテンツが生成され、本実施形態では、このような立体画像コンテンツを他の媒体（第１の機器）でディスプレイすることを提案する。すなわち、第２の機器でサイド―バイ―サイド方式で連結された左右側画像は、ＵＳＢなどの有線連結端子又は多様な無線連結手段によって第１の機器に入力される。このときに入力される立体画像コンテンツとしての左右側画像は、第２の機器で単純にサイド―バイ―サイド方式で連結されたものであるが、第２の機器で圧縮などの画像処理が行われた状態のコンテンツであることが望ましい。前記第２の機器が上述した実施形態に係る移動機器である場合、このような画像処理は移動機器のバックエンドで行われる。
【００９３】
上述したように立体画像コンテンツの入力を受けた第１の機器は、以後、入力された左側画像と前記右側画像を縦方向の複数のイメージにそれぞれ分割し、左側画像が分割された複数のイメージと右側画像が分割された複数のイメージをそれぞれ交互に配置する方式で合成することができる。これを通して、立体画像コンテンツは、パララックスバリア又はレンチキュラレンズアレイを含む第１の機器の立体画像ディスプレイモジュールを通してディスプレイされ、ユーザに立体画像を提供することができる。
【００９４】
併せて、上述した実施形態で第１の機器に入力される立体画像コンテンツは、第２の機器で２Ｄ画像の深さ感が図７と関連して説明したように調整され、擬似３次元画像として生成されたコンテンツでもある。
【００９５】
上述したように開示された本発明の好適な実施形態についての詳細な説明は、当業者が本発明を具現して実施できるように提供された。上記では、本発明の好適な実施形態を参照して説明したが、該当技術分野の熟練した当業者であれば、下記の特許請求の範囲に記載した本発明の思想及び領域から逸脱しない範囲内で本発明を多様に修正及び変更可能であることを理解できるであろう。例えば、本発明の上述した説明において、「移動機器」は、携帯電話、ＰＤＡ、ＰＭＰなどを含む全ての移動式機器を含む概念であり、２個のカメラモジュールと画像処理が可能なバックエンドチップを含む移動機器であれば、特定形態の機器に限定する必要はなく、任意の移動機器に本発明の実施形態に係る立体画像生成チップを挿入することによって立体画像を生成することができる。
【００９６】
したがって、本発明は、ここで開示した各実施形態に制限されるものでなく、ここで開示された原理及び新規の特徴と一致する最広の範囲を与えるものである。
【産業上の利用可能性】
【００９７】
上述したような本発明に係る移動機器用立体画像生成チップ及びこれを用いた立体画像生成方法は、携帯電話、ＰＤＡ、ＰＭＰなどを含む多様な移動式機器に適用され、既存の２Ｄ画像をユーザが立体的に感じるようにし、より高い品質の立体画像ディスプレイを具現することができる。
【図１】
2011525075.tif 000003
【図２】
2011525075.tif 000004
【図３】
2011525075.tif 000005
【図４】
2011525075.tif 000006
【図５】
2011525075.tif 000007
【図６】
2011525075.tif 000008
【図７】
2011525075.tif 000009
【図８】
2011525075.tif 000010
【図９】
2011525075.tif 000011
【図１０】
2011525075.tif 000012
【図１１】
2011525075.tif 000013
【国際調査報告】
2011525075.tif 000014
2011525075.tif 000015
2011525075.tif 000016
2011525075.tif 000017