(57)【要約】【課題】良好なキー合成処理を可能とする撮像ユニット、携帯端末装置、および携帯端末システムを提供する。【解決手段】撮像ユニット１０は、主として、撮像部３０と、変換部４０と、キー信号生成部５０と、を有する。変換部４０は、撮像部３０から出力された撮像画像データの形式をＹＵＶ形式からＲＧＢ形式に変換する。キー信号生成部５０は、撮像部３０側から入力された撮像画像データについて、この撮像画像データを構成する各画素データと基準データとに基づいたキー信号を生成する。また、キー信号生成部５０は、生成されたキー信号と対応するＲＧＢ形式の画素データとを最小構成単位とする前景画像データ出力する。そして、本体ユニット１００の画像合成部１２０は、撮像ユニット１０からの前景画像データと、ＲＡＭ１１２に格納された背景画像データとを、前景画像データに含まれるキー信号に基づいて重ね合わせ、合成画像データを生成する。【選択図】図１
2008205871.tif 000002
【特許請求の範囲】
【請求項１】
携帯端末システムであって、
(a)  本体ユニットと、
(b)  前記本体ユニットに対して着脱可能とされており、
(b-1)  撮像部と、
(b-2)  前記撮像部側から入力された撮像画像データにつき、該撮像画像データの各画素データと基準データとに基づいたキー信号を生成するとともに、生成された前記キー信号と対応する画素データとを最小構成単位とする前景画像データを出力するキー信号生成部と、
を有する撮像ユニットと、
を備え、
前記本体ユニットは、
(a-1)  背景画像データを記憶可能な記憶部と、
(a-2)  前記記憶部に記憶された前記背景画像データと、前記撮像ユニット側から出力された前記前景画像データと、を、前記前景画像データに含まれる前記キー信号に基づいて重ね合わせる画像合成部と、
を有することを特徴とする携帯端末システム。
【請求項２】
請求項１に記載の携帯端末システムにおいて、
前記撮像ユニットは、
(b-3)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、
をさらに有し、
前記キー信号生成部は、
前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、
前記第１キー信号設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有することを特徴とする携帯端末システム。
【請求項３】
請求項１に記載の携帯端末システムにおいて、
前記撮像ユニットは、
(b-3)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、
をさらに有し、
前記キー信号生成部は、
前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、
前記第２キー信号設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有するを特徴とする携帯端末システム。
【請求項４】
請求項１に記載の携帯端末システムにおいて、
前記撮像ユニットは、
(b-3)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、
をさらに有し、
前記キー信号生成部は、
前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、
前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、
前記第１または第２キー信号設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有することを特徴とする携帯端末システム。
【請求項５】
請求項３または請求項４に記載の携帯端末システムにおいて、
前記キー信号生成部は、
前記撮像部から出力された各第１画素データの無彩成分に基づいて、前記基準データを設定する第１基準データ設定部、
をさらに有することを特徴とする携帯端末システム。
【請求項６】
請求項２または請求項４に記載の携帯端末システムにおいて、
前記キー信号生成部は、
前記変換部によって前記第１画素データから変換された各第２画素データに基づいて、前記基準データを設定する第２基準データ設定部、
をさらに有することを特徴とする携帯端末システム。
【請求項７】
本体ユニットに対して着脱可能とされており、前記本体ユニットにおいて背景画像データと重ね合わせられる前景画像データを、前記本体ユニットに出力可能な撮像ユニットであって、
(a)  撮像部と、
(b)  前記撮像部側から入力された撮像画像データにつき、該撮像画像データの各画素データと基準データとに基づいたキー信号を生成するとともに、生成された前記キー信号と対応する画素データとを最小構成単位とする前記前景画像データを出力するキー信号生成部と、
を備え、
前記前景画像データと前記背景画像データとの重ね合わせは、前記キー信号に基づいて行われることを特徴とする撮像ユニット。
【請求項８】
請求項７に記載の撮像ユニットにおいて、
前記撮像部は、１つの無彩成分と２つの有彩成分とを有する第１画素データにつき、該第１画素データを最小単位として構成された撮像画像データを、前記キー信号生成部側に出力し、
(c)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、
をさらに備え、
前記キー信号生成部は、
前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、
前記第１キー信号設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有することを特徴とする撮像ユニット。
【請求項９】
請求項７に記載の撮像ユニットにおいて、
(c)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、
をさらに備え、
前記キー信号生成部は、
前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、
前記第２キー信号設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有することを特徴とする撮像ユニット。
【請求項１０】
請求項７に記載の撮像ユニットにおいて、
(c)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、
をさらに備え、
前記キー信号生成部は、
前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、
前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、
前記第１または第２キー信号設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有することを特徴とする撮像ユニット。
【請求項１１】
請求項９または請求項１０に記載の撮像ユニットにおいて、
前記キー信号生成部は、
前記撮像部から出力された各第１画素データの無彩成分に基づいて、前記基準データを設定する第１基準データ設定部、
をさらに備えることを特徴とする撮像ユニット。
【請求項１２】
請求項８または請求項１０に記載の撮像ユニットにおいて、
前記キー信号生成部は、
前記変換部によって前記第１画素データから変換された各第２画素データに基づいて、前記基準データを設定する第２基準データ設定部、
をさらに備えることを特徴とする撮像ユニット。
【請求項１３】
携帯端末装置であって、
(a)  撮像部と、
(b)  前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分によって構成された第２画素データに変換する変換部と、
(c)  前記撮像部側から入力された撮像画像データにつき、該撮像画像データの各画素データと基準データとに基づいてキー信号を生成するとともに、生成された前記キー信号と対応する画素データとを最小構成単位とする前景画像データを出力するキー信号生成部と、
(d)  背景画像データを記憶可能な記憶部と、
(e)  前記記憶部に記憶された前記背景画像データと、前記撮像ユニット側から出力された前記前景画像データと、を、各キー信号に基づいて重ね合わせる画像合成部と、
を備え、
前記キー信号生成部は、
前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、
前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、
前記第１または第２設定部によって設定された前記キー信号と、前記第２画素データと、を最小単位とする前記前景画像データを出力する出力部と、
を有することを特徴とする携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像ユニット、携帯端末装置、および携帯端末システムにおいて実行される
キー合成に関する。
【背景技術】
【０００２】
従来より、カメラによる撮像画像データと、予め保存された背景画像データとをキー合成する技術が知られている（例えば、特許文献１および２）。
【０００３】
【特許文献１】特開平０５−２２４６３０号公報
【特許文献２】特開平１０−０４２３０７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ここで、特許文献１または２のカメラ（撮像ユニット）による撮像画像データは、キー合成処理を実行する処理部に送られる。そして、この処理部は、例えば、（１）撮像画像データと背景画像データとを合成する処理や、（２）撮像画像データを構成する画素のうち、対応する背景画像データが嵌め込まれる透過画素を設定する処理等のように、キー合成に必要な処理を実行する。その結果、特許文献１または２の技術では、処理部の計算コストが増加するという問題が生じていた。
【０００５】
そこで、本発明では、良好なキー合成処理を可能とする撮像ユニット、携帯端末装置、および携帯端末システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記の課題を解決するため、請求項１の発明は、携帯端末システムであって、本体ユニットと、前記本体ユニットに対して着脱可能とされており、撮像部と、前記撮像部側から入力された撮像画像データにつき、該撮像画像データの各画素データと基準データとに基づいたキー信号を生成するとともに、生成された前記キー信号と対応する画素データとを最小構成単位とする前景画像データを出力するキー信号生成部とを有する撮像ユニットとを備え、前記本体ユニットは、背景画像データを記憶可能な記憶部と、前記記憶部に記憶された前記背景画像データと、前記撮像ユニット側から出力された前記前景画像データとを、前記前景画像データに含まれる前記キー信号に基づいて重ね合わせる画像合成部とを有することを特徴とする。
【０００７】
また、請求項２の発明は、請求項１に記載の携帯端末システムにおいて、前記撮像ユニットは、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、をさらに有し、前記キー信号生成部は、前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、前記第１キー信号設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有することを特徴とする。
【０００８】
また、請求項３の発明は、請求項１に記載の携帯端末システムにおいて、前記撮像ユニットは、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、をさらに有し、前記キー信号生成部は、前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、前記第２キー信号設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有するを特徴とする携帯端末システム。
【０００９】
また、請求項４の発明は、請求項１に記載の携帯端末システムにおいて、前記撮像ユニットは、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、をさらに有し、前記キー信号生成部は、前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、前記第１または第２キー信号設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有することを特徴とする。
【００１０】
また、請求項５の発明は、請求項３または請求項４に記載の携帯端末システムにおいて、前記キー信号生成部は、前記撮像部から出力された各第１画素データの無彩成分に基づいて、前記基準データを設定する第１基準データ設定部、をさらに有することを特徴とする。
【００１１】
また、請求項６の発明は、請求項２または請求項４に記載の携帯端末システムにおいて、前記キー信号生成部は、前記変換部によって前記第１画素データから変換された各第２画素データに基づいて、前記基準データを設定する第２基準データ設定部、をさらに有することを特徴とする。
【００１２】
また、請求項７の発明は、本体ユニットに対して着脱可能とされており、前記本体ユニットにおいて背景画像データと重ね合わせられる前景画像データを、前記本体ユニットに出力可能な撮像ユニットであって、撮像部と、前記撮像部側から入力された撮像画像データにつき、該撮像画像データの各画素データと基準データとに基づいたキー信号を生成するとともに、生成された前記キー信号と対応する画素データとを最小構成単位とする前記前景画像データを出力するキー信号生成部とを備え、前記前景画像データと前記背景画像データとの重ね合わせは、前記キー信号に基づいて行われることを特徴とする。
【００１３】
また、請求項８の発明は、請求項７に記載の撮像ユニットにおいて、前記撮像部は、１つの無彩成分と２つの有彩成分とを有する第１画素データにつき、該第１画素データを最小単位として構成された撮像画像データを、前記キー信号生成部側に出力し、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、をさらに備え、前記キー信号生成部は、前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、前記第１キー信号設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有することを特徴とする。
【００１４】
また、請求項９の発明は、請求項７に記載の撮像ユニットにおいて、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、をさらに備え、前記キー信号生成部は、前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、前記第２キー信号設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有することを特徴とする。
【００１５】
また、請求項１０の発明は、請求項７に記載の撮像ユニットにおいて、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分を有する第２画素データに変換する変換部、をさらに備え、前記キー信号生成部は、前記撮像部側から出力された前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、前記第１または第２キー信号設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有することを特徴とする。
【００１６】
また、請求項１１の発明は、請求項９または請求項１０に記載の撮像ユニットにおいて、前記キー信号生成部は、前記撮像部から出力された各第１画素データの無彩成分に基づいて、前記基準データを設定する第１基準データ設定部、をさらに備えることを特徴とする。
【００１７】
また、請求項１２の発明は、請求項８または請求項１０に記載の撮像ユニットにおいて、前記キー信号生成部は、前記変換部によって前記第１画素データから変換された各第２画素データに基づいて、前記基準データを設定する第２基準データ設定部、をさらに備えることを特徴とする。
【００１８】
また、請求項１３の発明は、携帯端末装置であって、撮像部と、前記撮像画像データを構成する画素データであり、１つの無彩成分と２つの有彩成分とを有する第１画素データを、３つの色濃度成分によって構成された第２画素データに変換する変換部と、前記撮像部側から入力された撮像画像データにつき、該撮像画像データの各画素データと基準データとに基づいてキー信号を生成するとともに、生成された前記キー信号と対応する画素データとを最小構成単位とする前景画像データを出力するキー信号生成部と、背景画像データを記憶可能な記憶部と、前記記憶部に記憶された前記背景画像データと、前記撮像ユニット側から出力された前記前景画像データとを、各キー信号に基づいて重ね合わせる画像合成部とを備え、前記キー信号生成部は、前記変換部により前記第１画素データから変換された第２画素データと、前記基準データと、に基づいて各キー信号値を設定する第１キー信号設定部と、前記第１画素データの前記無彩成分と、前記基準データと、に基づいて各キー信号値を設定する第２キー信号設定部と、前記第１または第２設定部によって設定された前記キー信号と、前記第２画素データとを最小単位とする前記前景画像データを出力する出力部とを有することを特徴とする。
【発明の効果】
【００１９】
請求項１ないし請求項１２に記載の発明によれば、撮像ユニットは、撮像画像データの画素データと、キー信号生成部によるキー信号と、を最小単位とする前景画像データを生成する。これにより、本体ユニットは、前景画像データと背景画像データとを重ね合わせる処理を実行するだけで、両画像データから合成画像データを生成することができる。そのため、本体ユニット側の計算コストを低減させることができる。
【００２０】
特に、請求項４および請求項１０に記載の発明によれば、色濃度成分に基づいてキー信号値を設定する処理と、無彩成分に基づいてキー信号値を設定する処理と、を切り替えて実行することができる。これにより、第１および第２キー信号設定部のいずれかによって設定されたキー信号を含む前景画像データが、本体ユニット側に出力される。そのため、本体ユニットでは、撮像画像データの状況に応じて最適な重ね合わせ処理を実行することができ、良好な合成画像データを得ることができる。
【００２１】
特に、請求項５、請求項６、請求項１１、および請求項１２に記載の発明によれば、撮像部による撮像画像データに基づいて、基準データを生成することができる。そのため、使用者の要求に応じた重ね合わせ処理を容易に実行することができ、良好な合成画像データを得ることができる。
【００２２】
また、請求項１３に記載の発明によれば、請求項４および請求項１０に記載の発明の同様に、色濃度成分に基づいてキー信号値を設定する処理と、無彩成分に基づいてキー信号値を設定する処理と、を切り替えて実行することができる。そのため、撮像画像データの状況に応じて最適な重ね合わせ処理を実行することができ、良好な合成画像データを得ることができる。
【発明を実施するための最良の形態】
【００２３】
以下、図面を参照しつつ本発明の実施の形態について詳細に説明する。
【００２４】
＜１．携帯端末システムの構成＞
図１は、本発明の実施の形態における携帯端末システム１の構成の一例を示すブロック図である。携帯端末システム１は、撮像画像データと、予め保存された背景画像データとをキー合成することによって、合成画像データを生成可能とされた画像処理システムである。また、携帯端末システム１は、持ち運び可能なサイズおよび重量とされている。図１に示すように、携帯端末システム１は、主として、撮像ユニット１０と、本体ユニット１００と、を備えている。
【００２５】
ここで、本実施の形態のキー合成では、撮像画像データを構成する画素がキー信号に基づいて切り抜かれるとともに、撮像画像データのうちの切り抜かれた画素部分に、対応する背景画像データが嵌め込まれる。また、本実施の形態で取り扱われる画像データ（例えば、撮像画像データ、前景画像データ、および背景画像データ）のそれぞれは、静止画であってもよいし、動画であってもよい。
【００２６】
図２は、キー合成で使用される撮像画像データの一例を示す図である。図３は、キー合成で使用される背景画像データの一例を示す図である。図４は、キー合成によって合成された合成画像データの一例を示す図である。
【００２７】
例えば、撮像画像データ２１のうち領域２２（斜線部分）がキー信号に基づいて切り抜き部分とされる場合において（図２参照）、撮像画像データ２１と背景画像データ２４（図３参照）とから合成画像データ２７（図４参照）が合成される。すなわち、図４に示すように、合成画像データ２７は、撮像画像データ２１と背景画像データ２４の対応部分２５とが重ね合わせられたものとなる。
【００２８】
まず、撮像ユニット１０について説明する。撮像ユニット１０は、本体ユニット１００に対して着脱可能とされたカメラモジュールである。図１に示すように、撮像ユニット１０は、主として、撮像部３０と、変換部４０と、キー信号生成部５０と、を有している。
【００２９】
撮像部３０は、ＣＣＤ（Charge Coupled Devices）イメージセンサ（図示省略）や、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ（図示省略）を有しており、これらイメージセンサによって光を電気信号に変換する。また、撮像部３０は、イメージセンサによって得られた電気信号に基づいて、ＹＵＶ形式の撮像画像データを生成する。すなわち、撮像画像データを構成する各画素データ（第１画素データ）は、輝度信号（Ｙ）（１つの無彩成分）と、輝度信号（Ｙ）と青色成分との差（Ｕ）、および輝度信号（Ｙ）と赤色成分との差（Ｖ）（２つの有彩成分）と、を有する。
【００３０】
変換部４０は、撮像部３０から出力された撮像画像データの各画素データ（第１画素データ）を、赤（Ｒ）、緑（Ｇ）、および青（Ｂ）の３つの色濃度成分を有する画素データ（第２画素データ）に変換する。すなわち、本実施の形態の撮像ユニット１０は、撮像部３０から出力されるＹＵＶ形式の画像データと、変換部４０によって生成されるＲＧＢ形式の画像データと、を取り扱うことができる。
【００３１】
キー信号生成部５０は、いわゆるＡＳＩＣ（Application Specific Integrated Circuit）によって構成されている。キー信号生成部５０は、撮像画像データに基づいて透過画素を設定するためのキー信号を生成するとともに、このキー信号を含み、本体ユニット１００でのキー合成に使用される前景画像データを生成する。
【００３２】
ここで、本実施の形態で使用される前景画像データの各画素データは、１ビットのキー信号と、５ビットのＢ信号と、５ビットのＧ信号と、５ビットのＲ信号と、から構成されている。また、各キー信号の値について、キー合成において対応する背景画像データを嵌め込む場合には、キー信号値として「０」が、前景画像データのＲＧＢ信号をそのまま使用する場合には、キー信号値として「１」が、それぞれ設定される。なお、キー信号生成部５０の詳細構成については、後述する。
【００３３】
ＲＡＭ１２は、読み書き自在の揮発性メモリであり、ＲＯＭ１３は、読み出し専用メモリである。撮像ユニット側インタフェース１８は、撮像ユニット１０を本体ユニット１００と電気的に接続し、両ユニット間でのデータや制御信号の送受信を実行する。
【００３４】
ＣＰＵ１１は、ＲＯＭ１３に格納されたプログラム１３ａに従った制御を実行する。また、ＣＰＵ１１は、撮像ユニット側インタフェース１８、撮像部３０、変換部４０、およびキー信号生成部５０等と、バスライン１５を介して電気的に接続されている。したがって、ＣＰＵ１１は、変換部４０による撮像画像データの変換処理やキー信号生成部５０による前景画像データの生成処理等を、所定のタイミングで実行することができる。
【００３５】
次に、本体ユニット１００について説明する。本体ユニット１００は、撮像ユニット１０からの前景画像データを使用したキー合成を実行する。図１に示すように、本体ユニット１００は、主として、ＲＡＭ１１２と、画像合成部１２０と、表示部１６１と、操作部１６２と、を有している。
【００３６】
ＲＡＭ１１２（記憶部）は、ＲＡＭ１２と同様に、読み書き自在の揮発性メモリである。ＲＡＭ１２には、例えば、背景画像データ１１２ａや、撮像ユニット１０で生成された前景画像データ１１２ｂが記憶可能とされている。
【００３７】
画像合成部１２０は、キー合成処理を実行する処理部であり、ＲＡＭ１１２に予め記憶された背景画像データ１１２ａと撮像ユニット１０側から出力された前景画像データとを、重ね合わせる。
【００３８】
ここで、本実施の形態において、撮像された画像データに基づいて透過画素を設定する処理は、すでに撮像ユニット１０で実行されている。したがって、画像合成部１２０は、前景画像データに含まれるキー信号に基づいて、前景画像データとを背景画像データ１１２ａとを重ね合わせるだけで合成画像データを生成することができる。すなわち、本実施の形態の撮像ユニット１０を使用することにより、本体ユニット１００側での計算コストを低減させることができる。
【００３９】
また、本体ユニット１００側の計算コストを低減させることができるため、演算処理能力が比較的低い画像合成部１２０を使用する場合であっても、合成画像データの生成処理をリアルタイムに実行することができる。
【００４０】
表示部１６１は、例えば液晶ディスプレイによって構成されており、撮像ユニット１０によって撮像された画像データや、キー合成後の合成画像データ等を表示することができる。なお、表示部１６１にタッチパネル機能を持たせ場合、表示部１６１は、本体ユニット１００にデータ入力を実行する入力部としても使用できる。
【００４１】
操作部１６２は、例えばボタンやキーパッド（図示省略）等を有する入力部である。携帯端末システム１の使用者は、表示部１６１の表示内容に基づいた入力作業をすることにより、撮像ユニット１０および本体ユニット１００に対して、所定の動作を実行させることができる。
【００４２】
ＲＯＭ１１３は、読み出し専用メモリである。本体ユニット側インタフェース１１８は、本体ユニット１００を撮像ユニット１０と電気的に接続し、両ユニット間でのデータや制御信号の送受信を実行する。なお、ＲＯＭ１１３は、本体ユニット１００の外付けユニットとされ、本体ユニット１００に対して着脱可能に設けられていてもよい。
【００４３】
ＣＰＵ１１１は、ＲＯＭ１１３に格納されたプログラム１１３ａに従った制御を実行する。また、ＣＰＵ１１１は、本体ユニット側インタフェース１１８、画像合成部１２０、表示部１６１、および操作部１６２等と、バスライン１１５を介して電気的に接続されている。したがって、ＣＰＵ１１１は、画像合成部１２０によるキー合成処理や表示部１６１による表示処理等を、所定のタイミングで実行することができる。
【００４４】
＜２．キー信号生成部の構成＞
図５は、キー信号生成部５０の構成の一例を示すブロック図である。ここでは、図５を参照しつつ、撮像ユニット１０のキー信号生成部５０について説明する。
【００４５】
キー信号生成部５０は、撮像部３０側から入力された撮像画像データについて、この撮像画像データを構成する各画素データと基準データとに基づいたキー信号を生成する。また、キー信号生成部５０は、生成されたキー信号と対応するＲＧＢ形式の画素データとを最小構成単位とする前景画像データ出力する。図５に示すように、キー信号生成部５０は、主として、第１および第２基準データ設定部５１、６１と、第１および第２キー信号設定部５２、６２と、キー信号選択部７１と、キー信号反転部７２と、出力部７３と、を有している。
【００４６】
ここで、基準データは、撮像画像データを構成する画素のうち、対応する背景画像データが嵌め込まれる透過画素を設定する処理において、各画素データとの比較に使用されるデータである。また、基準データは、一定値であってもよいし、一定範囲内の値であってもよい。
【００４７】
第１基準データ設定部５１は、ＹＵＶ形式の撮像画像データのうちの輝度信号（Ｙ）に基づいた基準データＳＤ１を設定する。例えば、基準データＳＤ１は、本体ユニット１００の操作部１６２によって入力された第１基準値ＳＶ１に基づいて、一定値（ＳＤ１＝Ｙ１）、または、一定の範囲（Ｙ２≦ＳＤ１≦Ｙ３）を持つ。
【００４８】
第１キー信号設定部５２は、撮像部３０から出力された撮像画像データの画素データ（第１画素データ）の輝度信号（無彩成分）と、第１基準データ設定部５１によって設定された基準データと、に基づいて各画素データに対応するキー信号値を設定する。
【００４９】
ここで、基準データＳＤ１は、実際に撮像部３０によって撮像された画像データに基づいて設定されてもよい。すなわち、撮像部３０から出力されたＹＵＶ形式の撮像画像データのうち、所定位置（例えば、画像中央部分）の輝度信号（Ｙ）について、これら信号の平均値を演算する。この演算は、例えば、撮像部３０内のイメージセンサ（図示省略）のゲイン値を調整する露出補正部３１によって行われてもよい。そして、第１基準データ設定部５１は、露出補正部３１から出力された輝度信号値（Ｙ）の平均値に基づいて基準データを設定する。この場合においても、基準データは、一定値であってもよいし、一定範囲を持つ値であってもよい。
【００５０】
このように、実際に撮像された画像データが使用される場合、使用者は、本体ユニット１００の表示部１６１に表示された画像に基づいて、輝度キー（ルミナンスキー）用の基準データを設定できる。すなわち、使用者は、輝度信号（Ｙ）の値を意識する必要がない。したがって、使用者は、自己の要求に応じた輝度キーによる重ね合わせ処理を容易に実行することができ、良好な合成画像データを得ることができる。
【００５１】
なお、第１キー信号設定部５２によるキー信号値は、例えば、以下のように設定されてもよい。すなわち、撮像部３０から出力された撮像画像データの各画素について、該画素の輝度信号（Ｙ）が基準データと同一、または、基準データ範囲内となる場合、その画素は透過画素に設定され、キー信号値として「０」が設定される。これに対して、該画素の輝度信号（Ｙ）が基準データと同一でない、または、基準データ範囲外となる場合、その画素は通常の画素とされ、キー信号値として「１」が設定される。
【００５２】
第２基準データ設定部６１は、変換部４０によってＹＵＶ形式の画素データ（第１画素データ）から変換されたＲＧＢ形式の画素データ（第２画素データ）に基づいて、基準データＳＤ２を設定する。例えば、基準データＳＤ２は、本体ユニット１００の操作部１６２によって入力された第２基準値ＳＶ２（Ｒ、Ｇ、Ｂ）（＝（Ｒ１、Ｇ１、Ｂ１））に基づいて、一定値（ＳＤ２（Ｒ、Ｇ、Ｂ）＝（Ｒ１、Ｇ１、Ｂ１））、または、一定の範囲（（Ｒ２、Ｇ２、Ｂ２）≦ＳＤ２（Ｒ、Ｇ、Ｂ）≦（Ｒ３、Ｇ３、Ｂ３））を持つ値として設定される。
【００５３】
第２キー信号設定部６２は、ＲＧＢ形式の画素データ（第２画素データ）と、第２基準データ設定部６１によって設定された基準データと、に基づいて各画素に対応するキー信号値を設定する。
【００５４】
ここで、基準データＳＤ２は、基準データＳＤ１と同様に、実際に撮像部３０によって撮像された画像データに基づいて設定されてもよい。すなわち、第２基準データ設定部６１は、変換部４０から出力されたＲＧＢ形式の撮像画像データについて、Ｒ、Ｇ、Ｂのそれぞれについて平均値を演算する。この平均値演算は、例えば、撮像画像の中央部分に位置する複数の画素データを使用して実行される。そして、第２基準データ設定部６１は、この平均値に基づいて基準データを設定する。この場合においても、基準データは、一定値であってもよいし、一定範囲を持つ値であってもよい。
【００５５】
このように、使用者は、本体ユニット１００の表示部１６１に表示された画像に基づいて基準データを生成することができる。これにより、使用者は、各ＲＧＢ信号の値を意識することなく、本体ユニット１００の表示部１６１に表示された画像によって、クロマキー用の基準データを設定できる。そのため、使用者は、自己の要求に応じたクロマキーによる重ね合わせ処理を、容易に実行することができ、良好な合成画像データを得ることができる。
【００５６】
なお、第２キー信号設定部６２によるキー信号値は、例えば、以下のように設定されてもよい。すなわち、変換部４０で変換された撮像画像データの各画素について、該画素の各色濃度成分（ＲＧＢ信号）が基準データと同一、または、基準データ範囲内となる場合、その画素は透過画素に設定され、キー信号値として「０」が設定される。これに対して、該画素の各色濃度成分が基準データと同一でない、または、基準データ範囲外となる場合、その画素は通常の画素とされ、キー信号値として「１」が設定される。
【００５７】
キー信号選択部７１は、選択制御信号ＳＳに基づき、第１および第２キー信号設定部５２、６２のいずれかより出力されたキー信号を選択する。また、キー信号選択部７１は、選択されたキー信号をキー信号反転部７２側に出力する。例えば、輝度キー用のキー信号が選択されている場合、キー信号選択部７１は、第１キー信号設定部５２からのキー信号をキー信号反転部７２側に出力する。一方、クロマキー用のキー信号が選択されている場合、キー信号選択部７１は、第２キー信号設定部６２からのキー信号をキー信号反転部７２側に出力する。
【００５８】
なお、輝度キー用およびクロマキー用のいずれもが選択されていない場合、キー信号選択部７１は、初期値として「０」（対応する画素を透過画素として設定する場合に該当）を出力する。また、選択制御信号ＳＳは、操作部１６２の操作に基づいて本体ユニット１００側から与えられてもよいし、撮像ユニット１０のディップスイッチ（図示省略）等に基づきに予め設定されていてもよい。
【００５９】
キー信号反転部７２は、キー信号選択部７１からの出力信号と、反転制御信号ＳＲと、について、排他的論理和演算を実行する。また、キー信号反転部７２は、その排他的論理和演算の結果を出力部７３に出力する。例えば、キー信号選択部７１からの出力信号を反転させる場合、キー信号反転部７２には、反転制御信号として「１」が入力される。一方、キー信号選択部７１からの出力信号を反転させずそのまま出力させる場合、キー信号反転部７２には、反転信号として「０」が入力される。
【００６０】
なお、反転制御信号ＳＲは、操作部１６２の操作に基づいて本体ユニット１００側から与えられてもよいし、撮像ユニット１０のディップスイッチ（図示省略）等に基づきに予め設定されていてもよい。
【００６１】
出力部７３は、キー信号反転部７２から入力されたキー信号（例えば、第１キー信号設定部５２または第２キー信号設定部６２で設定されたキー信号）と、対応する画素データ（第２画素データ）と、を最小単位とする前景画像データを出力する。これにより、本体ユニット１００には、各画素について、１ビットのキー信号と、５ビットのＢ信号と、５ビットのＧ信号と、５ビットのＲ信号と、から構成された画像データが入力可能とされる。
【００６２】
＜３．本実施の形態の撮像ユニットおよび携帯端末システムの利点＞
以上のように、本実施の形態の撮像ユニット１０および携帯端末システム１は、撮像部３０によって撮像され、ＲＧＢ形式に変換された画素データと、キー信号生成部５０によるキー信号と、を最小単位とする前景画像データを生成し、本体ユニット１００側に出力することができる。これにより、本体ユニット１００は、キー信号を生成する必要がなく、前景画像データと背景画像データとを重ね合わせる処理を実行するだけで両画像データから合成画像データを生成することができる。そのため、本体ユニット１００側の計算コストを低減させることができる。
【００６３】
＜４．変形例＞
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
【００６４】
（１）本実施の形態において、撮像ユニット１０のプログラム１３ａ、および本体ユニット１００のプログラム１１３ａは、それぞれ読み出し専用のＲＯＭ１３、およびＲＯＭ１１３に格納されているが、これに限定されるものでない。例えば、ＲＯＭ１３、１１３として、読み書き自在の不揮発性メモリであるフラッシュメモリが使用されてもよい。
【００６５】
（２）また、本実施の形態において、背景画像データは、ＲＡＭ１１２に記憶されているものとして説明したが、記憶場所はＲＡＭ１１２に限定されない。例えば、背景画像データは、本体ユニット１００に設けられた他の記憶装置（例えば、ハードディスクドライブ等の大容量記憶装置やＳＤメモリカード等のフラッシュメモリカード）に記憶されていてもよい。
【００６６】
（３）また、本実施の形態において、前景画像データの各画素データは、１ビットのキー信号と、５ビットのＢ信号と、５ビットのＧ信号と、５ビットのＲ信号と、から構成されているものとして説明したが、これに限定されるものでない。例えば、ＲＧＢの各信号は、８ビットの情報量を有していてもよい。
【００６７】
（４）また、本実施の形態において、キー信号値が「０」のときに、背景画像データの対応する画素が透過し、キー信号値が「１」のときに、背景画像データの対応する画素が非透過となるものとして説明したが、これに限定されるものでない。例えば、キー信号値が「１」のとき、前景画像データの画素が所定の透過率で透かされ、背景画像データの対応する画素が見えるようにされてもよい。
【００６８】
（５）また、キー信号の情報量は１ビットであるものとして説明したが、これに限定されるものでなく、２ビット以上であってもよい。この場合、キー信号値に応じて、前景画像データの透過率が設定されてもよい。例えば、キー信号値の情報量が２ビットである場合において、キー信号値が「０」、「１」、「２」、および「３」となる場合、それぞれ「透過」、「非透過」、「透過率３０％」、および「透過率６０％」のように設定されてもよい。
【００６９】
（６）また、本実施の形態において、撮像ユニット１０は、ＣＰＵ１１を有するものとして説明したが（図１参照）、これに限定されない。図６は、携帯端末システム３００の構成の一例を示すブロック図である。図６中の構成要素のうち、図１中の構成要素と同一のものについては、同一番号の符号を付しており、ここでは説明を省略する。
【００７０】
このように、ＣＰＵを有しない撮像ユニット３１０を使用した携帯端末システム３００であっても、撮像部３０により撮像されてＲＧＢ形式に変換された画素データと、キー信号生成部５０によるキー信号と、を最小単位とする前景画像データを生成することができる。そのため、携帯端末システム１と同様に、合成画像データの生成に関して、本体ユニット１００側の計算コストを低減させることができる。
【００７１】
（７）さらに、本実施の形態において、撮像ユニット１０は、本体ユニット１００に対して着脱可能とされており、両ユニット１０、１００は、別個のユニットであるものとして説明したが、これに限定されるものでない。
【００７２】
図７は、携帯端末装置２００の構成の一例を示すブロック図である。図７中の構成要素のうち、図１中の構成要素と同一のものについては、同一番号の符号を付しており、ここでは説明を省略する。一体的に構成された携帯端末装置２００は、図１中の撮像ユニット１０で実現される撮像機能、変換機能、およびキー信号生成機能と、図１中の本体ユニット１００で実現される画像合成機能、表示機能、および操作機能とを、実行可能とされている。また、携帯端末装置２００は、携帯端末システム１と同様に、持ち運び可能なサイズおよび重量とされている。
【００７３】
これにより、携帯端末装置２００は、ＲＧＢ形式の画素データに基づいてキー信号値を設定する処理と、ＹＵＶ形式の画素データのうち輝度信号（Ｙ）に基づいてキー信号値を設定する処理と、を切り替えて実行することができる。そのため、携帯端末装置２００によっても、撮像画像データの状況に応じて最適な重ね合わせ処理を実行することができ、良好な合成画像データを得ることができる。
【図面の簡単な説明】
【００７４】
【図１】本発明の実施の形態における携帯端末システムの構成の一例を示すブロック図である。
【図２】キー合成で使用される撮像画像データの一例を示す図である。
【図３】キー合成で使用される背景画像データの一例を示す図である。
【図４】キー合成による合成画像データの一例を示す図である。
【図５】キー信号生成部の構成の一例を示すブロック図である。
【図６】携帯端末システムの構成の他の例を示すブロック図である。
【図７】携帯端末装置の構成の一例を示すブロック図である。
【符号の説明】
【００７５】
１、３００  携帯端末システム
１０、３１０  撮像ユニット
３０  撮像部
４０  変換部
５０  キー信号生成部
５１  第１基準データ設定部
５２  第１キー信号設定部
６１  第２基準データ設定部
６２  第２キー信号設定部
７１  キー信号選択部
７２  キー信号反転部
７３  出力部
１００  本体ユニット
１１２ａ  背景画像データ
１１２ｂ  前景画像データ
１２０  画像合成部
２００  携帯端末装置
【図１】
2008205871.tif 000003
【図２】
2008205871.tif 000004
【図３】
2008205871.tif 000005
【図４】
2008205871.tif 000006
【図５】
2008205871.tif 000007
【図６】
2008205871.tif 000008
【図７】
2008205871.tif 000009