(57)【要約】【課題】ユーザ個別の嗜好を考慮しつつ、好適に映像情報を出力する技術を提供する。【解決手段】  映像情報を受信して出力する映像情報出力装置であって、前記映像情報と、前記映像情報の映像の中で個別映像に差し替えるべき領域を示すステンシル信号とを受信する受信部と、前記個別映像を生成する個別映像生成部と、前記個別映像を前記映像情報に合成する合成部と、出力部と、を備え、前記出力部は、前記個別映像生成部で生成した前記個別映像を前記ステンシル信号に基づいて前記映像情報に合成した映像情報を出力することを特徴とする。【選択図】  図１
2014027378.tif 000002
【特許請求の範囲】
【請求項１】
映像情報を受信して出力する映像情報出力装置であって、
前記映像情報と、前記映像情報の映像の中で個別映像に差し替えるべき領域を示すステンシル信号とを受信する受信部と、
前記個別映像を生成する個別映像生成部と、
前記個別映像を前記映像情報に合成する合成部と、
出力部と、を備え、
前記出力部は、前記個別映像生成部で生成した前記個別映像を前記ステンシル信号に基づいて前記映像情報に合成した映像情報を出力する
ことを特徴とする映像情報出力装置。
【請求項２】
請求項１に記載の映像情報出力装置であって、
前記受信部で受信する映像情報は、前記ステンシル信号に基づいて送信装置側で前記個別映像とは異なる映像を合成された情報であり、
前記出力部は、前記個別映像を前記受信部で受信した映像情報に合成した映像情報、または、前記受信部で受信した映像情報を出力することが可能である
ことを特徴とする映像情報出力装置。
【請求項３】
請求項１または２に記載の映像情報出力装置であって、
前記受信部は、再生時刻を同期させるための同期信号をさらに受信し、
前記合成部は、受信した前記同期信号に基づいて前記合成を行う
ことを特徴とする映像情報出力装置。
【請求項４】
映像情報を受信して出力する映像情報出力装置における映像情報出力方法であって、
前記映像情報と、前記映像情報の映像の中で個別映像に差し替えるべき領域を示すステンシル信号とを受信する受信ステップと、
前記個別映像を生成する個別映像生成ステップと、
前記個別映像を前記映像情報に合成する合成ステップと、
出力ステップと、を有し、
前記出力ステップにおいて、前記個別映像生成ステップで生成した前記個別映像を前記ステンシル信号に基づいて前記映像情報に合成した映像情報を出力する
ことを特徴とする映像情報出力方法。
【請求項５】
請求項４に記載の映像情報出力方法であって、
前記受信ステップで受信する映像情報は、前記ステンシル信号に基づいて送信装置側で前記個別映像とは異なる映像を合成された情報であり、
前記出力ステップにおいて、前記個別映像を前記受信ステップで受信した映像情報に合成した映像情報、または、前記受信ステップで受信した映像情報を出力することが可能である
ことを特徴とする映像情報出力方法。
【請求項６】
請求項４または５に記載の映像情報出力方法であって、
前記受信ステップにおいて、再生時刻を同期させるための同期信号をさらに受信し、
前記合成ステップにおいて、受信した前記同期信号に基づいて前記合成を行う
ことを特徴とする映像情報出力方法。
【請求項７】
映像情報を送信する送信装置と、送信された前記映像情報を受信して出力する受信装置とを含むシステムであって、
前記送信装置は、
前記映像情報を生成する映像情報生成部と、
前記映像情報の映像の中で個別映像に差し替えるべき領域を示すステンシル信号を生成するステンシル信号生成部と、
前記映像情報と前記ステンシル信号とを送信する送信部と、を備え、
前記受信装置は、
前記映像情報と前記ステンシル信号とを受信する受信部と、
前記個別映像を生成する個別映像生成部と、
前記個別映像を前記映像情報に合成する合成部と、
出力部と、を備え、
前記出力部は、前記個別映像生成部で生成した前記個別映像を前記ステンシル信号に基づいて前記映像情報に合成した映像情報を出力する
ことを特徴とするシステム。
【請求項８】
請求項７に記載のシステムであって、
前記受信装置の前記受信部で受信する映像情報は、前記ステンシル信号に基づいて前記送信装置側で前記個別映像とは異なる映像を合成された情報であり、
前記受信装置の前記出力部は、前記個別映像を前記受信部で受信した映像情報に合成した映像情報、または、前記受信部で受信した映像情報を出力することが可能である
ことを特徴とするシステム。
【請求項９】
請求項７または８に記載のシステムであって、
前記送信装置における前記送信部は、再生時刻を同期させるための同期信号をさらに送信し、
前記受信装置における前記受信部は、前記同期信号をさらに受信し、
前記受信装置における前記合成部は、受信した前記同期信号に基づいて前記合成を行う
ことを特徴とするシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像情報出力装置、映像情報出力方法、及び、システムに関する。
【背景技術】
【０００２】
従来の地上デジタル放送等で放送されるテレビ番組や、光ディスク等の蓄積メディアに記録されて販売される映像コンテンツは、基本的には多数のユーザが同一の内容を視聴するものであり、いわゆるマスコンテンツと呼ばれている。近年、このような画一的なコンテンツに対して映像合成技術を用いてユーザ毎にカスタマイズを行って、ユーザ個別の嗜好に適合させたり、臨場感を向上させたり、あるいは、広告の宣伝効果を高めたりするための方法が提案されている。
【０００３】
また、複合現実感(Mixed Reality、以降MR)や拡張現実感(Augmented Reality、以降AR)と呼ばれる技術分野では、コンピュータグラフィックス(以降CG)技術やセンシング技術の発達によって、現実世界と仮想世界を融合したり、現実世界に付加情報を提示したりすることが、より自然に行えるようになってきている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−９２５５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１では、仮想ビデオメタデータに基づいてレンダリングされたデジタルコンテンツオブジェクトを、一種類の中立的な動画ビデオコンテンツに重畳することで、ユーザ毎に個別の異なった動画ビデオコンテンツを提供可能なARビデオシステムが開示されている。
【０００６】
しかしながら、特許文献１の技術では、仮想的な物体は画面の最前面に合成表示されるため、仮想物体より手前に表示されるべき現実物体があっても仮想物体に隠されてしまうという遮蔽矛盾(またはオクルージョンの問題)が発生する。また、このような個別コンテンツを放送や蓄積媒体を通して多数の視聴者に配信する場合には、仮想物体の合成表示機能に対応していない従来の表示装置が市場には多数残っているというレガシー機器の問題もある。このような非対応表示装置では、仮想物体が合成されるべき空間には何も存在しないように表示されてしまうため、強い違和感があったり、そもそもコンテンツの視聴が意味をなさなかったりする。
【０００７】
本発明は上記のような課題を解決するためになされたものであり、その目的は、ユーザ個別の嗜好を考慮しつつ、好適に映像情報を出力する技術を提供することにある。
【課題を解決するための手段】
【０００８】
上記の課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、映像情報を受信して出力する映像情報出力装置であって、前記映像情報と、前記映像情報の映像の中で個別映像に差し替えるべき領域を示すステンシル信号とを受信する受信部と、前記個別映像を生成する個別映像生成部と、前記個別映像を前記映像情報に合成する合成部と、出力部と、を備え、前記出力部は、前記個別映像生成部で生成した前記個別映像を前記ステンシル信号に基づいて前記映像情報に合成した映像情報を出力することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、ユーザ個別の嗜好を考慮しつつ、好適に映像情報を出力する技術を提供することができる。
【図面の簡単な説明】
【００１０】
【図１】実施例１の映像コンテンツ合成システムの構成図である。
【図２】実施例１の映像コンテンツ合成システムの番組放送設備におけるスタジオ撮影の概観図である。
【図３】実施例１の送信側での映像合成手順を示すフロー図である。
【図４】実施例１で送信される放送信号のフォーマット図である。
【図５】実施例１の受信側での映像合成手順を示すフロー図である。
【図６】実施例２の映像コンテンツ合成システムの構成図である。
【図７】実施例２の映像コンテンツ合成システムの番組放送設備におけるスタジオ撮影の概観図である。
【図８】実施例２の送信側での映像合成手順を示すフロー図である。
【図９】実施例２の受信側での映像合成手順を示すフロー図である。
【発明を実施するための形態】
【００１１】
以下に本発明の一実施形態を図面等を用いて説明する。なお、以下の説明は、本発明の一実施形態を説明するためのものであり、本願発明の範囲を制限するものではない。従って、当業者であればこれらの各要素若しくは全要素をこれと均等なものに置換した実施形態を採用することが可能であり、これらの実施形態も本願発明の範囲に含まれる。
【実施例１】
【００１２】
図１乃至図５によって、本発明の実施例１を説明する。
図１は、本実施例に係る映像コンテンツ合成システムの構成図であり、送信側として放送局におけるスタジオ撮影を伴う番組放送設備１００と、受信側としてこの放送を受信し表示する受信装置１５０から構成されている。
図２は本実施例に係る番組放送設備１００におけるスタジオ撮影の状況を示した概観図である。スタジオにはブルースクリーン２２０が設置されており、後述するようにブルースクリーン２２０の領域には受信装置毎に個別の映像を仮想的に合成する。
図３は送信側での映像合成手順を示すフロー図であり、図４は放送信号のフォーマット図であり、図５は受信側での映像合成手順を示すフロー図である。
【００１３】
図１において、番組放送設備１００は、カメラ１０１、キー抽出部１０２、標準スクリーン映像生成部１０３、射影変換部１０４、マスク合成部１０５、撮影条件検出センサ１０６、変換係数算出部１０７、エンコーダ１１１乃至１１４、マイク１２０、多重化器１３０、送信部１４０と送信アンテナ１４１から構成される。
また受信装置１５０は、受信アンテナ１５１、受信部１５２、多重分離器１５３、スピーカ１５４、液晶表示パネル１５５、デコーダ１６１乃至１６４、個別画面生成部１７０、射影変換部１７１、マスク合成部１７２から構成されている。
【００１４】
カメラ１０１は、図２に示すスタジオ内に設置されており、出演者２０１、および２０２と、ブルースクリーン２２０を撮影し、図３の撮影映像３０１を得る。撮影映像３０１には、ブルースクリーン２２０の前を部分的に遮る形で、出演者２０１、２０２が写っている。
ここで、ブルースクリーン２２０は、全面が青色に塗りつぶされた矩形のスクリーンである。この青色をキー抽出部１０２で抽出することによって、図３のステンシル映像３０２が得られる。ステンシル映像３０２は、出演者２０１、２０２によって遮られた部分を除いたブルースクリーン２２０の領域のみを値１とし、その他を値０とした二値画像である。
【００１５】
なお、ブルースクリーン２２０の色は、一般的には出演者２０１、２０２の肌色と補色関係にある青色が用いられることが多いが、他にも良好なキー抽出結果を得られるものとして、緑色なども用いられることがある。また、特定の色をキーとする代わりに、再帰性反射材でできたスクリーンに対してカメラ１０１から赤外線光を投射し、その反射光を赤外線センサで撮影した輝度をキーとしても、同様にステンシル映像３０２を生成することができる。
【００１６】
さて、このブルースクリーン２２０の領域には、後述するように本実施例に係るシステムに対応した受信装置で情報を受信すれば、各受信装置毎に個別の異なる映像が合成されて表示される。一方、本実施例に係るシステムに対応していない従来型の受信装置で情報を受信した場合には、ブルースクリーン２２０の青色がそのまま表示されてしまうため非常に違和感のある映像となってしまう。そこで、この違和感を無くすために、送信側では次の手順によって予め全ての受信装置に共通の標準映像を合成し、これを放送するようにする。
【００１７】
まず、標準スクリーン映像生成部１０３において、全受信装置共通の標準スクリーン映像３０３を生成する。例えば天気予報番組であれば全国の天気の情報画面であったり、あるいは株式情報番組であれば全銘柄の平均株価の情報画面などであったりする。この標準スクリーン映像３０３は、ブルースクリーン２２０と相似な矩形である。
【００１８】
次に、射影変換部１０４において、標準スクリーン映像３０３の見た目が自然に映るように変形を行う。矩形であるブルースクリーン２２０をカメラ１０１で撮影すると、その画像は射影変換された四角形となる。その変換係数(ホモグラフィ行列)は、変換係数算出部１０７において、カメラ１０１に取り付けられた撮影条件検出センサ１０６が取得したカメラ１０１の空間位置座標や方向、画角等のパラメータと、予め知られているブルースクリーン２２０の座標や大きさのパラメータから求めることができる。この変換係数を用いて、標準スクリーン映像３０３を射影変換部１０４で射影変換すれば、標準スクリーン合成用映像３０４が得られる。
【００１９】
以上得られた撮影映像３０１、ステンシル映像３０２、標準スクリーン合成用画像３０４を、マスク合成部１０５で合成して、標準放送映像３１０を生成する。ここでマスク合成部１０５では、ステンシル映像３０２が値０である画素については撮影画像３０２を出力し、値１である画素については標準スクリーン合成用映像３０４を出力することで、ブルースクリーン２２０の部分が標準スクリーン合成用映像３０４に置き換えられて、かつ、スクリーンの前にいる出演者２０１、２０２によって遮られた部分が正しく遮蔽された動画像を得ることができる。
【００２０】
なお、以上の説明ではステンシル映像３０２を二値画像として、単純に撮影画像３０１と標準スクリーン合成用映像３０４を切り替えて出力するようにしたが、この他にもステンシル映像３０２の輪郭部では両者の画像を混合してボカすようにしたり、あるいはステンシル映像３０２を多値画像として両者の合成量を調整するようにして、合成部分の輪郭がより自然に見えるような構成にしても良い。
【００２１】
また、前述したような再帰性反射材のスクリーンと赤外線光を利用してステンシル映像３０２を生成するようにした場合には、スクリーン上に可視光の模様を描くことも可能なので、上述したマスク合成処理を行わずに、カメラ１０１で撮影した撮影映像３０１をそのまま標準放送映像３１０として利用するようにしても良い。
【００２２】
続いて、これらの映像等をエンコーダ１１１乃至１１４で符号化し、多重化器１３０でパケット多重化して、図４に示すＭＰＥＧ-２(Moving Picture Expert Group-２)トランスポートストリームを出力する。
【００２３】
図４において、４０１乃至４０４は１８８バイトの固定長のパケットであり、全体でＭＰＥＧ-２トランスポートストリーム４００を構成している。パケット４０１は、標準放送映像３１０をエンコーダ１１２で動画圧縮して得られるＭＰＥＧ２-Videoストリームから生成され、パケット４０２はマイク１２０で録音された音声信号をエンコーダ１１１で音声圧縮したＭＰＥＧ-ＡＡＣ(Advanced Audio Coding)ストリームから生成されている。
また、パケット４０３はステンシル映像３０２をエンコーダ１１３で動画圧縮して得られるＭＰＥＧ２-Ｖｉｄｅｏストリームから生成され、パケット４０４は射影変換部１０４で用いた変換係数(ホモグラフィ行列)の３x３の行列要素をエンコーダ１１４でＸＭＬ(eXtensible Markup Language)文書化したＭＰＥＧ-７のメタデータストリームである。
それぞれのデータにはＰＥＳ(Packetized Elementary Stream)の形でタイムスタンプが付加されており、基準クロック信号ＰＣＲ(Program Clock Reference)と同期がとられるようになっている。
【００２４】
なお、ここではステンシル映像３０２の符号化方式として標準放送映像３１０と同様のＭＰＥＧ２-Ｖｉｄｅｏで別々のストリームとして符号化する例を説明したが、他にもＨ.２６４方式のauxiliary coded picturesのように、撮影放送映像３１０の画素のアルファチャネル(透過成分)として一つのストリームとして符号化する方法でも良い。また、ＭＰＥＧ-Ｃ ｐａｒｔ３やＨ.２６４-ＭＶＣ(Multi View coding)のように、複数の映像を互いに関連させた形で符号化する方法を用いても良い。
いずれの場合においても、本合成システムに対応していない従来型の受信装置では標準放送映像３１０のみがデコードできるように前方互換性を確保した形で符号化することが望ましい。
【００２５】
以上のようにして得られたＭＰＥＧ-２トランスポートストリーム４００は、デジタル放送送信部１４０に送られて、誤り訂正符号化やＯＦＤＭ(Orthogonal Frequency Division Multiplexing)デジタル変調化等の処理を受けてＩＳＤＢ-Ｔ(Integrated Services Digital Broadcasting-Terrestrial)方式の地上デジタルテレビ放送信号として、送信アンテナ１４１から送信される。
【００２６】
次に受信装置１５０の処理について説明する。受信アンテナ１５１で受信した放送信号を受信部１５２においてデジタル復調、誤り訂正等を行って元のＭＰＥＧ-２トランスポートストリーム４００に戻す。これを多重分離器１５３で多重分離し、分離された音声、ステンシル映像、標準放送映像、および撮影条件パラメータの各ストリームをそれぞれ対応するデコーダ１６１乃至１６４で復号する。
【００２７】
音声については、音声デコーダ１６１で復号した音声はそのままスピーカ１５４で出力されるが、映像については、図５に示す手順に従って、受信装置毎に異なる画像を合成した個別の映像を生成し、これを表示部１５５に表示する。
【００２８】
まず、個別画面生成部１７０では、ユーザによって予め設定された情報に従って個別の個別スクリーン映像５０３を生成する。例えば、天気予報番組を視聴中であればユーザが居住している地域の詳細天気情報であったり、株式情報番組であればユーザが購入している特定銘柄の値動き情報であったりする。個別スクリーン映像５０３は、ブルースクリーン２２０と相似な矩形である。
【００２９】
次に、射影変換部１７１において、個別スクリーン映像５０３の見た目が自然に映るように送信側の射影変換部１０４と同様の射影変換を行って、個別スクリーン合成用映像５０４を得る。このときの変換係数は、デコーダ１６４で復号したＭＰＥＧ-７メタデータのＸＭＬ文書から取り出したホモグラフィ行列の３x３の行列要素である。
【００３０】
このようにして生成した個別スクリーン合成用映像５０４と、デコーダ１６３および１６４でそれぞれ復号した標準放送映像３１０、ステンシル映像３０２を、マスク合成部１７２で合成して、個別表示映像５１０を生成する。
【００３１】
ここでマスク合成部１７２は、送信側のマスク合成部１０５と同様に、ステンシル映像３０２が値０である画素については標準放送映像３１０を出力し、値１である画素については個別スクリーン合成用映像５０４を出力する。
【００３２】
以上説明したような番組放送設備１００と受信装置１５０で構成された映像コンテンツ合成システムによれば、ブルースクリーン２２０の部分をユーザ個別の嗜好に適合する個別スクリーン合成用映像５０４で置き換えた個別映像コンテンツを提供することができ、また、従来型の非対応受信装置で受信するユーザに対しては、共通の標準スクリーン合成用映像３０４で置き換えた共通映像コンテンツを提供することができる。なお、本実施例に対応した受信装置１５０においても、個別スクリーン合成用映像５０４に置き換えず、共通の標準スクリーン合成用映像３０４で置き換えた共通映像コンテンツを提供する制御は可能である。
【００３３】
また、いずれの場合でも、ブルースクリーン２２０の前にいる出演者２０１、２０２によって遮られた部分が正しく遮蔽された動画像を得ることができるので、自然で臨場感のあるコンテンツを提供することができる。
【００３４】
なお、上記の説明では、射影変換部１７１の変換に用いる変換係数として、送信側で使用した変換係数を符号化して受信側に伝達したが、この他にも、ブルースクリーン２２０の４頂点の座標とそれを撮影した二次元画像中の対応する４頂点の座標を伝達しても良い。また、カメラ１０１の空間位置座標や方向、画角等、および、ブルースクリーン２２０の座標や大きさのパラメータの形で伝達しても良い。このときブルースクリーン２２０の大きさ等の固定的な情報は、予めＭＰＥＧ-２のＳＩ(Service Information)情報の形で事前に伝達するようにしても良い。
【００３５】
また、コンテンツ生成側と再生側はデジタル放送の送信側と受信側として説明したが、これをインターネット経由の通信の送受信で行っても良い。この他にも、送信側で生成したＭＰＥＧ-２トランスポートストリームを光ディスクに記録して販売し、そのディスクを購入したユーザが光ディスク再生装置で再生してコンテンツを表示するようにしても良い。
【００３６】
また、本実施例においてはスピーカ１５４及び表示部１５５が受信装置１５０に組み込まれた構成を例にして説明したが、例えばレコーダのように、外部のスピーカや表示部に、出力部を介して情報を出力するように構成しても良い。
【実施例２】
【００３７】
図６乃至図９を用いて、本発明の実施例２を説明する。図６は本実施例に係る映像コンテンツ合成システムの構成図であり、図７は番組撮影時のスタジオ概観図であり、図８は送信側の映像合成手順を示すフロー図であり、図９は受信側の映像合成手順を示すフロー図である。図６、７、８、９はそれぞれ実施例１の図１、２、３、５に対応しており、同一の部分には同一符号を付して重複する説明を省略する。
【００３８】
本実施例は、送信側では例えば仮想ペットとして振舞うロボット等の動く物体を撮影して情報を送信し、受信装置毎に個別の映像をこの物体の画像に重ね合わせて表示することにより、例えばユーザ毎の嗜好にあわせた仮想ペット等がスタジオ内で自然に振舞う映像を提供することを目的としたものである。以下、動く物体をロボット６００を例にとって説明する。
【００３９】
図６において、ロボット６００は前面が青色に塗られており、その位置座標や手足の姿勢等の動きはシナリオ生成部６０１で生成された動作パターンに従ってロボット制御部６０２から制御されている。ロボット６００は図７のスタジオ内で、例えば出演者２０１から頭を撫でられる等の相互干渉を行っている様子をカメラ１０１で撮影されており、その撮影映像が図８の撮影映像８０１である。ここで撮影映像８０１の青色成分をキー抽出部１０２で抽出するとステンシル映像８０２が得られる。
【００４０】
一方、非対応受信装置のための標準テクスチャ映像８０４は、撮影条件検出センサ１０６が取得したカメラ１０１の空間位置座標や方向、画角等の撮影パラメータと、シナリオ生成部６０１で決定したロボットの座標、姿勢等のモデルパラメータを用いて標準テクスチャ生成部６０３で例えば白色のペルシャ猫のＣＧとして生成される。
【００４１】
これらの撮影映像８０１、ステンシル映像８０２、および標準テクスチャ映像８０４は、マスク合成部１０５において合成されて、標準放送映像８１０となる。実施例１と同様に、非対応受信装置ではこの標準放送映像が再生されることになる。また、テクスチャを生成するための使用したカメラ１０１の撮影パラメータとロボット６００の制御パラメータは、エンコーダ１１４でＢＭＬ文書化されて放送に多重される。
【００４２】
一方、本システムに対応した受信装置においては、ユーザが予め自分の好みの個別テクスチャを準備しておく。個別テクスチャは、例えばカメラ６９０によってユーザが自分の飼っている本物の三毛猫の画像を撮影して、写真記憶部６９１に格納しておく。この個別テクスチャを、デコーダ１６４でデコードしたカメラ１０１の撮影パラメータとロボット６００の制御シナリオによって加工して、図９の個別テクスチャ映像９０４を生成する。
この個別テクスチャ映像９０４を、標準放送映像８１０、ステンシル映像８０２と併せてマスク合成部１７２で合成して、表示部１５５に表示する。
【００４３】
以上説明したような番組放送設備６１０と受信装置６５０で構成された映像コンテンツ合成システムによれば、スタジオのブルーロボットの部分がユーザ毎に個別テクスチャに置き換わった立体的な個別映像コンテンツを提供することができ、また、従来型の非対応受信装置で受信するユーザに対しては、共通の標準テクスチャで置き換えた共通映像コンテンツを提供することができる。
また、いずれの場合でも、ブルーロボットと相互干渉する出演者２０１によって遮られた部分が正しく遮蔽された動画像を得ることができるので、自然で臨場感のあるコンテンツを提供することができる。
【００４４】
なお、ここでは個別テクスチャとして実際に撮影した映像を加工して用いる例を説明したが、この他にもインターネットからダウンロードしたＣＧモデルからＣＧ映像を生成するようにしてもでも良い。
【００４５】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。 
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【００４６】
１０１    カメラ
１０２    キー抽出部
１０３    標準スクリーン映像生成部
１０６    撮影条件検出センサ
１０７    変換係数算出部
１４０    送信部
１５２    受信部
１７０    個別画面生成部
１７２    マスク合成部
【図１】
2014027378.tif 000003
【図２】
2014027378.tif 000004
【図３】
2014027378.tif 000005
【図４】
2014027378.tif 000006
【図５】
2014027378.tif 000007
【図６】
2014027378.tif 000008
【図７】
2014027378.tif 000009
【図８】
2014027378.tif 000010
【図９】
2014027378.tif 000011