(57)【要約】【課題】  正常な背景置換処理が実施される背景置換装置および撮影システムを提供する。【解決手段】  ２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得する画像取得部と、一連の撮影画像のそれぞれについて撮影条件が２種類の撮影条件のうちのいずれであるかを判別する条件判別部と、一連の撮影画像の並びの中で交互に撮影条件が替わりながら並んだ、各々が撮影画像を１つ以上含みそれら１つ以上の撮影画像については撮影条件が共通した複数の画像群のうち互いに隣接した２つの画像群それぞれから撮影画像を選んで組み合わせて撮影画像対を決める撮影画像選出部と、撮影画像対を成す２つの撮影画像に基づいて該撮影画像中の背景を他の背景と置換する背景置換部とを備えた。【選択図】        図７
2010093503.tif 000002
【特許請求の範囲】
【請求項１】
被写体を照らす光の状態が異なる２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得する画像取得部と、
前記一連の撮影画像のそれぞれについて画像解析を行い、各撮影画像が得られたときの撮影条件が前記２種類の撮影条件のうちのいずれであるかを判別する条件判別部と、
前記一連の撮影画像の並びの中で交互に前記撮影条件が替わりながら並んだ、各々が前記撮影画像を１つ以上含みそれら１つ以上の撮影画像については前記撮影条件が共通した複数の画像群のうち互いに隣接した２つの画像群それぞれから撮影画像を選んで組み合わせて撮影画像対を決める撮影画像選出部と、
前記撮影画像対を成す２つの撮影画像に基づいて該撮影画像中の背景を他の背景と置換する背景置換部とを備えたことを特徴とする背景置換装置。
【請求項２】
前記条件判別部が、前記画像解析を、前記撮影画像中の色分布に基づいて行うものであることを特徴とする請求項１記載の背景置換装置。
【請求項３】
前記条件判別部が、前記画像解析を、前記撮影画像中の輝度に基づいて行うものであることを特徴とする請求項１記載の背景置換装置。
【請求項４】
前記撮影画像選出部は、前記撮影画像を選ぶに当たり、同一の撮影画像の複数回の選択が禁止されたものであることを特徴とする請求項１記載の背景置換装置。
【請求項５】
前記撮影画像選出部は、前記撮影画像を選ぶに当たり、同一の画像群に属する複数の撮影画像の選択が禁止されたものであることを特徴とする請求項１記載の背景置換装置。
【請求項６】
前記画像郡中に含まれる撮影画像についてシーンの同一性を判別するシーン判別部を備え、
撮影画像選出部は、前記撮影画像を選ぶに当たり、シーンが同一の複数の撮影画像の選択が禁止されたものであることを特徴とする請求項１記載の背景置換装置。
【請求項７】
前記画像取得部は、被写体を撮影する撮影装置とは該被写体を挟んで反対側から該被写体を照らした逆光撮影条件と、該撮影装置と同じ側から該被写体を照らした順光撮影条件との２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得するものであることを特徴とする請求項１から６のうちのいずれか１項記載の背景置換装置。
【請求項８】
被写体を撮影し、画素値の集合で画像を表現した形式で撮影画像を得る撮影装置；
被写体を照らす光の状態が異なる２種類の撮影条件を作り出す照明装置；および
被写体を照らす光の状態が異なる２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得する画像取得部と、
前記一連の撮影画像のそれぞれについて画像解析を行い、各撮影画像が得られたときの撮影条件が前記２種類の撮影条件のうちのいずれであるかを判別する条件判別部と、
前記一連の撮影画像の並び中で交互に前記撮影条件が替わりながら並んだ、各々が前記撮影画像を１つ以上含みそれら１つ以上の撮影画像については前記撮影条件が共通した複数の画像群のうち互いに隣接した２つの画像群それぞれから撮影画像を選んで組み合わせて撮影画像対を決める撮影画像選出部と、
前記撮影画像対を成す２つの撮影画像に基づいて該撮影画像中の背景を他の背景と置換する背景置換部とを備えた背景置換処理装置；
を備えたことを特徴とする撮影システム。
【請求項９】
前記画像取得部は、被写体を撮影する撮影装置とは該被写体を挟んで反対側から該被写体を照らした逆光撮影条件と、該撮影装置と同じ側から該被写体を照らした順光撮影条件との２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得するものであることを特徴とする請求項８記載の撮影システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影して撮影画像を取得し、その撮影画像中の背景を別の背景に置換して背景置換画像を作成する背景置換装置、および、この背景置換画像の作成に好適な撮影システムに関する。
【背景技術】
【０００２】
従来、写真館等では、背景幕を使った撮影が行なわれていることが多い。しかし、このような撮影は、背景を確実に作り出すための大きな背景幕や広い撮影スペースを必要とする。また、背景幕の交換等には手間がかかり、結果的に撮影コストが高くなる。
【０００３】
そこで、従来のような大きな背景幕や広い撮影スペースがなくても、従来と遜色ない雰囲気の写真が撮れる、小型で簡易の撮影システムが提案されている。
【０００４】
この撮影システムでは、適当な背景をバックに撮影が行なわれ、撮影で得られた撮影画像に対して、撮影画像中の背景を顧客が所望する背景に差替えるという背景置換処理が行われている。
【０００５】
このような背景置換処理に関する技術の一例として、例えば、青色等に塗られた背景パネル等を被写体の背後に配置して撮影を行ない、その撮影で得られた撮影画像において、背景パネルの色と同色の部分と、異なる色の部分とを、それぞれ撮影画像中の背景と被写体として区別し、撮影画像中の背景に区別された部分を所望の背景に置換するクロマキー処理と呼ばれる処理が知られている。
【０００６】
しかしながら、このクロマキー処理では、撮影画像中の背景パネル上に被写体の影が写っていると、この影が、被写体と背景との区別を妨げてしまうことがある。そこで、クロマキー処理の対象となる撮影画像を撮影する際には、背景として、面発光する背景パネルを用いることで、背景パネル上の被写体の影を、この背景パネルが発する光で打ち消すという技術が提案されている（例えば、特許文献１参照。）。
【０００７】
上記クロマキー処理を含めて、従来の背景置換処理では、被写体がきれいに写ることに主眼が置かれた撮影光条件の下で撮影された撮影画像が用いられて、その撮影画像中の被写体と背景との区別を行うことが多いが、そのような撮影光条件下で得られた撮影画像自体は、そもそも、被写体と背景との区別に適さない画像であることが多い。
【特許文献１】特開２０００−２２４４１０号公報（第３−１０頁、図３）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
そのため、撮影画像中の被写体と背景とを良好に区別するためには、被写体がきれいに写っている撮影画像を含む、互いに相違する複数の撮影光条件下で撮影された複数の撮影画像がある方が望ましく、また、それら複数の撮影光条件の相違は極端な方が望ましい。
【０００９】
ところで、それら撮影光条件が異なる２種類の写真撮影の際、各シーン毎にそれら２種類の撮影画像が１枚ずつ交互に撮影されれば、これら一連の撮影画像を受信した背景置換装置における背景置換処理は、送信されてきた撮影画像を撮影された順に先頭から２枚ずつを対にし、対にされた２枚の撮影画像に基づいて高精度な背景置換の実施は容易であると考えられる。
【００１０】
しかしながら、これら２種類の撮影光条件下の撮影がシーン毎に不規則な順序や枚数で行われた場合には、送信されてきた撮影画像を撮影された順に先頭から２枚ずつを対にし、対にされた２枚の撮影画像に基づいて背景置換処理を行う背景置換処理装置では正常な背景置換処理を行えないおそれがある。
【００１１】
本発明は、上記事情に鑑み、正常な背景置換処理が実施される背景置換装置および撮影システムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
上記目的を達成する本発明の背景置換装置は、
被写体を照らす光の状態が異なる２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得する画像取得部と、
上記一連の撮影画像のそれぞれについて画像解析を行い、各撮影画像が得られたときの撮影条件が上記２種類の撮影条件のうちのいずれであるかを判別する条件判別部と、
上記一連の撮影画像の並びの中で交互に上記撮影条件が替わりながら並んだ、各々が上記撮影画像を１つ以上含みそれら１つ以上の撮影画像については上記撮影条件が共通した複数の画像群のうち互いに隣接した２つの画像群それぞれから撮影画像を選んで組み合わせて撮影画像対を決める撮影画像選出部と、
上記撮影画像対を成す２つの撮影画像に基づいてこの撮影画像中の背景を他の背景と置換する背景置換部とを備えたことを特徴とする。
【００１３】
本発明の背景置換装置では、一連の撮影画像が、シーン毎の２種類の撮影条件それぞれにおける撮影枚数が不規則に変化したものである場合や、シーン毎の２種類の撮影の順序が不規則に変化したものである場合でも、この一連の撮影画像からシーンが共通の２種類の撮影画像を１枚ずつ選び出して対にすることができる。
【００１４】
ここで、上記条件判別部が、上記画像解析を、上記撮影画像中の色分布に基づいて行うものであること、あるいは、上記画像解析を、上記撮影画像中の輝度に基づいて行うものであることが好ましい。
【００１５】
この様にすると、撮影画像の撮影条件の判別が簡易かつ高精度に行われる。
【００１６】
ここで、上記撮影画像選出部は、上記撮影画像を選ぶに当たり、同一の撮影画像の複数回の選択が禁止されたものであることが好ましい。
【００１７】
この様にすると、シーンが共通の２種類の撮影画像からなる対の決定が一層正確に行われる。
【００１８】
また、上記撮影画像選出部は、上記撮影画像を選ぶに当たり、同一の画像群に属する複数の撮影画像の選択が禁止されたものであることも好ましい態様である。
【００１９】
この様にすると、一連の撮影画像が、２種類の撮影の順序がシーン間で同一であるものの、２種類の撮影の枚数がシーン間で不規則な場合でも、シーンが共通の２種類の撮影画像からなる対の決定が正確に行われる。
【００２０】
また、上記画像郡中に含まれる撮影画像についてシーンの同一性を判別するシーン判別部を備え、
撮影画像選出部は、上記撮影画像を選ぶに当たり、シーンが同一の複数の撮影画像の選択が禁止されたものであることが好ましい。
【００２１】
この様にすると、一連の撮影画像が、２種類の撮影の順序がシーン間で不規則に変化する共に、２種類の撮影の枚数がシーン間で不規則な場合でも、シーンが共通の２種類の撮影画像からなる対の決定が正確に行われる。
【００２２】
ここで、上記画像取得部は、被写体を撮影する撮影装置とはこの被写体を挟んで反対側からこの被写体を照らした逆光撮影条件と、この撮影装置と同じ側からこの被写体を照らした順光撮影条件との２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得するものであってもよい。
【００２３】
上記目的を達成する本発明の撮影システムは、
被写体を撮影し、画素値の集合で画像を表現した形式で撮影画像を得る撮影装置；
被写体を照らす光の状態が異なる２種類の撮影条件を作り出す照明装置；および
被写体を照らす光の状態が異なる２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得する画像取得部と、
上記一連の撮影画像のそれぞれについて画像解析を行い、各撮影画像が得られたときの撮影条件が上記２種類の撮影条件のうちのいずれであるかを判別する条件判別部と、
上記一連の撮影画像の並び中で交互に上記撮影条件が替わりながら並んだ、各々が上記撮影画像を１つ以上含みそれら１つ以上の撮影画像については上記撮影条件が共通した複数の画像群のうち互いに隣接した２つの画像群それぞれから撮影画像を選んで組み合わせて撮影画像対を決める撮影画像選出部と、
上記撮影画像対を成す２つの撮影画像に基づいてこの撮影画像中の背景を他の背景と置換する背景置換部とを備えた背景置換処理装置；
を備えたことを特徴とする。
【００２４】
本発明の撮影システムによれば、２種類の撮影条件での被写体の撮影を含め、シーンが共通の２種類の撮影画像に基づく背景置換処理が実施される撮影システムを提供できる。
【００２５】
ここで、上記画像取得部は、被写体を撮影する撮影装置とはこの被写体を挟んで反対側からこの被写体を照らした逆光撮影条件と、この撮影装置と同じ側からこの被写体を照らした順光撮影条件との２種類の撮影条件のうちから撮影条件が選ばれながら複数回の撮影が行われて得られた一連の撮影画像を取得するものであってもよい。
【発明の効果】
【００２６】
本発明によれば、正常な背景置換処理が実施される背景置換装置および撮影システムを提供することができる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明の実施形態を説明する。
【００２８】
図１は、撮影システムを示す図である。
【００２９】
この図１に示す撮影システム１は、被写体を撮影して撮影画像を取得する撮影セット１０と、その撮影画像における被写体と背景とを区別して、撮影画像中の背景を所望の背景に置換して背景置換画像を作成するパーソナルコンピュータ２０と、パーソナルコンピュータ２０で作成された背景置換画像を出力するプリンタ３０と、置換用の背景画像がストックされているサーバ４０とを備えている。この撮影システム１が、本発明の撮影システムの第１実施形態である。
【００３０】
撮影セット１０は、デジタルカメラ１１と、第１閃光発光装置１２と、撮影台１３とを備えており、撮影台１３の内部には、第２閃光発光装置１３０が備えられている。
【００３１】
このデジタルカメラ１１には、撮影者が、第１閃光発光装置１２と第２閃光発光装置１３０とのうちのいずれを発光させて写真撮影を行うかを選択するための選択ボタンが備えられており、この撮影セット１０では、撮影者がデジタルカメラ１１のシャッタボタンを押下すると、選択ボタンで選択されている方の閃光発光装置から閃光が発光されるようになっている。また、撮影によって得られた撮影画像は、デジタルカメラ内のメモリに保持される。
【００３２】
撮影システム１では、デジタルカメラ１１とパーソナルコンピュータ２０とはＵＳＢ５０で繋がれており、デジタルカメラ１１の所定のボタンを操作することでデジタルカメラ１１からパーソナルコンピュータ２０への撮影画像のデータ転送が行われるようになっている。
【００３３】
撮影台１３は、被写体が載せられる、厚みの薄い乳白色のプラスティック板１３１と、このプラスティック板１３１を保持する筐体１３２、および、その筐体１３２内に内蔵された第２閃光発光装置１３０を備えている。尚、プラスティック板１３１上には被写体であるお椀Ｐが手前側と奥側とに１つずつ並べられている。
【００３４】
ここで、第１閃光発光装置１２を閃光発光させて得られる撮影画像は、デジタルカメラ１１側から被写体を照らすという順光状態での撮影であることで、被写体がきれいに写ったものとなる。一方、第２閃光発光装置１３０を閃光発光させて得られる撮影画像は、被写体部分がシャドウ側に偏ったものとなる。一方、被写体部分を除いた背景部分は、左右方向には均一、かつ、上方に行くほど明るく下方に行くほど暗くなるという一様さを有するものとなる。これは、第２閃光発光装置１３０からの閃光が、図１に示すように湾曲した乳白色のプラスティック板１３１の背面側から発光されることで、図１における奥行き方向および上下方向に均一な光だからである。
【００３５】
パーソナルコンピュータ２０では、デジタルカメラ１１から送信された２種類の撮影画像からなる一連の撮影画像から、シーンが共通の２種類の撮影画像を１枚ずつ選び出してペアにして背景置換画像を作成する。この背景置換画像の作成については後述する。
【００３６】
ここで、図２は、図１に示すパーソナルコンピュータの外観斜視図である。
【００３７】
図２に示すパーソナルコンピュータ２０は、外観構成上、フレキシブルディスク（以降、ＦＤと呼ぶ）やＣＤ−ＲＯＭの装填口を有し、その装填口に装填されたＦＤやＣＤ−ＲＯＭへのアクセス機能を有する本体装置２１０、その本体装置２１０からの指示に応じて表示画面２２０ａ上に画像を表示する画像表示装置２２０、本体装置２１０にキー操作に応じた各種の情報を入力するキーボード２３０、表示画面２２０ａ上の任意の位置を指定することにより、その位置に表示された、例えばアイコン等に応じた指示を入力するマウス２４０、および、デジタルカメラ等で撮影画像の記憶に用いられる小型記憶メディアが装填され、その小型記憶メディアをアクセスするメディアドライブ２５０を備えている。
【００３８】
図１に示すプリンタ３０は、パーソナルコンピュータ２０から送られてくる画像をプリントするものであり、撮影システム１では、パーソナルコンピュータ２０によって作成された背景置換画像をプリントする役割を担っている。
【００３９】
図１に示すサーバ４０には、パーソナルコンピュータ２０で実行される背景置換における、置換背景となる複数の背景候補が格納されている。この背景候補は、表示画面２２０ａ上に表示されることによって提示される。また、この撮影システム１では、サーバ４０内に格納されている背景以外にも、上記のＣＤ−ＲＯＭや上記の小型記憶メディア等といった何らかの入力用記憶媒体を介して提供される背景も、表示画面２２０ａを通じて提示される。
【００４０】
次に、図１に示す撮影システム１で実行される作業の流れについて説明する。尚、以下の説明では、図１に示す要素については特に図番を断らずに図１中の符号を使って参照する。
【００４１】
図３は、図１の撮影システムで実行される作業のフローチャートである。
【００４２】
撮影者が、プラスティック板１３１上に載せられた被写体に対するピントや露光の調節等を行なった後にデジタルカメラ１１のシャッタボタンが押下されるまで、デジタルカメラ１１に保持されている一連の撮影画像をパーソナルコンピュータ２０に転送する際に操作される操作ボタンが操作されたか否かを判定（ステップＳ３）しながら待機（ステップＳ１）する。シャッタボタンが押下されたと判定すると、第１閃光発光装置１２と第２閃光発光装置１３０とのうち、前述した選択ボタンによって、現在、選択されている方の閃光発光を伴った写真撮影影が行なわれる（ステップＳ６）。その後、転送操作がなされているか否かを判定（ステップＳ２）しながら、再び、シャッタボタンが押下されるまで待機する（ステップＳ１）。
【００４３】
一方、待機中に転送操作が行われたと判定すると、デジタルカメラ１１に保持されている撮影画像はパーソナルコンピュータ２０に取得される（ステップＳ４）。また、デジタルカメラ１１から撮影画像を取得したパーソナルコンピュータ２０では、パーソナルコンピュータ２０に対する操作により、顧客が所望する背景がサーバ４０あるいは何らかの入力用記憶媒体から読み出される（ステップＳ４）。続いて、順光撮影画像と逆光撮影画像とに基づいて背景置換画像を作成するという後述の背景置換処理が実行される（ステップＳ５）。そして、この背景置換処理で作成された背景置換画像を表わす画像データが、まず画像表示装置２２０に転送され、さらに、プリンタ３０と、顧客が希望する出力用記憶媒体とのうちの少なくとも１つに転送される（ステップＳ６）。続いて、画像表示装置２２０で表示される（ステップＳ７）。さらに、画像データがプリンタ３０に転送された場合には、プリンタ３０において、その画像データに基づいて背景置換画像がプリントされる（ステップＳ８）。
【００４４】
以下では、これらの処理を実行するパーソナルコンピュータ２０の構成と、パーソナルコンピュータ２０における処理の詳細について説明する。
【００４５】
まず、このパーソナルコンピュータ２０の内部構成について説明する。
【００４６】
図４は、図１に示すパーソナルコンピュータのハードウェア構成図である。
【００４７】
この図４に示すように、本体装置２１０の内部には、各種プログラムを実行するＣＰＵ２１１、ハードディスク装置２１３に格納されたプログラムが読み出されＣＰＵ２１１での実行のために展開される主メモリ２１２、各種プログラムやデータ等が保存されたハードディスク装置２１３、ＦＤ５２０が装填され、その装填されたＦＤ５２０をアクセスするＦＤドライブ２１４、ＣＤ−ＲＯＭ５１０をアクセスするＣＤ−ＲＯＭドライブ２１５、図１のサーバ４０やデジタルカメラ１１と接続され、これらの機器から置換用の背景や撮影画像等を受け取る入力インタフェース２１６、および、図１のプリンタ３０と接続され、背景置換画像等を出力する出力インタフェース２１７が内蔵されている。これらの各種要素と、さらに図１にも示す画像表示装置２２０、キーボード２３０、マウス２４０、および、小型記憶メディア５３０をアクセスするメディアドライブ２５０は、バス２６０を介して相互に接続されている。
【００４８】
ここで、ＣＤ−ＲＯＭ５１０には、パーソナルコンピュータ２０を、本発明の背景置換装置の第１実施形態として動作させるための背景置換プログラムが記憶されている。そして、その背景置換プログラムが記憶されたＣＤ−ＲＯＭ５１０がＣＤ−ＲＯＭドライブ２１５に装填されると、そのＣＤ−ＲＯＭ５１０に記憶された背景置換プログラムがこのパーソナルコンピュータ２０にアップロードされてハードディスク装置２１３に書き込まれる。これにより、パーソナルコンピュータ２０は背景置換装置として動作する。
【００４９】
次に、この背景置換プログラムについて説明する。
【００５０】
図５は、ＣＤ−ＲＯＭの概念図である。
【００５１】
図５に示すＣＤ−ＲＯＭ５１０には、図１等に示すパーソナルコンピュータ２０を、本発明の背景置換装置の第１実施形態として動作させるための背景置換プログラム６００が記憶されている。
【００５２】
図５に示すＣＤ−ＲＯＭ５１０には背景置換プログラム６００が記憶されており、この背景置換プログラム６００は、画像取得部６１０、撮影条件判別部６２０、撮影画像選出部６３０、置換処理部６４０、画像データ転送部６５０、および画像表示部６６０で構成されている。
【００５３】
この背景置換プログラム６００の各部の詳細については、背景置換装置の各部の作用と併せて説明する。
【００５４】
図６は、背景置換装置の機能ブロック図である。
【００５５】
図６には、図５に示す背景置換プログラム６００が図１等に示すパーソナルコンピュータ２０にインストールされ、このパーソナルコンピュータ２０が本発明の背景置換装置の第１実施形態として動作するときの機能を表わす機能ブロック図が示されている。
【００５６】
また、この図６には、図１にも示す、デジタルカメラ１１、第１閃光発光装置１２、および第２閃光発光装置１３０を備えた撮影セット１０や、プリンタ３０、サーバ４０も示されている。
【００５７】
この図６に示す背景置換装置７００は、上述したように、撮影セット１０のデジタルカメラ１１によって撮影された、シーンが共通の順光撮影画像と逆光撮影画像のうちの逆光撮影画像に基づいて順光撮影画像を被写体領域と背景領域とに区別した上で、その背景領域を所望の背景に置換するという背景置換処理を実行するものであり、画像取得部７１０、撮影条件判別部７２０、撮影画像選出部７３０、置換処理部７４０、画像データ転送部７５０、および画像表示部７６０を備えている。この背景置換装置７００が、本発明の背景置換装置の第１実施形態である。
【００５８】
画像取得部７１０では、ＵＳＢ５０を通じて、撮影画像を表すＲＧＢ値を撮影された順にデジタルカメラ１１から受け取る。また、この画像取得部７１０では、顧客が所望する背景を、サーバ４０から、あるいは、ＣＤ−ＲＯＭや小型記憶メディア等といった入力用記憶媒体５４０から読み出す。この画像取得部７１０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム６００の画像取得部６１０に従って、入力インタフェース２１６、ＦＤドライブ２１４、ＣＤ−ＲＯＭドライブ２１５、およびメディアドライブ２５０を制御することによって構成される。
【００５９】
撮影条件判別部７２０は、画像取得部７１０が撮影順で受け取った、各撮影画像の各画素のＲＧＢ値から輝度を換算し、各撮影画像が、順光撮影画像と逆光撮影画像とのうちのいずれであるのかの判別を行う。この判別は、順光撮影画像は逆光撮影画像よりも相対的に明るいことを利用してなされており、具体的には、輝度が１００以下の画素数の全画素中に占める割合が３０％以上の撮影画像は逆光撮影画像と判別され、３０％未満の撮影画像は順光撮影画像と判別される。この撮影条件判別部７２０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム６００の撮影条件判別部６２０に従って、入力インタフェース２１６、ＦＤドライブ２１４、ＣＤ−ＲＯＭドライブ２１５、およびメディアドライブ２５０を制御することによって構成される。
【００６０】
撮影画像選出部７３０では、撮影条件判別部７２０で種類が判別された撮影画像について、詳しくは後述する手法を用いて、シーンが共通の順光撮影画像と逆光撮影画像とをペアにして行く。この撮影画像選出部７３０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム６００の撮影画像選出部６３０に従って、入力インタフェース２１６、ＦＤドライブ２１４、ＣＤ−ＲＯＭドライブ２１５、およびメディアドライブ２５０を制御することによって構成される。
【００６１】
ここで、図７は、背景置換装置における処理の模式図である。
【００６２】
図７のａ欄には、画像取得部７１０が取得した、順光撮影画像と逆光撮影画像との２種類の撮影画像からなる一連の撮影画像が、左から順に‘第１撮影画像’、‘第２撮影画像’、‘第３撮影画像’、‘第４撮影画像’・・・・・・・・・‘第１１撮影画像’、と記されて示されている。尚、図７における左からのこの並びは、デジタルカメラ１１における撮影順を表しており、右に行くほど撮影時期が遅れている。また、図７のａ欄には、一連の撮影画像のうちシーンが共通な撮影画像同士が‘シーンＩ’、‘シーンＩＩ’、‘シーンＩＩＩ’、‘シーンＩＶ’に分類されて示されているが、これは、この背景置換装置７００において実際に行われる処理ではなく、以下での説明上の便宜のためである。
【００６３】
図７のｂ欄には、撮影条件判別部７２０における上述の判別結果が、第１撮影画像から第１１撮影画像までのそれぞれに対応して示されており、ここでは、順光撮影画像は‘Ａ’で表され、逆光撮影画像は‘Ｂ’で表されている。
【００６４】
ここで、同一シーンについての順光撮影と逆光撮影とがそれぞれ１枚ずつからなる一連の撮影画像から、同一シーンについての２種類の撮影画像が１枚ずつのペアを作るには、先頭から２枚ずつを順次ペアにしていけばよい。しかし、シーン間で、２種類の撮影画像の撮影順序は守られているものの、撮影者の勘違いなどにより、同一シーンについてのこれら２種類の撮影画像の枚数がシーン間で不規則に変化している一連の撮影画像から、同一シーンについての２種類の撮影画像が１枚ずつのペアを作る場合に上述の方法を用いたのではシーンを跨ぐペアが出てきてしまう。
【００６５】
そこで、背景置換装置７００の撮影画像選出部７３０では、まず、撮影条件が同じ撮影画像であって隣接するもの同士をグループ化する。図７のｃ欄には、このグループ化により、撮影条件が異なるグループが交互に並んだ様子が示されている。例えば、図７のｃ欄の左から２番目のグループには、２つの‘Ｂ’が属しており、これは、シーンＩにおける逆光撮影が２枚撮影されていることを表している。また、左から５番目のグループには、３つの‘Ａ’が属しており、これは、シーンＩＩＩにおける順光撮影が３枚撮影されていることを表している。尚、以下では、これらグループを、左から順に、第１グループ、第２グループ、第３グループといった具合に称呼する。
【００６６】
上述のグループ化の後、撮影画像選出部７３０では、同一のグループから１つの撮影画像しか選択しないという条件の下、各グループから撮影画像をピックアップし、ピックアップした撮影画像を２枚ずつ順次ペアにする。
【００６７】
図７のｄ欄には、第１グループの‘Ａ’と、第２グループの２つの‘Ｂ’のうちの先頭の‘Ｂ’とがペアにされ、また、第３グループの‘Ａ’と、第４グループの‘Ｂ’とがペアにされている様子が示されている。また、図７のｄ欄には、第５グループの３つの‘Ａ’のうちの先頭の‘Ａ’と、第６グループの‘Ｂ’とがペアにされ、第７グループの‘Ａ’と、第８グループの‘Ｂ’とがペアにされている様子が示されている。
【００６８】
図７のｄ欄には、グループで唯一選択される撮影画像として、グループ内の最も左側に位置する撮影画像をピックアップしているが、同一グループ内で１つだけピックアップするのであれば、図７のｅ欄に示されるように、最も右側に位置する撮影画像をピックアップしてもよく、図７のｆ欄に示されるように、グループ毎に異なる位置の撮影画像を選んでも良い。この撮影画像選出部７３０において行われる上述のペアリングを、同一のグループから１つの撮影画像しか選択できないようにしているのは、図７のｇ欄に示されるように同一のグループから複数の撮影画像を選択できるようにすると、シーンを跨ぐペアリングとなり正常な背景置換が行えなくなるからである。この様に、撮影画像選出部７３０では、デジタルカメラ１１から送信されてきた一連の撮影画像が、シーン間で、２種類の撮影画像の撮影順序は守られているものの、撮影者の勘違いなどにより、同一シーンについてのこれら２種類の撮影画像の枚数がシーン間で不規則に変化している場合であっても、同一シーンについての２種類の撮影画像が確実にペアにされる。尚、図７では、シーン毎の２種類の撮影画像の撮影順序が、順光撮影の後に逆光撮影という順序である例を挙げて説明したが、これが、逆光撮影の後に順光撮影という順序であっても、この撮影画像選出部７３０では、同一シーンについての２種類の撮影画像が確実にペアにされる。図６に戻って説明を続ける。
【００６９】
置換処理部７４０では、撮影画像選出部７３０でペアにされた、同一シーンについての２種類の撮影画像に基づいて背景置換画像が作成される。この置換処理部７４０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム６００の置換処理部６４０に従って動作することによって構成される。
【００７０】
画像データ転送部７５０では、置換処理部７４０で作成された背景置換画像を表わす画像データを、プリンタ３０および顧客が希望する出力用記憶媒体５５０のうちの少なくとも一方と、この背景置換装置７００の画像表示部７６０とに転送する。この画像データ転送部７５０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム６００の画像データ転送部６５０に従って、出力インタフェース２１７、ＦＤドライブ２１４、ＣＤ−ＲＯＭドライブ２１５、およびメディアドライブ２５０を制御することによって構成される。
【００７１】
画像表示部７６０では、画像データ転送部７５０から転送されてくる画像データが表す背景置換画像を表示画面２２０ａに表示する。画像表示部７６０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム６００の画像表示部６６０に従って画像表示装置２２０を制御することによって構成される。
【００７２】
また、上記の画像データ転送部７５０からプリンタ３０に背景置換画像を表わす画像データが出力された場合には、プリンタ３０では、この画像データに基づく背景置換画像がプリントされ、上記の画像データ転送部７５０から、何らかの出力用記憶媒体５５０に背景置換画像を表わす画像データが出力された場合には、この画像データがその出力用記憶媒体５５０に書き込まれる。そして、背景置換画像がプリントされたプリント紙と、背景置換画像を表わす画像データが書き込まれた出力用記憶媒体５５０との両方、あるいは一方が、顧客の希望に応じて提供される。
【００７３】
次に、置換処理部７４０における背景置換処理について詳細に説明する。
【００７４】
図８は、図６に１つのブロックで示される置換処理部の詳細を示す図である。尚、以下では、撮影画像選出部７３０でペアリングされた、２種類の撮影画像のＲＧＢ値群のうち、順光撮影画像のＲＧＢ値群を第１ＲＧＢ値群と称し、逆光撮影画像のＲＧＢ値群を第２ＲＧＢ値群と称する。また、顧客が所望した背景のＲＧＢ値を背景ＲＧＢ値群と称する。
【００７５】
置換処理部７４０は、背景推定部７４１、差し引き部７４２、２値化部７４３、および背景置換作成部７４４を備えている。
【００７６】
ここで、図９は、図８に示される各部で生成される画像を観念的に示す図である。
【００７７】
図９（ａ）には、第２ＲＧＢ値群によって表される画像（逆光画像）が示されており、ここには、上から下にかけて一様なグラデーションを有する背景と、この背景の上部よりもシャドウ側に寄った被写体とが示されている。図９（ｂ）には、図８中に示される背景推定部７４１において、第２ＲＧＢ値群に基づいて被写体の背後については背景推定がされて作成された第３ＲＧＢ値群が表す背景画像が示されている。図９（ｃ）には、差し引き部７４２において、第２ＲＧＢ値群から第３ＲＧＢ値群の各値が差し引かれた結果のＲＧＢ値群で表された画像が示されており、ここには、ベタ黒の背景に被写体Ｐがうっすら浮かび上がっている様子が示されている。図９（ｄ）には、差し引かれた結果のＲＧＢ値群が２値化部７４３において２値化処理された、その処理済みのＲＧＢ値群が表す画像が示されている。
【００７８】
以下では、図８に示される各部の動作について、図９〜図１１を参照しながらさらに詳細に説明する。
【００７９】
まず、図８に示される背景推定部７４１には、図９（ａ）に示される撮影画像を表す第２ＲＧＢ値群が入力され、この第２ＲＧＢ値群に基づいて、図９（ａ）に示される逆光の撮影画像から、被写体Ｐに隠れた背後の領域のＲＧＢ値の推定が行われる。
【００８０】
図１０は、被写体に隠れた背後の領域のＲＧＢ値の推定の手法を概念的に示す図である。尚、図１０に示されている画像は、明暗の図示が省略されているが、図９（ａ）と同じ図であるとして話を進める。
【００８１】
背景推定部７４１では、入力されてきた第２ＲＧＢ値群から、まず、図１０に示される画像の左側の１列目の上端に位置する画素から下端に位置する画素までの各画素における輝度を順に読み出しつつ、これ以降に輝度を読み出す画素の輝度推定を外挿法により行い、推定した輝度（以下、この推定した輝度を推定輝度と称す。）と、実際に読み出した輝度（以下、この読み出した輝度を読出輝度と称す。）との間に所定値以上のズレがあるか否かを判定し、これら輝度の読み出し、輝度の推定、および判定を、図１０に示す撮影画像の左端から右端にかけて行う。その結果、読出輝度と推定輝度との差が全て所定値未満の画素からなる列は、背景領域のみを通過する列として認識される。一方、列の中に、読出輝度と推定輝度との差が所定値以上である画素が存在する列は被写体領域を通過する列として認識され、その列上の、被写体領域に属する画素の輝度は、被写体領域を通過する列の直前の、背景領域に通過する列の対応する画素の読出輝度に置き換えられる。この様にして被写体Ｐの背後の領域の輝度が推定により決定される。
【００８２】
図１１は、撮影画像上の上下方向の位置と読出輝度との関係を示す図である。
【００８３】
図１１（ａ）には、横軸に図９に示す逆光撮影の画像上の上下方向の位置、縦軸に輝度（０〜２５５）をとった場合の、この画像の背景領域に属する列の上下位置と読出輝度との関係が示されており、ここには、列の上端では、２５５に近い‘明’側の読出輝度が、列の下端に近づくにつれて０に近い‘暗’側へなだらかに変化していく様子が示されている。また、図１０に示される、背景領域を通過する列のうち代表的な列Ａ、Ｂ、Ｃ、Ｅ、Ｆ、およびＧにおける上下位置と読出輝度との関係がほぼ同じであることで、図１１（ａ）には、プロットがほぼ同じ位置に重ねて行われている様子が示されている。このことは、つまり、図１０に示される撮影画像の背景が左右方向に均一であることを表している。
【００８４】
図１１（ｂ）には、被写体領域を通過する列の中から代表的に抽出した列Ｄについて得られた、列Ｄにおける上下位置と読出輝度との関係が示されている。この列Ｄについては、位置ａ手前までの画素は背景領域に属しているものの、位置ａから位置ｂまでの間の画素が被写体領域に属していることで外挿法による推定輝度と読出輝度とのズレが所定値以上となる。このため、この範囲内の読出輝度が、背景領域のみを通過する列のうち最も近い列である列Ｃの対応する範囲の読出輝度に置き換えられる。また、図１１（ｂ）には、読出輝度の置き換えが行われた範囲が点線で示されている。以上説明したようにして、背景推定部７４１では、被写体Ｐに隠れた背後の画素の輝度推定を行った上で、背景全体のＲＧＢ値群である第３ＲＧＢ値群を作成する。図８に示す差し引き部７４２では、第２ＲＧＢ値群から第３ＲＧＢ値群が差し引かれる。この背景置換処理部７４０では、被写体を逆光で撮影して得られた第２ＲＧＢ値群から、被写体Ｐに隠れた背後については推定を用いた背景画像を表す第３ＲＧＢ値群を差し引くことで得られた差分により被写体領域と背景領域とを区別する。つまり、背景置換処理部７４０によれば、被写体と背景との境目の色や明るさに明らかな差がなくても、被写体領域のＲＧＢ値群と、その被写体領域に隠れた背後の領域について推定されたＲＧＢ値群とに僅かでも差があれば被写体領域と背景領域とを区別することができる。
【００８５】
２値化部７４３では、差し引き部７４２から送られてきたＲＧＢ値群から輝度を読み出し、閾値Ａ未満の輝度については輝度を‘０’とし、閾値Ａ以上の輝度については輝度を‘２５５’としている。２値化部７４３により２値化処理されたＲＧＢ値群の輝度については、設定された閾値に基づいて、閾値未満の輝度は‘０’とされ、閾値以上の輝度は‘２５５’とされて、画像上ではそれぞれ‘ベタ黒’と‘白’とで表される。
【００８６】
図８に示す背景置換画像作成部７４４では、２値化部７４３により輝度が‘２５５’とされた被写体領域のＲＧＢ値については、第１ＲＧＢ値群の対応するＲＧＢ値に置き換えられ、２値化部７４３により輝度が‘０’とされた背景領域のＲＧＢ値については、顧客が所望した背景ＲＧＢ値群の対応するＲＧＢ値に置き換えられる。これにより、順光できれいに撮影された被写体と、顧客が所望する背景とが組み合わさった背景置換画像が作成される。
【００８７】
このようにして作成された背景置換画像を表わすＲＧＢ値群が、図６に示される画像データ転送部７５０に送信され、各出力デバイスや出力用記憶媒体５５０（図６参照）に転送される。この様にして、パーソナルコンピュータ２０では、被写体を挟んでデジタルカメラ１１とは反対側に位置するプラスティック板１３１からの、このプラスティック板１３１に沿って所定の一様さを有する光で照らされたこの被写体を撮影した逆光画像に基づいて、被写体に隠れた背後については推定して背景全体のＲＧＢ値群を得、逆光画像を表すＲＧＢ値群から背景全体のＲＧＢ値群を差し引くことで被写体領域が高精度に検出されて背景置換が行われる。
【００８８】
以上に説明したように、第１実施形態の背景置換装置では、デジタルカメラ１１から送信されてきた一連の撮影画像が、シーン間で、２種類の撮影画像の撮影順序は守られているものの、撮影者の勘違いなどにより、同一シーンについてのこれら２種類の撮影画像の枚数がシーン間で不規則に変化している場合であっても、同一シーンについての２種類の撮影画像が確実にペアにされることで正常な背景置換処理が行われる。これにより、第１実施形態の撮影システム１によれば、２種類の撮影条件下での被写体の撮影を含め、同一シーンについての２種類の撮影画像に基づく背景置換処理が実施される撮影システムを提供できる。
【００８９】
次に、本発明の背景置換装置の第２実施形態を備えた、本発明の撮影システムの第２実施形態について説明する。
【００９０】
第２実施形態の背景置換装置と第１実施形態の背景置換装置との間の相違点は、第１実施形態の背景置換装置７００では、シーン間で、２種類の撮影画像の撮影順序は守られているものの、同一シーンについてのこれら２種類の撮影画像の枚数がシーン間で不規則に変化している一連の撮影画像に対応しているのに対し、第２実施形態の背景置換装置では、シーン間での２種類の撮影画像の撮影順序すら守られていない一連の撮影画像に対応できるという点である。
【００９１】
また、詳しくは後述するが、第２実施形態の背景置換装置では、撮影条件判別部が、撮影画像の輝度に基づいてではなく、撮影画像のカラフルさに基づいて撮影条件の判別を行っている点と、第２実施形態の背景置換装置に、撮影条件が同じでかつ互いに隣接することで１つのグループに属することとなった複数の撮影画像についてシーンの共通性を判別するシーン判別部が新たに備えられている点である。以下、詳細に説明する。尚、以下では、第２実施形態の撮影システムと第１実施形態の撮影システム１との間には、構成上の相違点が無いことから、第２実施形態の撮影システムの図示は省略する。また、図９〜図１１に示される、第１実施形態の撮影システム１で実施される背景置換の流れも、第２実施形態の撮影システムで実施される背景置換の流れと同じであるので、図示および説明は省略する。
【００９２】
図１２は、ＣＤ−ＲＯＭの概念図である。
【００９３】
図１２に示すＣＤ−ＲＯＭ５１０には、図１等に示すパーソナルコンピュータ２０を、本発明の背景置換装置の第２実施形態として動作させるための背景置換プログラム８００が記憶されている。尚、以下でも、背景置換プログラム８００の構成要素で、図５に示される背景置換プログラム６００の構成要素と同じ種類の構成要素には、図５に付されている符号と同じ符号を付している。
【００９４】
図１２に示す背景置換プログラム８００は、画像取得部６１０、撮影条件判別部８２０、シーン判別部８７０、撮影画像選出部８３０、置換処理部６４０、画像データ転送部６５０、および画像表示部６６０で構成されている。
【００９５】
この背景置換プログラム８００の各部の詳細については、本発明の背景置換装置の第２実施形態の各部の作用と併せて説明する。
【００９６】
図１３は、背景置換装置の機能ブロック図である。
【００９７】
図１３には、図１２に示す背景置換プログラムが図１等に示すパーソナルコンピュータ２０にインストールされ、このパーソナルコンピュータが本発明の背景置換装置の第２実施形態として動作するときの機能を表わす機能ブロック図が示されている。
【００９８】
この図１３に示す背景置換装置９００は、画像取得部７１０、撮影条件判別部９２０、シーン判別部９７０、撮影画像選出部９３０、置換処理部７４０、画像データ転送部７５０、および画像表示部７６０を備えている。尚、画像取得部７１０、置換処理部７４０、画像データ転送部７５０、および画像表示部７６０の説明は、図６における説明と重複するので省略し、その他の構成要素のみ説明する。
【００９９】
撮影条件判別部９２０は、画像取得部７１０が撮影順で受け取った各撮影画像の各画素のＲＧＢ値から彩度を検出し、撮影画像が順光撮影画像と逆光撮影画像とのうちのいずれであるのかを判別する。この判別は、ＲＧＢ座標軸上にとった、ＲＧＢ各値が等しい座標点を通過する、無彩色を表す直線と、撮影画像を表す各画素の各画素値との距離を画素毎に算出して撮影画像毎に平均値をとり、その平均値が所定値以下の場合にはその撮影画像は逆光撮影画像であるとし、その平均値が所定値を上回る場合にはその撮影画像は順光撮影画像であるとするものである。尚、この撮影条件判別部９２０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム８００の撮影条件判別部８２０に従って、入力インタフェース２１６、ＦＤドライブ２１４、ＣＤ−ＲＯＭドライブ２１５、およびメディアドライブ２５０を制御することによって構成される。
【０１００】
撮影画像選出部９３０では、撮影条件判別部９２０で種類が判別された撮影画像について、まず、撮影条件が共通で、かつ隣り合ったもの同士をグループ化し、さらに、同一グループ内でシーンが同一なものとそうでないものとの判別をシーン判別部９７０に行わせながら同一グループ内でチーム分けが行われる。撮影画像選出部９３０では、次に、シーンが共通の撮影画像を同一グループから複数選択しないように、すなわち同一チーム内から複数の撮影画像を選択しないという条件の下、各グループから撮影画像をピックアップし、ピックアップした撮影画像を２枚ずつ順次ペアにする。この撮影画像選出部９３０は、実質的には、パーソナルコンピュータ２０のＣＰＵ２１１が、背景置換プログラム８００の撮影画像選出部８３０およびシーン判別部８７０に従って、入力インタフェース２１６、ＦＤドライブ２１４、ＣＤ−ＲＯＭドライブ２１５、およびメディアドライブ２５０を制御することによって構成される。
【０１０１】
図１４は、背景置換装置における処理の模式図である。
【０１０２】
図１４のａ欄には、画像取得部７１０が取得した、２種類の撮影画像からなる一連の撮影画像が、左から順に第１画像、第２画像、第３画像、第４画像・・・・第１１画像と記されて示されている。
【０１０３】
図１４のｂ欄には、撮影条件判別部９２０における上述の判別結果が、第１画像から第１１画像のそれぞれに対応して示されており、ここでも、順光撮影画像は‘Ａ’で表され、逆光撮影画像は‘Ｂ’で表されている。
【０１０４】
また、図１４のｂ欄には、デジタルカメラ１１から送信されてきた一連の撮影画像が、撮影者の勘違いなどにより、２種類の撮影画像の撮影順序がシーン間で不規則に変化し、同一シーンについてのこれら２種類の撮影画像の枚数もシーン間で不規則に変化したものである様子が示されている。
【０１０５】
撮影画像選出部９３０では、まず、同じ撮影条件で撮影された画像であって、隣り合うもの同士については、図１４のｃ欄に示されるようにグループ化が行われる。撮影画像選出部９３０では、次に、同一グループ内でシーンが共通なものとそうでないものとの判別をシーン判別部９７０に行わせながら、図１４のｄ欄に示されるように、同一グループ内でチーム分けが行われる。撮影画像選出部９３０では、さらに、シーンが共通の撮影画像を同一グループから複数回選択しないように、すなわち同一チーム内から複数の撮影画像を選択しない条件下での撮影画像のペアリングが行なわれる。これにより、図１４のｅ欄に示されるように、同一シーンについての２種類の撮影画像が確実にペアにされる。尚、図１４のｅ欄には、同一チームで唯一選択される撮影画像として、チーム内の最も左側に位置する撮影画像をピックアップした場合が示されているが、同一チーム内で１つだけピックアップするのであれば、図１４のｆ欄に示されるように、最も右側に位置する撮影画像をピックアップしてもよい。
【０１０６】
以上に説明したように、第２実形態の背景置換装置では、デジタルカメラ１１から送信されてきた一連の撮影画像が、２種類の撮影画像の撮影順序がシーン間で不規則に変化し、同一シーンについてのこれら２種類の撮影画像の枚数もシーン間で不規則に変化したものである場合でも、シーンが共通の２種類の撮影画像からなるペアの決定が正確に行われることで正常な背景置換処理が行われる。これにより、第２実施形態の撮影システム１によれば、２種類の撮影条件下での被写体の撮影を含め、同一シーンについての２種類の撮影画像に基づく背景置換処理が実施される撮影システムを提供できる。
【図面の簡単な説明】
【０１０７】
【図１】撮影システムを示す図である。
【図２】図１に示すパーソナルコンピュータの外観斜視図である。
【図３】図１の撮影システムで実行される作業のフローチャートである。
【図４】図１に示すパーソナルコンピュータのハードウェア構成図である。
【図５】ＣＤ−ＲＯＭの概念図である。
【図６】背景置換装置の機能ブロック図である。
【図７】背景置換装置における処理の模式図である。
【図８】図６に１つのブロックで示される置換処理部の詳細を示す図である。
【図９】図８に示される各部で生成される画像を観念的に示す図である。
【図１０】被写体に隠れた背後の領域のＲＧＢ値の推定の手法を概念的に示す図である。
【図１１】撮影画像上の上下方向の位置と読出輝度との関係を示す図である。
【図１２】ＣＤ−ＲＯＭの概念図である。
【図１３】背景置換装置の機能ブロック図である。
【図１４】背景置換装置における処理の模式図である。
【符号の説明】
【０１０８】
１  撮影システム
１０  撮影セット
１１  デジタルカメラ
１２  第１閃光発光装置
１３  撮影台
１３０  第２閃光発光装置
１３１  プラスティック板
１３２  筐体
２０  パーソナルコンピュータ
６００、８００  背景置換プログラム
６１０、７１０  画像取得部
６２０、７２０、８２０、９２０  撮影条件判別部
８７０、９７０  シーン判別部
６３０、７３０、８３０、９３０  撮影画像選出部
６４０、７４０  置換処理部
７４１  背景推定部
７４２  差し引き部
７４３  ２値化部
７４４  背景置換画像作成部
６５０、７５０  画像データ転送部
６６０、７６０  画像表示部
７００、９００  背景置換装置
【図１】
2010093503.tif 000003
【図２】
2010093503.tif 000004
【図３】
2010093503.tif 000005
【図４】
2010093503.tif 000006
【図５】
2010093503.tif 000007
【図６】
2010093503.tif 000008
【図７】
2010093503.tif 000009
【図８】
2010093503.tif 000010
【図９】
2010093503.tif 000011
【図１０】
2010093503.tif 000012
【図１１】
2010093503.tif 000013
【図１２】
2010093503.tif 000014
【図１３】
2010093503.tif 000015
【図１４】
2010093503.tif 000016