(57)【要約】効果的に違和感が抑制された３次元画像データを生成する画像処理装置、画像処理方法、及びプログラムを提供する。画像処理装置（１１）は、２次元画像を取得する画像取得部（１３）と、２次元画像における前景の領域を画像処理により推定し、２次元画像の小領域毎に前景の領域である確率を算出する確率算出部（１５）と、確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する、前景の画像マスクを生成するマスク生成部（１７）と、画像マスクにより、前景画像を取得する前景画像取得部（１９）と、を備える。
2020036072.tif 000002
【特許請求の範囲】
【請求項１】
２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理装置であって、
前記２次元画像を取得する画像取得部と、
前記２次元画像における前記前景の領域を画像処理により推定し、前記２次元画像の小領域毎に前記前景の領域である確率を算出する確率算出部と、
前記確率に基づいて、前記前景と前記背景との境界領域における前記前景と前記背景との混合比率のグラデーションを有する、前記前景の画像マスクを生成するマスク生成部と、
前記画像マスクにより、前景画像を取得する前景画像取得部と、
を備える画像処理装置。
【請求項２】
前記２次元画像において、前記前景画像に対応する領域を補完して、背景画像を取得する背景画像取得部を備える請求項１に記載の画像処理装置。
【請求項３】
前記画像マスクの非マスク部分は、前記２次元画像における前記前景よりも拡大されている請求項１又は２に記載の画像処理装置。
【請求項４】
前記画像マスクを評価閾値に基づいて２値化し、前記前景の抽出領域を取得する抽出領域取得部を備え、
前記マスク生成部は、前記抽出領域と前記境界領域とで構成される前記画像マスクを生成する請求項１から３のいずれか１項に記載の画像処理装置。
【請求項５】
前記画像マスクを拡大した拡大画像マスクと、前記抽出領域との差分を取得して、前記境界領域を取得する境界領域取得部を備える請求項４に記載の画像処理装置。
【請求項６】
前記画像マスクを拡大した拡大画像マスクと、前記抽出領域を縮小した縮小抽出領域との差分を取得して、前記境界領域を取得する境界領域取得部を備える請求項４に記載の画像処理装置。
【請求項７】
前記境界領域は、１０ピクセル以上２０ピクセル以下の幅を有する請求項１から６のいずれか１項に記載の画像処理装置。
【請求項８】
前記確率算出部は、前記前景を抽出する学習済みの認識器で構成される請求項１から７のいずれか１項に記載の画像処理装置。
【請求項９】
前記３次元画像データはレンチキュラー印刷用である請求項１から８のいずれか１項に記載の画像処理装置。
【請求項１０】
２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理方法であって、
前記２次元画像を取得するステップと、
前記２次元画像における前記前景の領域を画像処理により推定し、前記２次元画像の小領域毎に前記前景の領域である確率を算出するステップと、
前記確率に基づいて、前記前景と前記背景との境界領域における前記前景と前記背景との混合比率のグラデーションを有する、前記前景の画像マスクを生成するステップと、
前記画像マスクにより、前景画像を取得するステップと、
を含む画像処理方法。
【請求項１１】
２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理工程をコンピュータに実行させるプログラムであって、
前記２次元画像を取得する工程と、
前記２次元画像における前記前景の領域を画像処理により推定し、前記２次元画像の小領域毎に前記前景の領域である確率を算出する工程と、
前記確率に基づいて、前記前景と前記背景との境界領域における前記前景と前記背景との混合比率のグラデーションを有する、前記前景の画像マスクを生成する工程と、
前記画像マスクにより、前景画像を取得する工程と、
を含む画像処理工程をコンピュータに実行させるプログラム。
【請求項１２】
非一時的かつコンピュータ読取可能な記録媒体であって、前記記録媒体に格納された指令がコンピュータによって読み取られた場合に、
２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理工程であって、
前記２次元画像を取得する工程と、
前記２次元画像における前記前景の領域を画像処理により推定し、前記２次元画像の小領域毎に前記前景の領域である確率を算出する工程と、
前記確率に基づいて、前記前景と前記背景との境界領域における前記前景と前記背景との混合比率のグラデーションを有する、前記前景の画像マスクを生成する工程と、
前記画像マスクにより、前景画像を取得する工程と、
を含む画像処理工程をコンピュータに実行させる記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、及びプログラムに関し、特に２次元画像から３次元画像データを生成する画像処理装置、画像処理方法、及びプログラムに関する。
【背景技術】
【０００２】
従来より、入力された２次元画像の主要被写体を前景とし、この前景と背景とに対して奥行き情報を付加して３次元画像データが生成されている。【０００３】
ここで、大量の３次元画像データの生成を行うためには、自動的な画像処理により３次元画像データを効率的に生成する必要がある。一方で、前景と背景の境界部分をくっきりと切り出してしまうと、境界部分が目立ってしまい、生成される３次元画像データは違和感を有してしまう。【０００４】
この３次元画像データの違和感を抑制することを目的として、様々な手法が提案されている。【０００５】
例えば特許文献１に記載された技術では、違和感を抑制することを目的として、マスクパターンのオブジェクト境界部分に、ぼかし処理を行う技術が記載されている。具体的には、特許文献１に記載された技術では、１段目のローパスフィルタ及び２段目のローパスフィルタを使用して、マスクのエッジ部分の信号に傾斜をつけて、マスクをぼかしている。また、特許文献１には、ぼかし幅を調整することや、レイヤ毎に個別にぼかし処理を行うことが記載されている（特許文献１段落００８０）。【０００６】
例えば特許文献２では、違和感を抑制することを目的とし、指定した被写体の輪郭を平均値フィルタ処理によりぼかす技術が記載されている。また、特許文献２では、平均値フィルタのサイズの大小により、立体感の滑らかさを制御することが記載されている（特許文献１段落００３０）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１３−１７８７４９号公報
【特許文献２】特開２００３−４７０２７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
ここで、２次元画像によっては、前景と背景との境界が明瞭である箇所と、境界が複雑であり不明瞭である箇所とが存在する場合がある。このような、境界が明瞭な箇所と、境界が不明瞭な箇所とで同じぼけ処理を行ってしまうと、３次元画像データの違和感を効果的に抑制できない場合が発生する。【０００９】
上述した特許文献１及び特許文献２では、前景と背景との境界が明瞭な箇所及び不明瞭な箇所に応じて異なるぼけ具合を与えることについての言及はない。【００１０】
本発明はこのような事情に鑑みてなされたもので、その目的は、効果的に違和感が抑制された３次元画像データを生成する画像処理装置、画像処理方法、及びプログラムを提供することである。
【課題を解決するための手段】
【００１１】
上記目的を達成するための本発明の一の態様である画像処理装置は、２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理装置であって、２次元画像を取得する画像取得部と、２次元画像における前景の領域を画像処理により推定し、２次元画像の小領域毎に前景の領域である確率を算出する確率算出部と、確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する、前景の画像マスクを生成するマスク生成部と、画像マスクにより、前景画像を取得する前景画像取得部と、を備える。【００１２】
本態様によれば、２次元画像の小領域毎に前景の領域である確率が算出され、その確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する前景の画像マスクが生成される。これにより、前景と背景との境界が明瞭な箇所と、境界が不明瞭な箇所とに応じて、境界領域の混合比率のグラデーションが制御され、ぼけ具合が調整される。【００１３】
好ましくは、画像処理装置は、２次元画像において、前景画像に対応する領域を補完して、背景画像を取得する背景画像取得部を備える。【００１４】
本態様によれば、前景画像に対応する領域を補完して背景画像が取得されるので、違和感が効果的に抑制された３次元画像データを生成することができる。【００１５】
好ましくは、画像マスクの非マスク部分は、２次元画像における前景よりも拡大されている。【００１６】
本態様によれば、画像マスクの非マスク部分が拡大されることにより、拡大された前景画像を得ることができるので、背景画像の欠損部分を覆い隠すことができ、違和感の抑制された３次元画像データを生成することができる。【００１７】
好ましくは、画像処理装置は、画像マスクを評価閾値に基づいて２値化し、前景の抽出領域を取得する抽出領域取得部を備え、マスク生成部は、抽出領域と境界領域とで構成される画像マスクを生成する。【００１８】
本態様によれば、画像マスクを評価閾値に基づいて２値化し、前景の抽出領域が取得され、抽出領域と境界領域とで構成される画像マスクが生成される。これにより、より違和感の抑制された３次元画像データを生成することができる。【００１９】
好ましくは、画像処理装置は、画像マスクを拡大した拡大画像マスクと、抽出領域との差分を取得して、境界領域を取得する境界領域取得部を備える。【００２０】
本態様によれば、拡大画像マスクと抽出領域との差分を取得して、境界領域が取得されるので、より正確に境界領域を取得することができる。【００２１】
好ましくは、画像処理装置は、画像マスクを拡大した拡大画像マスクと、抽出領域を縮小した縮小抽出領域との差分を取得して、境界領域を取得する境界領域取得部を備える。【００２２】
本態様によれば、抽出領域を拡大した拡大抽出領域と、抽出領域を縮小した縮小抽出領域との差分を取得して、境界領域が取得される。これにより、境界部分の幅がより広くなった拡大された前景画像を取得することができる。【００２３】
好ましくは、境界領域は、１０ピクセル以上２０ピクセル以下の幅を有する。【００２４】
好ましくは、確率算出部は、前景を抽出する学習済みの認識器で構成される。【００２５】
好ましくは、３次元画像データはレンチキュラー印刷用である。【００２６】
本発明の他の態様である画像処理方法は、２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理方法であって、２次元画像を取得するステップと、２次元画像における前景の領域を画像処理により推定し、２次元画像の小領域毎に前景の領域である確率を算出するステップと、確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する、前景の画像マスクを生成するステップと、画像マスクにより、前景画像を取得するステップと、を含む。【００２７】
本発明の他の態様であるプログラムは、２次元画像から、前景及び背景で構成される３次元画像データを生成する画像処理工程をコンピュータに実行させるプログラムであって、２次元画像を取得する工程と、２次元画像における前景の領域を画像処理により推定し、２次元画像の小領域毎に前景の領域である確率を算出する工程と、確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する、前景の画像マスクを生成する工程と、画像マスクにより、前景画像を取得する工程と、を含む画像処理工程をコンピュータに実行させる。
【発明の効果】
【００２８】
本発明によれば、２次元画像の小領域毎に前景の領域である確率が算出され、その確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する前景の画像マスクが生成されるので、前景と背景との境界が明瞭な箇所と、境界が不明瞭な箇所とに応じて、境界領域の混合比率のグラデーションが制御されてぼけ具合が調整される。
【図面の簡単な説明】
【００２９】
【図１】図１は、コンピュータの外観を示す図である。
【図２】図２は、画像処理装置の機能構成例を示すブロック図である。
【図３】図３は、画像処理工程を示すフローチャートである。
【図４】図４は、２次元画像と確率付き画像マスクとを概念的に示す図である。
【図５】図５は、確率付き画像マスクの拡大図を示す図である。
【図６】図６は、混合比率のグラデーションを示す概念図である。
【図７】図７は、抽出領域の抽出に関して、説明する図である。
【図８】図８は、境界領域の取得に関して説明する図である。
【図９】図９は、画像マスクの生成に関して説明する図である。
【図１０】図１０は、画像マスクの拡大図である。
【図１１】図１１は、前景画像を取得することを説明する図である
【図１２】図１２は、３次元画像における背景の欠損部分に関して説明する図である。
【図１３】図１３は、３次元画像における背景の欠損部分に関して説明する図である。
【図１４】図１４は、背景画像を示す図である。
【図１５】図１５は、３次元画像データの生成に用いられる画像を示す図である。
【発明を実施するための形態】
【００３０】
以下、添付図面に従って本発明に係る画像処理装置、画像処理方法、及びプログラムの好ましい実施の形態について説明する。
【００３１】
図１は、本発明の画像処理装置を備えるコンピュータの外観を示す図である。
【００３２】
コンピュータ３は、本発明の一態様である画像処理装置１１（図２）を搭載している。コンピュータ３には、２次元画像２０１が入力され、モニタ９で構成される表示部とキーボード５およびマウス７で構成される入力部が接続されている。なお、図示されたコンピュータ３の形態は一例であり、コンピュータ３と同様の機能を有する装置は本発明の画像処理装置１１を備えることができる。例えば、タブレット端末に画像処理装置１１を搭載することも可能である。
【００３３】
コンピュータ３は、画像処理装置１１（図２）に入力された２次元画像２０１、生成された３次元画像データをモニタ９に表示する。ユーザは、指令をキーボード５およびマウス７により入力する。
【００３４】
図２は、画像処理装置１１の機能構成例を示すブロック図である。図２に示す画像処理装置１１の各種制御を実行するハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の制御部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。
【００３５】
１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の制御部を１つのプロセッサで構成してもよい。複数の制御部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の制御部として機能する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、複数の制御部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の制御部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。
【００３６】
画像処理装置１１は、画像取得部１３、確率算出部１５、マスク生成部１７、前景画像取得部１９、背景画像取得部２１、３次元画像データ生成部２５、表示制御部２３、及び記憶部２６を備える。記憶部２６には、プログラムおよび画像処理装置１１の各種制御に係る情報等が記憶される。また、表示制御部２３は、モニタ９による表示を制御する。
【００３７】
画像取得部１３は２次元画像２０１を取得する。２次元画像２０１は、例えば主要被写体で構成される前景と、その前景以外の背景とを有する。
【００３８】
確率算出部１５は、２次元画像における前景の領域を画像処理により推定し、２次元画像の小領域毎に前景の領域である確率を算出する。確率算出部１５で行われる推定及び確率の算出は、公知の手法が適用される。例えば、確率算出部１５は、前景を抽出する学習済みの認識器で構成される。確率算出部１５は、小領域毎に前景の領域であることを画像処理で推定し、その小領域毎にその推定に基づく確率を算出する。また、確率算出部１５が算出する２次元画像の小領域は、例えば１画素毎であったり、２×２画素毎であったり、所定の大きさの領域のことを意味する。
【００３９】
マスク生成部１７は、前景を取得するための画像マスクを生成する。画像マスクは、確率算出部１５で算出された前景である領域の確率に基づいて、前景と背景との境界領域における前景と背景との混合比率のグラデーションを有する。すなわち、画像マスクは、境界領域において、前景の領域である確率に基づいたぼけを有する。画像マスクは、確率算出部１５で算出された確率をそのまま用いて、マスク部分及び非マスク部分を構成してもよいし、確率算出部１５で算出された確率に基づいて抽出される抽出領域及び境界領域とで、マスク部分及び非マスク部分を構成してもよい。また、マスク生成部１７は、抽出領域取得部１８及び境界領域取得部２０を有する。
【００４０】
抽出領域取得部１８は抽出領域を取得する。具体的には、抽出領域取得部１８は、確率付き画像マスクを評価閾値に基づいて２値化し、前景の抽出領域を取得する。ここで抽出領域とは、前景の領域である確率が一定以上の領域のことである。
【００４１】
境界領域取得部２０は、確率付き画像マスクにおける境界領域を取得する。確率付き画像マスクの境界領域では、前景と背景との混合比率のグラデーションを有する。
【００４２】
前景画像取得部１９は、画像マスクにより、前景画像を取得する。
【００４３】
背景画像取得部２１は、２次元画像において、前景画像に対応する領域を補完して、背景画像を取得する。
【００４４】
３次元画像データ生成部２５は、前景画像取得部１９で取得された前景画像、及び背景画像取得部２１で取得された背景画像により３次元画像データを生成する。例えば、３次元画像データ生成部２５は、レンチキュラー印刷用の３次元画像データを生成する。
【００４５】
次に、画像処理装置１１により行われる、レンチキュラー印刷用画像データである３次元画像データの生成の具体例に関して説明する。
【００４６】
＜画像処理の工程＞
図３は、画像処理装置１１により、２次元画像から３次元画像データを生成する画像処理工程（画像処理方法）を示すフローチャートである。先ず、画像処理工程の全体を説明し、その後に各工程について詳しく説明をする。
【００４７】
画像取得部１３は、２次元画像Ａを取得する（ステップＳ１０）。その後、確率算出部１５は、前景となる領域を画像処理により自動抽出し、その後に前景である確率を算出し、次にマスク生成部１７は、算出された確率に基づいて確率付き画像マスクＢを生成する（ステップＳ１１）。次に、抽出領域取得部１８は、確率付き画像マスクＢを２値化し、抽出領域Ｃを取得する（ステップＳ１２）。その後、境界領域取得部２０は、抽出領域Ｃに基づいて境界領域を計算して、確率付き画像マスクＢから境界領域Ｄを抜き出す（ステップＳ１３）。そして、マスク生成部１７により、抽出領域Ｃと境界領域Ｄとを合成して、画像マスクＥを生成する（ステップＳ１４）。
【００４８】
前景画像取得部１９は、画像マスクＥを適用して、前景画像Ｆを取得する（ステップＳ１５）。また、背景画像取得部２１は、画像マスクＥの非マスク部分を周りの画素から補完し背景画像Ｇとする（ステップＳ１６）。その後、３次元画像データ生成部２５により、前景画像Ｆ及び背景画像Ｇを用いて、レンチキュラー印刷用データが生成される（ステップＳ１７）。
【００４９】
次に、上述した各工程（ステップ）に関して、詳細に説明する。
【００５０】
＜ステップＳ１０及びステップＳ１１＞
ステップＳ１０及びステップＳ１１では、２次元画像Ａが入力され、確率付き画像マスクＢが生成される。図４は、２次元画像Ａ２０１と確率付き画像マスクＢ２０３とを概念的に示す図である。
【００５１】
２次元画像Ａ２０１は、人物である主要被写体Ｏを有している。２次元画像Ａ２０１における主要被写体Ｏを前景とし、主要被写体Ｏを除いた部分で構成される背景とで、３次元画像データが生成される。
【００５２】
確率付き画像マスクＢ２０３は、主要被写体Ｏを画像処理により自動抽出し、前景部分に対応した非マスク部分Ｐ及び背景部分に対応したマスク部分Ｍを有している。また、確率付き画像マスクＢ２０３は、前景の領域である確率を小領域毎に有している。確率付き画像マスクＢ２０３を適用して、前景を取得してもよいが、後述する画像マスクＥ２１３を適用して前景を取得することにより、より正確な前景画像の取得を行うことができる。
【００５３】
図５は、確率付き画像マスクＢ２０３の拡大図を示す図である。図５（Ａ）には、確率付き画像マスクＢ２０３が示されており、図５（Ｂ）には、確率付き画像マスクＢ２０３の領域Ｈの拡大図が示されており、図５（Ｃ）には、領域Ｊの拡大図が示されている。図５（Ｃ）に示されている図の矢印Ｎで示すように、確率付き画像マスクＢ２０３は、前景と背景との境界領域において混合比率のグラデーションを有しており、これに応じてぼけを有する。なお、このグラデーションは前景の領域である確率に基づくものであり、前景と背景との境界部分が明瞭な部分では、グラデーションは急であり狭くなり、前景と背景との境界部分が不明瞭な部分では、グラデーションは緩く広くなる。
【００５４】
図６は、前景と背景との境界部分が明瞭な場合、及び前景と背景との境界部分が不明瞭な場合の境界部分の混合比率のグラデーションを示す概念図である。図６（Ａ）は、前景と背景との境界部分が明瞭な場合の前景の領域である確率のグラデーションが示されている。また、図６（Ｂ）は、前景と背景との境界部分が不明瞭な場合の前景の領域である確率のグラデーションが示されている。
【００５５】
図６（Ａ）に示す場合では、前景である確率１００％の領域３０１と前景である確率０％である領域（背景の領域）３０５が明瞭であるために、境界３０３におけるグラデーションが急であり狭くなっている。一方、図６（Ｂ）に示す場合では、前景である確率１００％の領域３０１と前景である確率０％である領域３０５が不明瞭であるために、境界３０３におけるグラデーションが緩やかであり広くなる。このように、前景の領域である確率のグラデーションは、前景と背景との境界が明瞭な部分と不明瞭な部分と異なるので、このグラデーションを利用して、前景のぼけ具合を調整することにより、３次元画像データにおいて違和感を効果的に抑制することができる。
【００５６】
＜ステップＳ１２＞
ステップＳ１２では、抽出領域Ｃが取得される。図７は、抽出領域取得部１８で行われる抽出領域Ｃの抽出に関して、説明する図である。抽出領域取得部１８は、確率付き画像マスクＢ２０３の小領域毎に付されている確率を評価閾値に基づいて二値化する。例えば、抽出領域取得部１８は、確率が０％から１００％で示されている場合には、確率が５０％以上の領域と確率が５０％未満の領域とで２値化する。抽出領域Ｃ２０９は、前景の領域である確率が５０％以上である非マスク部分Ｐを有し、前景の領域である確率が５０％未満のマスク部分Ｍを有している。すなわち、抽出領域Ｃ２０９では、２値化された非マスク部分Ｐとマスク部分Ｍを有している。
【００５７】
＜ステップＳ１３＞
ステップＳ１３では境界領域Ｄが取得される。図８は、境界領域取得部２０で行われる境界領域Ｄの取得に関して説明する図である。図８に示した場合では、確率付き画像マスクＢ２０３から抽出領域Ｃ２０９を差し引くことで境界領域Ｄ２１１を生成する。具体的には、確率付き画像マスクＢ２０３を拡大した（拡大画像マスク）後に、抽出領域Ｃ２０９を差し引くことで境界領域Ｄ２１１を生成する。また、確率付き画像マスクＢ２０３を拡大した（拡大画像マスク）後に、縮小した抽出領域Ｃ２０９（縮小抽出領域）を差し引くことで境界領域Ｄ２１１を生成してもよい。例えば、確率付き画像マスクＢ２０３を縦横に１０ピクセル分拡大した後に、抽出領域Ｃ２０９を縦横に１０ピクセル分縮小して、差分を得る。境界領域Ｄ２１１は、確率付き画像マスクＢ２０３の境界領域における前景と背景との混合比率のグラデーションを有する。このように、確率付き画像マスクＢ２０３及び抽出領域Ｃに関して拡縮を行うことにより、境界領域Ｄ２１１の幅を制御することができる。例えば、境界領域Ｄ２１１の幅は、１０ピクセル以上２０ピクセル以下であることが好ましい。
【００５８】
＜ステップＳ１４＞
ステップＳ１４では、画像マスクＥが生成される。図９は、マスク生成部１７により行われる画像マスクＥ２１３の生成に関して説明する図である。マスク生成部１７は、抽出領域Ｃ２０９と境界領域Ｄ２１１とを合成することにより、画像マスクＥ２１３を得る。例えば、確率付き画像マスクＢ２０３を縦横に１０ピクセル分拡大した後に、抽出領域Ｃ２０９を縦横に１０ピクセル分縮小して、境界領域Ｄ２１１を得た場合には、縦横１０ピクセル分縮小した抽出領域Ｃ２０９と合成して、画像マスクＥ２１３を得る。画像マスクＥ２１３は、抽出領域Ｃ２０９の部分では２値化された均一の値を有し、境界領域Ｄ２１１の部分ではグラデーションを有する。このように合成して画像マスクＥ２１３を生成することにより、非マスク部分Ｐとマスク部分Ｍとの境界部分では、前景と背景との混合比率のグラデーションを有しぼけを発生させ、且つ非マスク部分Ｐの境界領域以外の部分（抽出領域）では確実に非マスクとなる。
【００５９】
図１０は、図９で示した画像マスクＥ２１３の領域Ｒの拡大図である。図１０に示すように画像マスクＥ２１３の領域Ｒでは、非マスク部分Ｐとマスク部分Ｍとの混合比率のグラデーションを有する（矢印Ｎで示す）。このようなグラデーションを有する画像マスクＥ２１３を適用して、前景及び背景を取得することにより、適切なぼけを有する前景及び背景を取得することができる。
【００６０】
＜ステップＳ１５＞
ステップＳ１５では画像マスクＥが得られる。図１１は、前景画像取得部１９により、前景画像Ｆ２１５を取得することを説明する図である。図１１に示すように、２次元画像２０１に対して画像マスクＥ２１３を適用することにより、前景画像Ｆ２１５を取得する。画像マスクＥ２１３は、境界部分において前景の領域である確率に応じたグラデーションを有しているので、前景画像Ｆ２１５は確率に応じたぼけを有する。すなわち、前景画像Ｆ２１５は、前景と背景との境界が明瞭な箇所と、境界が不明瞭な箇所とに応じて、ぼけ具合が調整されている。
【００６１】
ここで、前景画像Ｆ２１５は、元の２次元画像Ａ２０１の主要被写体Ｏに対して拡大することにより、背景の欠損部分をカバーすることができる。図１２及び図１３は、３次元画像における背景の欠損部分に関して説明する図である。図１２では、正面から３次元画像を見た場合、すなわち、前景画像Ｆ２１５が背景画像に対して移動させられていない場合を示している。この場合には、前景画像Ｆ２１５が移動されていないので、背景の欠損部分が出てくることはなく、欠損部分が目立つということはない。一方、図１３では、斜めから３次元画像を見た場合、すなわち、前景画像Ｆ２１５が背景画像に対して移動させられている場合を示している。この場合には、前景画像Ｆ２１５が移動されているので、背景の欠損部分Ｕが発生し、欠損部分Ｕが目立ってしまう。このような場合には、前景画像Ｆ２１５を拡大することにより欠損部分Ｕをカバーすることができる。
【００６２】
＜ステップＳ１６＞
ステップＳ１６では、背景画像Ｇが得られる。図１４は、背景画像取得部２１により、取得された背景画像Ｇ２１７を示す図である。図１４に示された図では、図１１で示された前景画像Ｆ２１５の箇所を補完して、背景画像取得部２１により、背景画像Ｇ２１７が生成されている。なお、背景画像取得部２１で行われる補完は公知の技術により行われる。
【００６３】
＜ステップＳ１７＞
ステップＳ１７では、レンチキュラー印刷用データが生成される。図１５は、３次元画像データの生成に用いられる画像を示す図である。画像２２３は、正面から見た図であり、前景と背景との位置関係は元の２次元画像Ａと同じである。画像２２１は、前景画像Ｆ２１５を背景画像Ｇ２１７に対して矢印Ｖの方向に移動させており、画像２２５は、前景画像Ｆ２１５を背景画像Ｇ２１７に対して矢印Ｗの方向に移動させている。例えば、３次元画像データ生成部２５により、画像２２１、画像２２３、及び画像２２５を使用してレンチキュラー印刷用の３次元画像データが生成される。
【００６４】
上述の各構成及び機能は、任意のハードウェア、ソフトウェア、或いは両者の組み合わせによって適宜実現可能である。例えば、上述の処理ステップ（処理手順）をコンピュータに実行させるプログラム、そのようなプログラムを記録したコンピュータ読み取り可能な記録媒体（非一時的記録媒体）、或いはそのようなプログラムをインストール可能なコンピュータに対しても本発明を適用することが可能である。
【００６５】
以上で本発明の例に関して説明してきたが、本発明は上述した実施の形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。
【符号の説明】
【００６６】
３        ：コンピュータ
５        ：キーボード
７        ：マウス
９        ：モニタ
１０      ：縦横
１１      ：画像処理装置
１３      ：画像取得部
１５      ：確率算出部
１７      ：マスク生成部
１８      ：抽出領域取得部
１９      ：前景画像取得部
２０      ：境界領域取得部
２１      ：背景画像取得部
２３      ：表示制御部
２５      ：３次元画像データ生成部
２６      ：記憶部
２０１    ：２次元画像
【図１】
2020036072.tif 000003
【図２】
2020036072.tif 000004
【図３】
2020036072.tif 000005
【図４】
2020036072.tif 000006
【図５】
2020036072.tif 000007
【図６】
2020036072.tif 000008
【図７】
2020036072.tif 000009
【図８】
2020036072.tif 000010
【図９】
2020036072.tif 000011
【図１０】
2020036072.tif 000012
【図１１】
2020036072.tif 000013
【図１２】
2020036072.tif 000014
【図１３】
2020036072.tif 000015
【図１４】
2020036072.tif 000016
【図１５】
2020036072.tif 000017
【国際調査報告】
2020036072.tif 000018
2020036072.tif 000019
2020036072.tif 000020
2020036072.tif 000021