(57)【要約】      （修正有）【課題】遠方に設けられたカメラを用いて被写体と背景とを一緒に撮影する際に、他人の肖像権を侵害することなく、容量を小さくした画像を取得できる撮影システムを提供する。【解決手段】カメラ４は、被写体を含む観光地全体の広角画像を取得する第一画像取得手段２と、広角画像のうち被写体が存在する位置の拡大画像を取得する第二画像取得手段３を有する。広角画像及び拡大画像をサーバー５の記憶手段５１に記憶させる。通信手段６１を介して、ユーザー端末６に先に広角画像を表示させ、表示された広角画像が所定の倍率以上拡大された場合に、拡大画像を読み出して広角画像に嵌め込み、嵌め込み領域の画像をスムージング処理する。【選択図】図２
2016096487.tif 000002
【特許請求の範囲】
【請求項１】
被写体を含む広角画像を取得する第一画像取得手段と、
前記広角画像のうち一部の領域の被写体の拡大画像を取得する第二画像取得手段と、
前記第一画像取得手段で取得された画像に対して、前記第二画像取得手段で取得された画像を嵌め込み合成する合成手段と、
を備えたことを特徴とする撮影システム。
【請求項２】
前記第一画像取得手段で取得された広角画像が拡大された場合に、前記第二画像取得手段で取得された画像を読み出して嵌め込み合成するようにしたものである請求項１に記載の撮影システム。
【請求項３】
前記第一画像取得手段で取得された画像をユーザー端末に送信する第一送信手段と、
当該第一送信手段によって送信された画像をユーザー端末に表示させる表示手段と、
前記第二画像取得手段で取得された画像をユーザー端末に送信する第二送信手段と、
を備え、前記合成手段が、
前記表示手段によって表示された広角画像が拡大された場合に、前記第二送信手段で送信されてきた拡大画像を広角画像に嵌め込み合成して表示させるようにしたものである請求項１に記載の撮影システム。
【請求項４】
前記合成手段が、広角画像から拡大画像へ向かう方向の輝度値を修正して嵌め込み合成するようにしたものである請求項１に記載の撮影システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、遠方から観光者などの被写体を撮影する撮影システムに関するものであって
、より詳しくは、被写体を含む観光地の広角画像と被写体の拡大画像の両方を撮影できるようにした撮影システムに関するものである。
【背景技術】
【０００２】
従来、観光地などで記念撮影をする場合、第三者にカメラを渡して自身の記念撮影をすることが多いが、この場合、その記念撮影をする場所が、高層タワーや山岳などのような比較的大きなものである場合、その高層タワーや山岳などからの撮影となってしまう。そのため、その高層タワーや山岳などの全体像を写し出すことができず、どこで撮影したものなのか分からなくなってしまう。
【０００３】
このため、下記の特許文献１には、遠方に設置されたカメラを用いて被写体と背景を一緒に撮影できるようにしたシステムが提案されている。このシステムは、被写体に特定の場所に立ってもらい、その場所から端末を操作してもらうことによって遠方のカメラで高解像度の撮影を行い、この際、他人の肖像権を侵害しないように撮影時に報知を行えるようにしたものである。このような撮影システムを用いれば、遠方からの撮影によって観光地の全体像を写すことができるとともに、その際、他人の肖像権を侵害することなく、被写体の拡大画像を写すことができるというメリットがある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−７２３２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、このようなシステムを用いて撮影を行う場合、次のような問題がある。
【０００６】
すなわち、上記特許文献１による撮影システムでは、特定の場所に被写体に立ってもらい、そこで操作端末を用いて高解像度の写真を撮るようにしているが、その際、仮に周囲に撮影のための報知を行ったとしても、報知音などに気付かずに顔などが撮影されてしまう場合がある。また、遠方から高解像度で写真を撮影すると、その画像ファイルが大きくなってしまい、その画像をダウンロードする際に時間がかかってしまうというなどの問題も生じてしまう。
【０００７】
そこで、本発明は、遠方に設けられたカメラを用いて被写体と背景の全体像を一緒に撮影する際に、他人の肖像権を侵害することなく、しかも、容量を小さくした状態で画像を取得できるようにした撮影システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
すなわち、本発明は上記課題を解決するために、被写体を含む広角画像を取得する第一画像取得手段と、前記広角画像のうち一部の領域の被写体の拡大画像を取得する第二画像取得手段と、前記第一画像取得手段で取得された画像に対して、前記第二画像取得手段で取得された画像を嵌め込み合成する合成手段とを備えるようにしたものである。
【０００９】
このように構成すれば、遠方から撮影する広角画像によって景色の全体像を表示することができるとともに、その被写体の拡大された画像を嵌め込むことで、その部分を拡大して鮮明に表示させることができるようになる。また、この際、広角で撮影された画像をパソコンやスマートフォンなどで拡大したとしても、画像が粗くなって第三者の顔などが鮮明に見えることがなく、他人の肖像権を侵害するようなことがなくなる。さらには、その被写体の画像領域のみを拡大して広角画像に嵌め込むようにしているので、高解像度で撮影する必要がなくなり、ファイル容量も小さくすることができるようになる。
【００１０】
また、このような発明において、前記第一画像取得手段で取得された広角画像が拡大された場合に、前記第二画像取得手段で取得された画像を読み出して嵌め込み合成するようにする。
【００１１】
このようにすれば、被写体の写っている部分が拡大された場合にのみ、拡大画像を嵌め込むようにするので、広角画像のみを閲覧する際に、無駄な処理を行わずに済むようになる。
【００１２】
さらに、前記第一画像取得手段で取得された画像をユーザー端末に送信する第一送信手段と、当該第一送信手段によって送信された画像をユーザー端末に表示させる表示手段と、前記第二画像取得手段で取得された画像をユーザー端末に送信する第二送信手段とを備え、前記合成手段を、前記表示手段によって表示された広角画像が拡大された場合に、前記第二送信手段で送信されてきた拡大画像を広角画像に嵌め込み合成して表示させるように構成する。
【００１３】
このように構成すれば、被写体の写っている部分が拡大された場合にのみ、第二送信手段によって拡大画像を受け取って嵌め込み合成するので、無駄な送信処理などをなくすことができるようになる。
【００１４】
加えて、拡大画像を嵌め込み合成する場合、広角画像から拡大画像へ向かう方向の輝度値を修正するスムージング処理を行う。
【００１５】
このように構成すれば、広角画像から拡大画像へ滑らかに画像を遷移させることができ、自然な画像に仕上げることができるようになる。
【発明の効果】
【００１６】
本発明によれば、遠方から撮影する広角画像によって景色の全体像を表示することができるとともに、その被写体の拡大された画像を嵌め込むことで、その部分を拡大して鮮明に表示させることができるようになる。また、この際、広角で撮影された画像をパソコンやスマートフォンなどで拡大したとしても、画像が粗くなって第三者の顔などが鮮明に見えることがなく、他人の肖像権を侵害するようなことがなくなる。さらには、その被写体の画像領域のみを拡大して広角画像に嵌め込むようにしているので、高解像度で撮影する必要がなくなり、ファイル容量も小さくすることができるようになる。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施の形態における撮影システムの概略図
【図２】同形態における撮影システムの機能ブロック図
【図３】同形態における撮影された画像および拡大した図
【図４】同形態における拡大画像を表示した状態を示す図
【図５】同形態におけるスムージング処理を示す図
【図６】同形態における撮影システムの動作フロー
【図７】他の実施の形態における撮影システムの概略図
【発明を実施するための形態】
【００１８】
以下、本発明の一実施の形態について図面を参照しながら説明する。
【００１９】
この実施の形態における撮影システム１は、図１に示すように、東京タワーやスカイツリー、清水寺などのような比較的遠方から全体像を見ることができるような場所で使用されるものであって、遠方に設けられたカメラ４を用いてその観光地の全体画像を撮影できるようにするとともに、その観光地を訪れた観光者の拡大画像９Ｚ（図４参照）を取得して全体画像（図３参照）に嵌め込み、全体画像と被写体の広角画像９Ｗと拡大画像９Ｚとを見られるようにしたものである。より具体的には、この撮影システム１は、図２の機能ブロック図に示すように、被写体を含む広角画像９Ｗを取得する第一画像取得手段２と、その広角画像９Ｗのうち一部の領域の被写体の拡大画像９Ｚを取得する第二画像取得手段３と、第一画像取得手段２で取得された画像に対して、第二画像取得手段３で取得された画像を嵌め込み合成する合成手段７などを少なくとも備えるようにしたものである。そして、このように構成することによって、広角画像９Ｗで観光地の全体像を表示できるようにするとともに、その広角画像９Ｗを拡大した際に、被写体の写っている領域のみを拡大画像９Ｚで表示させることで、被写体を鮮明に表示できるようにしたものである。以下、本実施の形態について詳細に説明する。
【００２０】
まず、第一画像取得手段２は、被写体から離れた位置に設けられたカメラ４によって構成され、遠方から被写体を含む観光地全体の広角画像９Ｗを取得する。この広角画像９Ｗを取得する場合、専用アプリをダウンロードしたスマートフォンなどの操作端末４０（図１参照）で操作できるようになっており、その画面に表示された図示しないボタンを押下することによってシャッターを切れるようにしている。この第一画像取得手段２で画像を取得する場合、被写体の近傍に位置する第三者の顔などが鮮明に写らない程度の光学倍率や解像度にしておく、この第一画像取得手段２で取得した画像を記憶手段５１に記憶させるようにする。
【００２１】
また、第二画像取得手段３は、この第一画像取得手段２を構成するカメラ４によって構成され、同じ解像度で光学倍率を変えて被写体の拡大画像９Ｚを取得する。この被写体の拡大画像９Ｚを取得する場合、あらかじめ被写体に立ってもらう位置や方向（カメラ４の方向）などを指定しておき、同様に、操作端末４０を操作してもらうことによってシャッターを切れるようにしておく。そして、この第二画像取得手段３で拡大画像９Ｚを取得する場合、第一画像取得手段２で広角画像９Ｗを取得するのとほぼ同時に、拡大画像９Ｚを取得する。そして、このように取得された拡大画像９Ｚを、同様に記憶手段５１に記憶させる。
【００２２】
一方、ユーザー側に設けられるユーザー端末６は、スマートフォンやパーソナルコンピューターなどによって構成されるもので、広角画像９Ｗや拡大画像９Ｚを受信する通信手段６１や、ディスプレイ６２でその画像を拡大もしくは縮小できる拡大縮小手段６３などを有するもので構成される。ここではユーザー端末６として、操作端末４０と同じものであってもよい。そして、ユーザーがサーバー５にアクセスして記念撮影された画像を取得すると、まず、広角画像９Ｗがユーザー端末６に第一送信手段５２を介して送信されて表示される。このとき、広角画像９Ｗでは観光地の全体像が表示されているため、どこで撮影されたものかがすぐに分かるようになる。また、その広角画像９Ｗを拡大したとしても、光学倍率や解像度が低いため、その地を訪れた観光者の顔などが鮮明に写ることがなく、肖像権も侵害するようなことがない。しかしながら、このように顔が写らなくなると、被写体の顔も鮮明に写らなくなるため、次の合成手段７を用いて、被写体の拡大画像９Ｚを嵌め込んで被写体の顔などが鮮明に写るようにする。
【００２３】
この合成手段７は、広角画像９Ｗに対して拡大画像９Ｚを嵌め込み合成するようにしたものであって、あらかじめ広角画像９Ｗに対して拡大画像９Ｚが嵌め込まれる領域（以下「嵌め込み領域」と称する）を設定しておき、その嵌め込み領域に同じ大きさで拡大画像９Ｚを嵌め込めるようにする。このとき、広角画像９Ｗと拡大画像９Ｚとは、ほぼ同時に撮影されるため、ほぼ同じ条件で画像を取得して嵌め込むことができるようになる。しかしながら、これらの広角画像９Ｗと拡大画像９Ｚとでは、光学倍率が異なっているため、嵌め込み領域の境界部分が不自然なものになってしまう。このため、次に示すスムージング手段８によって画像処理を行う。
【００２４】
このスムージング手段８は、嵌め込み領域の境界における領域から中心に向かってＲＧＢ輝度値を補正して滑らかに広角画像９Ｗから画像を遷移させるようにしたものであって、ここでは、図５に示すように、嵌め込まれる広角画像９Ｗの領域の輝度値に一定の割合を積算し、これに、上から重ね合わされる拡大画像９Ｚの領域の輝度値に残りの割合を積算したものを足し合わせてスムージング処理を行うようにしている。より具体的には、あらかじめ、図５に示すように、拡大画像の各領域に対する「積算率」を決めておき、この積算率と、その領域が重ね合わされる広角画像の領域の輝度値を積算する。この積算率は、嵌め込み領域の外側から中心に向かうに従って値が小さくなるように設定されており、下絵となる広角画像９Ｗの影響を中心に向かって小さくなるようにしている。このようにすると、例えば、嵌め込み領域における最も左上の領域は、下絵となる広角画像９Ｗの輝度値が「a11」であり、その領域の積算率が「80%」であるため、「a11×80%」が積算され、これに、その部分における拡大画像９Ｚの輝度値「b11」と残りの積算率「20%」が積算されて、「a11×80%＋b11×20%」が設定される。また、その嵌め込み領域の３行６列目の領域では、積算率が「40%」に設定されているため、その領域における広角画像９Ｗと拡大画像９Ｚの輝度値を読み出し「a12×40%＋b36×60%」が設定される。このようにして、すべての嵌め込み領域の輝度値を下絵となる広角画像９Ｗの輝度値を考慮した形でスムージング処理を行うようにする。
【００２５】
そして、このように嵌め込み処理を行った画像をユーザー端末６に表示する。ユーザー端末６に表示する場合、まず、サーバー５にアクセスして広角画像９Ｗを記憶手段５１から取得してディスプレイ６２に表示する。そして、この広角画像９Ｗのうち、嵌め込み領域を含む領域が所定倍率以上に拡大されたことを検知した場合に、同様にサーバー５にアクセスして記憶手段５１から拡大画像９Ｚを読み出し、第二送信手段５３を介して受信した拡大画像９Ｚを広角画像９Ｗに嵌め込んで、スムージング処理を行って被写体の画像を鮮明に表示させる。一方、逆に、その表示された拡大画像９Ｚから縮小表示される際は、先の所定倍率以下に縮小されたことを検知した場合に、広角画像９Ｗのみをディスプレイ６２に表示させるようにする。
【００２６】
次にこように構成された撮影システム１の処理の流れを図６のフローチャートを用いて説明する。
【００２７】
まず、撮影に先立って、あらかじめユーザーに拡大画像９Ｚを取得できる位置に立ってもらうようにするとともに、カメラ４の方向に向いてもらっておく。また、そのユーザーの所持する操作端末４０に専用アプリをダウンロードしてもらい、カメラ４を遠隔操作できるような状態にしておく。この専用アプリでは、図３（ａ）に示すように、カメラ４から撮影されている広角画像９Ｗをディスプレイ６２に表示させておく。
【００２８】
この状態で、ユーザーが操作端末４０を操作してシャッターを切るためのボタンを押下すると（ステップＴ１）、まず、第一画像取得手段２によって広角画像９Ｗを取得し、また、これとほぼ同時に第二画像取得手段３によって拡大画像９Ｚを取得する（ステップＳ１）。このとき、それぞれの画像は同じ解像度で記憶されるが、カメラ４の望遠機能を働かせることによって第二画像取得手段３で顔などが鮮明に写った画像が記憶手段５１に記憶されることになる（ステップＳ２）。
【００２９】
次に、このように広角画像９Ｗと拡大画像９Ｚを取得した後、ユーザーがユーザー端末６を操作して読み出し指令を送信することによって（ステップＴ２）、サーバー５の記憶手段５１から画像を読み出す。このユーザー端末６で画像を読み出すための条件としては、あらかじめ課金を行うことなどによって画像を読み出せるようにしておくものとする。そして、その読み出された広角画像９Ｗを第一送信手段５２を用いて送信し（ステップＳ３）、ユーザー端末６のディスプレイに表示させるようにする（ステップＴ３）。
【００３０】
そして、この広角画像９Ｗがディスプレイ６２に表示されている状態で、図３（ｂ）から図４に示すように、ユーザーがその画像のうち嵌め込み領域を含む領域を所定倍率以上拡大した場合（ステップＴ４）、サーバー５にアクセスして記憶手段５１から拡大画像９Ｚを取得し（ステップＴ５、Ｓ４）、広角画像９Ｗに嵌め込み処理を行う（ステップＴ６）。このとき、嵌め込み領域をスムージング処理するとともに（ステップＴ７）、必要に応じて拡大画像９Ｚと広角画像９Ｗの輝度値の調整なども行う。なお、図４では、破線で示された部分が広角画像９Ｗを拡大した不鮮明な画像を示しており、実線で示した部分が拡大画像９Ｚを示した鮮明な画像を示している。
【００３１】
また、これとは逆に、拡大された状態から画像が縮小された場合、先の所定倍率以下の縮小率になることによって（ステップＴ８）、広角画像９Ｗのみを表示させ（ステップＴ９）、嵌め込み合成されていない自然な画像に戻して表示させるようにする（図３（ａ）や図３（ｂ））。
【００３２】
このように上記実施の形態によれば、被写体を含む広角画像９Ｗを取得する第一画像取得手段２と、前記広角画像９Ｗのうち一部の領域の被写体の拡大画像９Ｚを取得する第二画像取得手段３と、前記第一画像取得手段２で取得された画像に対して、前記第二画像取得手段３で取得された画像を嵌め込み合成する合成手段７とを備えるようにしたので、遠方から撮影する広角画像９Ｗによって景色全体を表示することができるとともに、その被写体の拡大された画像を拡大して鮮明に表示させることができるようになる。また、この際、広角で撮影された画像をパソコンやスマートフォンなどで拡大したとしても、画像が粗くなって第三者の顔などが鮮明に写し出されることがなく、他人の肖像権を侵害するようなことがなくなる。さらには、その被写体の画像領域のみを拡大して広角画像９Ｗに嵌め込むようにしているので、高解像度で撮影する必要がなくなり、ファイル容量も小さくすることができるようになる。
【００３３】
また、第一画像取得手段２で取得された広角画像９Ｗが拡大された場合に、第二画像取得手段３で取得された画像を読み出して嵌め込み合成するようにしたので、広角画像９Ｗのみを閲覧する際に、無駄な処理を行わずに済むようになる。
【００３４】
さらに、第一画像取得手段２で取得された画像をユーザー端末６に送信する第一送信手段５２と、当該第一送信手段５２によって送信された画像をユーザー端末６に表示させるディスプレイ６２と、前記第二画像取得手段３で取得された画像をユーザー端末６に送信する第二送信手段５３とを備え、前記合成手段７を、前記ディスプレイ６２に表示された広角画像９Ｗが拡大された場合に、前記第二送信手段５３で送信されてきた拡大画像９Ｚを広角画像９Ｗに嵌め込み合成して表示させるようにしたので、被写体の写っている部分が拡大された場合にのみ、第二送信手段５３によって拡大画像９Ｚを受け取って嵌め込み合成することができ、無駄な送信処理をなくすことができるようになる。
【００３５】
加えて、拡大画像９Ｚを嵌め込み合成する場合、嵌め込まれる下絵となる広角画像９Ｗの輝度値を考慮した形で拡大画像９Ｚを調整してスムージング処理するようにしたので、広角画像９Ｗから拡大画像９Ｚへ滑らかに画像を遷移させることができ、自然な画像に仕上げることができるようになる。
【００３６】
なお、本発明は上記実施の形態に限定されることなく、種々の態様で実施することができる。
【００３７】
例えば、上記実施の形態では、ユーザー端末６側に合成手段７を設けるようにしたが、サーバー５側に合成手段７を設けるようにしてもよい。このとき、例えば、第一画像取得手段２で取得された画像と、第二画像取得手段３で取得された画像を嵌め込み合成した合成画像をあらかじめ記憶手段５１に格納しておき、ユーザー端末６側で所定倍率以上拡大表示された場合に、合成画像を送信してディスプレイ６２に表示させるようにしてもよい。
【００３８】
また、上記実施の形態では、広角画像９Ｗに拡大画像９Ｚを嵌め込むようおにしたが、さらに、この拡大画像９Ｚの中にさらなる拡大画像９Ｚを嵌め込むようにしてもよい。そして、表示させる際には、前述と同様に、拡大表示させる都度、拡大画像９Ｚを読み出して表示させるようにするとよい。
【００３９】
さらに、上記実施の形態では、一台のカメラ４で広角画像９Ｗと拡大画像９Ｚを取得するようにしたが、ほぼ同じ場所に光学倍率の異なる二台のカメラ４を設置しておき、それぞれのカメラ４で広角画像９Ｗと拡大画像９Ｚを取得するようにしてもよい。
【００４０】
また、上記実施の形態では、スムージング処理をする場合、下絵となる広角画像９Ｗの輝度値を考慮した形で輝度値を修正するようにしたが、広角画像９Ｗと拡大画像９Ｚの境界部分の輝度を周囲の輝度値の平均値に補正するなど、種々の方法を用いてスムージング処理するようにしてもよい。
【００４１】
また、上記実施の形態では、観光地で訪問者を撮影する場合を例に挙げて説明したが、これに限らず、例えば、家屋全体を撮影して誰の家であるかを分かるようにしておき、また、この家屋の検針メーターなどを拡大画像９Ｚとして取得して拡大表示させることで、検針値などを見られるようにしてもよい。
【００４２】
また、上記実施の形態では、静止している観光地で撮影する場合を例に挙げて説明したが、例えば、高速で移動する乗り物に乗っている被写体を撮影する場合にも適用することができる。この場合、例えば、新幹線の○号車○番に乗っていることをあらかじめ伝えておき、図７（ａ）（ｂ）に示すように、遠方に設けられたカメラ４によって新幹線の全体画像をコマ送りで撮影する。そして、第二画像取得手段３を用いて、カメラ４の視野角に○号車○番が入った瞬間に拡大画像９Ｚを取得し（図７（ｃ））、これをそのタイミングで取得された広角画像９Ｗに嵌め込むようにすることもできる。ただし、この場合、乗り物が高速で移動しているため、二台のカメラ４を用意して広角画像９Ｗと拡大画像９Ｚをそれぞれ取得できるようにしておくようにしておくのが好ましい。
【符号の説明】
【００４３】
１・・・撮影システム
２・・・第一画像取得手段
３・・・第二画像取得手段
４・・・カメラ
５・・・サーバー
５１・・・記憶手段
５２・・・第一送信手段
５３・・・第二送信手段
６・・・ユーザー端末
６１・・・通信手段
６２・・・ディスプレイ
６３・・・拡大縮小手段
７・・・合成手段
８・・・スムージング手段
９Ｗ・・・広角画像
９Ｚ・・・拡大画像
【図１】
2016096487.tif 000003
【図２】
2016096487.tif 000004
【図３】
2016096487.tif 000005
【図４】
2016096487.tif 000006
【図５】
2016096487.tif 000007
【図６】
2016096487.tif 000008
【図７】
2016096487.tif 000009