(57)【要約】  物理空間の第１の領域の第１の画像と、その空間の第２の領域の第２の画像との間の空間的関係が決定され、それにより第１の画像と第２の画像をつなぎ合わせて、それぞれ第１及び第２の画像から導出された第１及び第２のエリアを含む合成画像にされる。さらに、第１の画像の撮像時に、物理空間の第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号が検出され、埋め込み信号は、物理空間の少なくとも部分に関係するメタデータを伝達する。検出されたメタデータに基づいて、合成画像の第１のエリアの少なくとも部分に効果が付与されると共に、検出されたメタデータ及び決定された第１の画像と第２の画像との間の空間的関係に基づいて、第１のエリアを越えて広がる合成画像の第２のエリアの少なくとも部分に効果が付与される。
2018515840.tif 000002
【特許請求の範囲】
【請求項１】
物理空間の第１の領域の第１の画像と、前記物理空間の第２の領域の第２の画像とを受け取り、前記第１の画像と前記第２の画像との間の空間的関係を決定し、前記決定により前記第１の画像と前記第２の画像とをつなぎ合わせて、前記第１の画像から導出された第１のエリアと前記第２の画像から導出された第２のエリアとを含む合成画像にするステッチモジュールと、
前記第１の画像の撮像時に、前記物理空間の前記第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号を検出する信号検出モジュールであって、前記埋め込み信号は、前記物理空間の前記少なくとも部分に関係するメタデータを伝達する、前記信号検出モジュールとを備え、
前記信号検出モジュールは、検出された前記メタデータに基づいて、前記合成画像の前記第１のエリアの少なくとも部分に効果を付与すると共に、前記検出されたメタデータ及び前記第１の画像と前記第２の画像との間で決定された空間的関係に基づいて、前記第１のエリアを越えて広がる前記合成画像の前記第２のエリアの少なくとも部分に前記効果を付与する、
画像処理装置。
【請求項２】
前記信号検出モジュールは、前記第１の画像から前記埋め込み信号を検出する、請求項１に記載の画像処理装置。
【請求項３】
前記信号検出モジュールは、前記光を生成する光源の位置を検出し、前記光源の検出された位置と、前記第１の画像と前記第２の画像との間の前記決定された空間的関係とに基づいて、前記合成画像内で前記メタデータが適用する範囲を決定し、前記第１のエリア及び前記第２のエリアの前記部分を決定する、請求項１又は２に記載の画像処理装置。
【請求項４】
前記効果は、前記合成画像の前記第１のエリア及び前記第２のエリアの前記部分を不鮮明化する又は除去することを含む、請求項１乃至３のいずれか一項に記載の画像処理装置。
【請求項５】
前記効果は、前記部分をぼかすことによって前記合成画像の前記第１のエリア及び前記第２のエリアの前記部分を不鮮明化することを含む、請求項４に記載の画像処理装置。
【請求項６】
前記メタデータは、画像処理モジュールが、前記物理空間内の前記光源の前記位置から指定された半径内の物を示す前記合成画像の前記部分を不鮮明化する又は除去すべきことを指定し、前記画像処理モジュールは、前記合成画像内の前記範囲を、前記物理空間内で前記光源の前記位置から前記指定された半径に対応する範囲として決定する、請求項３に従属する請求項４又は５に記載の画像処理装置。
【請求項７】
前記効果は、前記合成画像が前記第１のエリア及び前記第２のエリアの前記部分のいずれかを含んでいる場合は、前記合成画像が記憶、転送、又はコピーされるのを防止することを含む、請求項１乃至３のいずれか一項に記載の画像処理モジュール。
【請求項８】
前記効果は、前記合成画像の前記第１のエリア及び前記第２のエリアの前記部分の上にグラフィック要素を重ねること、並びに／又は、前記第１のエリア及び前記第２のエリアの前記部分との関連で前記合成画像の上に前記グラフィック要素を重ねることを含む、請求項１乃至３のいずれか一項に記載の画像処理装置。
【請求項９】
前記ステッチモジュールは、前記物理空間の前記第１の領域と前記第２の領域との間の空間的関係に基づいて前記第１の画像と前記第２の画像との間の前記空間的関係を決定する、請求項１乃至８のいずれか一項に記載の画像処理装置。
【請求項１０】
前記ステッチモジュールは、撮像の時に測位システムによって検出された、前記第１の画像及び前記第２の画像が撮像された位置に基づいて、前記物理空間の前記第１の領域と前記第２の領域との間の前記空間的関係を決定する、請求項９に記載の画像処理装置。
【請求項１１】
前記ステッチモジュールは、前記第１の画像及び前記第２の画像に適用される画像認識に基づいて、前記第１の画像と前記第２の画像との間の前記空間的関係を決定する、請求項１乃至１０のいずれか一項に記載の画像処理装置。
【請求項１２】
前記画像処理装置は、前記効果を含む前記合成画像を、ストリートビューサービスの一部としてオンラインで利用可能にする、請求項１乃至１１のいずれか一項に記載の画像処理装置。
【請求項１３】
請求項１乃至１２のいずれか一項に記載の画像処理装置と、第１の画像及び第２の画像を撮像するカメラとを備える、システム。
【請求項１４】
物理空間の第１の領域の第１の画像と、前記物理空間の第２の領域の第２の画像とを受け取るステップと、
前記第１の画像と前記第２の画像との間の空間的関係を決定し、前記決定により前記第１の画像と前記第２の画像をつなぎ合わせて、前記第１の画像から導出された第１のエリアと前記第２の画像から導出された第２のエリアとを含む合成画像にするステップと、
前記第１の画像の撮像時に、前記物理空間の前記第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号を検出するステップであって、前記埋め込み信号は、前記物理空間の少なくとも部分に関係するメタデータを伝達する、ステップと、
検出された前記メタデータに基づいて、前記合成画像の前記第１のエリアの少なくとも部分に効果を付与し、前記検出されたメタデータ及び前記第１の画像と前記第２の画像との間の決定された前記空間的関係に基づいて、前記第１のエリアを越えて広がる前記合成画像の前記第２のエリアの少なくとも部分に効果を付与するステップと、を有する、
方法。
【請求項１５】
コンピュータ可読記憶媒体上に具現化され、且つ／又はそこからダウンロード可能なコードを備えたコンピュータプログラムであって、前記コードは、信号処理装置で実行されたときに、
物理空間の第１の領域の第１の画像と、前記物理空間の第２の領域の第２の画像とを受け取る動作と、
前記第１の画像と前記第２の画像との間の空間的関係を決定し、前記決定により前記第１の画像と前記第２の画像をつなぎ合わせて、前記第１の画像から導出された第１のエリアと前記第２の画像から導出された第２のエリアとを含む合成画像にする動作と、
前記第１の画像の撮像時に、前記物理空間の前記第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号を検出する動作であって、前記埋め込み信号は、前記物理空間の少なくとも部分に関係するメタデータを伝達する、動作と、
前記検出されたメタデータに基づいて、合成画像の前記第１のエリアの少なくとも部分に効果を付与すると共に、前記検出されたメタデータ及び前記第１の画像と前記第２の画像との間の決定された前記空間的関係に基づいて、前記第１のエリアを越えて広がる合成画像の前記第２のエリアの少なくとも部分に効果を付与する動作と、を行うように構成される、
コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、シーンの画像、特に個々に撮像され、画像処理技術を使用してつなぎ合わされた複数の画像から作成された合成画像に、メタデータを含めることに関する。
【背景技術】
【０００２】
ストリートビューサービスは、公共の道路などの周囲にある風景の画像を、それらの画像をオンラインで利用できるようにするために撮像するサービスである。これらのサービスは、現実世界の仮想化されたビューの中を動き回る能力をユーザに与える。通例は、車及び場合によっては自転車等の他の移動手段に搭載された画像撮像装置を使用して、世界の任意の部分、例えば、所与の町、都市、郡、州、さらには国全体などの中を走る道路の周囲にある風景の複数の画像を体系的に収集する。仮想化されたビューを構築するために、収集された画像のうち隣接する画像を、知られているパノラマ画像処理技術を使用して「つなぎ合わせる（ｓｔｉｔｃｈ）」（ステッチする）。通例、この仮想化されたビューは、（インターネットを介して）オンラインで利用できるようにされる。
【０００３】
例えば、ストリートビューサービスの画像収集車によって撮像された各画像は、通例、その画像が撮影された場所を例えばＧＰＳ座標として記録した各自の場所データにリンクされ、その場所データが次いでオンライン地図サービスの地図にリンクされる。これにより、フロントエンドとしての地図サービスを通じて、仮想化されたビューにアクセスできるようになる。そして、ユーザは、自身のスマートフォン、タブレット、ラップトップ又はデスクトップコンピュータ等で動作するブラウザ又は専用アプリを通じて地図サービスにアクセスすることにより、仮想化されたビューにアクセスすることができる。例えば、ユーザが、オンライン地図に示された街路上の特定の位置にアイコンをドラッグ及びドロップし、次いでそれに応答して、オンラインサービスが、選択された位置から開始する周囲環境の操作可能な仮想ビューをユーザに提示する。さらに、場所データにより、追加的な情報を、例えば上に重ねる画像として、仮想化されたビューの中に追加することができる。現在、これは、画像が撮影された座標をユーザに示すため、及び画像中に見える建物の所在地住所や名称を示すために使用されている。
【０００４】
様々な司法制度において、プライバシー及び他の規制が、例えばナンバープレートや顔の画像をぼかす要求を付与している。したがって、そのような司法制度における様々なプライバシーの規制に準拠するために、画像を処理してナンバープレート及び顔を自動的に検出し、それらをぼかす。また、国家の安全及び他の理由から、特定の建物又は細部は、撮像されないか、又は人手による要求に基づいて後の段階で削除される。加えて、ユーザが、仮想化されたビューの中にある要素の検閲又は除去を要求する場合もある。その例は、殺された子どもの遺体がストリートビューサービス内で見えるようになっていた両親や、眼の高さでは見えなかったが、画像収集車上の高い位置にあるカメラによって撮影された門のある裏庭で日光浴をしていた人の場合等である。
【０００５】
ストリートビューサービスの仮想化されたビュー中の物体を除去又はぼかすために、画像を自動的に分析して、ナンバープレートや人の顔など特定の事前に決められた種類の物体を検出することができる。また、画像を人手で検査し、検閲する場合もあり、又は、場所などのメタデータに基づいて（例えば、捕捉されたＧＰＳ座標に基づいて）検閲済みであると画像をマークして、サービスが、当該メタデータに関連付けられた画像を自動的に不鮮明化又は除去する場合もある。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、これらの手法にはそれぞれ、金銭的費用、成功率（フォールスポジティブ及び／又はフォールスネガティブ）、製品に対する影響、地域の規制への遵守等、１つ又は複数の不都合な点がある。例えば、ナンバープレートや顔をぼかすために使用される現在の自動化された画像処理ツールは、完璧ではない。非遵守に対して発生し得る罰金及び人手によるユーザ要求の処理の費用は望ましくない。したがって、既存の技術は、非効率的であり、誤りを生じやすく、且つ／又は使い勝手がよくない。
【０００７】
それでもなお、プライバシーに対する要求の増大により、一般人はより高いプライバシー保護を求めるようになっている。同時に、ストリートビューサービスの付加価値は明白であり、これらのサービスを利用する人の数は増えている。ビジネスに対して、これらのサービスは、（潜在的な）顧客に情報を提供するための有益な代替手法をもたらす。
【０００８】
したがって、公共の空間等で撮影された画像データを処理するためのより高度な方法を提供することが望ましい。
【課題を解決するための手段】
【０００９】
本明細書に開示される一態様によれば、画像処理装置（例えば、サーバ）が提供され、この画像処理装置は、ステッチモジュールであって、物理空間の第１の領域の第１の画像と、前記物理空間の第２の領域の第２の画像とを受け取り、第１の画像と第２の画像との間の空間的関係を決定し、それにより第１の画像と第２の画像とをつなぎ合わせて、第１の画像から導出された第１のエリアと第２の画像から導出された第２のエリアとを含む合成画像にする（第１のエリアと第２のエリアとは通常は部分的に重なることに留意されたい）ように構成されたステッチモジュールを備える。画像処理装置は、第１の画像の撮像時に、前記物理空間の第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号を検出するように構成された信号検出モジュールであって、埋め込み信号は、前記物理空間の少なくとも部分に関係するメタデータを伝達する、信号検出モジュールも備える。好ましくは、信号検出モジュールは、第１の画像自体から埋め込み信号を検出することによってこれを行う（すなわち、信号は第１の画像内に撮像され、そこから抽出される）が、それに代えて、信号は、第１の画像の撮像と関連して動作する別個の光センサを使用することによって検出されてもよい。いずれの場合も、信号検出モジュールは、検出されたメタデータに基づいて、合成画像の第１のエリアの少なくとも部分に効果を付与すると共に、検出されたメタデータ及び第１の画像と第２の画像との間で決定される決定された空間的関係に基づいて、第１のエリアを越えて広がる合成画像の第２のエリアの少なくとも部分（すなわち、第１のエリアと重ならない部分）に効果を付与するように構成される。
【００１０】
本発明は、このようにして、画像処理装置によって撮像された物理空間に関係するメタデータを提供するための使い勝手のよい手順を提供し、より効率的なデータ処理、ユーザにとってのより高いコントロール、及び／又はメタデータを適用する際の失敗率の低下などの１つ又は複数の利点を可能にする。このシステムは、符号化光などの光通信技術を使用して、物理空間に関係するメタデータを送信する。これは、いくつかの理由のうち１つ又は複数から有益である可能性がある。例えば、これは、ＲＦ汚染を起こしにくいため、無線周波数ビーコン（例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ（登録商標）、ＲＦＩＤ等）を使用するのと比べて有益である可能性があり、また、必要とする画像撮像の解像度をより低くすることができ、且つ／又は、画像撮像装置に対する可視のマークの位置にそれほど依存しないことが可能となるため、明白に可視のマーク（例えば、ＱＲコード（登録商標））を使用する場合と比べても有益である可能性がある。また、実施形態において、符号化光は、画像の撮像に使用されるものと同じカメラによって撮像することができ、追加的なセンサの必要を回避する。
【００１１】
実施形態において、メタデータに基づいて付与される効果は、合成画像の第１及び第２のエリアの前記部分を除去する、又は不鮮明化する（例えば、ぼかす）ことを含む。或いは、前記効果は、合成画像が第１及び第２のエリアの前記部分のいずれかを含んでいる場合は、合成画像が記憶、転送、又はコピーされるのを防止することを含む。
【００１２】
別の代替法として、効果はプライバシーのためである必要はなく、見る者に情報を提供する、又はその他の形で合成画像を強化するものである。したがって、前記効果は、合成画像の第１及び第２のエリアの前記部分の上にグラフィック要素を重ねること、並びに／又は、第１及び第２のエリアの前記部分との関連で合成画像の上にグラフィック要素を重ねることを含む。例えば、効果は、合成画像の該当エリアの上若しくは近傍に重ねられた、「販売中」の標示などのメッセージやビジネスの名称を含み、且つ／又は、関連するエリアを強調表示することを含む。
【００１３】
実施形態において、信号検出モジュールは、前記光を生成する光源の位置を検出し、検出された光源の位置と、第１の画像と第２の画像との間の決定された空間的関係とに基づいて、合成画像内でメタデータが適用される範囲を決定し、それにより第１及び第２のエリアの前記部分を決定するように構成される。
【００１４】
例えば、メタデータは、画像処理モジュールが、前記物理空間内の光源の位置から指定された半径内の物を示す合成画像の部分を不鮮明化する又は除去すべきことを指定する（例えば、光源の位置から１０ｍ又は２０ｍの半径内にあるすべての物体及び他の風景をぼかす）。この場合、画像処理モジュールは、合成画像内の前記範囲（すなわち、メタデータが適用される範囲）を、前記物理空間内で光源の位置から指定された半径に対応する範囲として決定するように構成される。
【００１５】
実施形態において、ステッチモジュールは、物理空間の第１の領域と第２の領域との間の空間的関係に基づいて第１の画像と第２の画像との間の前記空間的関係を決定するように構成される。例えば、ステッチモジュールは、撮像の時に測位システムによって検出された、第１及び第２の画像が撮像された位置に基づいて（例えば、カメラ又はカメラ搬送車両によって捕捉されたＧＰＳ座標に基づいて）、物理空間の第１の領域と第２の領域との間の空間的関係を決定するように構成される。
【００１６】
それに代えて、又は加えて、ステッチモジュールは、第１及び第２の画像に適用される画像認識に基づいて（すなわち、第１及び第２の画像内の認識可能な物体の部分を互いに突き合わせることにより）、第１の画像と第２の画像との間の前記空間的関係を決定するように構成される。
【００１７】
特に好ましい応用例では、画像処理装置は、前記効果を含む合成画像を、ストリートビューサービスの一部としてオンラインで利用可能にするようになされる。
【００１８】
さらなる実施形態において、ステッチモジュール及び／又は信号検出モジュールは、適宜、本明細書に開示される画像処理機能のいずれかに従って動作を行うように構成される。
【００１９】
本明細書に開示される別の態様によれば、本明細書に開示されるいずれかの実施形態による画像処理装置と、第１及び第２の画像を撮像するように構成されたカメラとを備えるシステムが提供される。実施形態において、カメラは車などの車両に搭載され、その車両があちこちを走行して、第１及び第２の画像を含むその周囲環境の画像を体系的に収集し、進行しながらそれらの画像が撮像された各自の場所（例えば、ＧＰＳ座標）を記録する。収集された画像及びそれに関連付けられた場所は、ステッチモジュールにより使用されて合成画像を作成することができる。
【００２０】
本明細書に開示される別の態様によれば、物理空間の第１の領域の第１の画像と、前記物理空間の第２の領域の第２の画像とを受け取るステップと、第１の画像と第２の画像との間の空間的関係を決定し、それにより第１の画像と第２の画像とをつなぎ合わせて、第１の画像から導出された第１のエリアと第２の画像から導出された第２のエリアとを含む合成画像にするステップと、第１の画像の撮像時に、前記物理空間の第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号を検出するステップであって、埋め込み信号は、前記物理空間の少なくとも部分に関係するメタデータを伝達する、ステップと、検出されたメタデータに基づいて、合成画像の第１のエリアの少なくとも部分に効果を付与すると共に、検出されたメタデータ及び決定された第１の画像と第２の画像との間の空間的関係に基づいて、第１のエリアを越えて広がる合成画像の第２のエリアの少なくとも部分に効果を付与するステップと、を有する方法が提供される。
【００２１】
本明細書に開示される別の態様によれば、コンピュータ可読記憶媒体に具現化された、且つ／又はそこからダウンロード可能なコードを備えたコンピュータプログラム製品が提供され、コードは、信号処理装置で実行されたときに、物理空間の第１の領域の第１の画像と、前記物理空間の第２の領域の第２の画像とを受け取る動作と、第１の画像と第２の画像との間の空間的関係を決定し、それにより第１の画像と第２の画像をつなぎ合わせて、第１の画像から導出された第１のエリアと第２の画像から導出された第２のエリアとを含む合成画像にする動作と、第１の画像の撮像時に、前記物理空間の第１の領域の少なくとも部分を照光する光に埋め込まれている埋め込み信号を検出する動作であって、埋め込み信号は、前記物理空間の少なくとも部分に関係するメタデータを伝達する、動作と、検出されたメタデータに基づいて、合成画像の第１のエリアの少なくとも部分に効果を付与すると共に、検出されたメタデータ及び決定された第１の画像と第２の画像との間の空間的関係に基づいて、第１のエリアを越えて広がる合成画像の第２のエリアの少なくとも部分に効果を付与する動作と、を行うように構成される。
【００２２】
実施形態において、本明細書に開示される画像処理機能のいずれかに従って、上記方法は動作を含み、又はコンピュータプログラムは動作を行うように構成される。
【００２３】
本開示の理解を助け、実施形態がどのように実施されるかを示すために、例として添付図面を参照する。
【図面の簡単な説明】
【００２４】
【図１】画像を撮像し、つなぎ合わせるシステムの概略図である。
【図２】あるシーンの２つの個々に撮像された画像の概略図である。
【図３】２つの個々に撮像された画像からつなぎ合わされた合成画像の概略図である。
【図４】画像に関して検出されたメタデータに基づいてぼかされた合成画像の概略図である。
【図５】画像に関して検出されたメタデータに基づいて情報が重ねられた合成画像の概略図である。
【発明を実施するための形態】
【００２５】
以下に、画像撮像装置に向かって発される符号化光を使用して、画像撮像装置にメタデータ（プライバシー設定など）を提供するシステム及び方法を説明する。このメタデータは、次いで、撮像された画像の処理で使用される。しかし、単一のシーン（例えば、特定の道路の左側）が単一の画像の中に撮像されるのではない。そうではなく、複数の小さい画像を撮影し、それらを「つなぎ合わせて」、そのシーンを包含する大きな画像を作成する。これに対応するために、本方法は、（ｉ）物理空間内の第１の領域の、符号化光からなる第１の画像データを撮像すること、（ｉｉ）物理空間内の、第１の領域とは異なる（且つ部分的に第１の領域と重なる場合もある）第２の領域の第２の画像データを撮像すること、（ｉｉｉ）第１の領域と第２の領域との間の空間的関係に基づいて、第１の画像データと第２の画像データとの間の空間的関係を決定すること、（ｉｖ）少なくとも第２の領域に関係するメタデータを符号化光から抽出すること、並びに（ｖ）抽出されたメタデータ、及び決定された第１の領域と第２の領域との間の空間的関係に基づいて、少なくとも第２の画像データを処理することを含む。
【００２６】
図１は、本開示の実施形態によるシステムを示す。システムは、協働する３つの構成要素である、（ａ）符号化光を発する照明装置１０２と、（ｂ）写真画像を撮像する画像撮像装置１０４と、（ｃ）画像を処理し、実施形態によってはそれらをストリートビューサービスの一部として利用できるようにする画像処理装置１０６と、を備える。
【００２７】
照明装置１０２は、ユーザがメタデータを関連付けたい１つ又は複数の物体１０１を含んでいるシーン１００（すなわち、物理空間）の一部として設置される。例えば、１つ又は複数の物体１０１は１つ又は複数の建物を含み、ユーザはそれらの建物の所有者である。後でより詳細に解説するように、メタデータは、照明装置１０２によって発される光の中に埋め込まれた信号を利用して含められる。メタデータは、例えば、ストリートビューサービス内で出現する時に建物１０１をぼかしたいなど、ユーザが、ストリートビューサービスによって一定の度合いのプライバシーが尊重されることを望んでいる旨の指示を含む。或いは、メタデータは、例えば建物１０１が売りに出されていることなど、ストリートビューサービスを通じて見られた時に、建物又は物体１０１に関連付けてユーザが表示させたい情報を含む。
【００２８】
画像撮像装置１０４は、人間又はコンピュータのオペレータによって運転される車両１０５に搭載されたカメラユニットの形態を取る。例えば、車両は、車、バン、オートバイなどの自動車の形態を取るか、又は、自転車や手押し車などの人力車両の形態を取る。或いは、カメラユニット１０４は、車両１０５に乗っているか又は歩行する、人間のオペレータとしての人によって携行される。車両１０５及び／又は人間のオペレータは、ストリートビューサービスの提供者によって運営又は委託される事業の一部とすることができる。この場合、車両１０５又はオペレータは、通例、対象となる環境（例えば、特定の町又は都市）内の道路網を体系的に動くように命じられる。この体系的な行程の間、カメラ１０４は、各道路に沿ったそれぞれの異なる位置で複数の画像（写真）を撮像し、進行しながらそれらの画像をストリートビューサービスに送付するようになされる。或いは、カメラ１０４のオペレータは、ストリートビューサービスと特別な関連を持たないが、その都度自主的に画像を送付するユーザである場合もある（十分な数のユーザがこれを行うと、ストリートビューサービスは徐々に十分な画像のデータベースを構築していくことができる）。
【００２９】
いずれの場合も、画像は、ストリートビューサービスのサーバの形態である画像処理装置１０６に送付される（本明細書で言うサーバは、１つ又は複数の地理的場所にある１つ又は複数のサーバユニットを備える論理エンティティ又は機能エンティティを指すことに留意されたい）。さらに、実施形態では、カメラ１０４（又は、それと連携して動作する付随装置）は、測位システムのクライアントを備え、その測位システムを使用して、各画像が撮像された場所を検出するようになされる。例えば、測位システムは、ＧＰＳ（全地球測位システム）など、衛星を利用した測位システムである。カメラ１０４（又は付随装置）は、それにより、各個々の画像が撮像されたそれぞれの地理的位置を、各画像に関連付けて記録し、その位置を各個々の画像と関連付けてサーバ１０６に送付するようになされる。
【００３０】
サーバ１０６はステッチモジュール１０８を備え、これは、当技術分野でそれ自体が知られているパノラマ画像処理技術に基づいて、画像のうち隣り合った画像をつなぎ合わせてパノラマの全体像にするようになされる。実施形態では、ステッチモジュールは、撮像時に収集される画像の地理的場所（例えば、ＧＰＳ座標）に基づいてこれを行うように構成される。それに代えて、又は加えて、つなぎ合わせは物体認識技術に基づいて行うこともでき、すなわち、ステッチモジュール１０８が、ある物体の一方の面又は部分と、別の画像にある同じ物体の別の（好ましくは重なっている）面又は部分とを認識した場合、この認識を使用して、物体のそれらの部分を含んでいる隣接する画像をつなぎ合わせることができる。ステッチモジュール１０８は、サーバ１０６の１つ又は複数のメモリ装置（例えば、ハードディスクなどの磁気メモリ装置、又はフラッシュメモリなどの電子記憶装置）に記憶されるソフトウェアとして実装され、サーバ１０６（又は、より一般的に画像処理装置）の１つ又は複数のプロセッサで実行するようになされてよい。或いは、ステッチモジュール１０８が、専用のハードウェア回路、又は構成可能若しくは再構成可能なハードウェア（例えば、ＰＧＡ若しくはＦＰＧＡ）、又はハードウェアとソフトウェアの任意の組み合わせとして実装され得ることも排除されない。
【００３１】
サーバ１０６は、つなぎ合わせによって作成された、結果として得られたパノラマを、インターネット１１２などのワイドエリアネットワークを介してアクセス可能な仮想化されたビューの形態で、公衆が利用できるようにするようになされる。すなわち、スマートフォン、タブレット、ラップトップ又はデスクトップコンピュータなどのユーザ端末１１４のユーザは、インターネット１１２を介して（例えば、ユーザ端末１１４で動作するウェブブラウザ又は専用アプリを使用して）、サーバ１０６に接続し、それにより、ステッチモジュール１０８によって行われたつなぎ合わせによって作成されたパノラマの仮想ビューを閲覧し、好ましくはその中を自在に見て回ることができる。例えば、ストリートビューサービスの提供者は、オンライン地図サービスの提供者でもある場合があり、町、都市、郡、州、国、さらには全世界の道路地図を、インターネット１１２を介して利用できるようにしている。この場合、ユーザは、自身のユーザ端末１１４上でウェブブラウザ又は専用アプリを実行し、それがユーザ端末１１４を操作して、インターネット１１２を介してサーバ１０６からオンライン地図サービスにアクセスする。ユーザ端末１１４は、このようにしてユーザに地図（又はその一部）を表示する。ユーザは次いで、地図上で特定の地点、例えば特定の道路に沿った特定の地点を選択することができる。それに応答して、地図サービスは、選択された場所でストリートビューサービスにリンクし、ストリートビューサービスが、インターネット１１２を介して、その場所に対応する仮想ビューをユーザ端末１１４に提供し、それがユーザ端末１１４の画面を介して表示される。ユーザは、次いで、ユーザ端末１１４のユーザインターフェースを使用して、角度を変える、異なる位置に移動する、及び／又は拡大縮小するなどにより、仮想ビューを自在に操作することができる。
【００３２】
このように、上記で概説したシステムに基づいて、カメラ１０４は、その周囲にある物理的な場所（又は、道路の片側等）の複数の画像を撮像し、各画像は、物理空間内のある領域に関係する。例えば、車１０５が前に１メートル移動するごとに画像が撮影される。画像間に重なりがある可能性が非常に高いが、これは、複数の領域をカバーした大きい画像を作成するために個々の画像をより好適につなぎ合わせることが可能になるので、画像処理ステップのために好都合である。写真を撮る間に撮像装置１０４がどれほど移動したかについての情報が入手できない場合は、少なくともそれらの画像のうち重なっている部分に基づいて、画像から空間的データを抽出することもできる。いずれの場合も、結果として得られる仮想化されたビューは、次いで、ストリートビューサービス等の形態でユーザが利用できるようにすることができる。
【００３３】
図２を参照して、説明のために、１つ又は複数の建物１０１を含むシーン１００（すなわち、物理空間）を検討する。ここで、シーン１００は、異なる位置から撮影された２つ（又はそれ以上）の異なる画像２００ａ、２００ｂにまたがってカメラ１０４によって撮像され、画像２００ａ、２００ｂはある程度重なっているが、完全には一致しない。例えば、シーン１００は、所与の関係者によって所有若しくは賃借されている学校、又は所与の関係者によって経営されている企業の用地などの、建物又は建物群１０１を含む。しかし、建物又は建物群１０１が単一の関係者の所有、責任、又は利益下にあり得るにも関わらず、建物又は建物群１０１は大きいために、ストリートビューサービスによって撮像された複数の画像２００ａ、２００ｂにわたって出現し、すなわち、建物又は建物群１０１の全体は、画像２００ａ、２００ｂのどちらの１つの画像にも完全には収まらない。
【００３４】
それでも、図３に示されるように、異なる隣接する画像２００ａ、２００ｂは、ステッチモジュール１０８によってつなぎ合わされて合成画像３００とされ、合成画像３００は、第１の撮像された画像２００ａに対応する第１のエリア３００ａと、第２の撮像された画像３００ｂに対応する第２のエリア３００ｂとを含む（合成画像の第１及び第２のエリア３００ａ、３００ｂは、好ましくは、つなぎ合わせを支援するために重なっていることに留意されたい）。したがって、建物又は建物群１０１全体が合成画像３００に出現し、この形態でストリートビューサービスを通じて公衆に見えるようになる。建物又は建物群１０１に利害関係を持つ関係者（例えば、所有者）が、建物又は建物群１０１の画像に関してメタデータを適用することを望み、それが、個々の１つの画像２００ａにある部分だけでなく、関連する建物又は建物群１０１が写っている合成画像３００のすべての部分にわたって適用されることを望む可能性がある。例えば、関係者は、ストリートビューサービス内で建物又は建物群１０１全体が検閲される（例えば、ぼかされる）ことを望み、又は建物若しくは建物群１０１全体を販売中として強調表示することを望む。
【００３５】
本開示の実施形態によれば、メタデータの適用を望む関係者は、シーン１００内に照明装置１０２を設置し、照明装置は、関連する建物又は建物群１０１に取り付けられるか、その内側にあるか、又はその近傍にあるかのいずれかである。例えば、照明装置１０２は、建物若しくは建物群１０１の外側面に固定された屋外照明器具、又は、建物若しくは建物群１０１の敷地内に置かれた固定型若しくは自立型の照明器具、さらには、建物若しくは建物群の内側に位置しているが、窓若しくは他の開口部を通して見ることができる照明器具である。照明装置１０２は、それが発する可視光の中に埋め込み信号を含めるように構成され、信号は、建物又は建物群１０１に関係するメタデータを含んでいる。照明装置１０２は、建物若しくは建物群１０１又はシーン１００を照光することを主要な目的とする汎用照光システムの一部であってよく、埋め込み信号は、汎用照光の中に埋め込まれる。或いは、照明装置１０２は、光を利用して信号を発するという特化した目的を持つ専用の装置であってもよい。
【００３６】
埋め込み信号を発するための照明装置は、それ自体が当技術分野で知られている。１つの例は符号化光を使用することであり、それにより、光源１０２によって発される光の強度が、人間の眼に不可視（又は、少なくとも許容できる程度に不可視）となるのに十分に高い周波数で変調される。実施形態では、変調は、単一のトーン（正弦波）又は単一の振動波形（例えば、矩形波）を備え、このトーン又は波形の周波数が、埋め込まれた符号の役割を果たす（すなわち、異なる光源がそれぞれ、関連するシステム内で固有である、異なる固有の変調周波数を持つ光を発する）。この符号を、次いで、受信側で行われる照合を利用して所定の意味に対応付けることができる。或いは、より複雑なデータを埋め込むために、より複雑な変調方式が可能である。例えば、周波数キーイング方式に従ってデータを表すように変調周波数を変化させることができ、又は位相キーイング方式に従ってデータを表すように変調周波数の位相を変化させることができ、又は振幅キーイング方式に従ってデータを表すように変調の振幅を変化させることができる（例えば、マンチェスター符号）。そのような場合、伝達すべき情報は、光の中に明示的に埋め込むことができ、又は、ここでも受信された符号に基づいて受信側で照合することができる。
【００３７】
光に信号を埋め込む他の形態は、光のスペクトル組成を使用して情報を伝達すること、或いは建物若しくは建物群１０１又はシーン１００を照光する照光の中に目立たない空間的パターンを埋め込むことを含む。
【００３８】
いずれかのそのような手段により、照明装置１０２は、したがって、その場所にある特定の建物又は建物群１０１など、物理的な場所１００に関係する任意の所望のメタデータを伝える信号が埋め込まれた光を発するように構成することができる。そのようなメタデータは、どのプライバシー設定をユーザが選択したかなどのプライバシーに関係するデータとすることができ、例えば、人々若しくは人々の顔が写っている画像データをぼかす、又は光源から３メートル以内の画像は撮像しない、又は光源の周囲２０メートルをぼかす（＝ＢＬ＿２０＿ＣＴＲ）などである。或いは、メタデータは、シーン１００に関係する情報を提供するような他のデータ、例えば、「販売物件」、「１月２日に不用品セール開催」、又は「この建物の中に位置する店舗の名前は『Ｈｕｇｈ’ｓ  Ｐｈａｒｍａｃｙ』、『Ｓｕｐｅｒ  Ｂｕｒｇｅｒｓ』等」を含んでもよい。
【００３９】
画像撮像装置１０４は、当技術分野で知られる任意の適切な形態を取ることができる。画像撮像装置１０４は、通過する時にシーン１００の画像２００ａ、２００ｂを撮像すると共に、好ましくは撮像された画像自体の一部として、符号化光も撮像するように構成される。例えば、カメラ１０４は、画像センサのピクセルが複数のライン（例えば、水平行）にグループ化されたロールシャッターカメラの形態を取り、カメラ１０４は、それらの各ラインを順に、わずかに異なる連続した時間にラインごとに露光することによって画像を撮像する。そのようにして各ラインは、光源１０２からの光をわずかに異なる時間に、したがって異なる変調の位相において撮像する。ラインレートが変調周波数に対して十分に高い場合、これは、したがって、変調が画像２００ａ内で検出されることを可能にする。符号が１フレーム中のライン数に対して十分に短い場合、符号を単一のフレーム中で検出することができ、そうでない場合、符号は、ビデオ画像の複数のフレームにわたって検出することができる。また、カメラがロールシャッターカメラではなく、全フレームを一度に露光するグローバルシャッターカメラである場合は、フレームレートが変調周波数に対して十分に高ければ、符号化光をなおビデオ画像から検出することができる。適切な符号化光技術は、それ自体が当業者によく知られている。
【００４０】
画像処理モジュール１０６は、カメラ１０４により撮像され送付された画像から符号化光信号を抽出するようになされた符号化光検出モジュール１１０を備える。符号化光検出モジュール１１０は、サーバ１０６の１つ又は複数のメモリ装置（例えば、ハードディスクなどの磁気メモリ装置、又はフラッシュメモリなどの電子記憶装置）に記憶されるソフトウェアとして実装され、サーバ１０６（又は、より一般的に画像処理装置）の１つ又は複数のプロセッサで実行するようになされてよい。或いは、符号化光検出モジュール１１０が、専用のハードウェア回路、又は構成可能若しくは再構成可能なハードウェア（例えば、ＰＧＡ若しくはＦＰＧＡ）、又はハードウェアとソフトウェアの任意の組み合わせとして実装され得ることも排除されない。
【００４１】
符号化光が抽出されると、メタデータ及び関連する措置を決定することができる。実施形態では、これは、ストリートビューサービスを通じて利用可能になっている画像３００を修正することを含む。例えば、メタデータにより、ビューの特定の建物若しくは建物群の周辺、又は光源１０２の周囲の特定の半径がぼかされる。
【００４２】
このように、ストリートビューサービスの画像撮像装置１０４は、第１の画像２００ａ中に出現する符号化光メタデータを撮像し、公衆が利用できるようにされたビュー３００をそれに応じて適応させる。
【００４３】
図示される例では、光源１０２が第１の画像２００ａの中に出現している。シーンに透かしを入れる手段として符号化光を使用することが知られており、よって、符号化光を撮像した所与の画像はいずれも透かしを含むことになる（例えば、以前の応用例では、それにより不正な画像を後に科学捜査的に識別できるようにする）。しかし、これまでは、符号化光が第２の画像２００ｂ内で必ずしも検出可能ではないにも関わらず、シーン１００の第１の領域をカバーする第１の画像２００ａ内で検出される符号化光が、実際には、第２の画像２００ｂだけに出現するシーン１００の第２の領域もカバーする意図があり得ることは認識されていなかった。
【００４４】
本発明の実施形態によれば、これは、１つの画像２００ａ内で検出された符号化光メタデータを別の隣接する画像２００ｂに適用するためにステッチモジュール１０６によって決定される、空間的関係を使用して対処される。すなわち、符号化光検出モジュール１１０は、第１の撮像された画像２００ａから検出されたメタデータに基づいて何らかの効果４０１（例えば、図４及び図５を参照）を付与するために、合成画像３００を修正するように構成され、ここで、この効果は、第１の撮像された画像２００ａから導出された合成画像３００のエリア３００ａ（又はその一部）だけでなく、第２の撮像された画像２００ｂから導出された合成画像３００のエリア３００ｂ（又は同じくその一部）にも付与される。
【００４５】
解説されるように、ストリートビューサービスの車１０５に搭載されたカメラユニットなどの画像撮像装置１０４は、その周囲にある物理的な場所（又は、道路の片側等）の画像を複数撮像する。各画像は、物理空間内のある領域に関係し、例えば、車が前に１メートル移動するごとに画像が撮影され、画像間に重なりがある可能性が非常に高いが、これは、複数の領域をカバーした大きい画像３００を作成するために個々の画像２００ａ、２００ｂを「つなぎ合わせ」るのを支援するために好都合である。
【００４６】
画像の撮像の一部として、照明装置１０２によって発された符号化光も撮像される。様々な事例において、照明装置１０２は、画像２００ａ内に直接撮像される（すなわち、符号化光の供給源を特定することができる）か、又は符号化光は直接受光されるが、照明装置１０２は見えない（例えば、照明装置が部屋の中に位置しており、光が窓を通って出射してカメラ１０４に向かう）か、又は符号化光は間接的に受光される（すなわち、光が物体で反射してカメラ１０４に向かう）。
【００４７】
画像処理装置１０６は、この時点で様々な領域に関係する複数の画像を得ている。少なくとも１つの画像２００ａを撮像する過程で、符号化光が撮像されている（符号化光の撮像は、画像２００ａの撮像と同じステップの一部であっても、又は別個のステップであってもよく、例えば、画像２００ａが撮像されるのと同時、その直前又はその直後であり、また、同じセンサ、すなわちカメラ１０４を使用することができるが、これは必ずしも必須ではないことに留意されたい）。メタデータは、符号化光から抽出され、画像２００ａ、２００ｂの複数を処理する際に使用することができる。画像処理装置１０６は、撮影された画像２００ａ、２００ｂと、符号化光から抽出されたメタデータとを使用し、第１の画像２００ａと第２の画像２００ｂとの間の関係を決定する。第１の画像２００ａは、（これと同じ画像を撮影する一部として、又は別個のステップで）符号化光データが撮像される物理空間の第１の領域に関係する。第２の画像は第２の領域に関係する。第１の領域と第２の領域との間には空間的関係があり、この関係を決定することによって、第１の画像２００ａと第２の画像２００ｂとの間の空間的関係も決定される。次いで、第１の領域内で撮像された符号化光データを、第２の（又はさらに他の）画像２００ｂに適用することができる。
【００４８】
光源によって発される符号化光に埋め込まれたメタデータは、様々な種類の要求又は情報を指すことができる。例えば、メタデータは、画像（又はその一部）をぼかすべきこと、例えば「この家をぼかす」、又は「ＢＬ＿２０＿ＣＴＲ」を指定する（＝光源の周囲２０メートルをぼかす。画像処理装置１０６に、つなぎ合わされた画像の中で光源１０２の場所を決定し、空間情報に基づいて半径を決定し、光源１０２から２０メートル以内をぼかすように命令する）。或いは、メタデータは、例えば、「販売中」、「ストリートビューサービスで会社名を表示する」、又は「下の階＝Ｍａｉｎ  ｓｔｒｅｅｔ  ５ａ；上の階＝Ｍａｉｎ  ｓｔｒｅｅｔ  ５ｂ」といった住所データなど、画像（又はその一部）と関連付けて情報を表示すべきことを指定することもできる。
【００４９】
符号化光の応用例の限られた帯域幅を考慮すると、そのような情報は直接符号化する必要はなく、代わりに、符号化されたメタデータは、このデータにリンクするウェブサイト又はオンラインサービスへの参照とすることができる。メタデータへのリンクは、それ自体がさらなる情報へのリンクを含むことができ、例えば、建物の室内の写真を室外のビューにリンクすることができる。
【００５０】
実施形態において、メタデータは第１の画像２００ａにリンクされ、撮像後に、カメラ１０４よりも高い演算能力を持つサーバ１０６などの別の装置によって後の段階でさらなる処理が行われる。或いは、メタデータは、撮像装置（カメラ）１０４に直接要求を実行させてもよい。
【００５１】
例示的な使用事例として、一軒の家が複数の画像２００ａ、２００ｂに撮像され、それらの画像をつなぎ合わせて単一の画像３００を作成すると、画像３００は完全な家を含んでいる。符号化光は、単一の画像２００ａのみに撮像されているが、画像２００ａ、２００ｂは空間的に関係があるので（そして、このことがつなぎ合わせの根拠となる）、処理は２つの（又はさらに多くの）画像２００ａ、２００ｂにわたって付与される。例えば、照明装置１０２によって発された符号化光が第１の画像２００ａから抽出され、その符号化光が、家をぼかすべきことを指定する。画像処理の一部として、合成画像３００内で家が認識され、画像３００のうち家を含む部分にぼかしが行われ、ぼかしは、撮像された第１及び第２の画像２００ａ、２２０ｂの両方からそれぞれ導出されたエリア３００ａ、３００ｂの両方に写っている家の部分に及ぶ。
【００５２】
より複雑な例が図４に示される。ここでは、メタデータは、家又は建物群１０１それ自体をぼかすべきことを指定するのではなく、符号化光源１０２の周囲の、例えば１０メートルの指定された半径に対応する領域をぼかすべきことを命じる。ここで、どのピクセルがこの１０メートルのゾーンに関係するかを決定するために、空間情報が必要となる。例えば、ストリートビューサービスが、レーザを利用した距離測定を使用してそのような情報を捕捉し、この情報を撮像された画像２００ａ、２００ｂにタグ付けするか、又は、そのような空間情報を抽出するための他の選択肢には、既知の距離だけ離間して既知の角度に置かれた２つのカメラによる立体画像を使用すること、若しくは、認識された特定の物体の既知の大きさ（例えば、ドアの幅）に基づいて画像中の物体の寸法を決定すること、若しくは任意の他の適切な画像認識技術が含まれる。この情報に基づいて、画像処理装置１０６（例えば、サーバ）の符号化光検出モジュール１１０は、物理空間１００の中で光源１０２から１０メートルの半径（又はその近似）に対応する、つなぎ合わされた画像３００の部分にぼかし効果４０１を付与する。照明装置１０２が画像２００ａ、３００内で見えない（例えば、隠されている、且つ／又は光の反射だけが撮像されている）場合は、追加的な処理が必要となることもある。例えば、撮像された光の方向や、画像内で見えている光の陰影又は減退等に基づいて、照明装置１０２のおよその位置を決定することができる。
【００５３】
別の例が図５に示される。ここでは、メタデータは、特定の建物に関して表示すべき情報を指定する。この場合、合成画像３００に追加される効果４０１は、画像の上に情報を重ねることを含む。例えば、効果４０１は、関連する建物を合成画像３００内で強調表示すること、及び／又は「販売中」などのメッセージを追加することを含む。例えば、強調表示の目的で、建物の境界が、物理空間１００内での地理的座標としてメタデータによって指定され、符号化光検出モジュール１１０がその座標を合成画像３００内の座標に変換する。同様に、メッセージの目的で、メタデータは、例えば、地理的座標の特定の組など、物理空間１００に対してこのメッセージを表示する位置を指定することができ、それらが画像の座標に変換される。或いは、メタデータは「この建物に適用」と指定し、符号化光検出モジュール１１０は、追加的に画像認識技術を適用して符号化光の供給源１０２に最も近い建物を認識し、これを利用して、画像３００内の適切な箇所に強調表示及び／又はメッセージを適用する。
【００５４】
上記の実施形態は単なる例として説明されたことが理解されよう。
【００５５】
例えば、本開示の適用可能性はストリートビューサービスに限定されない。また、画像処理装置１０６は、サーバ内に実装されることに限定されない。例えば、本明細書に開示される技術は、構成要素となる撮像画像がそれにより撮像される個人カメラユニット若しくはスマートフォン若しくはタブレットなどのパーソナルコンピュータユニット、又は、撮像された画像がダウンロードされるデスクトップ若しくはラップトップコンピュータ上で作成されたパノラマ画像にメタデータを適用するためにも使用することができる。これらの場合、ステッチモジュール１０８及び符号化光検出モジュール１１０を含む画像処理装置１０６は、サーバ１０６ではなく、パーソナルコンピュータユニットに実装され得る。或いは、パノラマ画像が個人的に使用するものである場合であっても、サーバ上に実装された画像処理装置１０６に処理を委ねることができる。ただし、公衆向けのストリートビューサービスの一部としてではなく、ユーザ自身の個人的な画像のための個人用のパノラマ画像処理サービスとして委ねる。
【００５６】
さらに、メタデータは、ぼかし又はその他の同様の形態の不鮮明化だけでなく、他の種類の検閲効果を指定してもよい。例えば、メタデータは、画像がメタデータのプライバシー設定が関係する部分を含んでいる場合には、画像の撮像を一切許可すべきでないことを指定し、それにより、メタデータが関係する部分（例えば、特定の建物又は建物群１０１のどこかの部分）を含んでいる画像２００ａ、２００ｂ、３００は、撮像された時にどの不揮発性形態でも記憶することは許可されず、代わりに直ちに削除しなければならない。この場合、画像処理装置１０６は、撮像カメラユニット１０４の一部として実装され、画像処理装置１０６の符号化光検出モジュール１１０は、問題となる画像が一時的に保持されている一時的ロジック（例えば、ＲＡＭ、レジスタ、又はラッチ）から画像を直ちに削除することにより、メタデータによって指定されるプライバシー設定に自動的に働きかけるようになされる。
【００５７】
別の例として、メタデータは、そのメタデータが関係する部分（例えば、特定の建物又は建物群１０１のどこかの部分）を含んでいる画像２００ａ、２００ｂ、３００はいずれも、別の外部のコンピュータユニットなどの他の外部の宛先に転送されることを許可されないことを指定する（又は、１つ又は複数の特定の指定された禁止宛先への転送が許可されない、若しくは、１つ又は複数の特定の指定された承認済み宛先のみへの転送が許可される）。この場合、画像処理装置１０６はここでも、撮像カメラユニット１０４、又はそのような画像を受信し配布する可能性のある他のコンピューティングユニット（例えば、別のユーザ端末又はサーバ）の一部として実装され、画像処理装置１０６の符号化光検出モジュール１１０は、問題となる画像が受信及び／又は転送されることを自動的に阻止することにより、メタデータによって指定されるプライバシー設定に自動的に働きかけるようになされる。
【００５８】
さらに別の例として、メタデータは、そのメタデータが関係する部分（例えば、特定の建物又は建物群１０１のどこかの部分）を含んでいる画像２００ａ、２００ｂ、３００はいずれも、ソーシャルメディアサービス又は他の同様の公衆向けサービスへのアップロードを許可されないことを指定する（又は、１つ又は複数の特定の指定された禁止サービスへのアップロードが許可されない、若しくは、１つ又は複数の特定の指定された承認済みサービスのみへのアップロードが許可される）。この場合、画像処理装置１０６は、ここでも、撮像カメラユニット１０４、又はそのような画像を受信し配布する可能性のある他のコンピューティングユニット（例えば、別のユーザ端末）、又はその画像を公開する可能性のある公衆向けサービスをホストする任意のサーバの一部として実装され、画像処理装置１０６の符号化光検出モジュール１１０は、問題となる画像がアップロード及び／又は公開を承認されることを自動的に阻止することにより、メタデータによって指定されるプライバシー設定に自動的に働きかけるようになされる。
【００５９】
さらに、本開示の範囲は、建物又は建物の建物群１０１との関係でメタデータを適用することに限定されない。一般に、メタデータは、例えば、１つ又は複数の特定の建物、人々、植物、芸術作品、及び／又は展示物等を含み得る、任意のシーン（任意の物理空間）に関係する。
【００６０】
さらに、本明細書の教示の適用可能性は、２つの隣接した画像に限定されない。一般に、任意の２つ以上の画像間の空間的関係を使用して、１つの画像に関連して検出された埋め込み光信号からメタデータを取り出し、そのメタデータを、他の１つ又は複数の空間的に関係する画像又はその一部に適用することができる。
【００６１】
さらに、本開示の範囲は静止画像に限定されず、他の実施形態では、類似する技術を使用して隣接するビデオ画像をつなぎ合わせ、そのような画像の１つから検出された光に基づくメタデータを別の画像に適用することができる。
【００６２】
図面、本開示、及び添付の特許請求の範囲から、特許請求される本発明を実施する際に、開示される実施形態の他の変形例を当業者によって理解し、実施することができる。特許請求の範囲において、単語「を含む」は他の要素又はステップを排除せず、不定冠詞の「ａ」及び「ａｎ」は複数形を排除しない。単一のプロセッサ又は他のユニットが、特許請求の範囲に記載されるいくつかの項目の機能を実現することができる。特定の要素が相互に異なる従属請求項に記載されているという単なる事実は、それらの要素を組み合わせて効果的に使用できないことを意味しない。コンピュータプログラムは、他のハードウェアと共に又はその一部として供給される光学記憶媒体又は固体媒体などの適切な媒体で記憶／配布することができるが、インターネット又は他の有線若しくは無線の遠隔通信システムを介するなど、他の形態で配布されてもよい。特許請求の範囲内に参照符号がある場合、範囲を制限すると解釈すべきでない。
【図１】
2018515840.tif 000003
【図２】
2018515840.tif 000004
【図３】
2018515840.tif 000005
【図４】
2018515840.tif 000006
【図５】
2018515840.tif 000007
【国際調査報告】
2018515840.tif 000008
2018515840.tif 000009
2018515840.tif 000010