(57)【特許請求の範囲】
【請求項１】
建物内の投影先にプロジェクタが投影した投影パターンを撮影した撮影画像が所定画像と一致するように前記所定画像を調整して生成された投影パターンを、前記プロジェクタで前記投影先へ投影し、
前記プロジェクタが投影した投影パターンに応じた遮光パターンで光を遮断する光遮断部を介して、前記プロジェクタが前記投影パターンを投影した前記投影先を背景とした撮影を撮影部にて行い、
前記撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価し、
空気の状態の評価結果に関する情報を出力する、
処理を情報処理装置が行う、情報処理方法。
【請求項２】
所定の気体を前記建物内へ流入させた状態で前記撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価する、
請求項１に記載の情報処理方法。
【請求項３】
前記建物内の気流量、気流速度又は気流方向を評価する、
請求項１又は請求項２に記載の情報処理方法。
【請求項４】
前記建物の３次元オブジェクトの画像に、評価した気流量、気流速度又は気流方向を可視化して表示する、
請求項３に記載の情報処理方法。
【請求項５】
前記撮影部が撮影した画像に基づいて、前記建物内で空気が滞留している箇所を特定する、
請求項１から請求項４までのいずれか１つに記載の情報処理方法。
【請求項６】
前記建物の３次元オブジェクトの画像に、特定した滞留箇所を可視化して表示する、
請求項５に記載の情報処理方法。
【請求項７】
第１時点にて前記撮影部が撮影した画像に基づく空気の状態の評価結果を記憶し、
前記第１時点より後の第２時点にて前記撮影部が撮影した画像に基づく空気の状態の評価を行い、
前記第１時点での評価結果及び前記第２時点での評価結果の変化に関する情報を出力する、
請求項１から請求項６までのいずれか１つに記載の情報処理方法。
【請求項８】
前記第１時点における前記建物内で空気が滞留している箇所を特定し、
前記第２時点における前記箇所の空気の滞留の変化に関する情報を出力する、
請求項７に記載の情報処理方法。
【請求項９】
前記建物内に設置された前記撮影部が周期的に撮影した画像に基づいて、前記建物内の空気の状態を周期的に評価し、
所定期間における評価結果の変化に関する情報を出力する、
請求項１から請求項８までのいずれか１つに記載の情報処理方法。
【請求項１０】
前記変化と予め定められた閾値とを比較し、
前記変化が前記閾値を超えた場合に警報を出力する、
請求項９に記載の情報処理方法。
【請求項１１】
偏光の方向を変更する事が可能な偏光部を介して撮影部が前記建物内の撮影を行い、
異なる２つの時点での撮影結果を比較して、前記建物内における偏光状態の変化を検出し、
検出した偏光状態の変化に基づいて前記建物内に付着した付着物を検出し、
検出した付着物に関する情報を出力する、
請求項１から請求項１０までのいずれか１つに記載の情報処理方法。
【請求項１２】
建物内の投影先に投影した投影パターンを撮影した撮影画像が所定画像と一致するように前記所定画像を調整して生成された投影パターンを、前記投影先へ投影するプロジェクタと、
前記プロジェクタが投影した投影パターンに応じた遮光パターンで光を遮断する光遮断部を介して、前記プロジェクタが前記投影パターンを投影した前記投影先を背景として撮影を行う撮影部と、
前記撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価する評価部、及び、前記評価部による空気の状態の評価結果に関する情報を出力する情報出力部を有する情報処理装置と
を備える、情報処理システム。
【請求項１３】
建物内の投影先にプロジェクタが投影した投影パターンを撮影した撮影画像が所定画像と一致するように前記所定画像を調整して生成された投影パターンに応じた遮光パターンで光を遮断する光遮断部を介して、前記プロジェクタが前記投影パターンを投影した前記投影先を背景として撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価する評価部と、
前記評価部による空気の状態の評価結果に関する情報を出力する情報出力部と
を備える、情報処理装置。
【請求項１４】
コンピュータに、
建物内の投影先にプロジェクタが投影した投影パターンを撮影した撮影画像が所定画像と一致するように前記所定画像を調整して生成された投影パターンに応じた遮光パターンで光を遮断する光遮断部を介して、前記プロジェクタが前記投影パターンを投影した前記投影先を背景として撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価し、
空気の状態の評価結果に関する情報を出力する
処理を実行させる、コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、建物内の空気の状態を評価する情報処理方法、情報処理システム、情報処理装置及びコンピュータプログラムに関する。
【背景技術】
【０００２】
新型コロナウイルスの集団感染が世界経済に大きな影響を与えている。三密（密閉、密集、密接）の状況は集団感染を招く可能性が高いとされ、飲食店又は映画館等の施設では三密の状況を避けるべく、様々な対策が実施されている。例えば飲食店では、一定の距離を保つように使用できる席を制限する、又は、席の間に敷居を設ける等の対策が行われている。また例えば電車又はオフィス等では、常に窓を開けておくなどの空気を循環させる対策が行われている。しかし、これらの対策により本当に集団感染を防ぐことができているのか、対策を実施した店舗又は施設等が確認する術はない。例えば、飲食店の席の間隔、席の間に設けられた敷居の位置及び大きさ等が、これらの席を利用する人の咳又はくしゃみによるしぶきを防ぐために十分ではない可能性がある。また例えば、窓を開けていても実際には空気が循環していない可能性、及び、扇風機又はエアコン（エアコンディショナー）等の送風により人から人へ空気を運んでいる可能性等がある。
【０００３】
特許文献１においては、気流の上流側で溶剤を蒸発させて気流中に溶剤蒸気を含ませ、気流の下流側で気流における溶剤蒸気の濃度分布を光学的に可視化することで、気流の乱れを溶剤蒸気の濃度分布として可視化する、気流の乱れを可視化する方法が提案されている。この方法では、可視化をシュリーレン法により行っている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−６４６７９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
感染症を防ぐための対策が十分であるか否かを確認するためには、例えば人が咳、くしゃみ又は会話等の際に発する空気の流れ又は空気の循環等を観察することが有効である。特許文献１に記載された気流の乱れを可視化する方法でも用いられているシュリーレン法は、空気等の屈折率の変化を可視化することができる方法であり、例えば室内の空気の流れ等を可視化することが期待できる。しかし、シュリーレン法による可視化を行うためにはシュリーレン光学系と呼ばれる特別な光学系を構築する必要があり、これまでに空気を可視化して感染症対策が十分であるか否かを評価するという事は行われていなかった。
【０００６】
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、空気の状態を評価するサービスを実現するための情報処理方法、情報処理システム、情報処理装置及びコンピュータプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
一実施形態に係る情報処理方法は、建物内の投影先にプロジェクタが投影した投影パターンを撮影した撮影画像が所定画像と一致するように前記所定画像を調整して生成された投影パターンを、前記プロジェクタで前記投影先へ投影し、前記プロジェクタが投影した投影パターンに応じた遮光パターンで光を遮断する光遮断部を介して、前記プロジェクタが前記投影パターンを投影した前記投影先を背景とした撮影を撮影部にて行い、前記撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価し、空気の状態の評価結果に関する情報を出力する処理を情報処理装置が行う。
【発明の効果】
【０００８】
一実施形態による場合は、空気の状態を評価するサービスを実現する事が期待できる。
【図面の簡単な説明】
【０００９】
【図１】本実施の形態に係る情報処理システムにて用いられる撮影装置の構成を説明するための模式図である。
【図２】本実施の形態に係る撮影装置の情報処理装置の構成を示すブロック図である。
【図３】背景画像及びカットオフグリッドの一例を示す模式図である。
【図４】投影用画像の修正を説明するための模式図である。
【図５】呼気等を可視化した画像の一例を示す模式図である。
【図６】偏光板の有無による撮影画像の差異を説明するための画像例である。
【図７】本実施の形態に係る情報処理システムが提供するサービスの概要を説明するためのフローチャートである。
【図８】本実施の形態に係る端末装置の構成を示すブロック図である。
【図９】本実施の形態に係るサーバ装置の構成を示すブロック図である。
【図１０】アセスメントＤＢの一構成例を示す模式図である。
【図１１】モニタＤＢの一構成例を示す模式図である。
【図１２】本実施の形態に係る端末装置による評価結果の一表示例を示す模式図である。
【図１３】本実施の形態に係る端末装置による評価結果の一表示例を示す模式図である。
【図１４】本実施の形態に係る端末装置が換気アセスメントサービスにおいて行う処理の手順を示すフローチャートである。
【図１５】本実施の形態に係る端末装置が換気モニタサービスにおいて行う処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００１０】
本発明の実施形態に係る情報処理システムの具体例を、以下に図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。
【００１１】
＜撮影装置＞
図１は、本実施の形態に係る情報処理システムにて用いられる撮影装置の構成を説明するための模式図である。本実施の形態に係る情報処理システムは、シュリーレン法による空気の流れを可視化する撮影装置１を用いて、例えばレストラン、喫茶店、住宅展示場、ショールーム、ショッピングセンター、映画館、美術館又は博物館等の種々の建物内の撮影を行い、撮影した建物内の空気の流れの画像に基づいて建物内の空気の状態を評価し、評価結果を建物の所有者、利用者又は施工者等のユーザへ通知する。また更に本実施の形態に係る情報処理システムでは、撮影装置１が撮影した画像に基づいて建物内に付着した水滴又は食べ残し等の汚れを検出し、検出結果をユーザへ通知する。
【００１２】
本実施の形態に係る撮影装置１は、プロジェクタ１０と、第１撮影部（撮影部）１１と、第２撮影部（撮影部）１２と、これらの動作を制御する情報処理装置２０とを備えて構成されている。プロジェクタ１０は、画像をスクリーン等に投影する装置であり、本実施の形態においては評価の対象となる建物内の壁１０１等に対して、情報処理装置２０が生成した画像の投影を行う。また本実施の形態に係るプロジェクタ１０は、人間が見ることのできない不可視光線として赤外線による画像の投影を行う。このため、例えば撮影装置１が飲食店等の建物に設置されている場合であっても、店舗を利用している客等によりプロジェクタ１０が投影する画像が視認されることはない。
【００１３】
第１撮影部１１は、シュリーレン法による呼気等の空気の流れを可視化した画像を撮影する撮影部である。第１撮影部１１は、レンズ１１ａ、カットオフグリッド（光遮断部）１１ｂ及び赤外線用レンズ１１ｃ等を備えて構成されている。レンズ１１ａ、カットオフグリッド１１ｂ及び赤外線用レンズ１１ｃは、例えば円筒状のケースに並べて収容されている。レンズ１１ａは、光を屈折させて収束させる光学素子であり、第１撮影部１１の撮影対象の像を結像する。カットオフグリッド１１ｂは、レンズ１１ａから赤外線用レンズ１１ｃへ至る光の一部をカット（遮断）する。本実施の形態においてカットオフグリッド１１ｂは、例えば液晶パネルを用いて構成されており、光をカットするパターンを変更することができる。情報処理装置２０は、カットオフグリッド１１ｂによるカットパターンを制御する。赤外線用レンズ１１ｃは、赤外線（例えば波長が０．７マイクロメートル〜１０００マイクロメートルの光）を透過させ、赤外線以外の光を透過させない。赤外線用レンズ１１ｃは、カットオフグリッド１１ｂを通過した赤外線を撮像素子（図示は省略する）上へ収束する。第１撮影部１１は、例えばＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を備えており、赤外線用レンズ１１ｃが収束した赤外線による像を撮影し、撮影により得られる画像のデータを情報処理装置２０へ出力する。
【００１４】
第２撮影部１２は、偏光状態を撮影する撮影部である。第２撮影部１２は、偏光板（偏光部）１２ａ及び可視光線用レンズ１２ｂを備えて構成されている。偏光板１２ａ及び可視光線用レンズ１２ｂは、例えば円筒状のケースに並べて収容されている。偏光板１２ａは、特定方向の光を通過させ、これ以外の光を遮断する光学素子である。本実施の形態に係る偏光板１２ａは、例えばモータを用いた回転機構を有しており、情報処理装置２０の制御に応じて回転させることができる。これにより第２撮影部１２は、偏光板１２ａを任意の角度だけ回転させて、任意の方向で遮光した画像を撮影することができる。可視光線用レンズ１２ｂは、可視光線（例えば波長が３６０ナノメートル〜８３０ナノメートルの光）を透過させ、これ以外の光を透過させない。可視光線用レンズ１２ｂは、偏光板１２ａを通過した可視光線を撮像素子（図示は省略する）上へ収束する。第２撮影部１２は、例えばＣＣＤ又はＣＭＯＳ等の撮像素子を備えており、可視光線用レンズ１２ｂが収束した像を撮影し、撮影により得られる画像のデータを情報処理装置２０へ出力する。なお、第１撮影部１１及び第２撮影部１２は、個別に撮像素子を備えてもよく、１つの撮像素子を共有してもよい。
【００１５】
なお、第２撮影部１２は偏光板１２ａを回転させて複数の偏光方向での撮影を行うものとしたが、これに限るものではない。例えば、偏光方向が異なる複数の偏光板１２ａを切り替えることによって、複数の偏光方向での撮影を行ってもよい。また例えば、１画素毎に複数方向の偏光子を配置した撮像素子を用いて、１度に複数方向の撮影を行ってもよい。
【００１６】
また本実施の形態に係る撮影装置１は、いわゆるエッジカメラ、ＡＩ（Artificial Intelligence）エッジカメラ又はエッジＡＩカメラ等の名称で呼ばれ得る装置であり、高度な演算処理を行うプロセッサ等が搭載された情報処理装置２０を備えている。これにより撮影装置１は、空気の流れを可視化した画像を撮影する処理、並びに、偏光状態を変更して撮影する処理等を行うことができる。情報処理装置２０は、撮影装置１の各部の動作を制御すると共に、第１撮影部１１及び第２撮影部１２の撮影により得られた画像を利用する種々の処理を行う。図２は、本実施の形態に係る撮影装置１の情報処理装置２０の構成を示すブロック図である。本実施の形態に係る情報処理装置２０は、処理部２１、入出力部２２、記憶部２３及び通信部２４等を備えて構成されている。
【００１７】
処理部２１は、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro-Processing Unit）又はＧＰＵ（Graphics Processing Unit）等の演算処理装置、ＲＯＭ（Read Only Memory）、及び、ＲＡＭ（Random Access Memory）等を用いて構成されている。処理部２１は、記憶部２３に記憶されたプログラム２３ａを読み出して実行することにより、プロジェクタ１０、第１撮影部１１及び第２撮影部１２等を制御する処理、並びに、撮影により得られた画像に基づく評価又は検出等の種々の処理を行う。
【００１８】
入出力部２２は、プロジェクタ１０、第１撮影部１１及び第２撮影部１２との間でデータの入出力を行う。入出力部２２は、例えば信号線を介してプロジェクタ１０、第１撮影部１１及び第２撮影部１２と接続されており、信号線を介したシリアル通信又はパラレル通信等によりデータの入出力を行う。入出力部２２は、処理部２１から与えられたデータをプロジェクタ１０、第１撮影部１１又は第２撮影部１２へ適宜に送信すると共に、プロジェクタ１０、第１撮影部１１又は第２撮影部１２から入力されたデータを処理部２１へ与える。
【００１９】
記憶部２３は、例えばフラッシュメモリ又はＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）等の不揮発性のメモリ素子を用いて構成されている。記憶部２３は、処理部２１が実行する各種のプログラム、及び、処理部２１の処理に必要な各種のデータを記憶する。本実施の形態において記憶部２３は、処理部２１が実行するプログラム２３ａを記憶する。また記憶部２３は、プロジェクタ１０が投影する画像のデータ、第１撮影部１１及び第２撮影部１２が撮影した画像のデータ等を記憶してもよい。
【００２０】
通信部２４は、ＬＡＮ（Local Area Network）又はインターネット等のネットワークＮを介して、種々の装置との間で通信を行う。本実施の形態において通信部２４は、サーバ装置３又は端末装置５との間で通信を行い、撮影した画像、及び、画像に基づく評価又は検出等の処理結果等の情報を送信する。通信部２４は、有線又は無線のいずれの通信を行うものであってもよい。通信部２４は、処理部２１から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部２１へ与える。
【００２１】
本実施の形態においてプログラム２３ａは、例えば撮影装置１の製造段階において記憶部２３に書き込まれる。また例えばプログラム２３ａは、遠隔のサーバ装置等が配信するものを撮影装置１が通信にて取得してもよい。また例えばプログラム２３ａは、メモリカード又は光ディスク等の記録媒体に記録された態様で提供され、撮影装置１は記録媒体からプログラム２３ａを読み出して記憶部２３に記憶してもよい。また例えばプログラム２３ａは、記録媒体に記録されたものを書込装置が読み出して撮影装置１の記憶部２３に書き込んでもよい。プログラム２３ａは、ネットワークを介した配信の態様で提供されてもよく、記録媒体に記録された態様で提供されてもよい。
【００２２】
また本実施の形態に係る撮影装置１の処理部２１には、記憶部２３に記憶されたプログラム２３ａを処理部２１が読み出して実行することにより、投影用画像生成部２１ａ、第１撮影処理部２１ｂ及び第２撮影処理部２１ｃ等がソフトウェア的な機能部として実現される。
【００２３】
投影用画像生成部２１ａは、プロジェクタ１０が投影する画像のデータを生成する処理を行う。プロジェクタ１０が投影する画像は、シュリーレン法による呼気等の空気の流れを可視化した画像を第１撮影部１１にて撮影するために用いられる。本実施の形態においてプロジェクタ１０が投影する画像のパターンは、例えば白黒又はモノクローム等による縞模様（グリッド模様）の画像が採用されるが、これに限るものではなく、種々のパターン（模様）が採用され得る。また本実施の形態において投影用画像生成部２１ａは、プロジェクタ１０が画像を投影する投影先（図１に示す例では壁１０１）の形状及び模様等に応じて、プロジェクタ１０が投影する縞模様を調整した画像を生成する。投影用画像生成部２１ａは、投影先の形状及び模様等に応じて、投影する縞模様の形状及び大きさ等を最適化し、最適化した縞模様の画像を生成してプロジェクタ１０へ与えることにより、生成した画像をプロジェクタ１０に投影させる。なお本実施の形態においては、プロジェクタ１０は縞模様の画像を赤外線で投影する。
【００２４】
第１撮影処理部２１ｂは、第１撮影部１１による撮影を制御する処理を行う。第１撮影処理部２１ｂは、第１撮影部１１による空気の流れを可視化した画像の撮影を行う。このときに第１撮影処理部２１ｂは、第１撮影部１１のカットオフグリッド１１ｂが光を遮断するパターンを、プロジェクタ１０が投影先の壁１０１等に投影したパターン（模様）に応じて変化させる。本実施の形態において第１撮影処理部２１ｂは、プロジェクタ１０が投影する縞模様の白黒を反転したパターン、即ちプロジェクタ１０が投影した縞模様の白に相当する部分を遮断するパターンとなるように、カットオフグリッド１１ｂによる遮断のパターンを制御する。このパターンでカットオフグリッド１１ｂが光を遮断することにより、第１撮影部１１は、撮影装置１とプロジェクタ１０の映像が投影される壁１０１等との間に存在する空気の流れ等をシュリーレン法により可視化した画像を撮影することができる。なお本実施の形態において第１撮影処理部２１ｂは、第１撮影部１１にて空気の流れを可視化した画像を動画像として撮影する。
【００２５】
なお本実施の形態においてカットオフグリッド１１ｂは、プロジェクタ１０が投影したパターンを反転したパターンで光を遮断するものとするが、これに限るものではない。カットオフグリッド１１ｂは、プロジェクタ１０の投影パターンに対して、完全な反転パターンではなく、完全な反転パターンに対して多少のずれ又は相違等のある不完全な反転パターンで光を遮断してもよく、この場合であっても第１撮影部１１にて空気の流れを可視化した画像を撮影することはできる。カットオフグリッド１１ｂによる遮断パターンは、第１撮影部１１により空気の流れを可視化した画像を撮影し得るパターンであればどのようなパターンであってもよい。
【００２６】
第２撮影処理部２１ｃは、第２撮影部１２による偏光状態の撮影を行う。このときに第２撮影処理部２１ｃは、第２撮影部１２の偏光板１２ａに設けられた回転機構の回転角度を制御して、第２撮影部１２による撮影を行う。第２撮影処理部２１ｃは、例えば回転機構を所定角度（例えば１°又は１０°等）ずつ回転させて、偏光板１２ａによる偏光の角度を所定角度ずつ変化させて、第２撮影部１２による撮影を行う。例えば飲食店等の建物内に撮影装置１を設置した場合、建物内の座席を撮影装置１が第２撮影部１２の偏光板１２ａを通して撮影することで、座席のテーブル等に付着した水滴又は食べ残し等の汚れの存在を撮影することができる。また第２撮影処理部２１ｃが偏光板１２ａを回転させて偏光の角度を変化させることで、１つの角度では発見が難しい汚れを別の角度からの撮影で発見することができる。第２撮影処理部２１ｃは、所定のタイミングで複数回、例えば座席を客が使用する前と後とに、偏光板１２ａを１回転させてそれぞれ複数回の撮影を行う。第２撮影処理部２１ｃは、偏光の角度が同じであり且つ異なるタイミングで撮影された２つの画像を比較することで、偏光状態の変化の有無を判定する。使用前の汚れのないテーブルの偏光状態を基準として、使用後の偏光状態との比較を行うことで、第２撮影処理部２１ｃは、使用に伴うテーブルの汚れ、又は、建物内における清掃が十分でない箇所等の清掃を行うべき対象物（被清掃対象物）を精度よく検出することができる。
【００２７】
また第２撮影処理部２１ｃは、上記のように所定のタイミングで偏光板１２ａを回転させて第２撮影部１２による撮影を行う場合以外には、回転機構を回転させずに偏光板１２ａの角度を固定した状態で第２撮影部１２による撮影を継続的に行う。このときに撮影された画像は、例えば画像から人の顔を検出する処理、人体を検出する処理又は人の行動を認識する処理等に用いられる。即ち第２撮影処理部２１ｃは、第２撮影部１２により通常の建物内の撮影を行い、所定のタイミングで偏光板１２ａの角度を変化させて第２撮影部１２による偏光状態の撮影を行っている。第２撮影部１２による通常の撮影で得られた画像から例えば座席の客による使用の前後のタイミングを判断し、第２撮影処理部２１ｃは、偏光板１２ａの角度を変化させて偏光状態の撮影を行うことができる。
【００２８】
＜空気の流れの可視化処理＞
本実施の形態に係る撮影装置１は、プロジェクタ１０及び第１撮影部１１により、シュリーレン法を用いた空気の流れを可視化した画像の撮影を行う。シュリーレン法は、透明な気体中の密度勾配により通過する光が屈折する現象を利用し、屈折率の変化を明暗の差として観測する方法である。従来のシュリーレン法ではナイフエッジを含む光学系が利用されていたが、近年ではデジタルフォーカシングシュリーレン法又は背景指向性シュリーレン法と呼ばれる方法が提案されている。これらのシュリーレン法では、観測対象の背景に縞模様等の背景画像を配置し、背景画像に対応するカットオフグリッドを通して撮影を行うことで、観測対象における屈折率の変化を明暗の差とした画像を撮影することができ、観測対象の呼気又は空気の流れ等を可視化した画像を得ることができる。図１に示す例では、店舗等の建物の壁１０１にプロジェクタ１０が投影する画像が背景画像となる。
【００２９】
図３は、背景画像及びカットオフグリッドの一例を示す模式図である。なお図３に示す背景画像は、プロジェクタ１０が壁１０１に投影したものを、カットオフグリッド１１ｂによる遮断なしで、第１撮影部１１が撮影する画像に相当する。この背景画像は、プロジェクタ１０が投影する画像に必ずしも一致しない。図示の背景画像は、ハッチングを付した領域が黒（暗）色であり、ハッチングを付していない領域が白（明）色である。また図３に示すカットオフグリッドは、第１撮影部１１のカットオフグリッド１１ｂにて光を遮断するパターンである。図示のカットオフグリッドは、ハッチングを付した領域が光を遮断する領域であり、ハッチングを付していない領域が光りを透過させる領域である。
【００３０】
図３に示す背景画像は、モノクロームの横縞模様であり、本例では黒色領域が太く、白色領域が細い縞模様となっている。これに対応するカットオフグリッドは、背景画像の白黒を反転させたパターンであり、本例では遮断領域が細く、透過領域が太い横縞模様のパターンとなる。撮影装置１の第１撮影処理部２１ｂは、プロジェクタ１０が投影した背景画像を反転させたパターンで光を遮断すべく、カットオフグリッド１１ｂによる遮断のパターンを制御する。また背景画像及びカットオフグリッドは縞模様に限らず、例えば円形の図形が並べられた模様、いわゆる水玉模様であってもよく、また例えば文字又は数字等が適宜に並べられたパターンであってもよく、これら以外の様々なパターンであってよい。本実施の形態に係る撮影装置１は、プロジェクタ１０の投影先となる壁１０１の形状、色及び模様等に応じて、プロジェクタ１０が投影する画像を適宜に調整及び変更等して最適化する。
【００３１】
このため、本実施の形態に係る情報処理システムでは、撮影装置１による空気の流れを可視化した画像の撮影を行う前に、予めプロジェクタ１０が投影する画像を決定する処理を行う必要がある。撮影装置１は、例えば初期設定等の操作がユーザによりなされた場合に、記憶部２３にデフォルトの投影用画像として記憶された画像をプロジェクタ１０にて建物の壁１０１へ投影する。撮影装置１は、第１撮影部１１のカットオフグリッド１１ｂを全領域について光を遮断しない状態とし、第１撮影部１１にて壁１０１に投影された画像の撮影を行う。撮影装置１は、第１撮影部１１にて撮影した画像に基づいて、デフォルトの投影用画像を修正する。
【００３２】
図４は、投影用画像の修正を説明するための模式図である。図４の上段左側には、撮影装置１が記憶するデフォルトの投影用画像の一例として、横縞模様の画像が示されている。撮影装置１がこの投影用画像をプロジェクタ１０にて壁１０１へ投影し、第１撮影部１１にて撮影して得られた画像が、図４の上段右側に示す撮影画像であるとする。例えば壁１０１に凹凸又は段差等のような形状が変化する箇所が存在する場合に、プロジェクタ１０が投影した画像はこの箇所で屈曲又は湾曲等の歪みが生じた状態で第１撮影部１１にて撮影される。
【００３３】
撮影装置１は、第１撮影部１１にて撮影した画像に基づいて、撮影画像をデフォルトの投影用画像に近付けるよう（撮影画像とデフォルトの投影用画像とが一致するよう）、投影用画像を修正する。図４の下段左側には、修正後の投影用画像の一例が示されている。撮影装置１は、例えば第１撮影部１１にて撮影した画像から横縞模様が歪んでいる箇所を検出し、この歪みを取り除く方向へデフォルトの撮影用画像の該当箇所を歪ませることで、撮影用画像を修正することができる。なお、この撮影装置１による撮影用画像の修正方法は一例であり、これに限るものではなく、種々の修正方法が採用されてよい。撮影用画像の修正には、例えばプロジェクションマッピング等の技術を用いることができる。また例えば、予め機械学習がなされた学習モデルを用いて投影用画像を生成してもよい。この場合に学習モデルは、例えば投影された歪みのある模様を撮影した画像と、この画像を適切に修正した投影用画像とを対応付けた教師データを用いて予め機械学習がなされ、第１撮影部１１が撮影した画像を入力することで投影用画像を出力するよう構成され得る。
【００３４】
また図４に示した投影用画像を修正の例は、投影用画像の形状を修正するものである。図示は省略するが、撮影装置１は、投影用画像の濃淡を修正してもよい。例えば壁１０１に模様等が描かれている場合、プロジェクタ１０が投影した模様に濃淡が生じる場合がある。そこで撮影装置１は、第１撮影部１１にて撮影した撮影画像の縞模様の濃淡が均一になるように、投影用画像の濃淡を修正する。撮影装置１は、例えば壁１０１に描かれている模様等において光をより吸収する部分に対し、より強い光を出力するように、投影の際の光の強弱を修正する。
【００３５】
上述の手順によりプロジェクタ１０が投影する投影用画像の生成、及び、第１撮影部１１のカットオフグリッド１１ｂによる遮断パターンの決定等を行った後、撮影装置１は、修正後の投影用画像をプロジェクタ１０にて壁１０１へ向けて投影し、決定した遮断のパターンでカットオフグリッド１１ｂによる光の遮断を行い、第１撮影部１１による撮影を行う。この撮影により撮影装置１は、建物内の空気の流れ等を可視化した画像を撮影することができる。図５は、呼気等を可視化した画像の一例を示す模式図である。なお図示の画像は、撮影装置１が撮影する画像から空気の流れの一例として人の呼気が可視化されている箇所を拡大して抜き出した画像に相当する。
【００３６】
＜偏光状態に基づく汚れ等の検出＞
本実施の形態に係る撮影装置１は、偏光板１２ａを回転させて偏光の角度を変化させることにより、複数の角度での偏光状態を第２撮影部１２にて撮影することができる。図６は、偏光板１２ａの有無による撮影画像の差異を説明するための画像例である。図６に示す２つの画像は、水滴がこぼれた机を撮影したものである。図６の左側の画像が偏光板１２ａによる偏光なしでの撮影画像であり、右側の画像が偏光板１２ａを用いた所定角度の偏光ありでの撮影画像である。偏光なしの撮影画像では、透明な水滴の存在を確認することは難しい。これに対して偏光ありの撮影画像では、机にこぼれた水滴の存在を目視で確認することができる。
【００３７】
また撮影装置１は、撮影対象となる建物内が清潔な状態で第２撮影部１２が撮影した複数の偏光の角度における画像を、基準となる画像として記憶部２３に記憶している。撮影装置１は、適宜のタイミング（例えば客が座席を使用した後等）で、第２撮影部１２により複数の偏光の角度での撮影を行う。撮影装置１は、基準となる画像と、適宜のタイミングで撮影した画像とを比較して、例えば２つの画像の画素値の差を算出して、偏光状態が変化した箇所を検出することができる。
【００３８】
＜評価サービスの概要＞
本実施の形態に係る情報処理システムは、上述の撮影装置１を利用して、建物内の空気の状態を評価することで、この建物の換気に関する情報をユーザに通知するサービスを提供することができる。本実施の形態に係る情報処理システムが提供するサービスには、スポット利用型の換気アセスメントサービスと、常駐型の換気モニタサービスとが含まれる。
【００３９】
（１）換気アセスメントサービス
換気アセスメントサービスは、例えば建物の施工又はリフォーム等を行う際に、この建物内の空気の状態を評価することによって、この建物の換気に関する性能等を評価し、建物の施工業者又は施主等のユーザに評価結果を通知するサービスである。サービス提供者は、例えばユーザからの依頼に応じて、施工又はリフォーム等が完了した評価対象の建物に、上述の撮影装置１及び撮影装置１が撮影した画像に基づく評価を行う端末装置５を持ち込んで、これらの装置を用いて建物内の空気の状態を評価する。空気の状態の評価として、例えば建物内の気流の向き、速度及び量等の数値を算出することができ、また例えば建物内において空気の流れが滞留している箇所の数及び大きさ等の数値を算出することができる。これらの評価結果に基づいて、例えば算出した数値が所定の閾値を超えるか否かによりこの建物の換気の性能のランク付け等を行うことができる。また例えば、予め機械学習がなされた学習モデルを利用して、撮影装置１が撮影した画像から建物の換気性能に関するランクを決定することで空気の状態を評価してもよい。空気の状態の評価を行うためサービス提供者は、例えば建物内の評価対象の部屋に撮影装置１を設置し、撮影装置１のプロジェクタ１０が部屋の壁等に投影する画像の投影パターンと、第１撮影部１１のカットオフグリッド１１ｂによる光の遮断パターンとを決定する初期設定の作業を行う。
【００４０】
撮影装置１の初期設定が完了した後、本実施の形態に係る情報処理システムでは、サービス提供者が評価対象の部屋等の中に所定の気体を流し込む作業を行う。所定の気体は、例えば煙などであり、この部屋に存在する既存の空気とは性質（例えば色、温度又は湿度等）が異なる気体、既存の空気とは屈折率が異なる気体である。このような気体を流し込むことによって、既存の空気と屈折率等の差異が生じ、シュリーレン法による処理を行う撮影装置１が空気の状態をより精度よく可視化することが期待できる。所定の空気を流し込むための装置は、撮影装置１及び端末装置５とは別にサービス提供者によって用意され、サービス提供者の操作に応じて気体を吐出するが、撮影装置１及び端末装置５と連動して期待を吐出してもよい。なお、所定の気体を流し込むことは必須ではなく、本実施の形態に係る情報処理システムでは、所定の気体を流し込むことなく撮影装置１による撮影が行われてもよい。
【００４１】
なお、所定の気体を流し込むための装置は、サービス提供者が評価対象の部屋等に持ち込まれるのではなく、例えば評価対象の部屋に設置されている機器、例えばエアコン、扇風機又はサーキュレータ等が用いられてもよい。例えばエアコンを用いて、室内の気体とは異なる温度又は湿度等の気体を流し込むことができる。また例えば扇風機又はサーキュレータを用いて、室内の空気とは温度又は湿度等が異なる室外の空気を、室内へ流し込むことができる。
【００４２】
所定の気体を流し込んでいる状態、所定の気体を流し込み終えた状態、及び、部屋の換気（窓を開ける又は換気扇を動作させる等）を行った状態等の様々な条件において、撮影装置１による撮影を行い、空気の流れを可視化した画像を取得する。本実施の形態において撮影装置１から取得する画像は動画像であり、撮影装置１は撮影した動画像を有線又は無線の通信により端末装置５へ送信する。ただし、撮影装置１が撮影した静止画像を端末装置５が取得してもよい。撮影装置１が動画像又は静止画像のいずれの撮影を行うかは、撮影装置１が撮影した画像に基づいてどのような評価を行うかに応じて適宜に決定され得る。
【００４３】
端末装置５は、例えばタブレット型端末装置又はノート型パソコン等の汎用の情報処理装置に、本実施の形態に係る情報処理システムのアプリケーションプログラムをインストールした装置である。端末装置５は、撮影装置１が撮影した画像を取得して、この画像に基づいて評価対象の部屋の中の気流の速度（気流速度）、気流の方向（気流方向）及び気流の量（気流量）等の数値を算出することで、部屋の換気の性能等を評価する。また端末装置５は、撮影装置１が撮影した画像に基づいて、評価対象の部屋における空気の流れが悪い箇所、空気が滞留している箇所等を特定し、これらの箇所の数及び規模等に応じて部屋の換気の性能等を評価する。端末装置５は、これらの評価結果を表示部に表示してユーザに提示すると共に、例えば評価結果をサーバ装置３へ送信することで、サーバ装置３のデータベース等に評価結果を記憶して蓄積することができる。なお本実施の形態においては、撮影装置１が撮影した画像に基づく評価を端末装置５が行うものとするが、これに限るものではなく、例えば撮影装置１が自ら撮影した画像に基づいて評価を行ってもよく、また例えばサーバ装置３が評価を行って評価結果を端末装置５に表示させてもよい。
【００４４】
撮影装置１及び端末装置５による部屋の換気の性能等の評価結果に基づいて、ユーザは例えば部屋の家具の位置を変更する、換気設備を動作させる、窓を開ける位置を変更する等の様々な対策を行い、撮影装置１及び端末装置５による評価を繰り返し行うことができる。評価を繰り返し行っても高評価が得られない場合、ユーザは、例えばこの部屋に換気設備を追加する等の更なる換気対策の導入を検討することができる。更なる換気対策を導入した後、ユーザはサービス提供者に評価を依頼し、この部屋の換気性能の再評価を実施して、導入した換気対策の効果等を確認することができる。このときに端末装置５は、以前の評価結果及び撮影画像等の情報をサーバ装置３のデータベースから取得して、今回の評価結果と比較してもよい。
【００４５】
また高評価が得られた場合、施工者等はこの部屋又は建物等の施工又はリフォーム等を完了し、施主への引き渡し等を行うことができる。また建物の換気性能に関する公的認証機関が存在する場合、ユーザ又はサービス提供者は換気に関する評価結果を公的認証機関へ提出し、公的認証機関から換気性能に関する認証を取得してもよい。
【００４６】
（２）換気モニタサービス
換気モニタサービスは、例えば飲食店等の店舗に撮影装置１を設置して、この店舗内の空気の流れを常時モニタするサービスである。サービス提供者は、例えば店舗の経営者等のユーザからの依頼に応じて、店舗内の適宜の位置（例えば客席を撮影することができる位置等）に設置し、プロジェクタ１０の投影パターン及びカットオフグリッド１１ｂの遮断パターンを決定する初期設定の作業を行う。またサービス提供者は、撮影装置１が撮影した画像を取得して空気の状態を評価する処理を行う端末装置５を、店舗の適宜の位置、例えば店舗のバックヤード等の客から視認できない位置に設置する。なお、換気モニタサービスにて用いられる撮影装置１及び端末装置５は、換気アセスメントサービスにて用いられる撮影装置１及び端末装置５と、性能又は機能等が同じものであってよく、異なるものであってもよい。
【００４７】
撮影装置１は、例えば店舗の営業時間中等の所定の期間において、プロジェクタ１０による投影及び第１撮影部１１による撮影を行って、撮影により得られた空気を可視化した画像を端末装置５へ送信する。この際に、換気アセスメントサービスの場合と同様に、所定の気体を店舗内に流し込んでもよい。端末装置５は、撮影装置１から取得した画像に基づいて、店舗内の気流の速度及び気流の量等の数値を算出すると共に、店舗内における空気の流れが悪い箇所又は空気が滞留している箇所等を特定する。端末装置５は、算出した数値及び特定した箇所等の情報を、店舗の換気に関する評価結果として表示し、ユーザに提示する。また端末装置５は、店舗の換気に関する評価を繰り返し行っており、以前の評価結果と今回の評価結果との比較を行い、例えば算出された気流の速度及び量等の数値が閾値を超えて変化した場合、また例えば空気が滞留している箇所の数及び規模等が閾値を超えて変化した場合に、ユーザに対して警告を出力する。
【００４８】
なお、本実施の形態においては、撮影装置１が撮影した画像に基づいて端末装置５が評価を行うものとするが、これに限るものではない。例えば撮影装置１が評価を行って端末装置５へ評価結果を送信してもよい。また例えば撮影装置１からサーバ装置３へ撮影画像を直接的に送信し、又は、撮影装置１から端末装置５を介してサーバ装置３へ撮影画像を送信し、サーバ装置３が撮影画像に基づく評価を行って、評価結果を端末装置５へ送信してもよい。
【００４９】
また例えば撮影装置１からサーバ装置３へ撮影画像を送信し、サーバ装置３が撮影画像に基づく評価を行う場合には、店舗に端末装置５が備えられなくてよい。この場合、換気モニタサービスはいわゆるクラウドサービスとして提供されてよく、ユーザは自身が所有するスマートフォン又はパーソナルコンピュータ等の端末装置を利用してサーバ装置３にアクセスし、撮影画像に基づいて行われた評価結果を取得することができる。本実施の形態に係る換気アセスメントサービス及び換気モニタサービスは、クラウドサービスとして提供され得る。
【００５０】
また本実施の形態に係る撮影装置１は、上述のように第２撮影部１２による偏光板１２ａを介した撮影を行う事ができる。店舗内に設置された撮影装置１は第２撮影部１２による撮影を周期的に繰り返して行い、撮影した画像を端末装置５へ送信する。端末装置５は、第２撮影部１２による撮影画像を取得し、以前に撮影された画像との比較を行う事で、店舗内のテーブル等に汚れ等が付着している箇所を検出し、ユーザに対して警告を出力する。なお換気モニタサービスにおいて、偏光板１２ａを有する第２撮影部１２の撮影画像に基づく汚れ等の検出は必ずしも行われなくてよく、汚れ等の検出を行わない場合には撮影装置１が第２撮影部１２を備えていなくてもよい。
【００５１】
図７は、本実施の形態に係る情報処理システムが提供するサービスの概要を説明するためのフローチャートである。まず本実施の形態に係る情報処理システムでは、例えばサービス提供者等が評価対象となる建物内に撮影装置１を設置して、撮影装置１が撮影した画像に基づいて端末装置５が、換気アセスメントサービスによる空気の状態の評価を行う（ステップＳ１）。なおこのときに、この建物での評価が２回目以降であれば、端末装置５が以前の評価結果を取得して、今回の評価結果との比較を行い、評価結果の変化に関する情報を出力する。例えば端末装置５は、建物内における空気の滞留箇所を特定し、前回と今回とで滞留箇所の数及び規模等の変化を提示することができる。
【００５２】
ステップＳ１による評価の結果が、例えば予め定められた基準をクリアするか否かを判定し（ステップＳ２）、評価結果が基準をクリアしない場合には（Ｓ２：ＮＯ）、施工者又は施主等は建物の換気設備の改善等を行って（ステップＳ３）、換気アセスメントサービスによる空気の状態の再評価を実施する。評価結果が基準をクリアした場合（Ｓ２：ＹＥＳ）、例えば施工者等はこの建物の施工又はリフォーム等を完了させ、例えば施主等はこの建物を利用した飲食店の経営等の事業を開始して、ステップＳ４へ処理を進める。
【００５３】
換気モニタサービスでは、例えば換気アセスメントサービスにて評価結果が低かった箇所等を重点的に評価対象として、建物内の評価箇所を撮影可能なよう撮影装置１が設置される。撮影装置１は建物内の撮影を継続的に行い、撮影装置１が撮影した画像に基づいて端末装置５が換気モニタサービスによる空気の状態の評価を行う（ステップＳ４）。端末装置５は、評価結果から異常を検知したか否かを判定し（ステップＳ５）、異常を検知した場合には（Ｓ５：ＹＥＳ）、ユーザに対する警告を出力して（ステップＳ６）、ステップＳ４へ処理を戻す。異常を検知しない場合には（Ｓ５：ＮＯ）、端末装置５は、ステップＳ４へ処理を戻す。撮影装置１及び端末装置５は、ステップＳ４〜Ｓ６の換気モニタサービスを継続的に実施する。
【００５４】
＜装置構成＞
図８は、本実施の形態に係る端末装置５の構成を示すブロック図である。本実施の形態に係る端末装置５は、処理部５１、記憶部（ストレージ）５２、通信部（トランシーバ）５３、表示部（ディスプレイ）５４及び操作部５５等を備えて構成されている。端末装置５は、換気アセスメントサービスにおいて空気の状態に関する評価を行うサービス提供者、又は、換気モニタサービスにおいて空気の状態を評価する対象の店舗等の所有者等のユーザが使用する装置であり、例えばパーソナルコンピュータ、スマートフォン又はタブレット型端末装置等の情報処理装置を用いて構成され得る。
【００５５】
処理部５１は、ＣＰＵ又はＭＰＵ等の演算処理装置、ＲＯＭ及び等を用いて構成されている。処理部５１は、記憶部５２に記憶されたプログラム５２ａを読み出して実行することにより、撮影装置１が撮影した画像を取得する処理、取得した画像に基づいて空気の状態等を評価する処理、及び、評価結果をユーザに通知する処理等の種々の処理を行う。
【００５６】
記憶部５２は、例えばフラッシュメモリ等の不揮発性のメモリ素子を用いて構成されている。記憶部５２は、処理部５１が実行する各種のプログラム、及び、処理部５１の処理に必要な各種のデータを記憶する。本実施の形態において記憶部５２は、処理部５１が実行するプログラム５２ａを記憶している。本実施の形態においてプログラム５２ａは遠隔のサーバ装置等により配信され、これを端末装置５が通信にて取得し、記憶部５２に記憶する。ただしプログラム５２ａは、例えば端末装置５の製造段階において記憶部５２に書き込まれてもよい。例えばプログラム５２ａは、メモリカード又は光ディスク等の記録媒体９８に記録されたプログラム５２ａを端末装置５が読み出して記憶部５２に記憶してもよい。例えばプログラム５２ａは、記録媒体９８に記録されたものを書込装置が読み出して端末装置５の記憶部５２に書き込んでもよい。プログラム５２ａは、ネットワークを介した配信の態様で提供されてもよく、記録媒体９８に記録された態様で提供されてもよい。
【００５７】
通信部５３は、携帯電話通信網、無線ＬＡＮ及びインターネット等を含むネットワークＮを介して、種々の装置との間で通信を行う。本実施の形態において通信部５３は、ネットワークＮを介して、撮影装置１及びサーバ装置３等との間で通信を行う。通信部５３は、処理部５１から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部５１へ与える。
【００５８】
表示部５４は、液晶ディスプレイ等を用いて構成されており、処理部５１の処理に基づいて種々の画像及び文字等を表示する。操作部５５は、ユーザの操作を受け付け、受け付けた操作を処理部５１へ通知する。例えば操作部５５は、機械式のボタン又は表示部５４の表面に設けられたタッチパネル等の入力デバイスによりユーザの操作を受け付ける。また例えば操作部５５は、マウス及びキーボード等の入力デバイスであってよく、これらの入力デバイスは端末装置５に対して取り外すことが可能な構成であってもよい。
【００５９】
また本実施の形態に係る端末装置５は、記憶部５２に記憶されたプログラム５２ａを処理部５１が読み出して実行することにより、評価処理部（評価部）５１ａ及び表示処理部（情報出力部）５１ｂ等がソフトウェア的な機能部として処理部５１に実現される。なおプログラム５２ａは、本実施の形態に係る情報処理システムに専用のプログラムであってもよく、インターネットブラウザ又はウェブブラウザ等の汎用のプログラムであってもよい。またプログラム５２ａは、換気アセスメントサービスにて用いられるものと、換気モニタサービスにて用いられるものとで別のプログラムであってもよい。ただし本実施の形態においては、同じプログラムが用いられるものとする。
【００６０】
評価処理部５１ａは、撮影装置１がプロジェクタ１０及び第１撮影部１１にて撮影した空気の流れを可視化した画像を取得し、取得した画像に基づいて空気の状態を評価する処理を行う。評価処理部５１ａは、例えば取得した画像に写された気流の大きさ、長さ又は向き等を判定する画像処理を行う事によって、建物内の気流の方向、気流の速度及び気流の量等の数値を算出する。また評価処理部５１ａは、例えば空気が全く流れていないもしくは空気の流れが少ない箇所、又は、空気の流れが渦を巻いている箇所等を画像から検出し、このような空気が滞留している箇所についてその数、大きさ及び量等の数値を算出する。
【００６１】
換気アセスメントサービスにおいて評価処理部５１ａは、算出したこれら複数の数値に基づいて総合的な換気スコアを算出する。例えば評価処理部５１ａは、算出した各値に対して定められた複数の閾値との比較により、各値についてのスコアを算出し、複数の値について算出したスコアを合計することで総合的な換気スコアを算出することができる。評価処理部５１ａは、この換気スコアと、予め定められた基準値とを比較することにより、評価対象の建物が基準をクリアするか否かを判定する。
【００６２】
また換気モニタサービスにおいて評価処理部５１ａは、撮影装置１が撮影した画像に基づく上述の数値の算出を周期的に繰り返し行い、算出した数値を記憶部５２に記憶している。評価処理部５１ａは、算出した各数値と、各数値について予め定められた閾値とを比較することにより、換気に関する空気の状態の悪化を検出する。また評価処理部５１ａは、周期的に算出されるこれらの数値の時系列的な変化、即ち前回の数値と今回の数値との差分を算出し、算出した数値の変化が予め定められた閾値を超えるか否かを判定する。
【００６３】
表示処理部５１ｂは、表示部５４に対して種々の文字又は画像等を表示する処理を行う。本実施の形態において表示処理部５１ｂは、評価処理部５１ａによる空気の状態の評価結果を表示部５４に表示してユーザに提示する処理を行う。以下に、評価結果の表示例をいくつか説明する。
【００６４】
図９は、本実施の形態に係るサーバ装置３の構成を示すブロック図である。本実施の形態に係るサーバ装置３は、処理部３１、記憶部（ストレージ）３２及び通信部（トランシーバ）３３等を備えて構成されている。なお本実施の形態においては、１つのサーバ装置にて処理が行われるものとして説明を行うが、複数のサーバ装置が分散して処理を行ってもよい。
【００６５】
処理部３１は、ＣＰＵ、ＭＰＵ又はＧＰＵ等の演算処理装置、ＲＯＭ及びＲＡＭ等を用いて構成されている。処理部３１は、記憶部３２に記憶されたサーバプログラム３２ａを読み出して実行することにより、換気アセスメントサービス及び換気モニタサービスにおける評価結果等の情報をデータベースに記憶して管理する処理等の種々の処理を行う。
【００６６】
記憶部３２は、例えばハードディスク等の大容量の記憶装置を用いて構成されている。記憶部３２は、処理部３１が実行する各種のプログラム、及び、処理部３１の処理に必要な各種のデータを記憶する。本実施の形態において記憶部３２は、処理部３１が実行するサーバプログラム３２ａを記憶すると共に、換気アセスメントサービスにおける評価結果等の情報を記憶するアセスメントＤＢ（データベース）及び換気モニタサービスにおける評価結果等の情報を記憶するモニタＤＢが設けられている。
【００６７】
本実施の形態においてサーバプログラム３２ａは、メモリカード又は光ディスク等の記録媒体９９に記録された態様で提供され、サーバ装置３は記録媒体９９からサーバプログラム３２ａを読み出して記憶部３２に記憶する。ただし、サーバプログラム３２ａは、例えばサーバ装置３の製造段階において記憶部３２に書き込まれてもよい。また例えばサーバプログラム３２ａは、遠隔の他のサーバ装置等が配信するものをサーバ装置３が通信にて取得してもよい。例えばサーバプログラム３２ａは、記録媒体９９に記録されたものを書込装置が読み出してサーバ装置３の記憶部３２に書き込んでもよい。サーバプログラム３２ａは、ネットワークを介した配信の態様で提供されてもよく、記録媒体９９に記録された態様で提供されてもよい。
【００６８】
アセスメントＤＢ３２ｂは、本実施の形態に係る情報処理システムが提供する換気アセスメントサービスについての情報を記憶するデータベースである。図１０は、アセスメントＤＢ３２ｂの一構成例を示す模式図である。本実施の形態に係るサーバ装置３が有するアセスメントＤＢ３２ｂは、例えば「ユーザ情報」、「建物情報」、「評価日時」及び「評価結果」等の情報を対応付けて記憶する。
【００６９】
「ユーザ情報」は、換気アセスメントサービスを利用したユーザに関する情報であり、例えば「ユーザＩＤ」及び「認証情報」等の情報が含まれ得る。「ユーザＩＤ」は、ユーザに対して一意に付される識別情報である。「認証情報」は、例えばサーバ装置３にユーザがアクセスして評価結果等の情報を閲覧する際に行われる認証処理に用いられる情報であり、例えばパスワード又は生体情報等である。
【００７０】
「建物情報」は、評価を行った建物に関する情報であり、例えば「建物ＩＤ」、「部屋ＩＤ」及び「建物位置」等の情報が含まれ得る。「建物ＩＤ」は、建物に対して一意に付された識別情報である。「部屋ＩＤ」は、例えば建物に複数の部屋が存在する場合に、各部屋を識別するための識別情報である。「建物位置」は、建物が建てられている場所を特定するための情報であり、例えば住所であってよく、また例えばＧＰＳ（Global Positioning System）による位置情報であってよい。
【００７１】
「評価日時」は、建物について換気アセスメントサービスの評価を行った日時の情報であり、例えば「年月日」及び「計測時刻」等の情報が含まれ得る。
【００７２】
「評価結果」は、換気アセスメントサービスによる建物内の空気の状態の評価結果に関する情報であり、例えば「気流の向き（気流方向）」、「気流の速度（気流速度）」、「気流の量（気流量）」、「滞留箇所」、「換気ランク」及び「撮影画像」等の情報が含まれ得る。「気流の向き」、「気流の速度」及び「気流の量」は、撮影装置１が撮影した画像から算出した空気の流れに関する数値情報である。「滞留箇所」は、建物内において空気が流れていない又は流れが少ない箇所を特定した情報であり、滞留箇所の位置、規模及び数等の情報が皿に含まれ得る。「換気ランク」は、「気流の向き」等の数値と一又は複数の閾値との比較結果により決定された建物の換気の性能に関するランクの評価結果である。「撮影画像」は、評価を行った際に撮影装置１が撮影した画像のデータである。
【００７３】
モニタＤＢ３２ｃは、本実施の形態に係る情報処理システムが提供する換気モニタサービスについての情報を記憶するデータベースである。図１１は、モニタＤＢ３２ｃの一構成例を示す模式図である。本実施の形態に係るサーバ装置３が有するモニタＤＢ３２ｃは、例えば「ユーザ情報」、「建物情報」、「装置ＩＤ」、「評価日時」及び「評価結果」等の情報を対応付けて記憶する。なおモニタＤＢ３２ｃに記憶される情報について、アセスメントＤＢ３２ｂに記憶される情報と同じものについては、説明を省略する。
【００７４】
「ユーザ情報」は、換気モニタサービスを利用しているユーザに関する情報であり、例えば「ユーザＩＤ」、「認証情報」、「端末ＩＤ」及び「メールアドレス」等の情報が含まれ得る。「端末ＩＤ」は、ユーザが使用するスマートフォン等の端末装置を識別するための識別情報である。「メールアドレス」は、ユーザへの電子メールの送付先を示す情報である。「端末ＩＤ」及び「メールアドレス」は、例えばユーザに対する警告メッセージの送信を行う際の送信先を判断するための情報として用いられる。
【００７５】
「装置ＩＤ」は、換気モニタサービスにおいて建物内に設置された撮影装置１を識別するための識別情報である。なお撮影装置１は１つの建物内に複数設置されてよく、この場合にはモニタＤＢに装置ＩＤが複数記憶されてよい。
【００７６】
なおサーバ装置３が有するアセスメントＤＢ３２ｂ及びモニタＤＢ３２ｃの構成は、図示のものに限らない。アセスメントＤＢ３２ｂ及びモニタＤＢ３２ｃには、上記の情報以外にも、例えばユーザの名前、建物の名前、評価時の環境情報（温度、湿度等）、所定の気体を流し込んだ場合にはその気体に関する情報等の種々の情報が記憶され得る。
【００７７】
サーバ装置３の通信部３３は、携帯電話通信網、無線ＬＡＮ及びインターネット等を含むネットワークＮを介して、種々の装置との間で通信を行う。本実施の形態において通信部３３は、ネットワークＮを介して、端末装置５との間で通信を行う。通信部３３は、処理部３１から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部３１へ与える。
【００７８】
なお記憶部３２は、サーバ装置３に接続された外部記憶装置であってよい。またサーバ装置３は、複数のコンピュータを含んで構成されるマルチコンピュータであってよく、ソフトウェアによって仮想的に構築された仮想マシンであってもよい。またサーバ装置３は、上記の構成に限定されず、例えば可搬型の記憶媒体に記憶された情報を読み取る読取部、操作入力を受け付ける入力部、又は、画像を表示する表示部等を含んでもよい。
【００７９】
また本実施の形態に係るサーバ装置３には、記憶部３２に記憶されたサーバプログラム３２ａを処理部３１が読み出して実行することにより、情報記憶処理部３１ａ及び情報提供処理部３１ｂ等が、ソフトウェア的な機能部として処理部３１に実現される。なお本図においては、処理部３１の機能部として、アセスメントＤＢ３２ｂ及びモニタＤＢ３２ｃに関する処理を行う機能部を図示し、これ以外の処理に関する機能部は図示を省略している。
【００８０】
情報記憶処理部３１ａは、端末装置５から送信される評価結果を受信して、記憶部３２のアセスメントＤＢ３２ｂ又はモニタＤＢ３２ｃに受信した情報を記憶する処理を行う。
【００８１】
情報提供処理部３１ｂは、端末装置５又はユーザが利用するスマートフォン等からの要求に応じて、アセスメントＤＢ３２ｂ及びモニタＤＢ３２ｃに記憶された情報を提供する処理を行う。このときに情報提供処理部３１ｂは、端末装置５等からのアクセスに応じてユーザＩＤ及びパスワード等の情報の入力を要求し、認証処理により正当と認めたユーザに対して、このユーザに関連付けられた評価結果等の情報をデータベースから読み出し、要求元の端末装置５等へ送信する。なお端末装置５又はスマートフォン等からサーバ装置３へのアクセスは、例えば特定のアプリケーションプログラムを介して行われてもよく、また例えば特定のＵＲＬ（Uniform Resource Locator）を入力してのアクセス又は二次元コードを読み取ってのアクセス等であってもよい。
【００８２】
＜評価結果の表示＞
図１２は、本実施の形態に係る端末装置５による評価結果の一表示例を示す模式図である。図示の例は、換気アセスメントサービスにおいて建物内の空気の状態を評価した結果を３次元的に表示したものである。端末装置５は、撮影装置１が撮影した空気の流れを可視化した画像に基づいて、例えば建物内の各地点における気流の向き、速度及び量等の数値を算出する。端末装置５は、算出したこれらの数値に基づいて、気流の向きを矢印の向きとし、気流の速さを矢印の長さとし、気流の量を矢印の太さとして、３次元仮想空間に再現された評価対象の部屋の中に気流を示す複数の矢印を配置した画像を表示部５４に表示する。
【００８３】
また端末装置５は、撮影装置１が撮影した空気の流れを可視化した画像に基づいて、例えば空気が全く流れていない箇所、空気の流れが少ない箇所、又は、空気の流れが渦を巻いている箇所等を画像から検出する。端末装置は、このような個所を空気が滞留している箇所とし、図示の例では複数の矢印を内包する楕円形の領域として、３次元仮想空間に再現された評価対象の部屋の中に滞留箇所を表示している。
【００８４】
なお端末装置５は、本例の表示を行う場合に、評価対象の部屋を３次元仮想空間に再現した３次元オブジェクトの情報を予め記憶している。部屋の３次元オブジェクトは、例えばカメラにて部屋を撮影した画像を基に３次元オブジェクトを生成するＳＦＭ（structure from motion）等の技術により予め生成される。部屋の撮影及び３次元オブジェクトの生成には撮影装置１及び端末装置５が用いられ得るが、これらの装置とは異なる装置が用いられてもよい。また建物の設計データ等から３次元オブジェクトを生成して端末装置５に記憶させておいてもよい。
【００８５】
また図示の表示例は、撮影装置１による撮影地点から所定距離だけ離れた地点における平面に気流を示す矢印等を配置して評価結果を平面的に示している。しかし端末装置５は、更に撮影地点から遠ざかる奥行き方向、及び、撮影地点から近付く手前方向についても、気流を示す矢印等を配置して空間的に評価結果を表示してよい。また図示の表示例は、矢印を用いて気流を表現しているが、これに限るものではなく、例えば色分け表示などにより気流を表現して表示してもよい。また図示の表示例は、評価結果を３次元的に表示しているが、これに限るものではなく、２次元的に表示してもよい。
【００８６】
また本実施の形態に係る情報処理システムでは、換気アセスメントサービスによる評価が複数回に亘って行われる場合がある。例えば１回目の評価で評価対象の建物について十分な換気性能を有していない評価がなされた場合、この建物の施工者等は換気設備の改善等を行って２回目の評価を行うことができる。端末装置５は、１回目の評価結果を自身の記憶部５２又はサーバ装置３のデータベース等に記憶しており、２回目の評価を行った際に１回目の評価結果を取得して、１回目の評価結果と２回目の評価結果との比較を行う。端末装置５は、両評価結果の差異、即ち１回目から２回目で評価結果が変化したものを特定し、評価結果の変化に関する情報をユーザに提示する。
【００８７】
端末装置５は、例えば表示部５４に建物の３次元オブジェクトを２つ左右に並べて表示し、一方に１回目の評価結果に基づく気流の矢印及び滞留箇所を示し、他方に２回目の評価結果に基づく気流の矢印及び滞留箇所を示してもよい。この場合に端末装置５は、例えば１回目よりも２回目で評価結果が改善した箇所及び悪化した箇所等を色分けするなどの強調表示を行ってユーザに通知することができる。
【００８８】
図１３は、本実施の形態に係る端末装置５による評価結果の一表示例を示す模式図である。図示の例は、換気モニタサービスにおいて建物内の特定位置における空気の状態を評価した結果をグラフとして表示したものである。本例では、端末装置５が評価した気流の速度、気流の量及び滞留の量の時系列的な変化を折れ線グラフとして表示している。特定地点は、例えば換気アセスメントサービスの評価結果に基づいて、空気の流れが少なく、換気の必要が高い箇所と判断された地点が設定され得る。
【００８９】
本例では、撮影装置１及び端末装置５による空気の流れに関する評価を、１時間に１回の周期で繰り返し行っている。端末装置５は、撮影装置１が撮影した空気の流れを可視化した画像を基に、特定地点における気流の速度及び量等の数値を算出する。また端末装置５は、算出したこれらの値を記憶部５２に記憶しており、今回の評価結果と、記憶部５２に記憶された所定時間前までの評価結果とに基づいて気流速、気流量及び滞留量の時系列的な変化を示すグラフを作成する。図示の例では、ある１日における９：００から１７：００までの気流速、気流量及び滞留量の変化がグラフで示されている。
【００９０】
図示のグラフでは、撮影画像に基づいて算出された気流速、気流量及び滞留量が、所定の基準値に対する増減量、その比率又は偏差値等として示されている。所定の基準値には、例えば換気アセスメントサービスにおいて測定された値、国もしくは認証機関等が換気性能として要求する値、その１日において最初に測定された値、又は、１日において定められた時刻に測定された値等の種々の値が用いられ得る。
【００９１】
気流速は、例えばある地点における気体の流れる速さとして算出され、複数地点の気流速の平均等が用いられてもよい。気流量は、例えばある範囲における気流速の合計値として算出される。また滞留量は、例えば気流が渦を巻いている箇所について渦度を算出し、渦度が閾値を超える箇所が観測範囲全体に対してどの程度の割合を占めているかを算出することで取得できる。例えば観測範囲全買いが１０平方メートルの広さであり、渦度が閾値を超える箇所が５平方メートルの広さであれば、滞留量を０．５と算出することができる。
【００９２】
また本例では、気流速、気流量及び滞留量を１つのグラフに重ねて表示しているが、これらを個別のグラフに表示してもよい。気流速、気流量及び滞留量を個別にグラフ表示する場合には、所定の基準値に対する増減量等として表示するのではなく、算出した各値をグラフとして表示してよい。この場合に複数のグラフは、例えば横軸（時間軸）を一致させて上下に並べて表示される。また端末装置５は、グラフ上の一点に対するクリック操作等を受け付けた場合に、この一点に対応する時刻において撮影装置１が撮影した画像に気流を示す矢印等を重畳した画像（例えば図１２と同様の画像）を表示してもよい。
【００９３】
また端末装置５は、上述のグラフの下方に、「換気改善のヒント」として、「空気の循環が悪くなっています」、「換気扇・エアコン等を確認してください」、及び、「窓を開けて下さい」等のメッセージの文字列を表示する。端末装置５は、予め記憶部５２に記憶した複数のメッセージの中から、評価結果に応じたメッセージを取得して表示することができる。なお図示のメッセージは一例であって、これに限るものではない。
【００９４】
またこれらのメッセージの出力には、予め機械学習がなされた学習モデル、いわゆるＡＩ（Artificial Intelligence）が用いられてもよい。例えば学習モデルは、空気の流れに関する評価結果を入力として受け付け、評価結果に応じたメッセージを出力するように予め機械学習がなされ得る。また例えば学習モデルは、空気の流れに関する評価結果を入力として受け付け、この評価結果に至った要因を推定するように予め機械学習がなされ、学習モデルが推定した要因に応じたメッセージを端末装置５が出力してもよい。また端末装置５は、評価結果が変化した際にその旨をユーザに通知し、このときにユーザからその要因についての情報の入力を受け付け、評価結果及びその要因の対応を教師データとして収集し、学習モデルの再学習を行ってもよい。これにより学習モデルは、ユーザの環境毎の要因を学習することができ、より適切なメッセージをユーザに対して出力することが期待できる。
【００９５】
また端末装置５は、気流速、気流量及び滞留量の各値について、今回の評価結果と前回の評価結果との差分をそれぞれ算出し、各値に対してそれぞれ定められた閾値との比較を行う。端末装置５は、例えば今回の気流量と前回の気流量との差分を算出し、この差分が閾値を超えた場合、即ち気流量が閾値を超えて変化した場合に、ユーザに対する警告メッセージの出力を行う。図示は省略するが、端末装置５は、例えば図１３に示した画面のいずれかの空き領域に、又は、ポップアップのダイアログなどを表示して、警告メッセージを表示する。このときに端末装置５は、警告音の出力などを併せて行ってもよい。また端末装置５は、自身の表示部５４に警告メッセージを表示するのではなく、予め登録されたユーザのスマートフォン等に対して警告メッセージを送信し、スマートフォン等の画面に警告メッセージを表示させてもよい。
【００９６】
例えば図１３に示す例では、１５：００から１６：００までの間に気流量が閾値を超えて変化している（低下している）。端末装置５は、例えば１６：００の評価結果を算出した際に、気流量が１５：００のものから閾値を超えて変化したと判断し、ユーザに対する警告メッセージの表示を行うことができる。なお、端末装置５による警告メッセージの表示は、評価結果が悪化する方向へ閾値を超えて変化した場合に行えばよく、評価結果が好転（良化）する方向への変化については警告メッセージの表示を行わなくてよい。例えば図１３に示す例では、９：００から１０：００までの間に気流量が増加しているが、これは換気の評価結果として好転する方向であるため、端末装置５は警告メッセージの表示を行わなくてよい。ただし端末装置５は、評価結果が好転したことを通知するメッセージを表示してもよい。
【００９７】
また端末装置５は、撮影装置１が撮影した画像に基づいて算出した気流量等の数値の変化量と閾値との比較を行うのではなく、例えば予め機械学習がなされた学習モデルを用いてこれらの数値の時系列的な変化が悪化であるか又は好転であるかを判断してもよい。この学習モデルは、例えば気流量の数値の時系列的な変化を入力として受け付け、この変化が悪化であることを示す確信度を出力するように予め機械学習がなされ得る。
【００９８】
また本実施の形態に係る情報処理システムでは、撮影装置１が第２撮影部１２により撮影した画像に基づいて、水滴又は食べ残し等の汚れの付着を検出することができる。撮影装置１は適宜のタイミングで第２撮影部１２による撮影を繰り返し行って、撮影により得られた画像を端末装置５へ送信する。端末装置５は、撮影装置１から受信した第２撮影部１２による撮影画像に基づいて汚れの付着を検出する処理を行う。なお撮影装置１は第２撮影部１２による撮影を、例えば予め定められた周期で繰り返してもよく、また例えば店舗内にいた人（客）がいなくなった場合等のタイミングで行ってもよい。撮影装置１が第２撮影部１２による撮影を非周期的なタイミング、何らかのイベントが発生したタイミングで行う場合、端末装置５が撮影タイミングを指示してもよい。端末装置５は、今回の撮影画像と前回の撮影画像とを比較して、偏光状態に変化が生じた箇所を汚れの付着箇所として検出し、検出結果を表示部５４に表示する。図示は省略するが、端末装置５は、例えば図６右側に「偏光あり」として示した画像のように、撮影装置１の第２撮影部１２が撮影した画像に対して検出した汚れを囲む四角枠を重畳した画像を表示部５４に表示して、汚れの検出をユーザに対して通知することができる。
【００９９】
＜フローチャート＞
図１４は、本実施の形態に係る端末装置５が換気アセスメントサービスにおいて行う処理の手順を示すフローチャートである。本実施の形態に係る端末装置５の処理部５１の評価処理部５１ａは、通信部５３にて撮影装置１との通信を行う事によって、撮影装置１から第１撮影部１１にて撮影した空気の流れを可視化した画像を取得する（ステップＳ２１）。評価処理部５１ａは、取得した画像に写された気流の大きさ、長さ又は向き等を判定する画像処理を行う事によって、建物内の空気の状態について、例えば気流速及び気流量等を算出する（ステップＳ２２）。また評価処理部５１ａは、例えば空気が全く流れていないもしくは空気の流れが少ない箇所、又は、空気の流れが渦を巻いている箇所等を画像から特定する（ステップＳ２３）。
【０１００】
処理部５１の表示処理部５１ｂは、評価対象の建物について予め作成された３次元オブジェクトのデータを、例えば記憶部４２から読み出すことによって取得する（ステップＳ２４）。表示処理部５１ｂは、ステップＳ２４にて読み出したデータに基づいて３次元仮想空間に建物の３次元オブジェクトを配置し、この建物内にステップＳ２２にて算出した気流速及び気流量等に応じた矢印、並びに、滞留箇所に応じた楕円形領域等を表示することによって、建物内の空気の状態の評価結果を表示部５４に表示する（ステップＳ２５）。
【０１０１】
また評価処理部５１ａは、ステップＳ２２にて算出した気流速及び気流量等に関する情報、並びに、ステップＳ２３にて特定した滞留箇所に関する情報等を、この建物の換気に関する空気の状態の評価結果として記憶部５２に記憶する（ステップＳ２６）。なお端末装置５は、この評価結果をサーバ装置３へ送信することによって、サーバ装置３のデータベース等に評価結果を記憶させてもよい。
【０１０２】
評価処理部５１ａは、評価を行った建物について以前の評価結果の有無を判定する（ステップＳ２７）。以前の評価結果がない場合（Ｓ２７：ＮＯ）、評価処理部５１ａは、処理を終了する。以前の評価結果がある場合（Ｓ２７：ＹＥＳ）、評価処理部５１ａは、記憶部５２又はサーバ装置３等から以前の評価結果を取得する（ステップＳ２８）。評価処理部５１ａは、今回の評価結果と、ステップＳ２８にて取得した以前の評価結果とを比較する（ステップＳ２９）。評価処理部５１ａは、ステップＳ２９の比較結果、例えば以前より換気について改善された点、以前から改善されていない点、以前よりも悪化した点等についての情報を表示部５４に表示して（ステップＳ３０）、処理を終了する。
【０１０３】
図１５は、本実施の形態に係る端末装置５が換気モニタサービスにおいて行う処理の手順を示すフローチャートである。本実施の形態に係る端末装置５は店舗等の建物内に設置された撮影装置１が撮影した画像に基づく空気の状態の評価を所定の周期で繰り返し行っており、処理部５１の評価処理部５１ａは、周期的な評価を行うタイミングに至ったか否かを判定する（ステップＳ４１）。評価タイミングに至っていない場合（Ｓ４１：ＮＯ）、評価処理部５１ａは、評価タイミングに至るまで待機する。なお評価を行う周期は、例えば１日に１回、１時間に１回、１０分に１回、１分に１回又は１秒に１回等のように、評価の必要性に応じて適宜に設定され得る。
【０１０４】
評価タイミングに至った場合（Ｓ４１：ＹＥＳ）、評価処理部５１ａは、通信部５３にて撮影装置１との通信を行う事によって、撮影装置１から第１撮影部１１にて撮影した空気の流れを可視化した画像を取得する（ステップＳ４２）。評価処理部５１ａは、取得した画像に写された気流の大きさ、長さ又は向き等を判定する画像処理を行う事によって、建物内の空気の状態について、例えば気流速及び気流量等を算出する（ステップＳ４３）。また評価処理部５１ａは、例えば空気が全く流れていないもしくは空気の流れが少ない箇所、又は、空気の流れが渦を巻いている箇所等を画像から特定する（ステップＳ４４）。
【０１０５】
評価処理部５１ａは、ステップＳ４３にて算出した気流速及び気流量等に関する情報、並びに、ステップＳ４４にて特定した滞留箇所に関する情報等を、この建物の換気に関する空気の状態の評価結果として記憶部５２に記憶する（ステップＳ４５）。次いで評価処理部５１ａは、周期的に繰り返し行われる評価について、以前の評価結果を所定期間分（例えば１日分、１週間分又は１ヶ月分等）だけ取得する（ステップＳ４６）。処理部５１の表示処理部５１ｂは、ステップＳ４３及びＳ４４による今回の評価結果と、ステップＳ４６にて取得した所定期間分の評価結果とを基に、例えば図１３に示す評価結果の変化を示すグラフを表示部５４に表示する（ステップＳ４７）。
【０１０６】
また評価処理部５１ａは、今回の評価結果に関する気流速及び気流量等の数値と、前回の評価結果に関する気流速及び気流量等の数値との差分を算出する（ステップＳ４８）。評価処理部５１ａは、ステップＳ４８にて各数値について算出した差分が、各数値に対して予め定められた閾値を超えるか否かを判定する（ステップＳ４９）。差分が閾値を超えない場合（Ｓ４９：ＮＯ）、評価処理部５１ａは、ステップＳ４１へ処理を戻す。差分が閾値を超える場合（Ｓ４９：ＹＥＳ）、表示処理部５１ｂは、例えば空気の状態が閾値を超えて変化したことを通知する警告メッセージを表示部５４に表示することで、ユーザへの警告を出力し（ステップＳ５０）、ステップＳ４１へ処理を戻す。
【０１０７】
＜まとめ＞
以上の構成の本実施の形態に係る情報処理システムでは、プロジェクタ１０、第１撮影部１１及び第２撮影部１２を有する撮影装置１を用い、建物内の投影先に応じた投影パターンをプロジェクタ１０で投影し、投影パターンに応じた遮光パターンで光を遮断するカットオフグリッド１１ｂを介して、投影パターンが投影された投影先を背景とした撮影を第１撮影部１１にて行う。端末装置５は、撮影装置１の第１撮影部１１が撮影した画像に基づいて、建物内の空気の状態を評価し、評価結果を表示部５４に表示してユーザに提示する。これにより撮影装置１及び端末装置５を用いて建物内の空気の状態を評価するサービスを実現することが期待できる。
【０１０８】
また本実施の形態に係る情報処理システムでは、例えば建物内の空気とは色、温度又は湿度等が異なる所定の気体を建物内へ流入させた状態で撮影装置１の第１撮影部１１が撮影した画像に基づいて、端末装置５が建物内の空気の状態を評価する。これにより、シュリーレン光学系を用いて空気の流れを可視化した画像を撮影する撮影装置１が、より精度の高い撮影を行うことが期待できる。
【０１０９】
また本実施の形態に係る情報処理システムでは、撮影装置１が撮影した画像に基づいて、端末装置５が建物内の気流量、気流速及び気流方法等の評価を行う。これによりユーザは、提示された評価結果に基づいて建物内の空気の状態を容易に把握することが期待できる。
【０１１０】
また本実施の形態に係る情報処理システムにおいて端末装置５は、予め作成された建物の３次元オブジェクトの画像に、評価した建物内の気流量、気流速及び気流方法等を矢印などを用いて可視化して表示する。これによりユーザは、空気の状態の評価結果をより容易に把握することが期待できる。
【０１１１】
また本実施の形態に係る情報処理システムでは、撮影装置１が撮影した画像に基づいて、端末装置５が建物内の空気が滞留している箇所を特定する。これによりユーザは、建物内において換気の改善が必要な箇所を容易に把握することが期待できる。
【０１１２】
また本実施の形態に係る情報処理システムにおいて端末装置５は、予め作成された建物の３次元オブジェクトの画像に、特定した空気の滞留箇所を可視化して表示する。これによりユーザは、建物内における空気の滞留箇所をより容易に把握することが期待できる。
【０１１３】
また本実施の形態に係る情報処理システムでは、例えば換気アセスメントサービスにおいて、第１時点にて撮影装置１が撮影した画像に基づく空気の状態の評価結果を端末装置５の記憶部５２又はサーバ装置３のデータベース等に記憶し、その後の第２時点にて同様に空気の状態の評価を行い、第１時点の評価結果と第２時点の評価結果との変化に関する情報を端末装置５が出力する。これによりユーザは、例えば施工又はリフォーム等を行う建物について空気の状態に関する評価を複数回にわたって行い、換気設備の改善等を行うことが期待できる。
【０１１４】
また本実施の形態に係る情報処理システムでは、第１時点における建物内で空気が滞留している箇所を特定し、第２時点におけるこの箇所での空気の滞留の変化に関する情報を出力する。これによりユーザは、建物内で空気が滞留している箇所に対する改善効果を容易に把握することが期待できる。
【０１１５】
また本実施の形態に係る情報処理システムでは、例えば換気モニタサービスにおいて、建物内に撮影装置１を設置して周期的に撮影を行い、周期的に撮影された画像に基づいて端末装置５が建物内の空気の状態を周期的に評価し、例えば所定期間における気流速等の変化をグラフ表示することによって、所定期間における評価結果の変化に関する情報を出力する。これによりユーザは、建物内の空気の状態を継続的に監視することができる。
【０１１６】
また本実施の形態に係る情報処理システムでは、例えば前回の評価結果と今回の評価結果との差分を算出し、この差分が閾値を超えた場合に端末装置５が警告メッセージの出力を行う。これによりユーザは、例えば空気の状態が悪化したことを迅速に知ることができ、換気等の対策を行うことが期待できる。
【０１１７】
また本実施の形態に係る情報処理システムでは、偏光の方向を変更することが可能な偏光板１２ａを介して撮影装置１の第２撮影部１２が建物内の撮影を行い、端末装置５が異なる２つの時点での撮影結果を比較して、建物内における偏光状態の変化を検出し、偏光状態の変化に基づいて建物内に付着した付着物を検出し、検出した付着物に関する情報を出力する。これによりユーザは、建物内の汚れ等の有無を継続的に監視することができる。
【０１１８】
なお本実施の形態においては、撮影装置１が撮影した画像に基づいて端末装置５が評価を行う構成としたが、これに限るものではない。例えば、撮影装置１が撮影及び評価を行って、評価結果を撮影装置１から端末装置５へ送信し、受信した評価結果を端末装置５が表示してもよい。また例えば、撮影装置１がサーバ装置３へ画像を送信し、サーバ装置３が画像に基づく評価を行って評価結果を端末装置５へ送信し、受信した評価結果を端末装置５が表示してもよい。
【０１１９】
また例えば、撮影装置１が撮影した空気の流れを可視化した画像に基づいて、端末装置５が建物に設置された空調設備（例えばエアコンディショナー、サーキュレータ又は扇風機等）が稼働しているか否かを判断する処理を行ってもよい。また例えば、撮影装置１が撮影した空気の流れを可視化した画像に基づいて、端末装置５が建物に設けられた窓又は扉等の開閉状態を判断する処理を行ってもよい。
【０１２０】
今回開示された実施形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０１２１】
１  撮影装置
３  サーバ装置
５  端末装置
１０  プロジェクタ
１１  第１撮影部（撮影部）
１１ａ  レンズ
１１ｂ  カットオフグリッド（光遮断部）
１１ｃ  赤外線用レンズ
１２  第２撮影部（撮影部）
１２ａ  偏光板（偏光部）
１２ｂ  可視光線用レンズ
２０  情報処理装置
２１  処理部
２１ａ  投影用画像生成部
２１ｂ  第１撮影処理部
２１ｃ  第２撮影処理部
２２  入出力部
２３  記憶部
２３ａ  プログラム
２４  通信部
５１  処理部
５１ａ  評価処理部（評価部）
５１ｂ  表示処理部（情報出力部）
５２  記憶部
５２ａ  プログラム
５３  通信部
５４  表示部
５５  操作部
【要約】
【課題】空気の状態を評価するサービスを実現するための情報処理方法、情報処理システム、情報処理装置及びコンピュータプログラムを提供する。
【解決手段】本実施の形態に係る情報処理方法は、建物内の投影先に応じた投影パターンをプロジェクタで投影し、前記プロジェクタが投影した投影パターンに応じた遮光パターンで光を遮断する光遮断部を介して、前記プロジェクタが前記投影パターンを投影した前記投影先を背景とした撮影を撮影部にて行い、前記撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価し、空気の状態の評価結果に関する情報を出力する処理を情報処理装置が行う。また、所定の気体を前記建物内へ流入させた状態で前記撮影部が撮影した画像に基づいて、前記建物内の空気の状態を評価してもよい。
【選択図】図７【図１】
0006937501.tif 000002
【図２】
0006937501.tif 000003
【図３】
0006937501.tif 000004
【図４】
0006937501.tif 000005
【図５】
0006937501.tif 000006
【図６】
0006937501.tif 000007
【図７】
0006937501.tif 000008
【図８】
0006937501.tif 000009
【図９】
0006937501.tif 000010
【図１０】
0006937501.tif 000011
【図１１】
0006937501.tif 000012
【図１２】
0006937501.tif 000013
【図１３】
0006937501.tif 000014
【図１４】
0006937501.tif 000015
【図１５】
0006937501.tif 000016