(57)【要約】【課題】待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得する。【解決手段】計測対象エリアへ進入した人物に関する第１の画像情報を取得する第１の画像情報取得部２１と、計測対象エリアから退出する人物に関する第２の画像情報を取得する第２の画像情報取得部２２と、滞留エリアへ進入する人物に関する第３の画像情報を取得する第３の画像情報取得部２３と、第１、第３の画像情報に基づいて、計測対象エリアへの進入から滞留エリアへの進入までの所要時間を算出する所要時間算出部２７と、所要時間に基づいて計測結果の異常を判定する計測結果異常判定部２８と、この判定結果および第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして待ち時間を取得する正常待ち時間取得部２９と、を備えたものとする。【選択図】図６
2016218680.tif 000002
【特許請求の範囲】
【請求項１】
施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置であって、
人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、
前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、
前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得する第３の画像情報取得部と、
前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を人物ごとに算出する所要時間算出部と、
前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する計測結果異常判定部と、
この計測結果異常判定部の判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得する正常待ち時間取得部と、
を備えたことを特徴とする計測装置。
【請求項２】
前記第１の画像情報取得部および前記第２の画像情報取得部は、異なる撮像装置により撮影された撮影画像からそれぞれ前記第１の画像情報および前記第２の画像情報を取得することを特徴とする請求項１に記載の計測装置。
【請求項３】
前記第２の画像情報取得部および前記第３の画像情報取得部は、異なる撮像装置により撮影された撮影画像からそれぞれ前記第２の画像情報および前記第３の画像情報を取得することを特徴とする請求項１または請求項２のいずれかに記載の計測装置。
【請求項４】
前記計測結果異常判定部は、判定対象となる人物の前記所要時間と基準値との差分の大きさに基づいて、計測結果が異常か否かを判定し、前記基準値を、計測結果が正常と判定されるたびに、そのときの前記所要時間に更新することを特徴とする請求項１から請求項３のいずれかに記載の計測装置。
【請求項５】
施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置であって、
人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、
前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、
前記第１、第２の画像情報に基づいて、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を人物ごとに算出する待ち時間算出部と、
前記待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定する計測結果異常判定部と、
この計測結果異常判定部の判定結果に基づいて、正常な計測結果である前記待ち時間のみを選択する正常待ち時間取得部と、
を備え、
前記計測結果異常判定部は、人物ごとの前記待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新することを特徴とする計測装置。
【請求項６】
施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測システムであって、
前記施設内を撮影する撮像装置と、
複数の情報処理装置と、
を有し、
前記複数の情報処理装置のいずれかが、
人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、
前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、
前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得する第３の画像情報取得部と、
前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を算出する所要時間算出部と、
前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する計測結果異常判定部と、
この計測結果異常判定部の判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得する正常待ち時間取得部と、
を備えたことを特徴とする計測システム。
【請求項７】
施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測システムであって、
前記施設内を撮影する撮像装置と、
複数の情報処理装置と、
を有し、
前記複数の情報処理装置のいずれかが、
人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、
前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、
前記第１、第２の画像情報に基づいて、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を人物ごとに算出する待ち時間算出部と、
前記待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定する計測結果異常判定部と、
この計測結果異常判定部の判定結果に基づいて、正常な計測結果である前記待ち時間のみを選択する正常待ち時間取得部と、
を備え、
前記計測結果異常判定部は、人物ごとの前記待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新することを特徴とする計測システム。
【請求項８】
施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する処理を情報処理装置に行わせる計測方法であって、
人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得するステップと、
前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得するステップと、
前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得するステップと、
前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を人物ごとに算出するステップと、
前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定するステップと、
このステップの判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得するステップと、
を備えたことを特徴とすることを特徴とする計測方法。
【請求項９】
施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する処理を情報処理装置に行わせる計測方法であって、
人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得するステップと、
前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得するステップと、
前記第１、第２の画像情報に基づいて、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を人物ごとに算出するステップと、
前記待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定するステップと、
このステップの判定結果に基づいて、正常な計測結果である前記待ち時間のみを選択するステップと、
を備え、
前記計測結果の異常を判定するステップでは、人物ごとの前記待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新することを特徴とする計測方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置、計測システムおよび計測方法に関するものである。
【背景技術】
【０００２】
空港の保安検査場では、金属探知機およびＸ線検査装置で検査を受ける人物を先頭にして行列ができ、また、銀行のＡＴＭ（automated teller machine）コーナーでは、ＡＴＭの空きを待つ人物を先頭にして行列ができ、この行列待ちで利用者の待ち時間が長くなると、利用者に不便をかけるため、改善することが望まれるが、人物の待ち時間に関する改善策を検討するにあたっては、実際の待ち時間を計測して、待ち時間の実情を把握する必要がある。
【０００３】
このような利用者の待ち時間を計測することに関連するものとして、従来、カメラにより撮影された画像に基づいて、行列の長さを算出して、その行列の長さに基づいて待ち時間を計測する技術が知られている（特許文献１参照）。また、カメラにより撮影された画像に基づいて、計測開始位置と計測終了位置との間を人物が通過するのに要する通過時間を待ち時間として計測する技術が知られている（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−３１７０５２号公報
【特許文献２】特開２００５−２６７０１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、前記の特許文献１に開示された従来の技術では、行列の長さから待ち時間を推定するものであり、個々の人物の待ち時間を計測するものではないため、必ずしも待ち時間を精度良く計測することができないという問題があった。また、行列が長くなると、１台のカメラで行列の全体を漏れなく撮影することが難しい場合があり、この場合、複数のカメラを設置して、その複数のカメラの撮影画像から行列の長さを算出することになるため、行列の長さを精度良く算出することができないという問題があった。
【０００６】
一方、前記の特許文献２に開示された従来の技術のように、計測開始位置と計測終了位置との間を人物が通過するのに要する通過時間を待ち時間として計測するようにすると、行列の全体を漏れなく撮影する必要がない、すなわち、計測開始位置（行列の先頭）と計測終了位置（行列の最後尾）とを異なるカメラで撮影すればよいため、行列が長くなる場合にも対応しやすくなる。
【０００７】
ところが、空港の保安検査場のように、人物が自由に往来できるオープンな空間に行列ができる場合、行列に並ばない人物も撮影され、また、寄り道をした後に行列に並ぶ場合もある。行列に並ばなかった人物は、計測終了位置を通過しないことから、問題とならないが、寄り道をした後に行列に並んだ人物は、計測開始位置および計測終了位置を順次通過することから、待ち時間の計測対象となり、この場合、寄り道に要した時間も待ち時間に含まれるため、待ち時間が異常に大きな値となる。
【０００８】
このように、計測開始位置と計測終了位置とを異なるカメラで撮影する場合、寄り道をした人物が待ち時間の計測対象となり、このような人物が増えると、待ち時間の計測精度が大きく低下し、これを放置したまま、各種の統計処理を行うと、計測結果に異常値が含まれることで、生成される統計情報は不正確なものとなる。そこで、このような待ち時間の計測対象として不適切な人物による異常値を排除することが望まれる。
【０００９】
しかしながら、前記の特許文献２に開示された従来の技術では、待ち時間の計測対象として不適切な人物による異常値を排除することに関する配慮はなんらなされておらず、待ち時間を精度良く取得することができないという問題があった。
【００１０】
本発明は、このような従来技術の問題点を解消するべく案出されたものであり、その主な目的は、施設内を撮影した画像に基づいて、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができるように構成された計測装置、計測システムおよび計測方法を提供することにある。
【課題を解決するための手段】
【００１１】
本発明の計測装置は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置であって、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得する第３の画像情報取得部と、前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を人物ごとに算出する所要時間算出部と、前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する計測結果異常判定部と、この計測結果異常判定部の判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得する正常待ち時間取得部と、を備えた構成とする。
【００１２】
また、本発明の計測システムは、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測システムであって、前記施設内を撮影する撮像装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得する第３の画像情報取得部と、前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を算出する所要時間算出部と、前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する計測結果異常判定部と、この計測結果異常判定部の判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得する正常待ち時間取得部と、を備えた構成とする。
【００１３】
また、本発明の計測方法は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する処理を情報処理装置に行わせる計測方法であって、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得するステップと、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得するステップと、前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得するステップと、前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を人物ごとに算出するステップと、前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定するステップと、このステップの判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得するステップと、を備えた構成とする。
【発明の効果】
【００１４】
本発明によれば、寄り道をした人物は行列の最後尾に並ぶため、寄り道をした人物では、計測対象エリアへ進入してから滞留エリアへ進入するまでの所要時間が他の人物と大きく異なることから、所要時間に注目して計測結果の異常を判定することで、計測結果の異常を精度良く判定することができる。これにより、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【図面の簡単な説明】
【００１５】
【図１】第１実施形態に係る計測システムの全体構成図
【図２】カメラ１ａ〜１ｃの設置状況、ならびに計測対象エリアおよび滞留エリアを示す説明図
【図３】第１，第２のカメラ１ａ，１ｂの撮影画像に設定される計測ラインを示す説明図
【図４】待ち時間の変化状況を示す説明図
【図５】ＰＣ３で行われる計測結果の異常判定の概要を説明する説明図
【図６】ＰＣ３の概略構成を示す機能ブロック図
【図７】計測結果異常判定部２８で行われる処理の手順を示すフロー図
【図８】第２実施形態に係るカメラ１ａ，１ｂの設置状況および計測対象エリアを示す説明図
【図９】待ち時間の変化状況を示す説明図
【図１０】ＰＣ３で行われる計測結果の異常判定の概要を説明する説明図
【図１１】第２実施形態に係るＰＣ３の概略構成を示す機能ブロック図
【図１２】第２実施形態に係る計測結果異常判定部２８で行われる処理の手順を示すフロー図
【発明を実施するための形態】
【００１６】
前記課題を解決するためになされた第１の発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置であって、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得する第３の画像情報取得部と、前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を人物ごとに算出する所要時間算出部と、前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する計測結果異常判定部と、この計測結果異常判定部の判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得する正常待ち時間取得部と、を備えた構成とする。
【００１７】
これによると、寄り道をした人物は行列の最後尾に並ぶため、寄り道をした人物では、計測対象エリアへ進入してから滞留エリアへ進入するまでの所要時間が他の人物と大きく異なることから、所要時間に注目して計測結果の異常を判定することで、計測結果の異常を精度良く判定することができる。これにより、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【００１８】
また、第２の発明は、前記第１の画像情報取得部および前記第２の画像情報取得部は、異なる撮像装置により撮影された撮影画像からそれぞれ前記第１の画像情報および前記第２の画像情報を取得する構成とする。
【００１９】
これによると、計測対象エリアへ進入した人物の撮影画像と、計測対象エリアから退出する人物の撮影画像とを異なる撮像装置により撮影するため、計測対象エリアを大きく設定することができ、これにより、行列が長くなる場合に対応することができる。また、人物の顔を大きく撮影することができるため、画像認識の精度を高めることができる。
【００２０】
また、第３の発明は、前記第２の画像情報取得部および前記第３の画像情報取得部は、異なる撮像装置により撮影された撮影画像からそれぞれ前記第２の画像情報および前記第３の画像情報を取得する構成とする。
【００２１】
これによると、滞留エリアへ進入する人物の撮影画像と、計測対象エリアから退出する人物の撮影画像とを異なる撮像装置により撮影するため、滞留エリアを大きく設定することができ、これにより、平時に行列が長く形成される場合に対応することができる。また、人物の顔を大きく撮影することができるため、画像認識の精度を高めることができる。
【００２２】
また、第４の発明は、前記計測結果異常判定部は、判定対象となる人物の前記所要時間と基準値との差分の大きさに基づいて、計測結果が異常か否かを判定し、前記基準値を、計測結果が正常と判定されるたびに、そのときの前記所要時間に更新する構成とする。
【００２３】
これによると、判定対象となる人物の所要時間を基準値と比較するだけで済むため、計測結果の異常を簡単に判定することができる。
【００２４】
また、第５の発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置であって、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、前記第１、第２の画像情報に基づいて、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を人物ごとに算出する待ち時間算出部と、前記待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定する計測結果異常判定部と、この計測結果異常判定部の判定結果に基づいて、正常な計測結果である前記待ち時間のみを選択する正常待ち時間取得部と、を備え、前記計測結果異常判定部は、人物ごとの前記待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新する構成とする。
【００２５】
これによると、寄り道をした人物は、待ち時間が他の人物と大きく異なることから、人物ごとの待ち時間の変化状況に注目して計測結果の異常を判定することで、計測結果の異常を精度良く判定することができる。これにより、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。また、例えば、ＡＴＭで操作に手間取る人物や多くの取引を行う人物がいると、待ち時間が突然長くなり、その後に並ぶ人物も引きずられて待ち時間が長くなるが、このような場合、異常との判定結果が継続することで、その継続する異常との判定結果が正常との判定結果に更新されるため、異常値として排除されることを避けることができる。
【００２６】
また、第６の発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測システムであって、前記施設内を撮影する撮像装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得する第３の画像情報取得部と、前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を算出する所要時間算出部と、前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する計測結果異常判定部と、この計測結果異常判定部の判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得する正常待ち時間取得部と、を備えた構成とする。
【００２７】
これによると、第１の発明と同様に、施設内を撮影した画像に基づいて、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【００２８】
また、第７の発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測システムであって、前記施設内を撮影する撮像装置と、複数の情報処理装置と、を有し、前記複数の情報処理装置のいずれかが、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得する第１の画像情報取得部と、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得する第２の画像情報取得部と、前記第１、第２の画像情報に基づいて、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を人物ごとに算出する待ち時間算出部と、前記待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定する計測結果異常判定部と、この計測結果異常判定部の判定結果に基づいて、正常な計測結果である前記待ち時間のみを選択する正常待ち時間取得部と、を備え、前記計測結果異常判定部は、人物ごとの前記待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新する構成とする。
【００２９】
これによると、第１の発明と同様に、施設内を撮影した画像に基づいて、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【００３０】
また、第８の発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する処理を情報処理装置に行わせる計測方法であって、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得するステップと、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得するステップと、前記計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得するステップと、前記第１、第３の画像情報に基づいて、前記計測対象エリアへ進入してから前記滞留エリアへ進入するまでの所要時間を人物ごとに算出するステップと、前記所要時間に基づいて、計測結果が異常か否かを人物ごとに判定するステップと、このステップの判定結果、および前記第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を取得するステップと、を備えたことを特徴とする構成とする。
【００３１】
これによると、第１の発明と同様に、施設内を撮影した画像に基づいて、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【００３２】
また、第９の発明は、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する処理を情報処理装置に行わせる計測方法であって、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得するステップと、前記計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得するステップと、前記第１、第２の画像情報に基づいて、前記計測対象エリアへ進入してから前記計測対象エリアを退出するまでの待ち時間を人物ごとに算出するステップと、前記待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定するステップと、このステップの判定結果に基づいて、正常な計測結果である前記待ち時間のみを選択するステップと、を備え、前記計測結果の異常を判定するステップでは、人物ごとの前記待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新する構成とする。
【００３３】
これによると、第１の発明と同様に、施設内を撮影した画像に基づいて、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【００３４】
以下、本発明の実施の形態を、図面を参照しながら説明する。
【００３５】
（第１実施形態）
図１は、第１実施形態に係る計測システムの全体構成図である。この計測システムは、空港、銀行、および鉄道駅などの施設を対象にして構築されるものであり、カメラ（撮像装置）１ａ〜１ｃと、レコーダ（映像蓄積装置）２と、ＰＣ（計測装置）３と、を備えている。
【００３６】
カメラ１ａ〜１ｃは施設内において行列が形成される場所に設置され、カメラ１ａ〜１ｃにより行列に並ぶ人物が撮影され、このカメラ１で撮影された映像がレコーダ２に蓄積される。
【００３７】
ＰＣ３には、ユーザが種々の入力操作を行うマウスなどの入力デバイス６と、監視画面を表示するモニタ（表示装置）７と、プリンタ８とが接続されている。このＰＣ３は、施設内の適所に設置され、ユーザが、モニタ７に表示される監視画面により、カメラ１ａ〜１ｃで撮影された施設内の映像をリアルタイムで閲覧することができ、また、レコーダ２に録画された過去の施設内の映像を閲覧することができる。
【００３８】
また、カメラ１ａ〜１ｃ、レコーダ２およびＰＣ３は、複数の施設の各々に設置されており、複数の施設を総括する本部にはＰＣ１１が設置されており、このＰＣ１１では、カメラ１ａ〜１ｃで撮影された施設内の映像をリアルタイムで閲覧することができ、また、レコーダ２に録画された過去の施設内の映像を閲覧することができ、これにより本部で施設内の状況を確認することができる。
【００３９】
施設に設置されたＰＣ３は、施設内で行列に並ぶ人物の待ち時間を計測する計測装置として構成され、このＰＣ３で生成した計測結果情報は、ＰＣ３自身で閲覧することができ、さらに、本部に設置されたＰＣ１１に送信されて、このＰＣ１１でも閲覧することができ、ＰＣ３，１１が計測結果情報を閲覧する閲覧装置として構成される。
【００４０】
次に、空港の保安検査場を例にして、図１に示したＰＣ３で行われる待ち時間計測処理の概要について説明する。図２は、カメラ１ａ〜１ｃの設置状況、ならびに計測対象エリアおよび滞留エリアを示す説明図である。図３は、第１，第２のカメラ１ａ，１ｂの撮影画像に設定される計測ラインを示す説明図である。
【００４１】
図２に示すように、空港の保安検査場には、人物が身につけた危険物を検知する金属探知機、手荷物内の危険物を検知するＸ線検査装置、およびテーブルなどが配置されており、金属探知機およびＸ線検査装置で検査を受ける人物を先頭にして行列ができ、この行列に並ぶ人物の待ち時間を計測する。
【００４２】
本実施形態では、金属探知機およびＸ線検査装置で検査を受ける人物を先頭にして行列が形成される範囲に、計測対象エリアおよび滞留エリアが設定される。計測対象エリアは、待ち時間を計測する対象となる範囲であり、人物が行列を形成する範囲を全体的に含む、すなわち、行列の先頭の人物から、想定される最長の行列の最後尾の人物までが入るように設定される。滞留エリアは、計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定される。
【００４３】
保安検査場を利用する人物は、まず、計測対象エリアの始端側に進入し、ついで、滞留エリアの始端側に進入し、計測対象エリアの終端側から退出する。平時では、行列の最後尾が、滞留エリアの始端かあるいは滞留エリアの外側となり、混雑すると、計測対象エリアの始端側に向けて行列が延びる。なお、計測対象エリアの終端と滞留エリアの終端とは一致する。
【００４４】
また、本実施形態では、計測対象エリアの始端側へ進入した人物を撮影するように第１のカメラ１ａが設置される。また、滞留エリアの始端側へ進入する人物、および計測対象エリアの終端側から退出する人物を撮影するように第２のカメラ１ｂが設置される。
【００４５】
図３（Ａ）に示すように、第１のカメラ１ａの撮影画像には、計測対象エリアの始端側へ進入した人物を検知するための第１の計測ラインＬ１が設定される。この第１の計測ラインＬ１は、撮影画像の外周（画像エッジ）に設定されており、第１のカメラ１ａの撮影エリアに人物が進入して、撮影画像に対する画像認識により、人物が第１の計測ラインＬ１を通過したことが検知されると、人物が計測対象エリアの始端側へ進入したものと判断して、このときの撮影画像の撮影時刻を、計測対象エリアへの進入時刻（第１の進入時刻）とする。
【００４６】
図３（Ｂ）に示すように、第２のカメラ１ｂの撮影画像には、計測対象エリアの終端側から退出する人物を検知するための第２の計測ラインＬ２と、滞留エリアの始端側へ進入する人物を検知するための第３の計測ラインＬ３と、が設定される。
【００４７】
第３の計測ラインＬ３は、撮影画像の外周（画像エッジ）における人物の進行方向の上流側に設定されており、第２のカメラ１ｂの撮影エリアに人物が進入して、撮影画像に対する画像認識により、人物が第２の計測ラインＬ３を通過したことが検知されると、人物が滞留エリアの始端側へ進入したものと判断して、このときの撮影画像の撮影時刻を、滞留エリアへの進入時刻（第２の進入時刻）とする。
【００４８】
第２の計測ラインＬ２は、撮影画像の外周における人物の進行方向の下流側に設定されており、撮影画像に対する画像認識により、人物が第２の計測ラインＬ２を通過したことが検知されると、人物が計測対象エリアの終端側から退出したものと判断して、このときの撮影画像の撮影時刻を、計測対象エリアからの退出時刻とする。なお、撮影画像から人物が消えたことを検知して、人物が計測対象エリアから退出したものと判断してもよい。
【００４９】
また、本実施形態では、第１の進入時刻と第２の進入時刻と退出時刻とを人物ごとに対応づけるために、人物照合が行われる。この人物照合では、第１，第２，第３の計測ラインＬ１，Ｌ２，Ｌ３をそれぞれ通過した各タイミングにおける撮影画像から顔画像（顔領域の画像）を取得して、その顔画像から、人物特徴情報、具体的には顔画像の特徴量（ユニーク値）を抽出して、この人物特徴情報を比較照合することで、同一人物を判定する。
【００５０】
また、図２に示したように、第１のカメラ１ａと第２のカメラ１ｂとの間に第３のカメラ１ｃを設けるようにしてもよい。この第３のカメラ１ｃは、滞留エリアの始端側へ進入する人物を撮影するものであり、滞留エリアの始端側へ進入する人物と、計測対象エリアの終端側から退出する人物とを、第２のカメラ１ｂと第３のカメラ１ｃとで別々に撮影する。これにより、滞留エリアを大きく設定することができる。この場合、第３のカメラ１ｃの撮影画像の外周における人物の進行方向の上流側に、第２の計測ラインＬ３'が設定される（図２参照）。
【００５１】
また、滞留エリアは固定されたものであってもよいが、行列の形成状況に応じて適宜に変化するものであってもよい。例えば、第２のカメラ１ｂおよび第３のカメラ１ｃの撮影画像に現れる人物の出現時間に基づいて、行列が第３のカメラ１ｃの撮影範囲を超えて延びているものと判断される場合には、第３のカメラ１ｃによる第３の計測ラインＬ３'を滞留エリアの始端とし、行列が第３のカメラ１ｃの撮影範囲を超えていないものと判断される場合には、第２のカメラ１ｂによる第３の計測ラインＬ３を滞留エリアの始端とする。
【００５２】
また、第３のカメラ１ｃを複数台設けるようにしてもよい。この場合、行列の形成状況に応じて、複数の第３のカメラ１ｃを切り換えて、滞留エリアの始端となる第３の計測ラインを設定するようにするとよい。
【００５３】
なお、図３に示した例では、計測ラインＬ１〜Ｌ３を直線状に設定したが、コ字形状、Ｌ字形状など、人物の動きおよびカメラ１ａ〜１ｃの撮影エリアの状況に応じて適宜に設定すればよい。また、図３に示した例では、計測ラインを撮影画像の外周に設定したが、撮影画像の内部に計測ラインを設定するようにしてもよい。
【００５４】
また、図２に示した例では、一直線状に行列ができているが、他の人物の邪魔にならないように、パーティションなどにより屈曲した状態に行列ができるように人物を案内する場合もあり、このような場合には、行列の形状に対応するようにカメラ１ａ〜１ｃの撮影エリアが設定される。
【００５５】
次に、待ち時間の異常値について説明する。図４は、待ち時間の変化状況を示す説明図である。
【００５６】
本実施形態では、計測対象エリアへの進入時刻（第１の進入時刻）ｔ１と、計測対象エリアからの退出時刻ｔ２と、滞留エリアへの進入時刻（第２の進入時刻）ｔ３と、を取得し、第１の進入時刻ｔ１および退出時刻ｔ２に基づいて、計測対象エリアへ進入してから計測対象エリアを退出するまでの待ち時間ＷＴを求める。また、第１の進入時刻ｔ１および第２の進入時刻ｔ３に基づいて、計測対象エリアへ進入してから滞留エリアへ進入するまでの第１の所要時間Ｔａを求める。
【００５７】
なお、第２の進入時刻ｔ３および退出時刻ｔ２から第２の所要時間Ｔｂを求めることができる。この第２の所要時間Ｔｂは、滞留エリアでの滞留時間である。
【００５８】
ここで、保安検査場に並ぶ人物の待ち時間は種々の原因で変化するが、図４（Ａ）に示す場合を正常な状態とすると、図４（Ｂ），（Ｃ）に示すように、待ち時間の変化状況には２つの代表的なケースがある。
【００５９】
図４（Ｂ）に示すケースでは、第２の所要時間Ｔｂに大きな変化はないが、第１の所要時間Ｔａに大きな変化が現れており、これにより待ち時間ＷＴ全体が大きく変化している。これは、対象となる人物が寄り道をしたことによるものと想定され、待ち時間の計測対象としては不適切であるため、異常値と判断する必要がある。
【００６０】
一方、図４（Ｃ）に示すケースでは、図４（Ｂ）に示すケースと同様に、待ち時間ＷＴが長くなっているが、第１の所要時間Ｔａに大きな変化はなく、第２の所要時間Ｔｂに大きな変化が現れている。これは、対象となる人物が金属探知機やＸ線検査装置による危険物の検査に時間を要したことによるものと想定され、待ち時間の計測対象としては適切であるため、正常値と判断する必要がある。
【００６１】
そこで、本実施形態では、判定対象となる人物の第１の所要時間Ｔａを取得し、この第１の所要時間Ｔａに基づいて、判定対象となる人物の待ち時間ＷＴが異常値であるか否かの判定を行う。すなわち、判定対象となる人物の第１の所要時間Ｔａが、正常値と判定されたときの第１の所要時間Ｔａに基づいて設定された基準値と比較して、両者が大きく異なる場合には、判定対象となる人物の待ち時間ＷＴが異常値であると判定する。
【００６２】
次に、図１に示したＰＣ３で行われる計測結果の異常判定について説明する。図５は、ＰＣ３で行われる計測結果の異常判定の概要を説明する説明図である。
【００６３】
本実施形態では、判定対象となる人物について第１の所要時間Ｔａを取得し、この第１の所要時間Ｔａを基準値と比較して、異常値であるか否かを判定する。このとき、第１の所要時間Ｔａと基準値との差分ｄＴａを求め、この差分ｄＴａが所定のしきい値Ｔｈを超える場合に異常値と判定する。
【００６４】
ここで、基準値は、正常値と判定されたときの第１の所要時間Ｔａであり、第１の所要時間Ｔａが正常値と判定されるたびに逐次更新される。したがって、直前の人物の第１の所要時間Ｔａが正常値と判定されていると、判定対象となる人物の第１の所要時間Ｔａの比較対象は、直前の人物の第１の所要時間Ｔａとなる。一方、直前の人物の第１の所要時間Ｔａが異常値と判定されていると、それ以前の人物の中で正常値と判定された最も新しい第１の所要時間Ｔａが、判定対象となる人物の第１の所要時間の比較対象となる。
【００６５】
なお、計測結果の異常判定に先だって、基準値の初期値を設定する必要があるが、この基準値の初期値は、計測開始時における最初から所定数の人物の第１の所要時間に基づいて設定すればよい。また、過去に蓄積された第１の所要時間に基づいて基準値の初期値を設定することもできる。
【００６６】
また、本実施形態では、基準値の更新により、判定対象となる人物より前の人物の中で、正常値と判定された最も新しい人物の第１の所要時間が基準値となるが、複数の人物を対象にして基準値を更新するようにしてもよい。このとき、判定対象となる人物の前後の人物を対象にしても良いが、判定対象となる人物より前の人物を対象とすると、計測結果をリアルタイムに出力することができる。
【００６７】
次に、図１に示したＰＣ３の概略構成について詳しく説明する。図６は、ＰＣ３の概略構成を示す機能ブロック図である。
【００６８】
ＰＣ３は、第１の画像情報取得部２１と、第２の画像情報取得部２２と、第３の画像情報取得部２３と、利用者登録部２４と、人物照合部２５と、利用者情報蓄積部２６と、所要時間算出部２７と、計測結果異常判定部２８と、正常待ち時間取得部２９と、統計処理部３０と、表示情報生成部３１と、を備えている。
【００６９】
第１の画像情報取得部２１では、計測対象エリアの始端側へ進入した時点での人物に関する第１の画像情報を取得する。本実施形態では、計測対象エリアの始端側へ進入する人物が第１のカメラ１ａにより撮影され、第１の画像情報取得部２１では、第１のカメラ１ａから入力された撮影画像から人物を検出する人物検出処理と、人物の顔画像を撮影画像から切り出す顔画像切り出し処理と、人物の顔画像を解析して人物特徴情報を取得する特徴抽出処理（画像認識）とが行われ、顔画像、人物特徴情報および撮影時刻（第１の進入時刻）が第１の画像情報として出力される。
【００７０】
第２の画像情報取得部２２では、計測対象エリアの終端側から退出する時点での人物に関する第２の画像情報を取得する。本実施形態では、計測対象エリアの終端側から退出する人物が第２のカメラ１ｂにより撮影され、第２の画像情報取得部２２では、第２のカメラ１ｂから入力された撮影画像から人物を検出する人物検出処理と、人物の顔画像を撮影画像から切り出す顔画像切り出し処理と、人物の顔画像を解析して人物特徴情報を取得する特徴抽出処理とが行われ、顔画像、人物特徴情報および撮影時刻（退出時刻）が第２の画像情報として出力される。
【００７１】
第３の画像情報取得部２３では、滞留エリアへ進入する時点での人物に関する第２の画像情報を取得する。本実施形態では、滞留エリアへ進入する人物が第２のカメラ１ｂにより撮影され、第３の画像情報取得部２３では、第２のカメラ１ｂから入力された撮影画像から人物を検出する人物検出処理と、人物の顔画像を撮影画像から切り出す顔画像切り出し処理と、人物の顔画像を解析して人物特徴情報を取得する特徴抽出処理とが行われ、顔画像、人物特徴情報および撮影時刻（第２の進入時刻）が第３の画像情報として出力される。
【００７２】
なお、第３のカメラ１ｃを設けた場合には（図２参照）、滞留エリアへ進入する人物が第３のカメラ１ｃにより撮影され、この第３のカメラ１ｃの撮影画像が第３の画像情報取得部２３に入力される。
【００７３】
利用者登録部２４では、第１の画像情報取得部２１から第１の画像情報（人物特徴情報および撮影時刻（第１の進入時刻））を取得すると、その人物を行列待ちの人物として登録する処理が行われる。このとき、利用者登録部２４では、計測対象エリアへの進入の順番にしたがって人物に通し番号（ＩＤ）が付与され、この通し番号および第１の画像情報を、利用者情報として利用者情報蓄積部２６に蓄積する。なお、後述する人物照合部２５において人物が計測対象エリアから退出したことが検知されると、その人物の登録情報を抹消する処理が利用者登録部２４で行われる。
【００７４】
人物照合部２５では、第３の画像情報取得部２３から第３の画像情報（人物特徴情報および撮影時刻（第２の進入時刻））を取得すると、その第３の画像情報と、登録された人物に関する第１の画像情報との間で、人物照合が行われ、人物照合が成功すると、計測対象エリアに進入した人物が滞留エリアに進入したことを検知して、第３の画像情報を同一の人物に関する第１の画像情報と対応付けて利用者情報蓄積部２６に蓄積する。
【００７５】
また、人物照合部２５では、第２の画像情報取得部２２から第２の画像情報（人物特徴情報および撮影時刻（退出時刻））を取得すると、その第２の画像情報と、登録された人物に関する第１の画像情報または第３の画像情報との間で、人物照合が行われ、人物照合が成功すると、計測対象エリアおよび滞留エリアに順次進入した人物が計測対象エリアから退出したことを検知して、第２の画像情報を同一の人物に関する第１，第３の画像情報と対応付けて利用者情報蓄積部２６に蓄積する。
【００７６】
所要時間算出部２７では、利用者情報蓄積部２６に蓄積された人物ごとの第１の進入時刻および第２の進入時刻に基づいて、計測対象エリアへ進入してから滞留エリアへ進入するまでの第１の所要時間を人物ごとに算出する。
【００７７】
計測結果異常判定部２８では、所要時間算出部２７で取得した人物ごとの第１の所要時間に基づいて、計測結果が異常か否かを人物ごとに判定する。本実施形態では、判定対象となる人物の第１の所要時間と基準値との差分の大きさ（変化量）に基づいて、計測結果の異常を判定する。基準値は、正常値と判定されたときの第１の所要時間であり、第１の所要時間が正常値と判定されるたびに逐次更新される。
【００７８】
正常待ち時間取得部２９では、計測結果異常判定部２８の判定結果、および利用者情報蓄積部２６に蓄積された人物ごとの第１の進入時刻および退出時刻に基づいて、計測結果が正常である人物を対象にして、計測対象エリアへ進入してから計測対象エリアを退出するまでの待ち時間を取得する。
【００７９】
統計処理部３０では、正常待ち時間取得部２９で取得した人物ごとの待ち時間の統計処理が行われる。例えば、人物ごとの待ち時間を所定の単位期間（例えば１時間、１日など）ごとに集計して、単位期間ごとの待ち時間を求める。
【００８０】
表示情報生成部３１では、統計処理部３０で生成した統計情報に関する表示情報を生成してモニタ７やプリンタ８に出力する処理が行われる。例えば、統計処理部３０で生成した単位期間ごとの待ち時間を一覧表やグラフで表すようにすると、待ち時間の時間的な推移状況をユーザが把握することができる。
【００８１】
なお、図３に示したＰＣ３の各部は、ＰＣ３のプロセッサ（ＣＰＵ）にＨＤＤ等のメモリに保存した待ち時間計測用のプログラム（インストラクション）を実行させることで実現される。これらのプログラムは、情報処理装置としてのＰＣ３に予め導入して専用の装置として構成する他、所定のＯＳ上で動作するアプリケーションプログラムとして適宜なプログラム記録媒体に記録して、またネットワークを介して、ユーザに提供されるようにしてもよい。
【００８２】
次に、図６に示した計測結果異常判定部２８で行われる処理の手順について説明する。図７は、計測結果異常判定部２８で行われる処理の手順を示すフロー図である。
【００８３】
まず、判定対象となる人物の第１の所要時間を取得する（ＳＴ１０１）。そして、その判定対象となる人物の第１の所要時間と基準値（通常は直前の人物の第１の所要時間）との差分を算出する（ＳＴ１０２）。ついで、その差分をしきい値と比較する（ＳＴ１０３）。
【００８４】
ここで、差分がしきい値を超えていなければ（ＳＴ３０３でＮｏ）、判定対象となる人物の待ち時間を正常値に設定する（ＳＴ１０４）。そして、その判定対象となる人物の第１の所要時間を新しい基準値に設定する基準値の更新を行う（ＳＴ１０５）。
【００８５】
一方、差分がしきい値を超えていれば（ＳＴ３０３でＹｅｓ）、判定対象となる人物の待ち時間を異常値に設定する（ＳＴ１０６）。
【００８６】
このような処理が人物ごとに繰り返され、全ての人物が終了すると（ＳＴ１０７でＹｅｓ）、異常値に設定された計測結果を計測対象から排除して、統計処理に進む。
【００８７】
以上のように、本実施形態では、第１の画像情報取得部２１において、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得し、第２の画像情報取得部２２において、計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得し、第３の画像情報取得部２３において、計測対象エリア内において平時に人物が行列を形成して滞留する範囲に設定された滞留エリアへ進入する人物の撮影画像に関する第３の画像情報を取得し、所要時間算出部２７において、第１、第３の画像情報に基づいて、計測対象エリアへ進入してから滞留エリアへ進入するまでの所要時間を人物ごとに算出し、計測結果異常判定部２８において、所要時間に基づいて、計測結果が異常か否かを人物ごとに判定し、正常待ち時間取得部２９において、計測結果異常判定部２８の判定結果、および第１、第２の画像情報に基づいて、計測結果が正常である人物を対象にして、計測対象エリアへ進入してから計測対象エリアを退出するまでの待ち時間を取得するものとした。
【００８８】
これによると、寄り道をした人物は行列の最後尾に並ぶため、寄り道をした人物では、計測対象エリアへ進入してから滞留エリアへ進入するまでの所要時間が他の人物と大きく異なることから、所要時間に注目して計測結果の異常を判定することで、計測結果の異常を精度良く判定することができる。これにより、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。
【００８９】
また、本実施形態では、第１の画像情報取得部２１および第２の画像情報取得部２２において、異なる撮像装置により撮影された撮影画像からそれぞれ第１の画像情報および第２の画像情報を取得するものとした。これによると、計測対象エリアへ進入した人物の撮影画像と、計測対象エリアから退出する人物の撮影画像とを異なる撮像装置により撮影するため、計測対象エリアを大きく設定することができ、これにより、行列が長くなる場合に対応することができる。また、人物の顔を大きく撮影することができるため、画像認識の精度を高めることができる。
【００９０】
また、本実施形態では、第２の画像情報取得部２２および第３の画像情報取得部２３において、異なる撮像装置により撮影された撮影画像からそれぞれ第２の画像情報および第３の画像情報を取得するものとした。これによると、滞留エリアへ進入する人物の撮影画像と、計測対象エリアから退出する人物の撮影画像とを異なる撮像装置により撮影するため、滞留エリアを大きく設定することができ、これにより、平時に行列が長く形成される場合に対応することができる。また、人物の顔を大きく撮影することができるため、画像認識の精度を高めることができる。
【００９１】
また、本実施形態では、計測結果異常判定部２８において、判定対象となる人物の所要時間と基準値との差分の大きさに基づいて、計測結果が異常か否かを判定し、基準値を、計測結果が正常と判定されるたびに、そのときの所要時間に更新するものとした。これによると、判定対象となる人物の所要時間を基準値と比較するだけで済むため、計測結果の異常を簡単に判定することができる。
【００９２】
（第２実施形態）
次に、第２実施形態について説明する。なお、ここで特に言及しない点は第１実施形態と同様である。
【００９３】
まず、銀行のＡＴＭコーナーを例にして、第２実施形態に係るＰＣ３で行われる待ち時間計測処理の概要について説明する。図８は、カメラ１ａ，１ｂの設置状況および計測対象エリアを示す説明図である。
【００９４】
銀行のＡＴＭコーナーでは、ＡＴＭの空きを待つ人物を先頭にして行列ができ、この行列に並ぶ人物の待ち時間を計測する。
【００９５】
本実施形態では、ＡＴＭの空きを待つ人物を先頭にして行列が形成される範囲に、計測対象エリアが設定される。この計測対象エリアは、待ち時間を計測する対象となる範囲であり、人物が行列を形成する範囲を全体的に含む、すなわち、行列の先頭の人物から、想定される最長の行列の最後尾の人物までが入るように設定される。
【００９６】
また、本実施形態では、計測対象エリアの始端側へ進入した人物を撮影するように第１のカメラ１ａが設置される。また、計測対象エリアの終端側から退出する人物を撮影するように第２のカメラ１ｂが設置される。
【００９７】
第１のカメラ１ａの撮影画像には、計測対象エリアの始端側へ進入した人物を検知するための第１の計測ラインＬ１が設定される（図３（Ａ）参照）。この第１の計測ラインＬ１は、撮影画像の外周に設定されており、第１のカメラ１ａの撮影エリアに人物が進入して、撮影画像に対する画像認識により、人物が第１の計測ラインＬ１を通過したことが検知されると、人物が計測対象エリアの始端側へ進入したものと判断して、このときの撮影画像の撮影時刻を、計測対象エリアへの進入時刻とする。
【００９８】
第２のカメラ１ｂの撮影画像には、計測対象エリアの終端側から退出する人物を検知するための第２の計測ラインＬ２が設定される（図３（Ｂ）参照）。この第２の計測ラインＬ２は、撮影画像の外周における人物の進行方向の下流側に設定されており、撮影画像に対する画像認識により、人物が第２の計測ラインＬ２を通過したことが検知されると、人物が計測対象エリアの終端側から退出したものと判断して、このときの撮影画像の撮影時刻を、計測対象エリアからの退出時刻とする。なお、撮影画像から人物が消えたことを検知して、人物が計測対象エリアから退出したものと判断してもよい。
【００９９】
次に、待ち時間の異常値について説明する。図９は、待ち時間の変化状況を示す説明図である。
【０１００】
本実施形態では、計測対象エリアへの進入時刻と、計測対象エリアからの退出時刻とを取得し、この第１の進入時刻および退出時刻に基づいて、計測対象エリアへ進入してから計測対象エリアを退出するまでの待ち時間ＷＴを求める。
【０１０１】
ここで、ＡＴＭに並ぶ人物の待ち時間ＷＴは種々の原因で変化するが、混雑が原因で待ち時間ＷＴが変化する場合には、図９（Ａ）に示すように、混雑し始めると待ち時間ＷＴが徐々に長くなり、混雑が解消し始めると待ち時間ＷＴが徐々に短くなる。
【０１０２】
一方、前の人物より待ち時間が突然大きく変化することもある。例えば、ＡＴＭの操作に手間取る人物や、多くの取引を行う人物では、待ち時間が大幅に長くなる。この場合は、図９（Ｂ）に示すように、待ち時間ＷＴが断続的に大きく変化することはなく、図９（Ｃ）に示すように、待ち時間ＷＴが一旦大きく変化すると、その後に並ぶ人物も引きずられて待ち時間ＷＴが長くなる。
【０１０３】
したがって、図９（Ａ），（Ｃ）に示すように待ち時間ＷＴが変化する場合には、待ち時間ＷＴの計測対象としては適切であるため、正常値と判定し、図９（Ｂ）に示すように、待ち時間ＷＴが変化する場合には、人物が寄り道をしたものと想定され、待ち時間ＷＴの計測対象としては不適切であるため、異常値と判定する必要がある。
【０１０４】
次に、第２実施形態に係るＰＣ３で行われる計測結果の異常判定について説明する。図１０は、ＰＣ３で行われる計測結果の異常判定の概要を説明する説明図である。
【０１０５】
本実施形態では、判定対象となる人物について待ち時間ＷＴを取得し、この待ち時間ＷＴと基準値との差分ｄＷＴ（変化量）を求め、差分ｄＷＴを所定のしきい値Ｔｈと比較して、異常値であるか否かを判定する。このとき、差分ｄＷＴがしきい値Ｔｈを超えると、その人物の計測結果を暫定的に異常値に設定する。そして、差分ｄＷＴがしきい値Ｔｈを超える状態が一時的なものであれば、暫定的に異常値と判定された判定結果を確定する。一方、差分ｄＷＴがしきい値Ｔｈを超える状態が連続的なものであれば、暫定的に異常値と判定された判定結果を正常値に更新する。
【０１０６】
具体的には、まず、判定対象となる人物（人物２）について差分ｄＷＴがしきい値Ｔｈを超えると、暫定的に異常値と判定する。そして、図１０（Ａ）に示すように、次の人物（人物３）を判定対象とした際に、差分ｄＷＴがしきい値Ｔｈを超えない場合には、その人物（人物３）の待ち時間ＷＴを正常値と判定するとともに、その前の人物（人物２）について暫定的に異常値と判定された判定結果を確定する。
【０１０７】
一方、図１０（Ｂ）に示すように、次の人物（人物３）を判定対象とした際に、差分ｄＷＴがしきい値Ｔｈを超える場合には、その人物（人物３）の待ち時間ＷＴを正常値と判定するとともに、その前の人物（人物２）について暫定的に異常値と判定された判定結果を正常値に更新する。
【０１０８】
ここで、基準値は、正常値と判定されたときの待ち時間ＷＴであり、待ち時間ＷＴが正常値と判定されるたびに逐次更新される。したがって、直前の人物の待ち時間ＷＴが正常値と判定されていると、判定対象となる人物の待ち時間ＷＴの比較対象は、直前の人物の待ち時間ＷＴとなる。一方、直前の人物の待ち時間ＷＴが異常値と判定されていると、それ以前の人物の中で正常値と判定された最も新しい待ち時間ＷＴが、判定対象となる人物の待ち時間ＷＴの比較対象となる。
【０１０９】
なお、本実施形態では、連続する２人の人物の待ち時間ＷＴに基づいて正常値に更新するか否かの判断を行うようにしたが、この正常値の更新の判断を行う際の対象を、連続する３人以上の人物としてもよい。
【０１１０】
このように計測結果の異常判定を行うことで、図９（Ａ），（Ｃ）に示すように待ち時間が変化する場合には、正常値と判定することができ、図９（Ｂ）に示すように、待ち時間が変化する場合には、異常値と判定することができる。
【０１１１】
次に、第２実施形態に係るＰＣ３の概略構成について詳しく説明する。図１１は、ＰＣ３の概略構成を示す機能ブロック図である。
【０１１２】
第２実施形態では、第１実施形態（図６参照）と比較して、所要時間算出部２７の代わりに待ち時間算出部４１が設けられている。また、第２実施形態では、計測対象エリアの中間位置での人物の撮影画像は不要であるため、第１実施形態の第３のカメラ１ｃおよび第３の画像情報取得部２３は省略されている。
【０１１３】
待ち時間算出部４１では、利用者情報蓄積部２６から取得した進入時刻および退出時刻に基づいて、計測対象エリアへ進入してから計測対象エリアを退出するまでの待ち時間を算出する。
【０１１４】
次に、図１１に示した計測結果異常判定部２８で行われる処理の手順について説明する。図１２は、計測結果異常判定部２８で行われる処理の手順を示すフロー図である。
【０１１５】
まず、判定対象となる人物の待ち時間を取得する（ＳＴ２０１）。そして、その判定対象となる人物の待ち時間と基準値（通常は直前の人物の待ち時間）との差分を算出する（ＳＴ２０２）。ついで、その差分をしきい値Ｔｈと比較する（ＳＴ２０３）。
【０１１６】
ここで、差分がしきい値を超えていなければ（ＳＴ３０３でＮｏ）、判定対象となる人物の待ち時間を正常値に設定する（ＳＴ２０４）。そして、その判定対象となる人物の待ち時間を新しい基準値に設定する基準値の更新を行う（ＳＴ２０５）。ついで、判定対象となる人物の直前の人物の待ち時間が暫定的に異常値に設定されている場合には（ＳＴ２０６でＹｅｓ）、その直前の人物の待ち時間を異常値に確定する（ＳＴ２０７）。
【０１１７】
また、差分がしきい値を超えており（ＳＴ３０３でＹｅｓ）、さらに、直前の人物の待ち時間が暫定的に異常値に設定されていない場合には（ＳＴ２０８でＮｏ）、判定対象となる人物の待ち時間を暫定的に異常値に設定する（ＳＴ２０９）。
【０１１８】
一方、直前の人物の待ち時間が暫定的に異常値に設定されている場合には（ＳＴ２０８でＹｅｓ）、判定対象となる人物の待ち時間を正常値に設定するとともに、直前の人物の待ち時間を正常値に更新する（ＳＴ２１０）。ついで、判定対象となる人物の待ち時間を新しい基準値に設定する基準値の更新を行う（ＳＴ２１１）。
【０１１９】
このような処理が人物ごとに繰り返され、全ての人物が終了すると（ＳＴ２１２でＹｅｓ）、異常値に設定された計測結果を計測対象から排除して、統計処理に進む。
【０１２０】
以上のように、本実施形態では、第１の画像情報取得部２１において、人物が行列を形成する範囲を全体的に含むように設定された計測対象エリアへ進入した人物の撮影画像に関する第１の画像情報を取得し、第２の画像情報取得部２２において、計測対象エリアから退出する人物の撮影画像に関する第２の画像情報を取得し、待ち時間算出部４１において、第１、第２の画像情報に基づいて、計測対象エリアへ進入してから計測対象エリアを退出するまでの待ち時間を人物ごとに算出し、計測結果異常判定部２８において、待ち時間に基づいて、計測結果が異常か否かを人物ごとに順次判定し、正常待ち時間取得部２９において、計測結果異常判定部２８の判定結果に基づいて、正常な計測結果である待ち時間のみを選択し、特に、計測結果異常判定部２８において、人物ごとの待ち時間の変化状況に基づいて、計測結果が異常か否かを判定するとともに、異常との判定結果が継続する場合には、その継続する異常との判定結果を正常との判定結果に更新するものとした。
【０１２１】
これによると、寄り道をした人物は、待ち時間が他の人物と大きく異なることから、人物ごとの待ち時間の変化状況に注目して計測結果の異常を判定することで、計測結果の異常を精度良く判定することができる。これにより、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる。また、例えば、ＡＴＭで操作に手間取る人物や多くの取引を行う人物がいると、待ち時間が突然長くなり、その後に並ぶ人物も引きずられて待ち時間が長くなるが、このような場合、異常との判定結果が継続することで、その継続する異常との判定結果が正常との判定結果に更新されるため、異常値として排除されることを避けることができる。
【０１２２】
以上、本発明を特定の実施形態に基づいて説明したが、これらの実施形態はあくまでも例示であって、本発明はこれらの実施形態によって限定されるものではない。また、上記実施形態に示した本発明に係る計測装置、計測システムおよび計測方法の各構成要素は、必ずしも全てが必須ではなく、少なくとも本発明の範囲を逸脱しない限りにおいて適宜取捨選択することが可能である。
【０１２３】
例えば、前記の実施形態では、図２に示したように、カメラ１を、視野角の限定される箱型カメラとしたが、これに限らず、広範囲の撮影が可能な全方位カメラを用いることもできる。
【０１２４】
また、前記の実施形態では、空港の保安検査場や銀行のＡＴＭの例について説明したが、これらに限定されるものではなく、駅などの券売機など、行例ができる施設に広く適用することができる。
【０１２５】
また、前記の実施形態では、正常待ち時間取得部２９において、計測結果異常判定部２８の判定結果に基づいて、正常な計測結果である待ち時間のみを選択するようにしたが、異常な計測結果である待ち時間については、これを適宜に、例えば近傍の人物の待ち時間に基づいて補正して、統計処理の対象に含めるようにしてもよい。
【０１２６】
また、前記の第１の実施形態では、図２に示したように、待ち時間を計測する対象となる計測対象エリアの中間位置に、滞留エリアの始端となる第３の計測ラインＬ３を１つ設定するようにしたが、この第３の計測ラインＬ３を複数設定するようにしてもよい。例えば、人物の滞留の原因となる場所が複数ある場合には、その場所ごとに第３の計測ラインＬ３を設定するとよい。また、カメラの撮影画像に現れる人物の出現時間から、人物が滞留している範囲、すなわち、実際に行列が形成されている範囲を特定することができるため、第３の計測ラインＬ３を複数設定して、実際に行列が形成されている範囲内で計測対象エリアの終端から最も離れた第３の計測ラインＬ３を選択して、第１の所要時間を求めるようにすると、異常判定の精度を高めることができる。
【０１２７】
また、前記の実施形態では、第１〜第３の画像情報取得部２１〜２３において、カメラ１ａ〜１ｃの撮影画像から人物を検出する人物検出処理と、人物の顔画像を撮影画像から切り出す顔画像切り出し処理と、人物の顔画像を解析して人物特徴情報（ユニーク値）を取得する特徴抽出処理とが行われるようにしたが、この人物検出処理、顔画像切り出し処理および特徴抽出処理の全部または一部をカメラ１ａ〜１ｃに行わせるようにしてもよい。また、人物検出処理、顔画像切り出し処理および特徴抽出処理の全部または一部を、ＰＣ３やカメラ１ａ〜１ｃとは別の専用の装置に行わせるようにしてもよい。この場合、ＰＣ３の第１〜第３の画像情報取得部２１〜２３では、カメラ１ａ〜１ｃや専用の装置から出力される第１〜第３の画像情報を取得する。
【０１２８】
また、前記の実施形態では、待ち時間計測に必要な処理を、施設内に設置された装置に行わせるようにしたが、これらの必要な処理を、図１に示したように、本部に設けられたＰＣ１１や、クラウドコンピューティングシステムを構成するクラウドコンピュータ１２に行わせるようにしてもよい。また、必要な処理を複数の情報処理装置で分担し、ＩＰネットワークやＬＡＮなどの通信媒体、またはハードディスクやメモリカードなどの記憶媒体を介して、複数の情報処理装置の間で情報を受け渡すようにしてもよい。この場合、必要な処理を分担する複数の情報処理装置で計測システムが構成される。
【０１２９】
特に、クラウドコンピュータ１２を含むシステム構成では、施設や本部に設けられたＰＣ３，１１の他に、クラウドコンピュータ１２にネットワーク接続されたスマートフォン１３やタブレット端末１４などの携帯型端末で、必要な情報を表示させることができるようにするとよく、これにより施設や本部の他に外出先などの任意の場所で計測結果情報を閲覧することができる。
【０１３０】
また、前記の実施形態では、カメラ１の映像を蓄積するレコーダ２を施設に設置するようにしたが、待ち時間計測に必要な処理を、本部に設置されたＰＣ１１やクラウドコンピュータ１２に行わせる場合には、カメラ１の映像を、本部や、クラウドコンピューティングシステムの運営施設などに送信して、そこに設置された装置にカメラ１の映像を蓄積するようにしてもよい。
【産業上の利用可能性】
【０１３１】
本発明に係る計測装置、計測システムおよび計測方法は、待ち時間の計測対象として不適切な人物による異常値を適切に排除して、施設を利用する人物の待ち時間を精度良く取得することができる効果を有し、施設内を撮影した映像に基づいて、施設を利用する人物の待ち時間を計測する計測装置、計測システムおよび計測方法などとして有用である。
【符号の説明】
【０１３２】
１ａ  第１のカメラ（撮像装置）
１ｂ  第２のカメラ（撮像装置）
１ｃ  第３のカメラ（撮像装置）
２  レコーダ
３  ＰＣ
１１  ＰＣ
１２  クラウドコンピュータ
１３  スマートフォン
１４  タブレット端末
２１  第１の画像情報取得部
２２  第２の画像情報取得部
２３  第３の画像情報取得部
２４  利用者登録部
２５  人物照合部
２６  利用者情報蓄積部
２７  所要時間算出部
２８  計測結果異常判定部
２９  正常待ち時間取得部
４１  待ち時間算出部
【図１】
2016218680.tif 000003
【図２】
2016218680.tif 000004
【図３】
2016218680.tif 000005
【図４】
2016218680.tif 000006
【図５】
2016218680.tif 000007
【図６】
2016218680.tif 000008
【図７】
2016218680.tif 000009
【図８】
2016218680.tif 000010
【図９】
2016218680.tif 000011
【図１０】
2016218680.tif 000012
【図１１】
2016218680.tif 000013
【図１２】
2016218680.tif 000014