(57)【要約】      （修正有）【課題】券売機に係る管理業務の作業状態を効率的に追跡するトレーサビリティ支援システムを提供する。【解決手段】トレーサビリティ支援システムは、管理業務に係る予め設定した操作を検知し操作内容及び操作時刻を含む検知情報を出力する手段と、操作を行う作業者を含むように撮像範囲を設定したカメラと、カメラにより所定の間隔で撮像された画像とその撮像時刻を含むメタデータとから構成された監視画像データを生成し記録する手段と、前記操作内容及び操作時刻をデータ項目に含むログデータを生成し記録する手段と、操作時刻を基準時刻とする所定の計算により抽出される時間帯に撮像された画像を取得し、作業者を含むサムネイル画像を生成し、ログデータと紐づけして記録する手段と、サムネイル画像の生成と連動して予め設定した報告先に操作内容とサムネイル画像を含むトレーサビリティ支援情報を報告する手段とを含む。【選択図】図９
2019201253.tif 000002
【特許請求の範囲】
【請求項１】
券売機に係る管理業務の作業状態追跡を支援するトレーサビリティ支援システムであって、
ａ）前記管理業務に係る予め設定した操作を検知し、該操作に係る操作内容及び操作時刻を含む検知情報を出力する検知手段と、
ｂ）前記操作を行う作業者を含むように撮像範囲を設定した、少なくとも１つのカメラと、
ｃ）前記カメラにより所定の間隔で撮像された画像とその撮像時刻を含むメタデータとから構成された監視画像データを生成し、記録する監視画像管理手段と、
ｄ）前記検知をトリガとして、前記操作内容及び操作時刻をデータ項目に含むログデータを生成し、記録するログ生成・記録手段と、
ｅ）前記検知をトリガとして、前記操作時刻を基準時刻とする所定の計算により抽出される時間帯に撮像された画像を前記監視画像管理手段から取得し、この取得した画像から前記作業者を含むサムネイル画像を生成し、該検知をトリガとして生成されたログデータと紐づけして記録するサムネイル生成・記録手段と、
ｆ）前記サムネイル画像の生成と連動して、予め設定した報告先に前記操作内容と前記サムネイル画像を含むトレーサビリティ支援情報を報告する報告手段と、を含み、
前記作業者を管理する者に前記トレーサビリティ支援情報を提供して、前記作業者の特定を含む作業状態追跡を支援することを特徴とするシステム。
【請求項２】
前記サムネイル画像は、前記時間帯の監視画像を所定の方法により画像解析することにより人物検出された画像であることを特徴とする請求項１に記載のシステム。
【請求項３】
前記サムネイル画像は、前記時間帯に撮像された画像を所定の方式により画像解析することにより人物検出された画像から、その人物を含む部分を切り出したオブジェクト画像であることを特徴とする請求項１に記載のシステム。
【請求項４】
前記作業者の顔画像を含む人物画像を作業者特定情報と関連付けて登録した作業者画像格納手段をさらに備え、
前記トレーサビリティ支援情報には、前記サムネイル画像と前記人物画像とを比較することにより判定された作業者特定情報が含まれることを特徴とする請求項１に記載のシステム。
【請求項５】
前記管理業務に係る操作には、扉開閉、電源OFF／ＯＮ、払戻操作、硬貨回収、紙幣ユニット開閉、感熱紙補充、売り切れ操作、再発券、釣銭補充、日計及び累計ジャーナル出力、管理キー操作、メンテナンス操作から選ばれる少なくとも1つが含まれることを特徴とする請求項１に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、券売機の管理業務のトレーサビリティ支援システムに関し、特に監視カメラの画像を有効に利用して管理業務の作業状態を追跡できるようにした管理業務のトレーサビリティ支援システムに関するものである。
【背景技術】
【０００２】
最近の券売機に対する管理業務に係るトレーサビリティにおいて、券売機に対する管理業務を実際に行う作業者を管理する管理者は、扱う現金に差異が生じた場合など作業者の操作に係る作業状態を追跡する必要が生じると、券売機に対する管理業務の操作を記録したデータベース等から、生じた差異に関連すると考えられるログデータを抽出し、作業者全員の倦怠履歴と照合して、抽出されたログデータとの関連度の高い作業者を特定しているのが現状であった。
【０００３】
このような現状において、運用中の券売機に対して盗難や窃取が発生した場合、上記のようなやり方で調べても、発生した盗難等を行った作業者の特定までは至らず、有効な解決のための手段が無かった。
【０００４】
このように券売機に対する作業者の不正行為を含む作業状態を追跡するシステムは、知られていないが、カメラを設置することによるトレーサビリティシステムの提案として、特許文献１に記載された技術がある。
これは、生産物トレーサビリティシステムに関するものであり、詳しくは第一次産業の農牧場、畜舎や養殖漁業場等に、無線タグ判別機能を備えたカメラを設置することで、生産物の生育や肥料、飼料、農薬等の使用状態を撮像した映像データを利用して正確に追跡できるようにした生産物トレーサビリティシステムに関するものである
ここでは、無線タグ読取り結果記録と画像認識結果記録を組み合わせることによって、農業日誌を自動記録し、その結果を消費者へ開示するトレーサビリティに活用すると共に、イベントログ画像（例えば、農薬散布時や収穫時の画像）を自動記録・編集し、消費者に提供できるシステムとなっている。
【０００５】
しかしながら、特許文献1に記載されたシステムを券売機の管理業務のトレーサビリティに適用しようとすると、管理業務の作業者に無線タグ等を携帯させ、かつ、券売機に無線タグ判別機能を備えたカメラを設ける必要があるという問題がある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開2005-100002号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
本願発明の課題は、無線タグ等の携帯を義務付けるなどの管理業務の作業者にとって負担となる追加をしないで、券売機を含むシステムの動作により、管理業務の作業状態を報告し、作業状態を効率的に追跡できるトレーサビリティ支援システムを提供することである。さらに、扱う現金の差異等の盗難や窃取の兆候が発生した場合、作業者特定を正確かつ効率的に行うことができるトレーサビリティ支援システムとし、盗難や窃取に対する券売機の抑止力を高めるシステムとすることも課題なる。
【課題を解決するための手段】
【０００８】
本発明の第１の観点によれば、券売機に係る管理業務の作業状態追跡を支援するトレーサビリティ支援システムであって、
ａ）前記管理業務に係る予め設定した操作を検知し、該操作に係る操作内容及び操作時刻を含む検知情報を出力する検知手段と、
ｂ）前記操作を行う作業者を含むように撮像範囲を設定した、少なくとも１つのカメラと、
ｃ）前記カメラにより所定の間隔で撮像された画像とその撮像時刻を含むメタデータとから構成された監視画像データを生成し、記録する監視画像管理手段と、
ｄ）前記検知をトリガとして、前記操作内容及び操作時刻をデータ項目に含むログデータを生成し、記録するログ生成・記録手段と、
ｅ）前記検知をトリガとして、前記操作時刻を基準時刻とする所定の計算により抽出される時間帯に撮像された画像を前記監視画像管理手段から取得し、この取得した画像から前記作業者を含むサムネイル画像を生成し、該検知をトリガとして生成されたログデータと紐づけして記録するサムネイル生成・記録手段と、
ｆ）前記サムネイル画像の生成と連動して、予め設定した報告先に前記操作内容と前記サムネイル画像を含むトレーサビリティ支援情報を報告する報告手段と、を含み、
前記作業者を管理する者に前記トレーサビリティ支援情報を提供して、前記作業者の特定を含む作業状態追跡を支援することを特徴とするシステムが提供される。
【０００９】
ここで、前記サムネイル画像は、前記時間帯の監視画像を所定の方法により画像解析することにより人物検出された画像である、としてもよい。
【００１０】
さらには、前記サムネイル画像は、前記時間帯に撮像された画像を所定の方式により画像解析することにより人物検出された画像から、その人物を含む部分を切り出したオブジェクト画像である、としてもよい。
【００１１】
前記作業者の顔画像を含む人物画像を作業者特定情報と関連付けて登録した作業者画像格納手段をさらに備えたトレーサビリティ支援システムとして、前記トレーサビリティ支援情報には前記サムネイル画像と前記人物画像とを比較することにより判定された作業者特定情報が含まれる、としてもよい。
【００１２】
ここで、前記管理業務に係る操作には、扉開閉、電源OFF／ＯＮ、払戻操作、硬貨回収、紙幣ユニット開閉、感熱紙補充、売り切れ操作、再発券、釣銭補充、日計及び累計ジャーナル出力、管理キー操作、メンテナンス操作から選ばれる少なくとも1つが含まれる、としてもよい。
【図面の簡単な説明】
【００１３】
【図１】図１は、本実施例のトレーサビリティ支援システムを構成する要素を示す全体イメージ図である。
【図２】図２は、券売機の機能構成を示した機能ブロック図である。
【図３】図３は、監視画像管理サーバの機能構成を示したブロック図である。
【図４】図４は、監視画像データを構成するフレーム画像データのデータ構造を示したブロック図である。
【図５】図５は、トレーサビリティサーバの機能構成を示したブロック図である。
【図６】図６は、生成・記録されたログデータのデータ構造を示したブロック図である。
【図７】図７は、サムネイル格納部に格納されたサムネイル画像データのデータ構造を示したブロック図である。
【図８】図８は、管理端末に表示されたトレーサビリティ支援情報の画面の構成イメージである。
【図９】図９は、本実施例のトレーサビリティ支援システムの管理業務に係る操作の検知から報告までの協働動作を示したフローチャートである。
【発明を実施するための形態】
【００１４】
以下、本発明の具体例につき図面を用いた実施例において説明する。
実施例において、本発明の機能を実現する各機能構成部は、予め組み込まれたファームウエア等の制御プログラムあるいは記憶装置に格納されたアプリケーションを携帯端末、コンピュータ、回路等のプロセッサーで実行し、券売機のデバイス、券売機に設けた通信アンテナ、カメラ等のデバイスと協働することにより実現される。
【実施例１】
【００１５】
（システムを構成する要素の全体図）
図１は、本実施例のトレーサビリティ支援システムを構成する要素を示す全体イメージ図である。
監視カメラ１００５を備えた券売機１００１、作業者１００８、通信ネットワーク１０１０を介して監視カメラの画像を取得し記録する監視画像管理サーバ１０１１、トレーサビリティサーバ１０１２そして管理者端末１０１３によって都度の報告を受ける管理者１０１４という構成である。
ここでは説明の便宜のため一台の券売機、一人の作業者、一人の管理者のみが記載されているが、実際の運用においては、複数の券売機、複数の作業者、複数の管理者から構成されるのが通常である。
【００１６】
券売機１００１の正面は、通常モードでは販売する商品の選択入力を受けるタッチパネル画面１００２、発券口１００３、金銭処理口１００４、管理業務の作業者を撮像範囲に含むように設定した監視カメラ１００５、操作モード切換錠前１００６そして正面扉開閉錠前１００７から構成されている。タッチパネル画面は、後で説明する操作モードにおいて、管理業務の作業者による操作入力を受ける。管理者１００８は、扱う現金に差異が生じた場合などの問題の発生に応じて、トレーサビリティ支援情報を閲覧することにより、問題の原因と考えられる操作に係る作業者を含む作業状態を追跡する。
ここでは作業者１００８が、鍵１００９を上記操作モード切替錠前あるいは正面扉開閉錠前に挿入して操作しようとしているイメージが示されている。鍵１００９は、操作モード切換鍵と正面扉開閉鍵とを兼用するものとして示しているが、異なる2つの鍵としてもよい。
また、監視カメラを正面扉に設置する方式を採用しているが、本発明の設置方式は、管理業務の作業者を撮像範囲に設定することが出来る設置方式であれば、適宜変更されうる。例えば、券売機と切り離して設置する方式や本体内部にカメラを設置する方式が採用可能である。
さらには、設置場所や撮影範囲の異なる複数のカメラを設置する方式も採用可能である。
【００１７】
図２は、券売機１００１の機能構成を示した機能ブロック図である。
通信部２００１、表示・操作入力部２００２、発券処理部２００３、金銭処理部２００４、画像監視部２００５、動作モード切換操作部２００６、扉開閉操作部２００７、検知部２００８という構成である。
【００１８】
通信部２００１は、後で説明する監視画像データの監視画像管理サーバへの送信と、検知部２００８が検知した操作に係る検知情報のトレーサビリティサーバへの送信とを実行する。
【００１９】
表示・操作入力部２００２は、後で説明する管理モードでのタッチパネル画面における表示と操作入力を処理し、操作の内容を示す信号を検知部に送信する。
発券処理部２００３は、通常モードにおけるタッチパネル画面への操作入力で選択された商品引換券の印刷と発行を処理する。
【００２０】
金銭処理部２００４は、券購入客からの金銭投入と釣銭処理を実行する。
【００２１】
画像監視部２００５は、監視カメラにより撮像範囲を撮像し、撮像したストリーム画像にタイムスタンプと監視カメラＩＤとを含むメタデータを付加して、監視画像データを生成し、上記通信部を介して監視画像管理サーバに送信する。
ここで、監視対象となる券売機を識別する識別情報として、監視カメラＩＤが採用されているが、本願発明に採用可能な識別情報はこれに限定されるものではない。例えば、券売機ＩＤや券売機の設置場所ＩＤなどの監視対象を識別可能なＩＤが採用されうる。
また、ストリーム画像は、撮影時刻を示すタイムスタンプを有するフレーム画像から構成するものとするが、本発明に係るストリーム画像は各フレームにタイムスタンプを有していなくても、初期フレームなど基準フレームがタイムスタンプを備え、他のフレームの撮影時刻はフレームの順番を示すシークエンス番号を参照し、基準フレームの撮影時刻との差分時間を求めて、当該フレーム画像の撮影時刻が計算できる方式のフレーム画像から構成されてもよい。
ここでいうストリーム画像は、通常の動画の意味に限定するものではなく、所定の周期で撮像された画像の集合と広く解するものとする。
【００２２】
動作モード切換操作部２００６は、操作モード切換錠前への操作鍵の操作を受けて、通常モードと管理モードとの切換を行う。
通常モードでは、タッチパネル画面は、購入できる商品の表示と、商品選択の操作入力の受け入れをするように動作する。切換によって管理モードになると、タッチパネル画面は、払戻操作、現金回収、日計及び累計印字、メンテナンス操作等の管理業務に関する操作入力を受け入れるように動作する。
操作鍵の操作及び管理業務に関する操作入力の操作の度に、操作の内容を示す信号が検知部２００８に送信される。
【００２３】
扉開閉操作部２００７は、開閉鍵による所定の鍵開閉操作を受けて正面扉を解放する。正面扉の開閉部には接点スイッチが設けられており、鍵開閉操作の度に操作の内容を示す信号が検知部に送信される。
【００２４】
検知部２００８は、ログデータ生成のトリガとして設定した正面扉開放及び操作モード切替、さらには操作モードにおける払戻操作、現金回収、日計及び累計印字、メンテナンス操作等の管理業務に関する操作入力に係る信号を検知して、検知に係る券売機の識別情報と操作の操作内容と操作時刻とから構成される検知情報を、通信部を介して、トレーサビリティサーバに送信する。ここで操作時刻は信号を受信した時刻であるが、送信される信号に操作時刻が含まれる方式であってもよい。
【００２５】
（監視画像管理サーバの機能構成）
図３は、監視画像管理サーバ１０１１の機能構成を示したブロック図である。
画像データ取得部３００１、画像データ格納部３００２、画像データ供給部３００３という機能構成である。
画像データ受信部３００１は、券売機１００１から送信された監視画像データを受信する。
画像データ格納部３００２は、受信した監視画像データを格納する。
図４は、監視画像データを構成するフレーム画像データのデータ構造を示したブロック図である。監視カメラＩＤ４００１、タイムスタンプ４００２そしてフレーム画像４００３という構成である。
ここでは監視画像データのメタデータとして、監視カメラＩＤとフレーム画像毎のタイムスタンプが採用されているが、本発明に採用可能な監視画像データのメタデータは、これに限定されるものではない。
監視カメラＩＤについては、監視の対象となる券売機や撮像範囲を特定する識別情報であればよく、監視カメラＩＤに代わる券売機の識別情報や場所を特定する識別情報などが適宜採用されうる。
タイムスタンプについては、フレーム画像毎の撮像時刻を示すタイムスタンプに変えて、基準フレームの撮像時刻を示すタイムスタンプとしてもよい。基準フレームの撮像時刻を監視画像データのタイムスタンプとして採用した場合、各フレーム画像に設定したシークエンス番号を用いて基準フレームとの差分から各フレーム画像の撮像時刻を計算することが出来る。
【００２６】
画像データ供給部３００３は、トレーサビリティサーバからの撮像に係る時間帯を含む呼出要求に応答して、当該時間帯に含まれるタイムスタンプを有するフレーム画像を検索し、トレーサビリティサーバに送信する。
ここで呼出要求に含まれる検索キーは、後で説明する方式で計算された時間帯及び監視カメラＩＤある。
【００２７】
図５は、トレーサビリティサーバ１０１２の機能構成を示したブロック図である。操作検知信号受信部５００１、ログデータ生成・記録部５００２、監視画像データ要求部５００３、券売機・監視カメラ変換テーブル５００４、画像解析部５００５、サムネイル生成部５００６、サムネイル格納部５００７そして報告部５００８という構成である。
【００２８】
検知情報受信部５００１は、券売機から送信される検知情報を受信する。検知情報には、券売機の識別情報、操作時刻、操作内容が含まれている。
【００２９】
ログデータ生成・記録部５００２は、上記検知情報の受信をトリガとして、ログデータを生成し、記録する。
図６は、生成・記録されたログデータのデータ構造を示したブロック図である。ログＩＤ６００１、操作内容６００２、操作時刻６００３そして券売機の識別情報６００４という構造である。
【００３０】
監視画像データ要求部５００３は、上記検知情報の受信をトリガとして、検知情報に含まれる操作時刻から予め設定した方式で計算される時間帯及び券売機の識別情報をキーとして、監視画像管理サーバに対して検知対象操作に係る監視画像データの呼出要求をする。
ここで監視画像データを特定するための監視カメラＩＤは、券売機の識別情報と監視カメラＩＤの対応を記録した券売機・監視カメラ変換テーブル５００４を参照して、券売機の識別情報から監視カメラＩＤへの変換が行われることにより、取得される。変換された監視カメラＩＤと監視画像データのメタデータに含まれる監視カメラＩＤとの比較が行われることにより、どのカメラによる監視画像データに含まれるかを特定することができる。
ここで、上記呼出要求のキーに係る時間帯は、操作時刻の３秒前から操作後２秒までの５秒間の範囲として計算され、求められる。
上記変換により取得された監視カメラＩＤの監視カメラにより、上記計算された時間帯に撮像されたフレーム画像を要求に係る監視画像データとして監視画像管理サーバから呼び出す。
ここでは、操作時刻３秒前から操作後２秒までというようにサムネイル生成の基となるフレーム画像の撮影時刻の範囲を計算する方式を採用したが、本発明の撮影時刻の範囲の計算方式はこれに限定されるものではなく、検知の対象となる操作の性質に応じて適宜変更されうる。
【００３１】
画像解析部５００５は、画像監視記録サーバから返された監視画像データに含まれるフレーム画像を解析する。例えばフレーム画像に映っているオブジェクトの種類、オブジェクトの動き等が解析され、検出される。本実施形態では、画像解析部により、時間的に連続する複数のフレーム画像のそれぞれからオブジェクトとして人物が検出される。フレーム画像内に複数の人物が撮影されている場合は、人物ごとに検出が行われる。フレーム画像から人物を検出する方法は特に限定されず、周知の技術が用いられる。
【００３２】
サムネイル生成部５００６は、画像解析部により人物が検出されたフレーム画像からピント、露出を含む予め設定した基準で画像を選択し、その人物を含む部分的な画像であるオブジェクト画像を生成する。オブジェクト画像は、検出された人物のサムネイル画像である。
本発明に係るフレーム画像からサムネイル画像を生成する方法は、ここに示す方法に限定されない。例えば、検出された人物の顔部分がフレームの一定比率を占めるなど所定の条件を満たすフレームの画像を代表画像として選択し、サムネイル画像としてもよい。あるいは、サムネイル生成のトリガを検知した時刻に対して所定の演算をして選ばれた時刻のフレーム画像を選択して、サムネイル画像としてもよい。
ここで、予め作業者全員の顔画像を登録しておき、検出されたオブジェクトが作業者として登録した人物か否かの判定や人物特定をしてもよい。
【００３３】
サムネイル画像格納部５００７は、生成されたサムネイル画像を所定の構造のサムネイル画像データの形式で格納する。
図７は、サムネイル格納部に格納されたサムネイル画像データのデータ構造を示したブロック図である。サムネイル画像を識別するサムネイルＩＤ７００１、サムネイル画像７００２そしてログＩＤ７００３という構造である。
ここでサムネイル画像と紐づけるログデータのＩＤは、監視画像データの呼出要求のトリガとなった検知情報に含まれる操作時刻と券売機の識別情報を有するログデータのログＩＤである。
また、サムネイル生成部において人物特定をする場合、人物特定の結果をサムネイル画像データのデータ項目に含めてもよい。
【００３４】
（管理者への報告）
報告部５００８は、サムネイル生成に連動して、ログデータのデータ項目とそのログデータと紐づけられたサムネイル画像とから構成されるトレーサビリティ支援情報を生成し、予め設定した管理者の連絡先に報告する。
ここで報告は、管理者端末１０１３へメール送信するものとするが、本発明で採用可能な報告の方式はこれに限定ものではない。予め設定した報告の閲覧ページにトレーサビリティ支援情報を所定のフォーマットで書き込み、閲覧ページのＵＲＬ等の閲覧先を管理者端末に通知する方式などが適宜採用されうる。
また、人物特定の結果をサムネイル画像データのデータ項目に含める場合、トレーサビリティ支援情報には人物特定の結果を報告に含めてもよい。
【００３５】
図８は、管理端末に表示されたトレーサビリティ支援情報の画面の構成イメージである。
報告画面８０００において、監視対象の券売機の識別情報の表示８００１、ログデータのデータ項目である操作時刻を示す時刻表示８００２、操作内容を示す表示８００３そしてサムネイル画像８００４が並べて表示されており、文字や記号によるログデータの項目表示と視覚に訴えるサムネイル画像とにより、効率的かつ正確に作業状態を把握することが出来る。特にサムネイル画像は、従来のログデータを抽出し、作業者全員の倦怠履歴と照合して作業者特定していた方式に比べて、効率的かつ正確に把握する効果がある。
また、報告には人物特定の結果を報告に含める場合、作業者の特定を含む作業状態の把握が一層効率的かつ正確になる。
【００３６】
（検知から報告までのフローチャート）
図９は、本実施例のトレーサビリティ支援システムの管理業務に係る操作の検知から報告までの協働動作を示したフローチャートである。ここでは、これまで説明した券売機の機能構成部、監視カメラ、トレーサビリティサーバの機能構成部、管理者端末の協働動作のフローを中心に述べる。各機能構成部の動作の詳細は、先に説明した通りである。
【００３７】
９００１で示す複数の破線の矢は、券売機に設けた監視カメラが撮像したストリーム画像が監視画像管理サーバに送信され続けていることを示している。
【００３８】
検知ステップ９００２において、検知部２００８によって検知された管理業務に係る操作が検知され、検知情報がトレーサビリティサーバに送信される。
【００３９】
受信ステップ９００３において、検知情報受信部５００１によって  検知情報を受信する。
【００４０】
ログデータ生成記録・監視画像要求ステップ９００４において、ログデータ生成・記録部５００２と監視画像データ要求部５００３とが、それぞれ同じ検知情報の受信をトリガとして、動作を開始する。
すなわち、ログデータ生成・記録部によって操作のログデータの生成と記録が実行されると同時に、監視画像データ要求部によって操作を追跡するためのサムネイルの基となるフレーム画像を含む監視画像データが要求される。
同じ検知をトリガとするので、同時にサムネイル生成に必要な監視画像データの要求とログデータ生成とをスタートできる。これは、検知とサムネイル画像をふくむ報告の時間的ギャップを少なくすることに大きく貢献する。すなわち、管理業務の操作時間とその作業状態を把握するためのサムネイル生成との時間的ギャップが少なくなるので、管理業務の操作を記録したデータベース等から問題に関連すると考えられるログデータを抽出し、作業者全員の倦怠履歴と照合して、抽出されたログデータとの関連度の高い作業者を特定しているような把握の方式に比べて、作業状態の把握を迅速に実行できる効果がある。
【００４１】
監視画像供給ステップ９００５において、画像データ供給部３００３によって、呼出要求に係る部分の監視画像データであるフレーム画像がトレーサビリティサーバに送信される。
【００４２】
画像解析ステップ９００６において、画像解析部５００５によって、画像監視記録サーバから返された監視画像データに含まれるフレーム画像が解析され、時間的に連続する複数のフレーム画像のそれぞれから人物のオブジェクトが検出される。
【００４３】
サムネイル生成ステップ９００７において、サムネイル生成部５００６によって、画像解析部により人物が検出されたフレーム画像から予め設定した基準でフレーム画像を選択し、その人物を含む部分的な画像であるサムネイル画像が生成される。
【００４４】
サムネイル格納ステップ９００８において、サムネイル格納部５００７によって、生成されたサムネイル画像が所定の構造のサムネイル画像データの形式で格納される。
【００４５】
報告ステップ９００９において、ステップ９００７のサムネイル生成に連動して、報告部５００８がログデータのデータ項目とそのログデータと紐づけられたサムネイル画像とから構成されるトレーサビリティ支援情報を生成し、予め設定した管理者の連絡先にメール送信する。
【００４６】
ここでメールの内容は、図８で示すようなフォーマットで表示するトレーサビリティ支援情報となっている。
【００４７】
報告表示ステップ９０１０において、管理者が管理者端末を操作することによって、送信されたトレーサビリティ支援情報を管理者端末の画面に表示する。
ここではトレーサビリティ支援情報は、管理者端末の表示によって提供されているが、本発明のトレーサビリティ支援情報の提供はこれに限定されるものではなく、管理者が利用可能なパソコンなどの固定端末であってもよい。
【００４８】
以上のようなシステムの動作によりトレーサビリティ支援情報が、管理業務の作業状態を追跡する管理者に表示されることにより、正確かつ効率的に作業者の特定を含む作業状態の追跡をすることが可能になる。
【産業上の利用可能性】
【００４９】
本発明で開示した発明は、券売機を利用する飲食店業界や券売機の管理業務を実施する券売機管理業界において利用可能である。
【符号の説明】
【００５０】
１００１    券売機
１００８    作業者
１０１１    監視画像管理サーバ
１０１２    トレーサビリティサーバ
１０１３    管理者端末
１０１４    管理者
【図１】
2019201253.tif 000003
【図２】
2019201253.tif 000004
【図３】
2019201253.tif 000005
【図４】
2019201253.tif 000006
【図５】
2019201253.tif 000007
【図６】
2019201253.tif 000008
【図７】
2019201253.tif 000009
【図８】
2019201253.tif 000010
【図９】
2019201253.tif 000011
【手続補正書】
【提出日】令和1年9月4日(2019.9.4)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
券売機に係る管理業務の作業状態追跡を支援するトレーサビリティ支援システムであって、
ａ）前記管理業務に係る予め設定した操作を検知し、該操作に係る操作内容及び操作時刻を含む検知情報を出力する検知手段と、
ｂ）前記操作を行う作業者を含むように撮像範囲を設定した、少なくとも１つのカメラと、
ｃ）前記カメラにより所定の間隔で撮像された画像とその撮像時刻及び前記カメラの監視カメラID、前記券売機の券売機ID、前記券売機の設置場所IDのいずれか一つの前記券売機の識別情報を含むメタデータとから構成された監視画像データを生成し、記録する監視画像管理手段と、
ｄ）前記検知をトリガとして、前記操作内容、操作時刻及び前記券売機の識別情報をデータ項目に含むログデータを生成し、記録するログ生成・記録手段と、
ｅ）前記検知をトリガとして、前記操作時刻を基準時刻とする所定の計算により抽出される時間帯に撮像された前記券売機に係る画像を前記監視画像管理手段から取得し、この取得した画像から前記作業者を含むサムネイル画像を生成し、該検知をトリガとして生成されたログデータと紐づけして記録するサムネイル生成・記録手段と、
ｆ）前記サムネイル画像の生成と連動して、予め設定した報告先に前記操作内容と前記サムネイル画像を含むトレーサビリティ支援情報を報告する報告手段と、を含み、
前記作業者を管理する者に前記トレーサビリティ支援情報を提供して、前記作業者の特定を含む作業状態追跡を支援することを特徴とするシステム。
【請求項２】
前記サムネイル画像は、前記時間帯に撮像された前記券売機に係る画像を所定の方法により画像解析することにより人物検出された画像であることを特徴とする請求項１に記載のシステム。
【請求項３】
前記サムネイル画像は、前記時間帯に撮像された前記券売機に係る画像を所定の方式により画像解析することにより人物検出された画像から、その人物を含む部分を切り出したオブジェクト画像であることを特徴とする請求項１に記載のシステム。
【請求項４】
前記作業者の顔画像を含む人物画像を作業者特定情報と関連付けて登録した作業者画像格納手段をさらに備え、
前記トレーサビリティ支援情報には、前記サムネイル画像と前記人物画像とを比較することにより判定された作業者特定情報が含まれることを特徴とする請求項１に記載のシステム。
【請求項５】
前記管理業務に係る操作には、扉開閉、電源OFF／ＯＮ、払戻操作、硬貨回収、紙幣ユニット開閉、感熱紙補充、売り切れ操作、再発券、釣銭補充、日計及び累計ジャーナル出力、管理キー操作、メンテナンス操作から選ばれる少なくとも1つが含まれることを特徴とする請求項１に記載のシステム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明の第１の観点によれば、券売機に係る管理業務の作業状態追跡を支援するトレーサビリティ支援システムであって、
ａ）前記管理業務に係る予め設定した操作を検知し、該操作に係る操作内容及び操作時刻を含む検知情報を出力する検知手段と、
ｂ）前記操作を行う作業者を含むように撮像範囲を設定した、少なくとも１つのカメラと、
ｃ）前記カメラにより所定の間隔で撮像された画像とその撮像時刻及び前記カメラの監視カメラID、前記券売機の券売機IDまたは前記券売機の設置場所IDのいずれか一つの前記券売機の識別情報を含むメタデータとから構成された監視画像データを生成し、記録する監視画像管理手段と、
ｄ）前記検知をトリガとして、前記操作内容、操作時刻及び前記券売機の識別情報をデータ項目に含むログデータを生成し、記録するログ生成・記録手段と、
ｅ）前記検知をトリガとして、前記操作時刻を基準時刻とする所定の計算により抽出される時間帯に撮像された前記券売機に係る画像を前記監視画像管理手段から取得し、この取得した画像から前記作業者を含むサムネイル画像を生成し、該検知をトリガとして生成されたログデータと紐づけして記録するサムネイル生成・記録手段と、
ｆ）前記サムネイル画像の生成と連動して、予め設定した報告先に前記操作内容と前記サムネイル画像を含むトレーサビリティ支援情報を報告する報告手段と、を含み、
前記作業者を管理する者に前記トレーサビリティ支援情報を提供して、前記作業者の特定を含む作業状態追跡を支援することを特徴とするシステムが提供される。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
ここで、前記サムネイル画像は、前記時間帯に撮像された前記券売機に係る画像を所定の方法により画像解析することにより人物検出された画像である、としてもよい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
さらには、前記サムネイル画像は、前記時間帯に撮像された前記券売機に係る画像を所定の方式により画像解析することにより人物検出された画像から、その人物を含む部分を切り出したオブジェクト画像である、としてもよい。