(57)【要約】【課題】ランニングコストの上昇を抑えつつ、不正な取引行為や盗難等の行為が発生した時点での不正な利用者を撮影する事ができ、その撮影した画像から不正な利用者の特定を一層容易にすること。【解決手段】識別部２５０は、挿入されたカードからユーザ識別情報を検出し、検出したユーザ識別情報を操作検知部３１０に送信する。また、入出金検知部２１０は、入手金が完了したことを検知して、操作情報を操作検知部３１０に送信する。操作検知部３１０は、情報を受信することで、自動取引装置の周囲の画像を１から数フレーム撮影する。情報を受信した時刻と情報の内容からなる文字・記号の情報を、撮影された画像情報にたいして合成し、記憶する。【選択図】      図１
2005018273.tif 000002
【特許請求の範囲】
【請求項１】
ユーザが認証許可を求める操作を検知してユーザ識別情報を生成する識別手段と、
操作を検知して操作種別を示す操作情報を生成する検知手段と、
を有する自動取引装置と、
前記ユーザ識別情報または前記操作情報が生成される度ごとに前記自動取引装置の周囲の画像を撮影する撮像手段と、
前記撮像手段で撮影された画像を記憶する記憶手段と、
を有する監視装置と、
を具備する自動取引監視システム。
【請求項２】
さらに、前記監視装置が、
前記ユーザ識別情報、前記ユーザ識別情報を受信した年月日・時刻の情報及び前記ユーザ識別情報の受信に基づき前記撮像手段で撮影された画像情報とを画像合成した識別画像情報の生成、
前記操作情報、前記操作情報を受信した年月日・時刻の情報及び前記操作情報の受信に基づき前記撮像手段で撮影された画像情報とを画像合成した操作画像情報の生成、
を行う画像合成手段を有し、
前記記憶手段が、
前記画像合成手段で生成された前記識別画像情報または前記操作画像情報の少なくともいずれか一方を記憶する
ことを特徴とする請求項１記載の自動取引監視システム。
【請求項３】
さらに、前記監視装置が、
前記ユーザ識別情報と前記ユーザ識別情報を受信した年月日・時刻の情報とからなるヘッダー情報を生成するヘッダー生成手段と、
前記ヘッダー情報、前記識別画像情報及び前記操作画像情報とから構成されるログ情報を生成するログ情報生成手段と、
を有し、
前記記憶手段が、
前記ヘッダー情報を検索キーとし前記ログ情報をデータベース化して記憶する
ことを特徴とする請求項２記載の自動取引監視システム。
【請求項４】
さらに、前記監視装置が、
記憶されている前記ログ情報から検索入力部で入力された検索条件に基づき特定のログ情報を抽出する検索手段
を有することを特徴とする請求項３記載の自動取引監視システム。
【請求項５】
さらに、前記監視装置が、
記憶されている前記ログ情報を通信回線を介して外部の機器に送信する情報入出力手段
を有することを特徴とする請求項３記載の自動取引監視システム。
【請求項６】
認証の許可を求める操作を検知した自動取引装置より送信されユーザを識別できるユーザ識別情報の受信または操作を検知した前記自動取引装置より送信され操作を種別する操作情報の受信のいずれかが生じる度ごとに前記自動取引装置の周囲の画像を撮影する撮像手段と、
前記撮像手段で撮影された前記周囲の画像を記憶する記憶手段と、
を具備する監視装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、金融機関等に設置されている入金・出金処理をする自動取引装置（ＡＴＭ：Ａｕｔｏｍａｔｉｃ  Ｔｅｌｌｅｒ  Ｍａｃｈｉｎｅ）を監視する自動取引監視システムおよび監視装置に関する。
【０００２】
【従来の技術】
従来の自動取引監視システムの多くは、監視場所の撮影を常時行い、その映像を全て記憶する方法が採られている。この場合、長時間に渡る動画像を記憶・保管するために大容量の記憶媒体が多数必要となるため、装置価格の上昇や、ランニングコストの上昇という問題が生じる。
【０００３】
一方、装置の使用開始を検知した時点でのみ、短時間の動画像を記憶・保管する方法を採り、必要とする記憶媒体の容量を低減できる自動取引監視システムがある（例えば、特許文献１参照）。
【０００４】
具体的には、カードリーダにカードが挿入されたことを検知して、カードの識別番号情報を取得すると供に、カードを挿入した利用者を含む自動取引監視システムの周囲の映像を数１０〜１００フレームに渡り撮影する。そして、カードの識別番号情報と撮影した動画像情報とを記憶装置に記憶する。ここで、記憶されたこれらの情報は、カードの識別番号情報を検索キーとしたデータベース化されており、特定の識別番号情報を有するカードが挿入された時点での動画像情報を検索・抽出することができる。そして、この動画像情報に基づき利用者を特定することができる。
【０００５】
【特許文献１】
特開２００１−５２２７３号公報（第２−５頁、第１図）
【０００６】
【発明が解決しようとする課題】
しかしながら、従来の自動取引監視システムでは、カードの挿入を検知した時点でのみ動画像撮影を行うために、動画撮影の終了後は、次にカードの挿入を検知するまで動画像撮影を行わない。このために、従来の自動取引監視システムでは、動画撮影が終了した後に発生した、不正な利用者による不正な使用、または現金、通帳、カード、明細票等の盗難などの行為を撮影することができなかった。
【０００７】
本発明は、かかる点に鑑みてなされたものであり、ランニングコストの上昇を抑えつつ、不正な取引行為や盗難等の行為が発生した時点での不正な利用者を撮影する事ができ、その撮影した画像から不正な利用者の特定を一層容易にすることができる自動取引監視システムおよび監視装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】
本発明の自動取引監視システムは、ユーザが認証許可を求める操作を検知してユーザ識別情報を生成をする識別手段と、操作を検知して操作種別を示す操作情報を生成する検知手段と、を有する自動取引装置と、前記ユーザ識別情報または前記操作情報が生成される度ごとに前記自動取引装置の周囲の画像を撮影する撮像手段と、前記撮像手段で撮影された画像を記憶する記憶手段と、を有する監視装置と、を具備する構成を採る。
【０００９】
この構成によれば、自動取引監視システムは、自動取引装置の全ての操作行為を検出して、この操作行為を検出した全ての時点での利用者の映像を含む自動取引装置の周囲の映像を撮影するため、不正な取引行為や盗難等の行為が発生した場合でも不正な利用者を撮影する事ができ、その撮影した画像から不正な利用者の特定を一層容易にすることができる。
【００１０】
本発明の自動取引監視システムは、上記の自動取引監視システムに対して、さらに、前記監視装置が、前記ユーザ識別情報、前記ユーザ識別情報を受信した年月日・時刻の情報及び前記ユーザ識別情報の受信に基づき前記撮像手段で撮影された画像情報とを画像合成した識別画像情報の生成、前記操作情報、前記操作情報を受信した年月日・時刻の情報及び前記操作情報の受信に基づき前記撮像手段で撮影された画像情報とを画像合成した操作画像情報の生成、を行う画像合成手段を有し、前記記憶手段が、前記画像合成手段で生成された前記識別画像情報または前記操作画像情報の少なくともいずれか一方を記憶することを特徴とする構成を採る。
【００１１】
この構成によれば、自動取引監視システムは、撮影された画像情報と時刻情報とユーザ識別情報または操作情報を画像合成するため、合成した画像のみから操作が行われた行為内容や時刻を識別することができる。
【００１２】
本発明の自動取引監視システムは、上記の自動取引監視システムに対して、さらに、前記監視装置が、前記ユーザ識別情報と前記ユーザ識別情報を受信した年月日・時刻の情報とからなるヘッダー情報を生成するヘッダー生成手段と、前記ヘッダー情報、前記識別画像情報及び前記操作画像情報とから構成されるログ情報を生成するログ情報生成手段と、を有し、前記記憶手段が、前記ヘッダー情報を検索キーとし前記ログ情報をデータベース化して記憶することを特徴とする構成を採る。
【００１３】
この構成によれば、自動取引監視システムは、ユーザ識別情報を受信した年月日・時刻の情報とユーザ識別情報とを検索キーとして用い、撮影された画像情報をデータベース化するため、特定のユーザ識別情報を有する利用者の操作行為の映像や、特定時刻の操作行為の映像を容易に検索することができる。
【００１４】
本発明の自動取引監視システムは、上記の自動取引監視システムに対して、さらに、前記監視装置が、記憶されている前記ログ情報から検索入力部で入力された検索条件に基づき特定のログ情報を抽出する検索手段を有することを特徴とする構成を採る。
【００１５】
この構成によれば、自動取引監視システムは、監視装置がデータ検索の入力部と検索結果の表示部とを具備するため、監視装置の存在する場所において、特定のユーザ識別情報を有する利用者の操作行為の映像や、特定時刻の操作行為の映像を容易に検索することができる。
【００１６】
本発明の自動取引監視システムは、上記の自動取引監視システムに対して、さらに、前記監視装置が、記憶されている前記ログ情報を通信回線を介して外部の機器に送信する情報入出力手段を有することを特徴とする構成を採る。
【００１７】
この構成によれば、自動取引監視システムは、記憶されているログ情報を通信回線を介して外部に送信できるため、自動取引監視システムから離れた遠隔地においても、特定のユーザ識別情報を有する利用者の操作行為の映像や、特定時刻の操作行為の映像を容易に検索することができる。
【００１８】
本発明の監視装置は、認証の許可を求める操作を検知した自動取引装置より送信されユーザを識別できるユーザ識別情報の受信または操作を検知した前記自動取引装置より送信され操作を種別する操作情報の受信のいずれかが生じる度ごとに前記自動取引装置の周囲の画像を撮影する撮像手段と、前記撮像手段で撮影された前記周囲の画像を記憶する記憶手段と、を具備する構成を採る。
【００１９】
この構成によれば、監視装置は、自動取引装置の操作を検出する全ての行為に対して、利用者の映像を含む自動取引装置の周囲の映像を撮影するため、不正な取引行為や盗難等を行う不正な利用者の特定を容易にすることができる。
【００２０】
【発明の実施の形態】
本発明の骨子は、自動取引装置の全ての操作行為を検出して、この操作行為を検出した全ての時点での利用者の映像を含む自動取引装置の周囲の映像を撮影することである。
【００２１】
（実施の形態）
図１は、本発明の一実施の形態に係る自動取引監視システムの構成を示すブロック図である。自動取引監視システム１００は、自動取引装置２００と、監視装置３００と、から構成されている。そして、自動取引装置２００は、入出金検知部２１０と、入力検知部２２０と、明細票検知部２３０と、通帳検知部２４０と、識別部２５０と、から構成されている。
【００２２】
また、監視装置３００は、操作検知部３１０、時計部３２０、情報格納部３３０、画像合成部３４０とからなる処理部３５０を有している。さらに監視装置３００は、撮像部３６０、ヘッダー生成部３７０、ログ生成部３８０、記憶部３９０、検索入力部４００、検索部４１０、表示部４２０、情報入出力部４３０と、を有している。
【００２３】
入出金検知部２１０は、自動取引装置２００の外部から内部に現金を搬入する機構と、自動取引装置２００の内部から外部に現金を搬出する機構とを備えており、現金の搬出または搬入を検知し、入出金検知情報を監視装置３００の操作検知部３１０に送信する。
【００２４】
入力検知部２２０は、ユーザが自動取引装置２００に対して指示するための機構、例えば操作スイッチやタッチパネルを備えており、入力検知部２２０の操作を検知し、入力操作検知信号を監視装置３００の操作検知部３１０に送信する。
【００２５】
明細票検知部２３０は、自動取引装置２００の取引内容を記した明細票を印字する機能と、自動取引装置２００の外部に明細票を搬出する機構を備えており、ユーザが明細票を取り出すことを検知し、明細票検知信号を監視装置３００の操作検知部３１０に送信する。
【００２６】
通帳検知部２４０は、自動取引装置２００の取引内容を通帳に印字する機能と、通帳を自動取引装置２００の外部から内部に搬入する機構と、通帳を自動取引装置２００の内部から外部に搬出する機構とを備えており、通帳の挿入または、取り出しを検知し、通帳検知信号を監視装置３００の操作検知部３１０に送信する。
【００２７】
識別部２５０は、挿入されたカードに記憶されているユーザ識別情報と暗証情報とを読み出す機能を備えており、このユーザ識別情報を読み出し、監視装置３００の操作検知部３１０に送信する。さらに、識別部２５０は、カードを自動取引装置２００の外部から内部に搬入する機構と、カードを自動取引装置２００の内部から外部に搬出する機構とを備えており、ユーザがカードの挿入または、取り出しを検知し、ユーザ識別情報を監視装置３００の操作検知部３１０に送信する。
【００２８】
操作検知部３１０は、自動取引装置２００から送信されたユーザ識別情報または操作情報を受信し、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を撮影する指示を撮像部３６０に送信する。また、自動取引装置２００から送信された情報から、ユーザ識別情報または操作情報を抽出し、情報格納部３３０へ送信する。さらに、自動取引装置２００から送信されたユーザ識別情報または操作情報を受信し、受信した年月日・時刻を計時する指示を時計部３２０に送信する。
【００２９】
時計部３２０は、操作検知部３１０からの指示により、受信した年月日・時刻を取得し、この年月日・時刻の情報を情報格納部３３０に送信する。
【００３０】
撮像部３６０は、操作検知部３１０からの指示を受信し、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を１ないし数フレーム動画撮影し、撮影した画像情報を情報格納部３３０に送信する。
【００３１】
情報格納部３３０は、操作検知部３１０から送信されたユーザ識別情報または操作情報と、時計部３２０からの送信された年月日・時刻の情報と、撮像部３６０から送信された画像情報とを受信し、これらの情報を画像合成部３４０に送信する。
【００３２】
画像合成部３４０は、情報格納部３３０からの情報を受信し、撮像部３６０から送信された映像情報に、ユーザ識別情報または操作情報と、年月日・時刻の情報とを文字・記号として画像合成する。
【００３３】
ヘッダー生成部３７０は、ユーザ識別情報と識別部２５０でカードの挿入を検知した年月日・時刻の情報とからなるヘッダー情報を生成する。
【００３４】
ログ生成部３８０は、ヘッダー生成部３７０で生成したヘッダー情報と、画像合成部３４０で生成された合成画像情報とを合わせたログ情報を生成する。
【００３５】
具体的なログ情報の構成を、図５を用いて説明する。記憶部３９０の記憶領域５００には、複数のログデータを記憶することができる。図５に示した例では、第１のログ６００と、第２のログ７００と、第３のログ８００とを記憶している。
【００３６】
ここで、ログデータは、１個のヘッダー部と複数個の合成画像データを有する。具体的に、第１のログ６００に着目すると、第１のログ６００は、ヘッダー生成部３７０で生成されたヘッダー部６１０と、画像合成部３４０で生成された複数の合成画像情報、すなわち、カード挿入時の画像データ６２０、認証失敗１回目の画像データ６３０、認証成功時の画像データ６４０、現金取り出し時の画像データ６５０、通帳取りだし時の画像データ６６０、明細票取り出し時の画像データ６７０とからなっている。また、ヘッダー部６１０は、ユーザ識別情報を意味する利用者のカード番号と、識別部２５０でカードの挿入を検知した年月日・時刻の情報とから構成されている。そして、このカード番号と年月日・時刻の情報とは、検索キーとして用いることができるように記憶されている。
【００３７】
記憶部３９０は、大容量の記憶媒体、例えば磁気テープ、ハードディスクなどを備えており、ログ生成部３８０で生成されたログ情報を受信し、記憶媒体に記憶する。
【００３８】
検索入力部４００は、入力機能、例えばキーボード、マウス、スイッチなどを備えており、また、表示部４２０は、入力情報や検索結果情報を表示する機能、例えばディスプレィなどを備えており、検索部４１０からの検索結果の表示などをする。
【００３９】
情報入出力部４３０は、外部機器４４０との間で情報を授受する機能、例えば、インターネット網を利用した通信機能、電話回線を利用した通信機能などを備えており、外部機器４４０からの指示を受信し、この指示に基づき記憶部３９０に記憶されているログ情報を抽出して外部機器４４０に送信する。
【００４０】
次いで、上記構成を有する装置の動作について、図２、図３に示すフローチャートを用いて説明する。図２、図３は、ユーザが自動取引装置２００から、現金を出金する場合を説明するフローチャートである。
【００４１】
ステップＳＴ１０００では、識別部２５０が、カードの挿入の有無を判別する。ここで、カードの挿入が無いと判別した場合（ＮＯの場合）には、再びカードの挿入の有無を判別するステップＳＴ１０００へ進む。これに対して、カードの挿入が有ると判別した場合（ＹＥＳの場合）には、ステップＳＴ１１００へ進む。すなわち、識別部２５０は、カードの挿入を検知するまでステップＳＴ１０００を繰り返すことになる。
【００４２】
そして、ステップＳＴ１１００では、識別部２５０が、挿入されたカードからユーザ識別情報を検出し、ユーザ識別情報を操作検知部３１０へ送信する。
【００４３】
そして、ステップＳＴ１２００では、カードの挿入した時点での自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために、監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【００４４】
ステップＳＴ４０００では、操作検知部３１０が、識別部２５０からユーザ識別情報を受信し、受信した年月日・時刻の情報を取得するために時計部３２０に指示を送信する。
【００４５】
そして、ステップＳＴ４１００では、時計部３２０が操作検知部３１０からの指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【００４６】
そして、ステップＳＴ４２００では、操作検知部３１０が、識別部２５０から送信された情報にユーザ識別情報が含まれるかを判別する。ここで、ユーザ識別情報を含む場合には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合には、操作情報を抽出をするステップＳＴ４２１０へ進む。この場合には、受信した情報に、ユーザ識別情報を含んでいるので、ステップＳＴ４３００へ進む。
【００４７】
ステップＳＴ４３００では、情報格納部３３０が、ステップＳＴ４２００で抽出されたユーザ識別情報を、受信し記憶する。
【００４８】
そして、ステップＳＴ４４００では、ヘッダー生成部３７０が、情報格納部３３０に記録している年月日・時刻の情報とユーザ識別情報とを受信し、ユーザ識別情報と年月日・時刻の情報とからなるヘッダー情報を生成する。
【００４９】
そして、ステップＳＴ４５００では、記憶部３９０が、ステップＳＴ４４００で生成したヘッダー情報を受信し、記憶する。
【００５０】
そして、ステップＳＴ４６００では、撮像部３６０が、操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【００５１】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、ユーザ識別情報、及び年月日・時刻の情報とを抽出し、画像情報に対して、ユーザ識別情報と年月日・時刻の情報を意味する文字情報または記号情報を合成する。具体的には、ユーザ識別情報と年月日・時刻の情報を、文字・記号からなるテロップとして、撮影された画像に合成する。
【００５２】
そして、ステップＳＴ４８００では、既に記憶されているヘッダー情報に対して、ステップＳＴ４７００で合成された画像情報であるログ情報を、このヘッダー情報に関連つけて記憶部３９０に記憶する。
【００５３】
このようにして、カードが識別部２５０に挿入された時点を検知して、ユーザ識別情報の検知をすると供に、カードを挿入した時点での、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができ、使用者を特定することが容易になる。
【００５４】
以上により、ステップＳＴ１２００における監視情報取得のサブルーチンを終了し、図２のメインルーチンに戻り、ステップＳＴ１３００に進む。
【００５５】
ステップＳＴ１３００では、識別部２５０が、挿入されたカードに記憶されている暗証情報を抽出する。そして、入力検知部２２０は、「暗証番号を入力してください」という表示をし、暗証情報の入力を受け付ける。その後、入力検知部２２０で入力された暗証情報を識別し、この入力された暗証情報とカードに記憶されている暗証情報との一致性を判別し、認証照合をする。ここで、入力された暗証情報とカードに記憶されている暗証情報とが一致する場合（ＹＥＳの場合）には、認証照合を許可し、ステップＳＴ１４００へと進む。これに対して、入力された暗証情報とカードに記憶されている暗証情報とが一致しない場合（ＮＯの場合）には、認証照合を許可せず、ステップＳＴ３０００へと進む。
【００５６】
まず、入力された暗証情報とカードに記憶されている暗証情報とが一致する場合（ＹＥＳの場合）ついて、説明する。
【００５７】
ステップＳＴ１４００では、識別部２５０が、認証照合を許可する操作情報を、操作検知部３１０に送信する。
【００５８】
そして、ステップＳＴ１５００では、認証照合を許可した時点での自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために、監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【００５９】
ステップＳＴ４０００では、操作検知部３１０が、識別部２５０からの認証照合を許可する操作情報を受信し、受信した年月日・時刻の情報を取得するために時計部３２０に指示を送信する。
【００６０】
そして、ステップＳＴ４１００では、時計部３２０が、操作検知部３１０から送出された指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【００６１】
そして、ステップＳＴ４２００では、操作検知部３１０が、識別部２５０から送信された情報にユーザ識別情報が含まれるかを判別する。ここで、ユーザ識別情報を含む場合には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合には、操作情報を抽出するステップＳＴ４２１０へ進む。今回は、受信した情報に、認証照合を許可する操作情報を含んでいるがユーザ識別情報を含んでいないので、ステップＳＴ４２１０へ進む。
【００６２】
ステップＳＴ４２１０では、情報格納部３３０が、ステップＳＴ４２００で抽出された認証照合を許可する操作情報を受信し記憶する。
【００６３】
そして、ステップＳＴ４６００では、撮像部３６０が、操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【００６４】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、操作情報、及び年月日・時刻の情報とを抽出し、画像情報に対して、操作情報と年月日・時刻の情報を意味する文字情報または記号情報とを画像合成する。例えば、「認証ＯＫ  １年２月３日  ４時５分」のように、認証照合を許可する操作情報と年月日・時刻の情報を、文字・記号からなるテロップとして撮影された画像に合成する。
【００６５】
そして、ステップＳＴ４８００では、ステップＳＴ４７００にて合成された画像情報であるログ情報を、既に記憶されているヘッダー情報に関連つけて記憶部３９０に記憶する。
【００６６】
このようにして、識別部２５０が、カードに記憶されているユーザ識別情報と暗証情報とから認証照合を行い、認証照合が許可された時点を検知して、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができる。
【００６７】
以上により、ステップＳＴ１５００における監視情報取得のサブルーチンを終了し、図２のメインルーチンに戻り、ステップＳＴ１６００に進む。
【００６８】
ステップＳＴ１６００では、入出金検知部２１０が紙幣または硬貨を自動取引装置２００の内部から外部へ搬出し、利用者が紙幣まはた硬貨を受け取れるようにする。
【００６９】
そして、ステップＳＴ１７００では、入出金検知部２１０が、利用者による紙幣または硬貨の取り出しが完了したかを判別する。ここで、紙幣または硬貨の取り出しが完了したことを検知した場合（ＹＥＳの場合）には、ステップＳＴ１８００に進む。これに対して、紙幣または硬貨の取り出しが完了したことを検知しない場合（ＮＯの場合）には、再びステップＳＴ１７００に進み、紙幣または硬貨の取り出しが完了するまでステップＳＴ１７００を繰り返す。
【００７０】
ステップＳＴ１８００では、入出金検知部２１０が紙幣または硬貨の取り出しの完了を検知したことにより、入出金の操作情報を操作検知部３１０に送信する。
【００７１】
そして、ステップＳＴ１９００では、紙幣または硬貨の取り出しが完了した時点での自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために、監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【００７２】
ステップＳＴ４０００では、操作検知部３１０が入出金検知部２１０から紙幣または硬貨の取り出しが完了した操作情報を受信し、受信した年月日・時刻の情報を取得するために時計部３２０に指示を送信する。
【００７３】
そして、ステップＳＴ４１００では、時計部３２０が、操作検知部３１０から送出された指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【００７４】
そして、ステップＳＴ４２００では、操作検知部３１０が、入出金検知部２１０から送信された情報にユーザ識別情報が含まれるかを判別する。ここで、ユーザ識別情報を含む場合には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合には、操作情報を抽出をするステップＳＴ４２１０へ進む。今回は、受信した情報に、入出金の操作情報を含んでいるがユーザ識別情報を含んでいないので、ステップＳＴ４２１０へ進む。
【００７５】
そして、ステップＳＴ４２１０では、情報格納部３３０が、ステップＳＴ４２００で抽出された入出金の操作情報を、受信し記憶する。
【００７６】
そして、ステップＳＴ４６００では、撮像部３６０が、操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【００７７】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、入出金の操作情報、及び年月日・時刻の情報とを抽出し、画像情報に対して、操作情報と年月日・時刻の情報を意味する文字情報または記号情報とを画像合成する。例えば、「出金ＯＫ  １年２月３日  ４時５分」のように、入出金の操作情報と年月日・時刻の情報を、文字・記号からなるテロップとして撮影された画像に合成する。
【００７８】
そして、ステップＳＴ４８００では、ステップＳＴ４７００にて合成された画像情報であるログ情報を、既に記憶されているヘッダー情報に関連つけて記憶部３９０に記憶する。
【００７９】
このようにして、入手金検知部２１０が、紙幣または硬貨の取り出した時点を検知して、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができる。
【００８０】
以上でステップＳＴ１９００における監視情報取得のサブルーチンを終了し、図３のメインルーチンに戻り、ステップＳＴ２０００に進む。
【００８１】
ステップＳＴ２０００では、通帳検知部２４０が取引内容を印字した通帳を自動取引装置２００の内部から外部へ搬出し、利用者が通帳を受け取れるようにする。
【００８２】
そして、ステップＳＴ２１００では、通帳検知部２４０が、利用者による通帳の取り出しが完了したかを判別する。ここで、通帳の取り出しが完了したことを検知した場合（ＹＥＳの場合）には、ステップＳＴ２２００に進む。これに対して、通帳の取り出しが完了したことを検知しない場合（ＮＯの場合）には、再びステップＳＴ２１００に進み、通帳の取り出しが完了するまでステップＳＴ２１００を繰り返す。
【００８３】
ステップＳＴ２２００では、通帳検知部２４０が取引内容を印字した通帳の取り出しが完了したことを検知し、通帳の操作情報を操作検知部３１０に送信する。
【００８４】
そして、ステップＳＴ２３００では、取引内容を印字した通帳の取り出しが完了した時点での、自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【００８５】
ステップＳＴ４０００では、操作検知部３１０が、通帳検知部２４０からの通帳の操作情報を受信し、受信した年月日・時刻の情報を取得するために時計部３２０に指示を送信する。
【００８６】
そして、ステップＳＴ４１００では、時計部３２０が、操作検知部３１０からの送出された指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【００８７】
そして、ステップＳＴ４２００では、操作検知部３１０が、通帳検知部２４０から送信された情報に、ユーザ識別情報が含むまれるか否かを判別する。ここで、ユーザ識別情報を含む場合には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合には、操作情報を抽出するステップＳＴ４２１０へ進む。今回は、受信した情報に、通帳の操作情報を含んでいるがユーザ識別情報を含んでいないので、ステップＳＴ４２１０へ進む。
【００８８】
ステップＳＴ４２１０では、情報格納部３３０が、ステップＳＴ４２００で抽出された通帳の操作情報を、受信し記憶する。
【００８９】
そして、ステップＳＴ４６００では、撮像部３６０が、操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【００９０】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、通帳の操作情報、及び年月日・時刻の情報とを抽出し、画像情報に対して、操作情報と年月日・時刻の情報を意味する文字情報または記号情報とを画像合成する。例えば、「通帳取り出しＯＫ  １年２月３日  ４時５分」のように、通帳の操作情報と年月日・時刻の情報を、文字・記号からなるテロップとして撮影された画像に合成する。
【００９１】
そして、ステップＳＴ４８００では、ステップＳＴ４７００で合成した画像情報であるログ情報を、既に記憶されているヘッダー情報関連つけて記憶部３９０に記憶する。
【００９２】
このようにして、通帳検知部２４０が、通帳の取り出された時点を検知して、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができる。
【００９３】
以上でステップＳＴ２３００における監視情報取得のサブルーチンを終了し、図３のメインルーチンに戻り、ステップＳＴ２４００に進む。
【００９４】
ステップＳＴ２４００では、明細票検知部２３０が取引内容を印字した明細票を自動取引装置２００の内部から外部へ搬出し、利用者が明細票を受け取れるようにする。
【００９５】
そして、ステップＳＴ２５００では、明細票検知部２３０が、利用者による明細票の取り出しが完了したかを判別する。ここで、明細票の取り出しが完了したことを検知した場合（ＹＥＳの場合）には、ステップＳＴ２６００に進む。これに対して、明細票の取り出しが完了したことを検知しない場合（ＮＯの場合）には、再びステップＳＴ２５００に進み、明細票の取り出しが完了するまでステップＳＴ２５００を繰り返す。
【００９６】
ステップＳＴ２６００では、明細票検知部２３０が、明細票の取り出しの完了を検知したことに基づき、明細票の操作情報を操作検知部３１０に送信する。
【００９７】
そして、ステップＳＴ２７００では、取引内容を印字した明細票の取り出しが完了した時点での自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【００９８】
ステップＳＴ４０００では、操作検知部３１０が、明細票検知部２３０からの明細票の操作情報を受信し、受信した年月日・時刻の情報を取得するために時計部３２０に指示を送信する。
【００９９】
そして、ステップＳＴ４１００では、時計部３２０が、操作検知部３１０から送出された指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【０１００】
そして、ステップＳＴ４２００では、操作検知部３１０が、明細票検知部２３０から送出された情報にユーザ識別情報が含まれるかを判別する。ここで、ユーザ識別情報を含む場合（ＹＥＳの場合）には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合（ＮＯの場合）には、操作情報を抽出するステップＳＴ４２１０へ進む。今回は、受信した情報に、明細票の操作情報を含んでいるがユーザ識別情報を含んでいないので、ステップＳＴ４２１０へ進む。
【０１０１】
ステップＳＴ４２１０では、情報格納部３３０が、ステップＳＴ４２００で抽出された明細票の操作情報を、受信し記憶する。
【０１０２】
そして、ステップＳＴ４６００では、撮像部３６０が、操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【０１０３】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、明細票の操作情報、及び年月日・時刻の情報とを抽出し、画像情報に、明細票の操作情報と年月日・時刻の情報を意味する文字情報または記号情報とを画像合成する。例えば、「明細票取り出し  １年２月３日  ４時５分」のように、明細票の操作情報と年月日・時刻の情報を、文字・記号からなるテロップとして撮影された画像に合成する。
【０１０４】
そして、ステップＳＴ４８００では、ステップＳＴ４７００で合成した画像情報であるログ情報を、既に記憶されているヘッダー情報に関連つけて記憶部３９０に記憶する。
【０１０５】
このようにして、明細票検知部２３０が、明細票の取り出された時点を検知して、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができる。
【０１０６】
以上でステップＳＴ２３００における監視情報取得のサブルーチンを終了し、図３のメインルーチンに戻り、動作は終了する。
【０１０７】
ここで、ステップＳＴ１３００において、入力された暗証情報とカードに記憶されている暗証情報とが一致しない場合（ＮＯの場合）についてのフローを説明する。
【０１０８】
ステップＳＴ３０００では、自動取引装置２００が、ステップＳＴ１３００で認証照合が不許可になった回数を累計し、累計誤入力回数として記憶する。
【０１０９】
そして、ステップＳＴ３１００では、自動取引装置２００が、累計誤入力回数と、誤入力を許容する最大の累計回数を意味する最大誤入力回数（例えばＮ回）とを比較し、大小を判別する。ここで、累計誤入力回数が最大誤入力回数より大きい場合（ＹＥＳの場合）には、自動取引装置２００は、カードの認証を許可しないと判断し、ステップＳＴ３２００に進む。これに対して、累計誤入力回数が最大誤入力回数以下の場合（ＮＯの場合）には、暗証情報の再入力を許可すると判断し、ステップＳＴ３４００に進む。
【０１１０】
まずは、ステップＳＴ３１００において、累計誤入力回数が最大誤入力回数より大きいと判別された場合（ＹＥＳの場合）のフローについて説明する。
【０１１１】
ステップＳＴ３２００は、ステップＳＴ３１００でカードの認証を許可しないと判断した場合であり、自動取引装置２００が、認証を不許可とする操作情報を操作検知部３１０に送信する。
【０１１２】
そして、ステップＳＴ３３００では、認証照合を不許可とした時点での自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために、監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【０１１３】
ステップＳＴ４０００では、操作検知部３１０が入力検知部２２０からの認証照合を不許可とする操作情報を受信し、受信した年月日・時刻を取得するように時計部３２０に指示を送信する。
【０１１４】
そして、ステップＳＴ４１００では、時計部３２０が、操作検知部３１０から送出された指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【０１１５】
そして、ステップＳＴ４２００では、操作検知部３１０が、識別部２５０から送信された情報にユーザ識別情報を含むかを判別する。ここで、ユーザ識別情報を含む場合（ＹＥＳの場合）には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合（ＮＯの場合）には、操作情報を抽出するステップＳＴ４２１０へ進む。今回は、受信した情報に、認証照合を不許可とする操作情報を含んでいるがユーザ識別情報を含んでいないので、ステップＳＴ４２１０へ進む。
【０１１６】
ステップＳＴ４２１０では、情報格納部３３０が、ステップＳＴ４２００で抽出された認証照合を不許可とする操作情報を、受信し記憶する。
【０１１７】
そして、ステップＳＴ４６００では、撮像部３６０が、操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【０１１８】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、操作情報、及び年月日・時刻の情報とを抽出し、画像情報に対して、操作情報と年月日・時刻の情報を意味する文字情報または記号情報とを画像合成する。例えば、「誤入力回数超過  １年２月３日  ４時５分」のように、認証照合を不許可とする操作情報と年月日・時刻の情報を、文字・記号からなるテロップとして撮影された画像に合成する。
【０１１９】
そして、ステップＳＴ４８００では、ステップＳＴ４７００にて合成された画像情報であるログ情報を、既に記憶されているヘッダー情報に関連つけて記憶部３９０に記憶する。
【０１２０】
このようにして、識別部２５０が、認証許可を受けるために入力検知部２２０から入力した暗証情報が、所定の回数以上誤入力された時点での、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができ、使用者を特定することが容易になる。
【０１２１】
以上により、ステップＳＴ３３００における監視情報取得のサブルーチンを終了してメインルーチンに戻る。図２に示す記号Ａに進み、記号Ａは、図３において終了する。
【０１２２】
次に、ステップＳＴ３１００において、累計誤入力回数が最大誤入力回数以下と判別された場合（ＮＯの場合）のフローについて説明する。
【０１２３】
ステップＳＴ３４００は、ステップＳＴ３１００で暗証情報の再入力を許可すると判断した場合であり、自動取引装置２００が、誤入力の操作情報を操作検知部３１０に送信する。
【０１２４】
そして、ステップＳＴ３５００では、暗証情報を誤入力した時点での自動取引装置２００の前に立つ利用者の顔または上体を含む映像を監視情報として取得するために、監視情報取得のサブルーチンへ進む。なお、監視情報取得のサブルーチンは、図４に示すステップＳＴ４０００からステップＳＴ４８００までで構成されている。以下、図４に示すフローチャートを用いて、監視情報取得のサブルーチンを説明する。
【０１２５】
ステップＳＴ４０００では、操作検知部３１０が入力検知部２２０からの暗証情報を誤入力した操作情報を受信し、受信した年月日・時刻を取得するように時計部３２０に指示を送信する。
【０１２６】
そして、ステップＳＴ４１００では、時計部３２０が、操作検知部３１０から送出された指示に基づき年月日・時刻の情報を取得し、この年月日・時刻の情報を情報格納部３３０へ送信し、記憶させる。
【０１２７】
そして、ステップＳＴ４２００では、操作検知部３１０が、識別部２５０から送信された情報にユーザ識別情報が含まれるかを判別する。ここで、ユーザ識別情報を含む場合（ＹＥＳの場合）には、ユーザ識別情報を抽出するステップＳＴ４３００へ進む。これに対して、ユーザ識別情報を含まない場合（ＮＯの場合）には、操作情報を抽出するステップＳＴ４２１０へ進む。今回は、受信した情報に、暗証情報を誤入力した操作情報を含んでいるがユーザ識別情報を含んでいないので、ステップＳＴ４２１０へ進む。
【０１２８】
ステップＳＴ４２１０では、情報格納部３３０が、ステップＳＴ４２００で抽出された暗証情報を誤入力した操作情報を、受信し記憶する。
【０１２９】
そして、ステップＳＴ４６００では、撮像部３６０が操作検知部３１０から送出された指示に基づき、自動取引装置２００の前に立つ利用者の顔または上体を含む画像を１〜数フレーム分撮影し、この撮影した画像情報を情報格納部３３０に記憶する。
【０１３０】
そして、ステップＳＴ４７００では、画像合成部３４０が、情報格納部３３０に記憶されている画像情報、操作情報、及び年月日・時刻の情報とを抽出し、画像情報に対して、操作情報と年月日・時刻の情報を意味する文字情報または記号情報とを画像合成する。例えば、「誤入力回数回数１回目  １年２月３日  ４時５分」のように、暗証情報を誤入力した操作情報と年月日・時刻の情報を、文字・記号からなるテロップとして撮影された画像に合成する。
【０１３１】
そして、ステップＳＴ４８００では、ステップＳＴ４７００にて合成された画像情報であるログ情報を、既に記憶されているヘッダー情報に関連つけて記憶部３９０に記憶する。
【０１３２】
このようにして、識別部２５０が、認証許可を受けるために入力検知部２２０から入力した暗証情報が、誤入力された時点での、自動取引装置２００の前にいるユーザの頭部または上半身を含む映像を取得することができ、使用者を特定することが容易になる。
【０１３３】
以上により、ステップＳＴ３５００における監視情報取得のサブルーチンを終了してメインルーチンに戻る。図２に示すステップＳＴ１３００に進む。
【０１３４】
なお、図１は、自動取引装置２００に監視装置３００を接続して、自動取引監視システムを構成したが、図６に示すように自動取引装置と監視装置とを一体化させてもよい。なお、図１と同一機能には、同一符号を付し、重複した説明は省略する。また、図６において、ヘッダー生成部３７０、ログ生成部３８０、記憶部３９０、検索入力部４００、検索部４１０、表示部４２０、情報入力部４３０は、自動取引装置５００の外部に設置したが、自動取引装置５００の内部に設置してもよい。
【０１３５】
なお、識別部２５０では、カードによる認証の代わりに、利用者の指紋や声紋や虹彩など他の認証を用いてもよい。
【０１３６】
このように、本実施の形態によれば、自動取引装置の全ての操作行為を検出して、この操作行為を検出した全ての時点での利用者の映像を含む自動取引装置の周囲の映像を１〜数フレーム撮影することができる。これにより、ランニングコストの上昇を抑えつつ、不正な取引行為や盗難等の行為が発生した時点での不正な利用者を撮影する事ができ、その撮影した画像から不正な利用者の特定を一層容易にすることができる。
【０１３７】
【発明の効果】
以上説明したように、本発明によれば、ランニングコストの上昇を抑えつつ、不正な取引行為や盗難等の行為が発生した時点での不正な利用者を撮影する事ができ、その撮影した画像から不正な利用者の特定を一層容易にすることができる。
【図面の簡単な説明】
【図１】本発明の一実施の形態に係る自動取引監視システムの構成を示すブロック図
【図２】上記実施の形態に係る自動取引監視システムの動作を説明するためのフローチャート
【図３】上記実施の形態に係る自動取引監視システムの動作を説明するためのフローチャート
【図４】上記実施の形態に係る自動取引監視システムの動作を説明するためのフローチャート
【図５】上記実施の形態に係る自動取引監視システムの記憶部に保存されるデータを示す図
【図６】上記実施の形態に係る自動取引監視システムの構成を示すブロック図
【符号の説明】
１００  自動取引監視システム
２００  自動取引装置
２１０  入出金検知部
２２０  入力検知部
２３０  明細票検知部
２４０  通帳検知部
２５０  認識部
３００  監視装置
３１０  操作検知部
３２０  時計部
３３０  情報格納部
３４０  画像合成部
３５０  処理部
３６０  撮像部
３７０  ヘッダー生成部
３８０  ログ生成部
３９０  記憶部
４００  検索入力部
４１０  検索部
４２０  表示部
４３０  情報入出力部
【図１】
2005018273.tif 000003
【図２】
2005018273.tif 000004
【図３】
2005018273.tif 000005
【図４】
2005018273.tif 000006
【図５】
2005018273.tif 000007
【図６】
2005018273.tif 000008