(57)【特許請求の範囲】
【請求項１】
撮影対象を撮影する撮像手段により撮影された動画像を解析することにより動的変化があったことを検出したタイミングでチャプタを挿入し、チャプタ毎に動画像を記憶管理する動画像管理手段と、
前記動画像管理手段により前記チャプタが挿入されたタイミングで、前記動画像とは別に記憶管理される時系列的なデータにチャプタを挿入しチャプタ毎に時系列的なデータを記憶管理するデータ記憶管理手段と、
再生中の動画像に挿入されたチャプタに対応するチャプタが挿入された時系列的なデータを表示させ、または、再生中の時系列的なデータに挿入されたチャプタに対応するチャプタが挿入された動画像を表示させる表示制御手段と、
を備えたことを特徴とする管理装置。
【請求項２】
前記動画像管理手段は、前記タイミングとして、新たなキー操作が行われたタイミングで前記チャプタを挿入し、前記データ記憶管理手段は、当該チャプタが挿入されたタイミングで、前記時系列的なデータにチャプタを挿入する請求項１に記載の管理装置。
【請求項３】
前記時系列的なデータを主体としてその再生動作中に前記動画像を同期表示させるか、前記動画像を主体としてその再生動作中に前記時系列的なデータを同期表示させるかを選択する選択手段を更に備える請求項１または２に記載の管理装置。
【請求項４】
前記撮像手段は、表示部の近傍に配設し、撮影対象を撮影可能となるようにその撮影方向及び画角が設定されている請求項１〜３のいずれかに記載の管理装置。
【請求項５】
コンピュータを、
撮影対象を撮影する撮像手段により撮影された動画像を解析することにより動的変化があったことを検出したタイミングでチャプタを挿入し、チャプタ毎に動画像を記憶管理する動画像管理手段、
前記動画像管理手段により前記チャプタが挿入されたタイミングで、前記動画像とは別に記憶管理される時系列的なデータにチャプタを挿入しチャプタ毎に時系列的なデータを記憶管理するデータ記憶管理手段、
再生中の動画像に挿入されたチャプタに対応するチャプタが挿入された時系列的なデータを表示させ、または、再生中の時系列的なデータに挿入されたチャプタに対応するチャプタが挿入された動画像を表示させる表示制御手段、
として機能させるためのプログラム。  
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、管理装置及びプログラムに関する。
【背景技術】
【０００２】
一般に、スーパーマーケットやコンビニエンスストアなどの店舗においては、ＥＣＲ（Electronic Cash Register）、ＰＯＳ（Point of sale）端末などの売上データ処理装置により登録処理された売上データ（商品名、個数、金額）や釣銭などをジャーナルデータとして取引毎に記録するようにしているほか、その他の操作状況も記録するようにしている。そして、営業の終了時などにおいて責任者はジャーナルデータを参照することによりオペレータによる各種の操作状況を確認しながらそのオペレータの操作ミスや不正操作などを詳細に検査するようにしている。更に、不正を防止する技術として従来では、ドロアを開放させる操作が行われると、その操作者の顔を撮影すると共に、そのときのジャーナルデータと撮影データとをネットワークを介して外部装置側の顔画像データベースに転送して記録させなければ、ドロアが開かないように制御するようにした技術が開示されている（特許文献１参照）。また、従来では、オペレータ及び顧客を撮影した動画とレシート内容とを同一画面内に並列表示させている状態において、その画面内の検索条件入力領域に検査対象のレシートＩＤが入力されると、そのレシートＩＤ対応のレシート内容と動画を読み出してジャンプ表示させるようにした技術が開示されている（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２３０６８２号公報
【特許文献２】特開２０１０−１９８５２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した特許文献１の技術にあっては、ドロアを開放する条件として、オペレータの顔画像の撮影とその記録を必須条件とすることにより顔画像を証拠として残しておくようにしたものであるが、後で責任者が撮影画像から不正されているかどうかを検査しようとしても、誰がドロアを開放したのかを知ることができなかったり、ドロアを開放した状況やドロア開放以外の不正操作までも知ることがでなかったりするため、不正操作の検査手段としては不十分なものであった。また、上述した特許文献２の技術にあっては、レシート内容と動画とをタイムスタンプ（時分秒）により関連付けておくことにより、レシート内容に対応する動画を何時でも自由に読み出して確認することが可能となるが、レシート内容を主体として検査する場合に限られてしまい、検査手段としては不十分なものであった。
【０００５】
本発明の課題は、正しい操作が行われたかを検査する場合に、多角的で効率の良い検査を実現できるようにすることである。
【課題を解決するための手段】
【０００６】
上述した課題を解決するために本発明の一つの態様は、
撮影対象を撮影する撮像手段により撮影された動画像を解析することにより動的変化があったことを検出したタイミングでチャプタを挿入し、チャプタ毎に動画像を記憶管理する動画像管理手段と、
前記動画像管理手段により前記チャプタが挿入されたタイミングで、前記動画像とは別に記憶管理される時系列的なデータにチャプタを挿入しチャプタ毎に時系列的なデータを記憶管理するデータ記憶管理手段と、
再生中の動画像に挿入されたチャプタに対応するチャプタが挿入された時系列的なデータを表示させ、または、再生中の時系列的なデータに挿入されたチャプタに対応するチャプタが挿入された動画像を表示させる表示制御手段と、
を備えたことを特徴とする管理装置である。
【発明の効果】
【０００７】
本発明によれば、正しい操作が行われたかを検査する場合に、多角的で効率の良い検査を実現することができ、より正確な検査が可能となる。
【図面の簡単な説明】
【０００８】
【図１】ＥＣＲの基本的な構成要素を示したブロック図。
【図２】ＥＣＲ（ＥＣＲ本体ユニット部１）をその前方斜め（顧客側）から見た状態の外観斜視図。
【図３】ＥＣＲ（ＥＣＲ本体ユニット部１）の一側面から見た状態の外観図。
【図４】操作側カメラ２６によって担当者（オペレータ）及びその操作状況を撮影した操作画像を例示した図。
【図５】カメラユニット部２側に備えられた各種のファイルを示した図。
【図６】（１）は、ジャーナルデータのレコードフォーマットを示した図、（２）は、操作画像を格納する動画ファイルのフォーマットを示した図。
【図７】（１）、（２）は、操作検査機能における操作者用表示部１６あるいは外部モニタ４での表示例を示した図。
【図８】電源投入に応じて実行開始されるＥＣＲの全体動作の概要を示したフローチャート。
【図９】登録処理（図８のステップＡ８）を詳述するためのフローチャート。
【図１０】操作検査処理（図８のステップＡ１６）を詳述するためのフローチャート。
【図１１】図１０の動作に続くフローチャート。
【図１２】第２実施形態において、売上データ処理装置として適用したＥＣＲ１００と、このＥＣＲ１００に通信接続されていて売上データを管理する管理装置（サーバ装置）２００を備えた売上データ処理システムを示したブロック図。
【図１３】第２実施形態において、サーバ装置２００側の動作概要を示したフローチャート。
【発明を実施するための形態】
【０００９】
（第１実施形態）
先ず、図１〜図１１を参照して本発明の第１実施形態を説明する。
図１は、売上データ処理装置として適用したＥＣＲ（Electronic Cash Register）の基本的な構成要素を示したブロック図である。
このＥＣＲ（売上データ処理装置）は、ＥＣＲ本体ユニット部１とカメラユニット部２とに分離された構成で、ＥＣＲ本体ユニット部１とカメラユニット部２とは、ケーブル３を介して着脱自在に接続されている。ＥＣＲ本体ユニット部１は、ＥＣＲとしての基本的な機能（標準機能）として、入力された一取引分の売上データを登録処理すると共に、一取引分の登録終了時に顧客から渡された金種に応じた種類の締め処理を行う売上データ登録機能などを備えている。また、本実施形態においては、更にＥＣＲ本体ユニット部１には各種のキー操作やドロアオープン／クローズなどに応じてイベントコードを発生させて、そのイベントコードをジャーナルデータとしてカメラユニット部２に対して転送する機能を有している。
【００１０】
カメラユニット部２は、登録待ち（精算待ち）をしている顧客を撮影したり、担当者（オペレータ）及びその操作状況を撮影したりするカメラ機能と、このカメラ機能により撮影された画像を再生しながら不正操作が行われたかどうかを検査する操作検査機能などの各種の機能をモジュール化した構成となっている。このカメラユニット部２は、ケーブル３を介してＥＣＲ本体ユニット部１に着脱自在に接続されており、故障などにより何時でも自由に交換可能となっている。なお、ＥＣＲ本体ユニット部１とカメラユニット部２とは、必要に応じて協動して各種の処理を行うようにしている。
【００１１】
ＥＣＲ本体ユニット部１は、ＣＰＵ１１を中核とするもので、各種プログラムにしたがってこのＥＣＲ本体ユニット部１の全体動作を制御する中央演算処理装置である。記憶部１２は、例えば、ＲＯＭ、ＲＡＭ、フラッシュメモリなどの記憶媒体やその駆動系を有し、後述する図８及び図９に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどを記憶したり、データベース、文字フォントデータなどを記憶したりする。なお、上述の記憶媒体は固定的に設けた内蔵型の記憶媒体に限らず、着脱可能な可搬型の外部記憶媒体であってもよく、また、プログラム／データは、他の機器から有線伝送路あるいは無線伝送路を介して記憶媒体にインストールしたり、プログラム／データを記憶管理するサーバなどをアクセスして使用したりするようにしてもよい。メモリ１３は、計時データ、フラグなど、このＥＣＲ本体ユニット部１が動作するために必要な各種のデータを一時的に記憶するワーク領域である。
【００１２】
また、ＣＰＵ１１には、その入出力周辺デバイスである操作部１４、スキャナ１５、操作者用表示部１６、印字部１７、ドロア駆動部１８、ＣＯＭポート１９がバスラインを介して接続されており、入出力プログラムにしたがってＣＰＵ１１はそれらの動作を制御する。操作部１４は、押しボタン式の各種キーが配列されているキーボードを有し、このキーボード上にはテンキー（図示省略）などのほか、登録キー、小計キー、現金／預かり金キーなどが配設されていると共に、モードスイッチＭＳが配設されている。
【００１３】
モードスイッチＭＳは、その切り換え位置に応じて「登録（ＲＥＧ）」、「戻し（ＲＦ）」、「精算（Ｚ）」などの各種の動作モード（プログラム種）を切り換えるロータリー式のスイッチである。登録キーは、商品別登録を指示する商品キー、例えば、ＰＬＵ（プライス・ルック・アップ）キー、部門キーなどである。ＣＰＵ１１は、「登録（ＲＥＧ）」モードに切り換えられている状態において、各種のキー操作に応じてその操作に応じたイベントコードを生成すると共に、入力された売上データを表示させたり、売上合計を更新したりする登録処理を実行し、一取引の登録終了時に現金／預かり金キーが押下されると、ドロアを開放させたり、レシートを発行させたりする。
【００１４】
イメージスキャナ１５は、例えば、ＣＣＤやＣＭＯＳなどの画像センサ（イメージセンサ）を有し、商品登録のスキャニング動作時にその商品に添付されているバーコードや二次元コードを撮影することにより読み取るもので、ＣＰＵ１１は、イメージスキャナ１５により撮影された画像データを解析することによってバーコードなどをデコードして商品を特定するようにしている。操作者用表示部１６は、担当者（オペレータ）用として、金額や商品に関するデータ、メッセージなどを表示するもので、例えば、液晶ディスプレイ又は有機ＥＬ（Electro Luminescence）ディスプレイなどにより構成されている。印字部１７は、例えば、熱転写やインクジェットなどのノンインパクトプリンタあるいはドットインパクトプリンタであり、レシート印字を行う。ドロア駆動部１８は、キー操作に応じてドロア１８Ａの開閉を制御するもので、ＣＰＵ１１は、ドロア１８Ａの開閉に応じてドロアオープン／クローズイベントを生成する。ＣＯＭポート１９は、カメラユニット部２との接続用のシリアルポートである。
【００１５】
カメラユニット部２は、ＣＰＵ２１を中核とするもので、各種プログラムにしたがってこのカメラユニット部２の全体動作を制御する中央演算処理装置である。記憶部２２は、例えば、ＲＯＭ、ＲＡＭ、フラッシュメモリなどの記憶媒体やその駆動系を有し、後述する図１０及び図１１に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどを記憶する。メモリ２３は、このカメラユニット部２が動作するために必要な各種のデータを一時的に記憶するワーク領域である。
【００１６】
また、ＣＰＵ２１には、その入出力周辺デバイスである客側表示部２４、客側カメラ２５、操作側カメラ２６、カードインターフェイス部２７、ＣＯＭポート２９がバスラインを介して接続されており、入出力プログラムにしたがってＣＰＵ２１はそれらの動作を制御する。客側表示部２４は、登録待ち（精算待ち）の顧客用としてその画面を顧客側に対面させたもので、例えば、７セグメントＬＥＤ（発光ダイオード）などにより構成され、商品単価、個数、小計金額、預かり金額などを数値表示する。
【００１７】
客側カメラ２５は、客用表示部２４に接近配設されたもので、登録待ちしている顧客の顔を中心として撮影し、また、操作側カメラ２６は、担当者（オペレータ）及びその操作状況を撮影するもので、担当者（オペレータ）及びその操作状況を撮影する監視カメラである。なお、客側カメラ２５、操作側カメラ２６の詳細は、図示省略したが、レンズ部、撮像素子、Ａ／Ｄ（アナログ／デジタル）変換部などを有し、動画像を撮影可能な構成で、レンズ部からの被写体像が撮像素子（ＣＣＤ又はＣＭＯＳ）に結像されることにより被写体を高精細に撮影可能な構成となっている。
【００１８】
カードインターフェイス部２７は、記録媒体としてのＳＤカード２８が挿入接続されるもので、このＳＤカード２８には、後述する各種のファイルが格納されている。なお、カメラユニット部２には、カードインターフェイス部２７に挿入接続されたＳＤカード２８の盗難などを防ぐために錠前（図省略）が配設されており、例えば、責任者が所持する専用鍵を使用して、錠前を開いてＳＤカード２８を取り出すようにしている。また、ＳＤカード２８に限らず、その他の外部記録媒体であってもよい。ＣＯＭポート２９は、ＥＣＲ本体ユニット部１との接続用のシリアルポートである。
【００１９】
図２は、上述のように構成されたＥＣＲ（ＥＣＲ本体ユニット部１）をその前方斜め（顧客側）から見た状態の外観斜視図であり、図３は、ＥＣＲ（ＥＣＲ本体ユニット部１）の一側面から見た状態の外観図である。
ＥＣＲ本体ユニット部１の上面部には、操作者用表示部１６が配設されていると共に、操作部１４を構成するキーボード及びモードスイッチＭＳが配設されている。また、ＥＣＲ本体ユニット部１の上面部には、印字部１７から送出されるレシートを取り出すためのレシート発行口（図示省略）が配設されている。
【００２０】
カメラユニット部２は、客用表示部２４の筐体２Ａと、その筐体２Ａを支持するポール状の支持部材（支持ポール）２Ｂとを有している。支持ポール２Ｂは、客用表示部２４の筐体２Ａを支持するもので、その下端部はＥＣＲ本体ユニット部１の背面側の垂直に固定されている。また、支持ポール２Ｂの上端部は客用表示部２４の筐体２Ａが装着され、その長さを調整可能な構造となっていると共に、客用表示部２４の筐体２Ａは、支持ポール２Ｂに対して回転可能となっている。つまり、筐体２Ａの高さとその向きを調整可能となっており、それに応じて客用表示部２４、客側カメラ２５の高さとその向きも調整可能となっている。
【００２１】
客側カメラ２５は、図２及び図３に示すように筐体２Ａの前面において客用表示部２４の一端部（図中、左側端部）に接近配設され、その撮影方向は、登録待ちしている顧客方向で、その画角は、登録待ち行列の顧客を撮影可能な範囲となっている。操作側カメラ２６は、支持ポール２Ｂの上端部に配設され、その撮影方向は、オペレータ方向で、その画角は、操作部１４の全体及び操作中のオペレータの顔を撮影可能な範囲となっている。つまり、オペレータ及びその操作状況を撮影可能となるように操作側カメラ２６の撮影方向及び画角が設定されている。
【００２２】
図４は、操作側カメラ２６によって担当者（オペレータ）及びその操作状況を撮影した操作画像（動画）を例示したもので、ドロア１８Ａを開放した状態でオペレータが貨幣を出し入れしている場合を示している。なお、上述した操作検査機能において、操作側カメラ２６によって撮影された操作画像（動画）を再生する場合に、操作者用表示部１６を使用して行うようにしているが、図２に示した外部モニタ（外部機器としての表示装置）４をＥＣＲにケーブル接続させて、この外部モニタ４に操作画像（動画）を再生するようにしてもよい。
【００２３】
図５は、カメラユニット部２側（ＳＤカード２８）に記憶されている各種のファイルを示した図である。
カメラユニット部２側のＳＤカード２８には、客側動画ファイルＹ１、操作側動画ファイルＹ２、電子ジャーナルファイルＹ３などが記憶管理されている。客側動画ファイルＹ１は、客側カメラ２５により撮影された動画ファイルであり、操作側動画ファイルＹ２は、操作側カメラ２６により撮影された動画ファイルである。電子ジャーナルファイルＹ３は、操作毎にその操作データをジャーナルデータとして逐次記憶管理するファイルで、登録毎にレシートに逐次印字される印字データ（操作データ）、つまり、登録された売上データとその操作内容（例えば、操作キーの種類：キーコード：イベントコード）を営業記録データ（ジャーナルデータ）として記憶管理するファイルである。そして、電子ジャーナルファイルＹ３は、操作が行われた操作タイミング毎に操作識別用のチャプタを挿入することによりチャプタ毎にジャーナルデータを逐次記憶管理するようにしている。
【００２４】
図６（１）は、電子ジャーナルファイルＹ３のジャーナルデータ（操作データ）のフォーマットを示した図である。
ジャーナルデータ（操作データ）の１レコードは、一操作分のデータとなっており、このレコードの集合が一取引分のジャーナルデータとなり、この取引毎のレコード群の集合がジャーナルファイル（一日分の精算データ）となる。ここで、ジャーナルデータのレコードは、図示のように「モード」、「イベントコード」、「チャプタ番号」、「担当者名」、「年月日」、「時分秒」、「一連Ｎｏ．」、「金額」、「ジャーナルデータ」の各項目を有している。「モード」は、モードスイッチＭＳにより切り換えられている「登録（ＲＥＧ）」などの動作モードである。「イベントコード」は、操作キーの種類（キーコード）を示している。
【００２５】
「チャプタ番号」は、チャプタ番号（例えば、一連番号）であり、カメラユニット部２は、操作毎の操作タイミングで当該チャプタ番号が挿入記憶される。すなわち、モードスイッチＭＳにより「登録（ＲＥＧ）」に切り換えられている登録モードにおいて、いずれかの操作が行われる毎にその操作キー対応のキーコードが入力されたタイミングを操作タイミングでチャプタ番号を挿入記憶させるようにしている。「ジャーナルデータ」は、上述したようにレシートに印字される印字データである。
【００２６】
図６（２）は、操作側動画ファイルＹ２のフォーマットを示した図である。
操作側動画ファイルＹ２は、操作側カメラ２６により撮影された操作画像（動画ファイル）を、“取引（１）のシーン”、“取引（２）のシーン”、“取引（３）のシーン”、“取引（４）のシーン”、…のように取引毎に逐次記憶管理するもので、この操作画像（動画ファイル）には、上述の操作毎の操作タイミング、つまり、ジャーナルデータにチャプタ番号が挿入記憶されるタイミングで同一のチャプタ番号が挿入記憶される。なお、図示の例では、“取引（１）のシーン”には、チャプタ番号として“０００１”、“０００２”〜“０００５”が挿入記憶され、“取引（２）のシーン”には、チャプタ番号として“０００６”〜“００１０”が挿入記憶されている場合を示している。
【００２７】
操作側動画ファイルＹ２内の操作画像（動画ファイル）の再生時には、早送り再生／スロー再生／逆送り再生などが可能となっている。この場合、カメラユニット部２側では、不正操作が行われたかどうかを検査する操作検査機能が責任者などにより起動されると、操作側動画ファイルＹ２と電子ジャーナルファイルＹ３の内容を同期して操作者用表示部１６あるいは外部モニタ４に並列表示させる同時進行の表示モードと、操作側動画ファイルＹ２、電子ジャーナルファイルＹ３のいずれか一方の内容を主体として操作者用表示部１６あるいは外部モニタ４に表示させる主体表示モードとを任意に選択可能となっている。
すなわち、予めユーザ操作により任意に設定された同期表示フラグ（図示省略）の“オン／オフ”を参照して、操作側動画ファイルＹ２と電子ジャーナルファイルＹ３の内容を同期して並列表示させる同時進行の表示モードか、いずれか一方の内容を主体として表示させる主体表示モードとを切り換え可能となっている。
【００２８】
図７（１）は、操作検査機能において操作側動画ファイルＹ２と電子ジャーナルファイルＹ３の内容を同期して並列表示させた表示例を示した図である。
カメラユニット部２は、上述の同期表示フラグが“オン”（同時進行の表示モード）の場合、操作側動画ファイルＹ２に録画されている操作画像（操作動画）を逐次読み出して表示画面に表示させる再生動作を開始すると共に、この操作動画の再生に連動して電子ジャーナルファイルＹ３の内容を当該画面内に同時進行で逐次表示させるようにしている。図中、左側の画面は、操作動画の再生画面ＯＰを示し、また、右側の画面は、ジャーナルデータの再生画面ＪＲを示し、この操作動画の再生画面ＯＰとジャーナルデータの再生画面ＪＲとを同時進行で再生表示（同期して再生表示）させるようにしている。すなわち、同一内容の操作動画とジャーナルデータとを同期して表示（同時進行で出現）させるために操作動画の逐次再生に連動して、ジャーナルデータを逐次スクロール表示させるようにしている。
【００２９】
図７（２）は、操作検査機能において操作側動画ファイルＹ２、電子ジャーナルファイルＹ３の操作側動画ファイルＹ２、電子ジャーナルファイルＹ３のいずれか一方の内容を主体として表示させた場合、つまり、操作側動画ファイルＹ２の内容を主体として表示させる主体表示モードの場合の表示例を示した図である。
カメラユニット部２は、上述の同期表示フラグが“オフ”（主体表示モード）の場合において、操作側動画ファイルＹ２の内容を主体として表示させることが指定されていれば、操作側動画ファイルＹ２に録画されている操作画像（操作動画）を逐次読み出して表示画面に表示させる再生動作を開始する。
【００３０】
そして、この再生動作中において所定の操作（後述する同期確認操作）が行われた際に、現在再生中の操作画像に挿入されているチャプタに基づいて電子ジャーナルファイルＹ３を検索し、該当するチャプタ（同一のチャプタ）が挿入されているジャーナルデータを読み出し、再生中の操作画像に同期して、このジャーナルデータをスーパーインポーズ表示（重畳表示）させるようにしている。図中、左上の表示内容がジャーナルデータを示し、預かり金を値数して現金／預かり金キーが操作されたタイミング（ドロア１８Ａが開放されたタイミング）で、預かり金、つり銭金額がジャーナルデータとして重畳表示された場合を示している。
【００３１】
また、上述の同期表示フラグが“オフ”（主体表示モード）の場合において、図７（２）の場合とは逆に、電子ジャーナルファイルＹ３の内容を主体として表示させる場合には、
電子ジャーナルファイルＹ３に記憶されているジャーナルデータを逐次読み出して表示画面に表示させる再生動作を開始すると共に、その再生動作中において所定の操作（後述する同期確認操作）が行われた際に、現在再生中のジャーナルデータに挿入されているチャプタに基づいて操作側動画ファイルＹ２を検索し、該当するチャプタ（同一のチャプタ）が挿入されている操作画像を読み出し、再生中のジャーナルデータに同期して、この操作画像をスーパーインポーズ表示（重畳表示）させるようにしている。
【００３２】
次に、第１実施形態におけるＥＣＲの動作概念を図８〜図１１に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム／データを利用して本実施形態特有の動作を実行することもできる。
【００３３】
図８は、電源投入に応じて実行開始されるＥＣＲの全体動作の概要を示したフローチャートである。
先ず、ＥＣＲ本体ユニット部１のＣＰＵ１１は、電源投入に応じて各種のメモリなどをクリアする初期化処理を実行する（ステップＡ１）。そして、動画ファイル名（例えば、日付に一連番号を付加したデータ）を生成して操作側動画ファイルＹ２に設定させると共に（ステップＡ２）、操作側カメラ２６を起動させてその録画を開始させる（ステップＡ３）。この状態において、モードスイッチＭＳが「登録（ＲＥＧ）」モードに切り換えられているかを調べたり（ステップＡ４）、「精算（Ｚ）」モードに切り換えられているかを調べたり（ステップＡ５）、その他のモードに切り換えられているかを調べたり（ステップＡ６）、電源オフ操作が行われたかを調べたりする（ステップＡ７）。いま、登録モードに切り換えられている状態において（ステップＡ４でＹＥＳ）、登録操作が行われる毎に売上データを登録する登録処理に移る（ステップＡ８）。
【００３４】
図９は、登録処理（図８のステップＡ８）を詳述するためのフローチャートである。なお、ＥＣＲ本体ユニット部１は、必要に応じてカメラユニット部２と協動して各種の処理を行うようにしている。
先ず、ＥＣＲ本体ユニット部１のＣＰＵ１１は、登録操作が行われたか、つまり、商品からバーコードなどを読み取るためにスキャナ１５によるスキャニング動作が行われたか、金額データの値数入力後に商品キーなどの登録キーが操作されたかを調べたり（ステップＢ１）、一取引分の登録終了時に現金／預かり金キーなどの締めキーが操作されたかを調べたり（ステップＢ６）、その他のキーが操作されたかを調べたりする（ステップＢ１１）。
【００３５】
いま、登録操作が行われたときには（ステップＢ１でＹＥＳ）、商品登録処理に移り（ステップＢ２）、入力された商品名及び単位を操作者用表示部１６及び客用表示部２４に表示させたり、入力された売上データに基づいて、図示しない商品別合計ファイル、部門別合計ファイルの内容（売上データ）を更新したりする処理を行う。この場合、ＥＣＲ本体ユニット部１から表示データをカメラユニット部２側に転送することにより客用表示部２４に商品名及び単位を表示させる。そして、一取引分の小計金額を更新した後（ステップＢ３）、今回の操作に応じたチャプタ（一連番号）を生成する（ステップＢ４）。
【００３６】
そして、今回取引の操作データをジャーナルデータとして、生成したチャプタと共に電子ジャーナルファイルＹ３に記憶させるほか、同一のチャプタを操作側動画ファイルＹ２の現在の録画位置に記録させる（ステップＢ５）。すなわち、操作キー対応のキーコードが入力されたタイミング（操作タイミング）で電子ジャーナルファイルＹ３及び操作側動画ファイルＹ２に同一のチャプタをそれぞれ記録するようにしている（以下、同様）。そして、上述のステップＢ１に戻り、以下、登録操作が行われる毎に、上述の動作を繰り返す。
【００３７】
また、その他の操作が行われたときには（ステップＢ１１でＹＥＳ）、例えば、小計キーや訂正キーなどが操作されたときには、その操作に応じた処理として（ステップＢ１２）、小計金額を操作者用表示部１６及び客用表示部２４に表示させたり、入力データを訂正したりする処理を行う。そして、上述のステップＢ４に移り、今回の操作に応じてチャプタ（一連番号）を生成した後、今回取引での操作データをジャーナルデータとして、生成したチャプタと共に電子ジャーナルファイルＹ３に記憶させるほか、同一のチャプタを操作側動画ファイルＹ２の現在の録画位置に記録させる（ステップＢ５）。
【００３８】
また、一取引分の登録終了時に現金／預かり金キーなどの締めキーが操作されたときには（ステップＢ６でＹＥＳ）、顧客から渡された金種に応じて取引別合計を更新する処理を行うと共に、操作された締めキーが現金／預かり金キーであれば、ドロアを開放させる締め処理を行うと共に（ステップＢ７）、印字部１７を駆動させて売上データを順次レシートに印字させて、レシートを発行させる（ステップＢ８）。そして、今回の操作に応じてチャプタ（一連番号）を生成した後（ステップＢ９）、今回取引での操作データをジャーナルデータとして、生成したチャプタと共に電子ジャーナルファイルＹ３に記憶させるほか、同一のチャプタを操作側動画ファイルＹ２の現在の録画位置に記録させる（ステップＢ１０）。その後、図９のフローから抜ける。
【００３９】
その結果、一取引分の登録処理（図８のステップＡ８）が終ると、上述のステップＡ４に戻る。一方、モードスイッチＭＳが「登録（ＲＥＧ）」、「精算（Ｚ）」以外のその他のモード、例えば、「戻し（ＲＦ）」モードなどに切り換えられている状態において（ステップＡ７でＹＥＳ）、モードに応じた処理として、例えば、戻し処理（返品処理）などを行う（ステップＡ９）。そして、今回の操作に応じてチャプタ（一連番号）を生成し（ステップＡ１０）、今回の操作データをジャーナルデータとして、生成したチャプタと共に電子ジャーナルファイルＹ３に記憶させるほか、同一のチャプタを操作側動画ファイルＹ２の現在の録画位置に記録させる（ステップＡ１１）。その後、上述のステップＡ４に戻る。
【００４０】
また、例えば、一日の営業が終わり、モードスイッチＭＳが「精算（Ｚ）」モードに切り換えられたときには（ステップＡ５でＹＥＳ）、図示しない取引別合計ファイルなどの内容を更新する精算処理を実行した後（ステップＡ１２）、今回の操作に応じてチャプタ（一連番号）を生成し（ステップＡ１３）、今回の操作データをジャーナルデータとして、生成したチャプタと共に電子ジャーナルファイルＹ３に記憶させるほか、同一のチャプタを操作側動画ファイルＹ２の現在の録画位置に記録させる（ステップＡ１４）。そして、操作検査を指示する操作が行われたかを調べ（ステップＡ１５）、その指示操作が行われなければ（ステップＡ１５でＮＯ）、上述のステップＡ４に戻るが、その指示操作が行われたときには（ステップＡ１５でＹＥＳ）、後述する操作検査処理を実行した後（ステップＡ１６）、上述のステップＡ４に戻る。なお、電源オフ操作が行われたときには（ステップＡ７でＹＥＳ）、所定の電源オフ処理を実行して（ステップＡ１７）、操作カメラ２６を停止させた後（ステップＡ１８）、図８のフローの終了となる。
【００４１】
図１０及び図１１は、操作検査処理（図８のステップＡ１６）を詳述するためのフローチャートである。なお、ＥＣＲ本体ユニット部１は、必要に応じてカメラユニット部２と協動して各種の処理を行うようにしている。
先ず、ＥＣＲ本体ユニット部１のＣＰＵ１１は、検査対象ファイル名を指定する操作が行われると、この指定ファイル名をカメラユニット部２に転送する（図１０のステップＣ１）。カメラユニット部２側では、指定された検査対象の操作動画を操作側動画ファイルＹ２から取得すると共に（ステップＣ２）、検査対象のジャーナルデータを電子ジャーナルファイルＹ３から取得する（ステップＣ３）。
【００４２】
そして、予めユーザ操作により任意に設定された同期表示フラグ（図示省略）が“オン”されているか、つまり、操作側動画ファイルＹ２と電子ジャーナルファイルＹ３の内容を同期して並列表示させる同時進行の表示モードが指定されているかを調べる（ステップＣ４）。いま、同期表示フラグが“オン”されている同時進行の表示モードでは（ステップＣ４でＹＥＳ）、検査対象として取得した操作動画とジャーナルデータとの再生を同時進行で開始させると共に、操作者用表示部１６あるいは外部モニタ４の表示画面に操作動画とジャーナルデータとを並列表示させる（ステップＣ５）。これによって図７（１）に示すように、再生画面ＯＰには動画ファイル（操作動画）が表示され、再生画面ＪＲにはジャーナルデータが表示される。この場合、操作動画に挿入されているチャプタ（一連番号）とジャーナルデータに挿入されているチャプタとの一致を検出しながら操作動画、ジャーナルデータとを同時進行で再生させる。
【００４３】
この状態において、図１１のステップＣ１４以降に移り、操作に応じた処理に移る（ステップＣ１４〜Ｃ１９）。すなわち、操作動画とジャーナルデータとが同時進行で再生されている状態において、一時停止を指示する操作が行われたときには（ステップＣ１４でＹＥＳ）、操作動画とジャーナルデータの再生動作を一時停止させる（ステップＣ１５）。また、早送り再生／スロー再生／逆送り再生を指示する操作が行われたときには（ステップＣ１６でＹＥＳ）、操作動画とジャーナルデータの再生動作を制御して、早送り再生／スロー再生／逆送り再生を行わせ（ステップＣ１７）、一時停止の解除、早送り再生／スロー再生／逆送り再生の解除などのように、その他の再生制御を指示する操作が行われたときには（ステップＣ１８でＹＥＳ）、その操作に応じて再生動作を制御する（ステップＣ１９）。
【００４４】
また、再生終了時、つまり、再生終了を指示するユーザ操作が行われたり、操作動画とジャーナルデータの末尾まで再生し終わったことを検出したりしたときには（ステップＣ２０でＹＥＳ）、この時点で図１０及び図１１のフローから抜けるが、再生終了でなければ（ステップＣ２０でＮＯ）、同期表示フラグが“オン”されているかを調べる（ステップＣ２１）。いま、同期表示フラグは“オン”されている同時進行の表示モードのままであれば（ステップＣ２１でＹＥＳ）、上述のステップＣ１４〜Ｃ１９に戻って、操作に応じた処理を行う。
【００４５】
他方、同期表示フラグは“オフ”されている場合、つまり、操作側動画ファイルＹ２と電子ジャーナルファイルＹ３とのいずれか一方の内容を主体として表示させる主体表示モードが指定されている場合には（図１０のステップＣ４でＮＯ）、主体表示の対象として操作側動画ファイルＹ２が選択されたかを調べる（ステップＣ６）。なお、主体表示の対象を選択する場合には、操作検査処理の実行中にユーザ操作により任意に選択するようにしてもよいが、操作検査処理の実行前に予め任意に選択して設定しておいてもよい。ここで、操作側動画ファイルＹ２の内容が主体表示の対象として指示されている場合には（ステップＣ６でＹＥＳ）、操作側動画ファイルＹ２の内容を取得してその再生を開始させるが（ステップＣ７）、電子ジャーナルファイルＹ３の内容が主体表示の対象として指示されている場合には（ステップＣ６でＮＯ）、電子ジャーナルファイルＹ３の内容を取得してその再生を開始させる（ステップＣ８）。なお、図７（２）の表示例の場合には、操作側動画ファイルＹ２の内容を再生させている状態を示している。
【００４６】
この状態において、同期確認操作の有無を調べる（図１１のステップＣ９）。ここで、同期確認操作とは、操作側動画ファイルＹ２と電子ジャーナルファイルＹ３とのいずれか一方の内容を主体として表示させる主体表示モードにおいて、再生中のチャプタと一致する他方の内容を読み出して同期表示させることを指示する操作、例えば、ポインティングデバイスとしてマウスが備えられている場合には画面上でのダブルクリック操作であり、また、タッチスクリーンが備えられている場合には画面上でのダブルタップ操作である。いま、同期確認操作が行われなければ（ステップＣ９でＮＯ）、上述の操作に応じた処理に移る（ステップＣ１４〜Ｃ１９）。
【００４７】
一方、主体表示モードにおいて、同期確認操作が行われたときには（ステップＣ９でＹＥＳ）、現在再生中の一方の内容（操作画像／ジャーナルデータ）からチャプタを検出し（ステップＣ１０）、この検出チャプタに基づいて他方の内容（ジャーナルデータ／操作画像）を検索し（ステップＣ１１）、チャプタが一致するジャーナルデータ／操作画像を取得する（ステップＣ１２）。そして、取得したジャーナルデータ／操作画像を現在再生中の画面に重畳表示させる（ステップＣ１３）。その後、上述の操作に応じた処理に移る（ステップＣ１４〜Ｃ１９）。
【００４８】
なお、図７（２）の表示例の場合には、操作画像の再生画面ＯＰにジャーナルデータを重畳表示させた場合で、操作画像の再生画面ＯＰ上において上述の同期確認操作（例えば、ダブルクリック操作あるいはダブルタップ操作）が行われると、再生中の取引シーンでのジャーナルデータにジャンプして、そのジャーナルデータが再生画面ＯＰ上に重畳表示される。逆に、ジャーナルデータの再生画面上で同期確認操作が行われると、そのジャーナルデータを入力している動画シーンにジャンプして、その動画シーン（操作画像）が重畳表示される。この場合、次の操作が行われるまでの間、重畳表示を継続するようにしているが、それに限らず、重畳表示の解除が指示されるまで重畳表示を継続するようにしてもよい。例えば、重畳表示されている状態において操作画像の早送り再生／スロー再生／逆送り再生が指示されたときには、操作画像の再生動作に同期して（チャプタの一致を検出しながら）ジャーナルデータの内容も早送り再生／スロー再生／逆送り再生を行うようにしてもよい。以下、再生終了が検出されるまで上述の動作が繰り返される。
【００４９】
以上のように、第１実施形態においては、操作側動画ファイルＹ２に録画されている操作画像を再生表示する再生動作中において所定の操作が行われた際に、現在再生中の操作画像に挿入されているチャプタに基づいて電子ジャーナルファイルＹ３を検索し、該当するチャプタが挿入されているジャーナルデータを読み出し、再生中の操作画像に同期して、このジャーナルデータを表示させたり、逆に、電子ジャーナルファイルＹ３に記憶されているジャーナルデータを再生表示する再生動作中において所定の操作が行われた際に、現在再生中のジャーナルデータに挿入されているチャプタに基づいて操作側動画ファイルＹ２を検索し、該当するチャプタが挿入されている操作画像を読み出し、再生中のジャーナルデータに同期して、操作画像を表示させたりするようにしたので、ユーザ（検査者）にあっては、正しい操作が行われたかを検査する場合に、操作画像とジャーナルデータとを対応付けて確認することができ、不正操作の発見が容易となり、多角的で効率の良い検査を実現することができ、より正確な検査が可能となるほか、検査者の負担を軽減することも可能となる。
【００５０】
また、操作キー対応のキーコードが入力されたタイミングを操作タイミングとして、電子ジャーナルファイルＹ３にチャプタを挿入記憶させ、電子ジャーナルファイルＹ３にチャプタが挿入されたタイミングで操作側動画ファイルＹ２に同一のチャプタを挿入記憶させるようにしたので、操作画像とジャーナルデータとをチャプタを介して同期させることができ、また、チャプタの一致／不一致を検出することにより操作画像とジャーナルデータとの同期表示を容易に行うことができる。なお、チャプタを一連番号とすることにより一取引内の操作数や一日の取引での操作数などを容易に求めることができ、各種の管理が容易なものとなる。
【００５１】
また、ジャーナルデータを主体としてその再生動作中に操作画像を同期表示させるか、操作画像を主体としてその再生動作中にジャーナルデータを同期表示させるかを選択可能としたので、その検査の主体を画面全体に表示させることができるほか、必要に応じて主体を適宜変更しながら検査を行うことができ、視点を変えて新たな不正操作を発見することが可能となる。
【００５２】
操作画像の再生動作に同期して、ジャーナルデータを同時進行で表示させる同期表示の実行有無を任意に設定可能としたので、検査者にあっては必要に応じて同期表示を実行させることができる。
【００５３】
操作側カメラ２６は、客側表示部２４の近傍に配設し、オペレータ及びその操作状況を撮影可能となるようにその撮影方向及び画角が設定されているので、オペレータの正面から撮影することができると共に、操作部１４の上方から操作状況を撮影することができる。
【００５４】
（第２実施形態）
以下、この発明の第２実施形態について図１２及び図１３を参照して説明する。
なお、上述した第１実施形態においては、ＥＣＲ単体に適用した場合を示したが、この第２実施形態においては、このＥＣＲと管理装置（サーバ装置）とを通信接続した売上データ処理システムに適用した場合である。ここで、両実施形態において基本的あるいは名称的に同一のものは、同一符号を付して示し、その説明を省略すると共に、以下、第２実施形態の特徴部分を中心に説明するものとする。
【００５５】
図１２は、売上データ処理システムを示したブロック図である。
売上データ処理システムは、店舗内に設置されている複数台のＥＣＲ１００が管理装置（サーバ装置）２００にＬＡＮ（構内専用回線）３００を介して接続されたＬＡＮシステムで、系列店舗Ａの売上データ処理システムは、インターネット４００を介して他の系列店舗Ｂの売上データ処理システムなどに接続されて通信可能となっている。なお、ＥＣＲ１００の構成は、図１で示した構成と基本的に同様であるが、第２実施形態においては、更に、管理装置（サーバ装置）２００との間でデータの送受信を行うＬＡＮ通信部１０１を有している。また、管理装置（サーバ装置）２００は、パーソナルコンピュータ（ＰＣ）であり、その構成は、図示省略したが、ＣＰＵ、記憶部、表示部、操作部のほか、ＥＣＲ１００との間でデータの送受信を行うＬＡＮ通信部２０１を有している。
【００５６】
図１３は、管理装置（サーバ装置）２００側の動作概要を示したフローチャートである。
先ず、サーバ装置２００は、ＬＡＮ接続されている複数台のＥＣＲ１００のいずれかを処理対象として指定した後（ステップＤ１）、指定したＥＣＲ１００に対して操作動画、ジャーナルデータの送信を要求する（ステップＤ２）。ここで、ＥＣＲ１００側では図７及び図８で示した動作と基本的には同様の動作を実行するが、相違する点は、図８のステップＡ１５及びステップＡ１６に代えて、サーバ装置２００からのデータ送信の要求を受けた際に、それに応答して操作動画及びジャーナルデータをサーバ装置２００に送信する処理を行うようにしている点である。すなわち、第２実施形態では、操作検査処理は行わず、その処理をサーバ装置２００側に委ねるようにしている。なお、サーバ装置２００からの要求に応じた送信処理は、精算モードに限らず、その他のモードでも実行可能としてもよい。また、サーバ装置２００側では、検査対象を指定してデータ送信を要求するようにしてもよいが、一日の営業終了時に本日分の操作動画及びジャーナルデータの送信を要求するようにしてもよい。
【００５７】
サーバ装置２００は、指定したＥＣＲ１００側から操作動画及びジャーナルデータを受信すると（ステップＤ３）、その操作動画及びジャーナルデータに基づいて操作検査処理を開始する（ステップＤ４）。ここで、サーバ装置２００は、図１０及び図１１で示した操作検査処理と基本的には同様の処理を行う。すなわち、操作動画及びジャーナルデータを同時進行で再生する再生動作を開始した後、ジャーナルデータを参照して要注意操作を検出する毎にその検出タイミングで要注意操作の種類に応じたアイコンをその操作動画に重畳表示させると共にアラーム音を発生させる動作を行う。このようにして１台分のＥＣＲ１００に対する検査処理が終ると（ステップＤ４）、全てのＥＣＲ１００を指定し終わったかを調べ（ステップＤ５）、未指定のＥＣＲ１００が残っていれば（ステップＤ５でＮＯ）、上述のステップＤ１に戻って、以下、上述の動作を繰り返す。
【００５８】
以上のように、第２実施形態においてサーバ装置２００は、ＥＣＲ１００に対して操作動画、ジャーナルデータの送信を要求し、それに応答してＥＣＲ１００側から送信された操作動画、ジャーナルデータに基づいて操作検査処理を実行するようにしたので、上述した第１実施形態と同様に、ユーザ（検査者）にあっては、正しい操作が行われたかを検査する場合に、操作画像とジャーナルデータとを対応付けて確認することができ、不正操作の発見が容易となり、多角的で効率の良い検査を実現することができ、より正確な検査が可能となるほか、検査者の負担を軽減することも可能となる。
【００５９】
その他、第２実施形態においても上述した第１実施形態と同様の効果を有する。すなわち、第２実施形態においても、操作画像とジャーナルデータとをチャプタを介して同期させることができ、また、チャプタの一致／不一致を検出することにより操作画像とジャーナルデータとの同期表示を容易に行うことができる。なお、チャプタを一連番号とすることにより一取引内の操作数や一日の取引での操作数などを容易に求めることができ、各種の管理が容易なものとなる。また、操作画像の再生動作に同期して、ジャーナルデータを同時進行で表示させる同期表示の実行有無を任意に設定可能としたので、責任者などのユーザにあっては必要に応じて同期表示を実行させることができる。また、検査の主体を画面全体に表示させることができるほか、必要に応じて主体を適宜変更しながら検査を行うことができ、視点を変えて新たな不正操作を発見することが可能となる。
【００６０】
なお、上述した第２実施形態においては、ＥＣＲ１００とサーバ装置２００とをＬＡＮ（構内専用回線）３００を介して接続したＬＡＮシステムに適用するようにしたが、カードインターフェイス部２７に挿入接続されているＳＤカード２８内に操作側動画ファイルＹ２、電子ジャーナルファイルＹ３を所定の形式に圧縮して記憶させておき、このＳＤカード２８をＰＣ（管理装置）に挿入接続するようにしてもよい。すなわち、ＳＤカード２８などの可搬型外部記憶媒体を介してＰＣ（管理装置）側に操作側動画ファイルＹ２、電子ジャーナルファイルＹ３を供給するようにしてもよい。例えば、一日の営業の終了時にＰＣ側にＳＤカード２８を介して操作側動画ファイルＹ２、電子ジャーナルファイルＹ３を一括して供給するようにすればよい。この場合、ＰＣ側ではＳＤカード２８内の操作側動画ファイルＹ２、電子ジャーナルファイルＹ３に基づいて操作検査処理を実行するようにしてもよい。
【００６１】
また、上述した各実施形態においては、操作キー対応のキーコードが入力されたタイミングを操作タイミングとして、電子ジャーナルファイルＹ３にチャプタを挿入記憶させ、電子ジャーナルファイルＹ３にチャプタが挿入されたタイミングで操作側動画ファイルＹ２に同一のチャプタを挿入記憶させるようにしたが、これに限らず、操作側カメラ２６により撮影された操作画像を解析することにより操作指の位置が操作画像内で変化したことを検出したタイミング、例えば、ＰＬＵキー、小計キーなどの新たなキー操作が行われたことを検出したタイミングを操作タイミングとして、チャプタを操作側動画ファイルＹ２に挿入記憶させ、このチャプタが挿入記憶されたタイミングで同一のチャプタを電子ジャーナルファイルＹ３に挿入記憶させるようにしてもよい。これにより操作毎にそのキーコードをＥＣＲ本体ユニット部１からカメラユニット部２に送る動作が不要となり、カメラユニット部２側での動作でチャプタの挿入が可能となる。
【００６２】
また、上述した各実施形態においては、主体表示の対象を選択する場合に操作検査処理の実行中にユーザ操作により任意に選択するようにしてもよく、また、操作検査処理の実行前に予め任意に選択して設定しておいてもよいが、図１０のステップＣ６〜Ｃ８のほか、図１１のステップＣ９〜Ｃ２１のいずれかで、主体表示の対象を任意に選択可能とするステップを設けるようにしてもよい。これによって表示開始後においても主体表示の対象を任意に切り換え可能となる。
【００６３】
また、上述した各実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。
【００６４】
以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
（付記）
（請求項１）
請求項１に記載の発明は、
売上データを取引毎に登録処理する売上データ処理装置であって、
操作の状況を逐次撮影する撮像手段と、
操作毎にその操作データをジャーナルデータとして逐次記憶する際に、その操作タイミングでチャプタを挿入することによりチャプタ毎にジャーナルデータを逐次記憶管理するジャーナル記憶手段と、
前記撮像手段により撮影された操作画像を逐次録画する際に、前記操作タイミングでチャプタを挿入することによりチャプタ毎に操作画像を逐次記憶管理する録画手段と、
前記録画手段により録画されている操作画像を再生表示する再生動作中において所定の操作が行われた際に、現在再生中の操作画像に挿入されている前記チャプタに基づいて前記ジャーナル記憶手段を検索し、該当するチャプタが挿入されているジャーナルデータを読み出して再生中の操作画像に同期して表示させる第１の再生制御手段と、
前記ジャーナル記憶手段に記憶されているジャーナルデータを再生表示する再生動作中において所定の操作が行われた際に、現在再生中のジャーナルデータに挿入されている前記チャプタに基づいて前記録画手段を検索し、該当するチャプタが挿入されている操作画像を読み出して再生中のジャーナルデータに同期して表示させる第２の再生制御手段と、
を具備したことを特徴とする売上データ処理装置である。
（請求項２）
請求項２に記載の発明は、請求項１に記載の売上データ処理装置において、
前記ジャーナル記憶手段は、操作キー対応のキーコードが入力されたタイミングを操作タイミングとして、前記チャプタを挿入記憶し、
前記録画手段は、前記ジャーナル記憶手段にチャプタが挿入されたタイミングで同一の前記チャプタを挿入記憶する、
ようにしたことを特徴とする売上データ処理装置である。
（請求項３）
請求項３に記載の発明は、請求項１に記載の売上データ処理装置において、
前記録画手段は、前記撮像手段により撮影された操作画像を解析することにより新たな操作が行われたことを検出したタイミングを操作タイミングとして、前記チャプタを挿入記憶し、
前記ジャーナル記憶手段は、前記録画手段に前記チャプタが挿入記憶されたタイミングで同一の前記チャプタを挿入記憶する、
ようにしたことを特徴とする売上データ処理装置である。
（請求項４）
請求項４に記載の発明は、請求項１〜請求項３に記載のいずれかに記載の売上データ処理装置において、
前記ジャーナルデータを主体としてその再生動作中に前記操作画像を同期表示させるか、前記操作画像を主体としてその再生動作中に前記ジャーナルデータを同期表示させるかに応じて前記第１の再生制御手段と第２の再生制御手段のいずれかを選択する選択手段を更に備える、
ようにしたことを特徴とする売上データ処理装置。
（請求項５）
請求項５に記載の発明は、請求項１〜請求項４に記載のいずれかに記載の売上データ処理装置において、
前記録画手段により録画されている操作画像を逐次読み出して表示させる再生動作に同期して、前記ジャーナル記憶手段に記憶されているジャーナルデータを同時進行で逐次表示させる同期表示の実行有無を任意に設定する設定手段を更に備える、
ようにしたことを特徴とする売上データ処理装置である。
（請求項６）
請求項６に記載の発明は、請求項１〜請求項５のいずれかに記載の売上データ処理装置において、
前記撮像手段は、客用表示部の近傍に配設し、オペレータ及びその操作状況を撮影可能となるようにその撮影方向及び画角が設定されている、
ようにしたことを特徴とする売上データ処理装置である。
（請求項７）
請求項７に記載の発明は、
売上データを取引毎に登録処理する売上データ処理装置と、売上データを管理する管理装置を備えた売上データ処理システムであって、
前記売上データ処理装置は、
操作の状況を逐次撮影する撮像手段と、
操作毎にその操作データをジャーナルデータとして逐次記憶する際に、その操作タイミングでチャプタを挿入することによりチャプタ毎にジャーナルデータを逐次記憶管理するジャーナル記憶手段と、
前記撮像手段により撮影された操作画像を逐次録画する際に、その操作タイミングでチャプタを挿入することによりチャプタ毎に操作画像を逐次記憶管理する録画手段と、
を備え、
前記管理装置は、
前記録画手段により録画されている操作画像を再生表示する再生動作中において所定の操作が行われた際に、現在再生中の操作画像に挿入されている前記チャプタに基づいて前記ジャーナル記憶手段を検索し、該当するチャプタが挿入されているジャーナルデータを読み出して再生中の操作画像に同期して表示させる第１の再生制御手段と、
前記ジャーナル記憶手段に記憶されているジャーナルデータを再生表示する再生動作中において所定の操作が行われた際に、現在再生中のジャーナルデータに挿入されている前記チャプタに基づいて前記録画手段を検索し、該当するチャプタが挿入されている操作画像を読み出して再生中のジャーナルデータに同期して表示させる第２の再生制御手段と、
を備える、
ようにしたことを特徴とする売上データ処理システムである。
（請求項８）
請求項８に記載の発明は、請求項７に記載の売上データ処理システムにおいて、
前記ジャーナル記憶手段は、操作キー対応のキーコードが入力されたタイミングを操作タイミングとして前記チャプタを挿入記憶し、
前記録画手段は、前記ジャーナル記憶手段にチャプタが挿入されたタイミングで同一の前記チャプタを挿入記憶する、
ようにしたことを特徴とする売上データ処理システムである。
（請求項９）
請求項９に記載の発明は、請求項７に記載の売上データ処理システムにおいて、
前記録画手段は、前記撮像手段により撮影された操作画像を解析することにより新たな操作が行われたことを検出したタイミングを操作タイミングとして、前記チャプタを挿入記憶し、
前記ジャーナル記憶手段は、前記録画手段に前記チャプタが挿入記憶されたタイミングで同一の前記チャプタを挿入記憶する、
ようにしたことを特徴とする売上データ処理システムである。
（請求項１０）
請求項１０に記載の発明は、請求項７〜請求項９に記載のいずれかに記載の売上データ処理システムにおいて、
前記管理装置は、
前記ジャーナルデータを主体としてその再生動作中に前記操作画像を同期表示させるか、前記操作画像を主体としてその再生動作中に前記ジャーナルデータを同期表示させるかに応じて前記第１の再生制御手段、第２の再生制御手段のいずれかを選択する選択手段を更に備える、
ようにしたことを特徴とする請求項７〜請求項９のいずれかに記載の売上データ処理システム。
（請求項１１）
請求項１１に記載の発明は、請求項７〜請求項１０に記載のいずれかに記載の売上データ処理システムにおいて、
前記管理装置は、
前記録画手段により録画されている操作画像を逐次読み出して表示させる再生動作に同期して、前記ジャーナル記憶手段に記憶されているジャーナルデータを同時進行で逐次表示させる同期表示の実行有無を任意に設定する設定手段を更に備える、
ようにしたことを特徴とする売上データ処理システムである。
（請求項１２）
請求項１２に記載の発明は、
コンピュータに対して、
売上データを取引毎に登録処理する機能と、
操作の状況を逐次撮影する機能と、
操作毎にその操作データをジャーナルデータとして逐次記憶する際に、その操作タイミングでチャプタを挿入することによりチャプタ毎にジャーナルデータを逐次記憶管理する機能と、
前記操作画像を逐次録画する際に、前記操作タイミングでチャプタを挿入することによりチャプタ毎に操作画像を逐次記憶管理する機能と、
前記録画されている操作画像を再生表示する再生動作中において所定の操作が行われた際に、現在再生中の操作画像に挿入されている前記チャプタに基づいて、前記記憶されているジャーナルデータを検索し、該当するチャプタが挿入されているジャーナルデータを読み出して再生中の操作画像に同期して表示させる機能と、
前記記憶されているジャーナルデータを再生表示する再生動作中において所定の操作が行われた際に、現在再生中のジャーナルデータに挿入されている前記チャプタに基づいて、前記録画されている操作画像を検索し、該当するチャプタが挿入されている操作画像を読み出して再生中のジャーナルデータに同期して表示させる機能と、
を実現させるためのプログラムである。
【符号の説明】
【００６５】
１  ＥＣＲ本体ユニット部
２  カメラユニット部
４  外部モニタ
１１、２１  ＣＰＵ
１２、２２  記憶部
１４  操作部
１９、２９  ＣＯＭポート
１００  ＥＣＲ
２００  サーバ装置
Ｙ２  操作側動画ファイル
Ｙ３  電子ジャーナルファイル
【図１】
0006020654.tif 000002
【図２】
0006020654.tif 000003
【図３】
0006020654.tif 000004
【図４】
0006020654.tif 000005
【図５】
0006020654.tif 000006
【図６】
0006020654.tif 000007
【図７】
0006020654.tif 000008
【図８】
0006020654.tif 000009
【図９】
0006020654.tif 000010
【図１０】
0006020654.tif 000011
【図１１】
0006020654.tif 000012
【図１２】
0006020654.tif 000013
【図１３】
0006020654.tif 000014