(57)【要約】【課題】撮影対象物の移動に伴い複数個所で撮影した複数種の映像を異なる方向の視線上で同時再生する際に、各再生画像を最適な同期差分を設定して自動再生することで、撮影対象物の映像確認作業性を向上する。【解決手段】監視処理部３２では、予め記憶した個人の再生時間に基づいて、動画を再生しながら監視を行うため、動画再生時間を必要十分な時間とすることができ、作業効率を向上することができる。比較例として、固定された時間（例えば、デフォルト値の１０秒）で監視すると、監視者が物品１４を、複数の動画で監視する場合に、待ち時間が長くなり、作業効率が低下することになる。これに対して、監視者毎に適正な再生時間ｔｋを決定したため、待ち時間が軽減することができ、必要十分な時間で、物品１４の監視が可能となる。【選択図】図５
2020136954.tif 000002
【特許請求の範囲】
【請求項１】
所定の撮影領域を複数の撮影装置で撮影した複数種の映像情報に基づき、表示装置に同時に再生表示された映像を監視者が視線を移動させながら目視により監視する処理装置であって、
前記複数種の撮影情報の各々に対応付けられたタイミング情報に基づいて、前記表示装置への再生表示開始タイミングをずらして、前記複数種の映像情報に基づく各映像を表示制御する表示制御部を有する処理装置。
【請求項２】
特定オブジェクトが、搬送装置に沿って搬送されており、
当該搬送装置に沿って前記複数の撮影装置が間隔を隔てて配置され、
前記複数の撮影装置の各々により、前記搬送装置によって搬送されている前記特定オブジェクトを撮影する請求項１記載の処理装置。
【請求項３】
前記タイミング情報として、前記監視者が複数の映像情報に基づく再生表示映像を順番に監視するときの時間差情報を、各映像情報に紐付けるタイミング情報設定部をさらに有する請求項１又は請求項２記載の処理装置。
【請求項４】
前記監視者の視線の移動を含む視線情報を検出するアイトラッキングカメラを備え、
前記タイミング情報として、前記視線情報に基づき、前記監視者が複数の映像情報に基づく再生表示映像を予め定めた順序で確認するために移動させる視線方向から抽出する時間差情報を、各映像情報に紐付けるタイミング情報設定部をさらに有する請求項１又は請求項２記載の処理装置。
【請求項５】
所定の撮影領域を複数の撮影装置で撮影した複数種の映像情報に基づき、表示装置に同時に再生表示された映像を監視者が視線を移動させながら目視により監視するコンピュータを、
前記複数種の撮影情報の各々に対応付けられたタイミング情報に基づいて、前記表示装置への再生表示開始タイミングをずらして、前記複数種の映像情報に基づく各映像を表示制御する表示制御部
として機能させるための処理プログラム。
【請求項６】
所定の撮影領域を複数の撮影装置で撮影した複数種の映像情報に基づき、表示装置に同時に再生表示された映像を監視者が視線を移動させながら目視により監視する処理方法であって、
前記複数種の撮影情報の各々に対応付けられたタイミング情報に基づいて、前記表示装置への再生表示開始タイミングをずらして、前記複数種の映像情報に基づく各映像を表示制御する処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、処理装置、処理プログラム、及び処理方法に関する。
【背景技術】
【０００２】
従来、工場内の生産ラインや物流センターの配送仕分けシステム等の特定領域に映像監視を適用する場合、複数の映像を同時表示する監視手段として、特許文献１には、複数の監視箇所内を流れていく１つの対象物の、各カメラ通過時点の様子を再生し、目視確認することが記載されている。特許文献１によれば、複数の再生すべき時点を検出することが可能となる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１８−１９３７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載の技術では、同時再生する複数種の映像の選択や、映像内での再生時点の指定等は、オペレータの手動操作に委ねられているため、映像確認作業が煩雑となっている。
【０００５】
本発明は、撮影対象物の移動に伴い複数個所で撮影した複数種の映像を異なる方向の視線上で同時再生する際に、各再生画像を最適な同期差分を設定して自動再生することで、撮影対象物の映像確認作業性を向上することができる処理装置を得ることを目的とする。
【課題を解決するための手段】
【０００６】
本発明の処理装置は、所定の撮影領域を複数の撮影装置で撮影した複数種の映像情報に基づき、表示装置に同時に再生表示された映像を監視者が視線を移動させながら目視により監視する処理装置であって、前記複数種の撮影情報の各々に対応付けられたタイミング情報に基づいて、前記表示装置への再生表示開始タイミングをずらして、前記複数種の映像情報に基づく各映像を表示制御する表示制御部を有している。
【０００７】
本発明の処理プログラムは、所定の撮影領域を複数の撮影装置で撮影した複数種の映像情報に基づき、表示装置に同時に再生表示された映像を監視者が視線を移動させながら目視により監視するコンピュータを、前記複数種の撮影情報の各々に対応付けられたタイミング情報に基づいて、前記表示装置への再生表示開始タイミングをずらして、前記複数種の映像情報に基づく各映像を表示制御する表示制御部、として機能させる。
【０００８】
本発明の処理方法は、所定の撮影領域を複数の撮影装置で撮影した複数種の映像情報に基づき、表示装置に同時に再生表示された映像を監視者が視線を移動させながら目視により監視する処理方法であって、前記複数種の撮影情報の各々に対応付けられたタイミング情報に基づいて、前記表示装置への再生表示開始タイミングをずらして、前記複数種の映像情報に基づく各映像を表示制御する。
【発明の効果】
【０００９】
本発明によれば、撮影対象物の移動に伴い複数個所で撮影した複数種の映像を異なる方向の視線上で同時再生する際に、各再生映像を最適な同期差分を設定して自動再生することで、撮影対象物の映像確認作業性を向上することができるという効果が得られる。
【図面の簡単な説明】
【００１０】
【図１】本実施の形態に係る物品搬送ラインを示す斜視図である。
【図２】（Ａ）は本実施の形態に係る監視カメラを用いた監視システムの概略図、（Ｂ）は大規模記憶装置に格納された個人別テーブルの概念図である。
【図３】再生時間決定処理部を主体とした、監視システムの機能ブロック図である。
【図４】再生時間決定処理部において、４台の監視カメラを、モニタを４分割して同時に再生する場合を例示した、モニタの動画再生遷移図である。
【図５】監視処理部を主体とした、監視システムの機能ブロック図である。
【図６】監視処理部において、４台の監視カメラを、モニタを４分割して同時に再生する場合を例示した、モニタの動画再生遷移図である。
【図７】本実施の形態に係るメインコントロール部で実行される監視システムメインルーチンを示す制御フローチャートである。
【図８】メインコントロール部からの指示で実行される再生時間決定処理部における再生時間決定処理ルーチンを示す制御フローチャートである。
【図９】メインコントロール部からの指示で実行される監視処理部における監視処理ルーチンを示す制御フローチャートである。
【発明を実施するための形態】
【００１１】
図１は、本実施の形態に係る物品搬送ライン１０を示す斜視図である。
【００１２】
物品搬送ライン１０は、工場内の生産ラインや物流センターの配送仕分けシステム等に適用可能である。
【００１３】
本実施の形態に係る物品搬送ライン１０では、直線的は主幹路１２を備えている。主幹路１２は、ベルトコンベア１２Ａが敷設されており、図示しない駆動源により、無端状にループしながら移動するようになっている。
【００１４】
このため、主幹路１２の上流側に設けられた、例えば、物品ストッカ（図示省略）から図１の矢印Ａに示すように、物品１４が搬送されてくると、物品１４は、ベルトコンベア１２Ａの移動に伴って、図１の矢印Ｂに示すように、主幹路１２の下流へ送り出されるようになっている。
【００１５】
本実施の形態では、主幹路１２の、ベルトコンベア１２Ａは、一定の速度で移動しており、搬送される複数の物品１４は、一定の間隔、かつ、一定の速度で移動するようになっている。
【００１６】
なお、物品１４の搬送間隔には、許容誤差±αが設定されており、結果として、物品１４の搬送間隔は、許容範囲±α内で変動する場合を含むものとする。
【００１７】
また、搬送速度においても、所定の許容誤差±βを持たせてもよい。
【００１８】
図１に示される如く、主幹路１２からは複数（図１では、２個）の枝路１６Ａ、１６Ｂが設けられている。
【００１９】
主幹路１２と、枝路１６Ａ、１６Ｂの境界には、図示しない切替ガイドユニットが取り付けられており、物品１４の種類に応じて、主幹路１２から枝路１６Ａ、１６Ｂへ方向転換させることができるようになっている。このような枝路１６Ａ、１６Ｂは、物流センターの配送仕分けに適用可能であり、一例として、配送地域毎に主幹路１２の終端、並びに、枝路１６Ａ、１６Ｂの終端に待機する運搬トラック等（図示省略）へ仕分けることが可能である。
【００２０】
ここで、本実施の形態の物品搬送ライン１０では、主幹路１２及び枝路１６Ａ、１６Ｂの上方に、監視カメラ１８が取り付けられている。監視カメラ１８の数Ｌは、特に限定されるものではないが、図１では、主幹路１２上に５台の監視カメラ１８が配置され、枝路１６Ａ上に２台の監視カメラ１８が配置され、枝路１６Ｂ上に１台の監視カメラ１８が配置されている。
【００２１】
ここで、主幹路１２上に配置された４台の監視カメラ１８（図１で実線で図示）に着目して、配置状態を説明する。
【００２２】
４台の監視カメラ１８は、一定間隔で配置されている。この監視カメラ１８の配置間隔は、物品１４の搬送間隔に依存するものではなく、独立して設定すればよい。また、一定間隔で配置されていなくてもよい。
【００２３】
各監視カメラ１８では、主幹路１２上の移動する物品１４を上から撮影することになり、その映像は、平面画像となる（図２（Ｂ）参照）。なお、監視カメラ１８の一部又は全部を傾斜させ、平面画像ではなく、奥行きのある画像（所謂、鳥瞰図的な画像）を撮影するようにしてもよい。
【００２４】
図２（Ａ）には、本実施の形態に係る監視カメラ１８を用いた監視システム２０が示されている。
【００２５】
監視システム２０は、メインコントロール部２２を備えている。メインコントロール部２２は、ＣＰＵ２２Ａ、ＲＡＭ２２Ｂ、ＲＯＭ２２Ｃ、入出力部（Ｉ／Ｏ）２２Ｄ、及びこれらを接続するデータバスはコントロールバス等のバス２２Ｅを備えている。監視システム２０は、ＣＰＵ２２Ａによる処理プログラムによって、後述される映像処理部２８、再生時間決定処理部３０、及び監視処理部３２を一括管理する。
【００２６】
Ｉ／Ｏ２２Ｄには、ユーザーインターフェイス（キーボード、マウス、ディスプレイ等）２４及び映像処理部２８が接続されている。
【００２７】
また、Ｉ／Ｏ２２Ｄには、再生時間決定処理部３０及び監視処理部３２が接続されている。この再生時間決定処理部３０及び監視処理部３２の詳細については後述するが、ユーザーインターフェイス２４を介して処理の実行指示を受けることで、それぞれの処理が実行されるようになっている。また、ユーザーインターフェイス２４では、各部の処理の進捗状況等を管理するようになっている。
【００２８】
さらに、Ｉ／Ｏ２２Ｄには、大規模記憶装置２６が接続されており、監視システム２０で実行する処理に必要な情報を格納することが可能となっている。その主たる情報として、大規模記憶装置２６には、再生時間決定処理部３０で監視者毎に設定される再生時間テーブル（個人別テーブル２６Ｔが記憶されるようになっている(図２（Ｂ）参照）。個人別テーブル２６Ｔについては再生時間決定処理部３０の詳細説明と共に後述する。
【００２９】
（映像処理部２８）
【００３０】
図３及び図５に示される如く、映像処理部２８は、複数台の監視カメラ１８（監視カメラ群１８Ｇ）を備え、各監視カメラ１８で撮影した映像（主として動画）は映像情報蓄積部３４に蓄積されるようになっている。
【００３１】
また、映像処理部２８は、モニタ３６を備えている。モニタ３６には、再生処理部３８が接続されており、再生処理部３８では、例えば、映像情報を識別する識別情報に基づいて、映像情報蓄積部３４に蓄積された映像情報を取り込み、モニタ３６に再生表示させる。
【００３２】
なお、映像処理部２８のモニタ３６には、詳細は後述するが、再生時間決定処理部３０で適用されるアイトラッキングカメラ４０が取り付けられている。
【００３３】
ここで、モニタ３６は、画面が分割され、複数台の監視カメラ１８の映像が同時に表示（再生）されるようになっている（図４及び図６参照）。
【００３４】
画面の分割数は、設置された監視カメラ１８の台数分としてもよいが、モニタ３６のサイズによっては、全台の監視カメラ１８を分割して表示するようにしてもよい。
【００３５】
本実施の形態では、図４及び図６に示される如く、４台の監視カメラ１８の映像を同時に表示する構成となっている。すなわち、図１において実線で図示した主幹路１２上の４台の監視カメラ１８で撮影した映像が、モニタ３６の画面が４分割されて同時に表示されることになる。
【００３６】
例えば、その他の監視カメラ１８（図１で点線で図示）の映像は、モニタ３６上で時期をずらして表示され、かつ当該時分割表示を繰り返すことで、全台の監視カメラ１８の映像を一定時間内で監視することができる。
【００３７】
本実施の形態では、物品１４の過去の搬送状態を確認する場合、当該過去の時点で撮影（録画）した映像を再生する監視処理部３２を備えている。
【００３８】
監視処理部３２では、当該物品１４の状況（例えば、不具合対象の物品１４（単一）の移動状態）を、搬送経路に沿った複数の監視カメラ１８で撮影した映像が再生される。
【００３９】
例えば、図１に実線で示す主幹路１２上の４台の監視カメラ１８において、ベルトコンベア１２Ａ上の移動する同一の物品１４を撮影した映像を表示する場合がある。
【００４０】
この場合、１つの映像を確認して、次の映像を見るまでのインタバル（監視者の視線又は顔の移動時間）は、監視者によってまちまちであり、どのようなタイミングで４つの映像を表示するか（再生時間を決定するか）を特定する必要がある。
【００４１】
そこで、本実施の形態の監視システム２０として、アイトラッキングカメラ４０(図３参照）によって、監視者の視線又は顔の動きを判断し、再生時間を決定する再生時間決定処理部３０と、当該再生時間決定処理部３０決定した再生時間に基づいて、特定の物品１４の状態を監視する監視処理部３２とを設けた。
【００４２】
（再生時間決定処理部３０）
【００４３】
図３には、再生時間決定処理部３０を主体とした、監視システム２０の機能ブロック図が示されている。なお、図３に示す各ブロックはハード構成を限定するものではなく、一部又は全部が処理プログラムで動作するようにしてもよい。
【００４４】
メインコントロール部２２から、再生時間決定処理部３０の実行管理部４２に対して処理の実行指示があると、実行管理部４２では、同期差分デフォルト値読出部４４及び視線抽出部４６に監視指示を通知する。
【００４５】
同期差分デフォルト値読出部４４は、同期差分デフォルト値記憶部４８に接続されており、実行管理部４２からの開始指示に応じて、同期差分デフォルト値記憶部４８に記憶された同期差分デフォルト値を読み出し、映像処理部２８の再生処理部３８へ送出する。
【００４６】
再生処理部３８は、複数台の監視カメラ１８（監視カメラ群１８Ｇ）で撮影した映像情報を蓄積した映像情報の中から、特定の物品１４（図１参照）の映像を読み出す。本実施の形態では、主幹路１２に配置された４台の監視カメラ１８で撮影した、特定の物品１４の映像情報を読み出し、同期差分デフォルト値（ここでは、１０秒）に基づいて、モニタ３６に表示する。
【００４７】
このとき、モニタ３６上の各分割表示領域の映像は頭出し処理が施された状態で一時停止状態とされ、図４に示される如く、分割表示領域１（左上）が基準となり、分割表示領域１の動画の再生開始後１０秒後に分割表示領域２（右上）の動画が再生され、分割表示領域２の再生開始後１０秒後に分割表示領域３（左下）の動画が再生され、分割表示領域３の再生開始後１０秒後に分割表示領域４（右下）の動画が再生されるようになっている。
【００４８】
一方、視線抽出部４６では、実行管理部４２から開始指示を受けるとアイトラッキングカメラ４０から監視者の視線（又は顔）の動きの情報を取得して、視線情報を認識する。本実施の形態では、アイトラッキングカメラ４０は、光軸が監視者と対峙する位置（例えば、モニタ３６近傍）に配置したが、再生時間決定処理を実行するに際し、監視者にアイトラッキングメガネ等を装着させるようにしてもよい。
【００４９】
視線抽出部４６で抽出した視線情報は、再生時間決定部５０へ送出される。再生時間決定部５０では、視線情報に基づいて、各分割表示領域間の視線の移動時間を特定し、１つの分割表示領域１〜４を注視する時間ｔｋ（ここでは、４台の監視カメラ１８を対象としているので、ｔ１〜ｔ４）を決定し、第１カウンタ５２及び動画再生時間テーブル生成部５４へ通知する。
【００５０】
第１カウンタ５２は、再生処理部３８に接続されており、視線情報を取得をＮ１回（例えば、１０〜５０回程度）繰り返すことを指示する。この繰り返しによって、視線情報の精度を上げることができる。
【００５１】
一方、動画再生時間テーブル生成部５４では、再生時間決定部５０から受けた、Ｎ１回分の再生時間を一時的に累積記憶し、第１カウンタ５２からの終了通知に基づいて、動画再生時間テーブルを生成する。例えば、動画再生時間テーブルとしては、累積記憶したＮ１回分の再生時間の平均値や中央値等が適用可能である。
【００５２】
動画再生時間テーブル生成部５４で生成した動画再生時間テーブルは、メインコントロール部２２の大規模記憶装置２６へ送出され、視線情報の対象者（監視者）毎の動画再生時間テーブル（個人別テーブル２６Ｔ）として記憶されるようになっている。
【００５３】
大規模記憶装置２６に記憶された個人別テーブル２６Ｔは、監視処理部３２での監視処理の際に、監視処理部３２へ転送され、利用される。
【００５４】
（再生処理部３８）
【００５５】
図５（Ａ）には、監視処理部３２を主体とした、監視システム２０の機能ブロック図が示されている。なお、図５に示す各ブロックはハード構成を限定するものではなく、一部又は全部が処理プログラムで動作するようにしてもよい。
【００５６】
メインコントロール部２２から、監視処理部３２の監視モード実行指示受付部５６が処理の実行を受け付けると、監視モード実行指示受付部５６は、個人識別情報取得部５８及び動画再生時間テーブル読出部６０を起動させる。
【００５７】
個人識別情報取得部５８では、これから監視する監視者の個人識別情報を取得し、動画再生時間テーブル取得部６２へ通知する。
【００５８】
動画再生時間テーブル取得部６２では、メインコントロール部２２に対して、個人識別情報を通知することで、メインコントロール部２２では、大規模記憶装置２６の個人別テーブル２６Ｔから、個人識別情報に基づいて、動画再生時間テーブルを抽出し、動画再生時間テーブル取得部６２へ転送する。
【００５９】
動画再生時間テーブル取得部６２では、取得した動画再生時間テーブル(図５（Ｂ）参照）をテーブル一時記憶部６４に一時的に記憶する。
【００６０】
一方、動画再生時間テーブル読出部６０では、監視モード実行指示受付部５６から起動の指示を受けると、テーブル一時記憶部６４に一時的に記憶された動画再生時間テーブルを取得して、第２カウンタ６６を介して、再生処理部３８へ送出する。この動画再生時間テーブルの送出が、１回の再生指示となる。
【００６１】
このとき、モニタ３６上の各分割表示領域の映像は頭出し処理が施された状態で一時停止状態とされ、図６に示される如く、分割表示領域１（左上）が基準となり、分割表示領域１の動画再生開始後ｔ１秒後に分割表示領域１（左上）の動画が再生終了して分割表示領域２（右上）の動画が再生開始され、分割表示領域２の再生開始後ｔ２秒後に分割表示領域２（左上）の動画が再生終了して分割表示領域３（左下）の動画が再生開始され、分割表示領域３の再生開始後ｔ３後に分割表示領域３（左下）の動画が再生終了して分割表示領域４（右下）の動画が再生開始され、ｔ４秒後に分割表示領域４（右下）の動画が再生終了するようになっている。
【００６２】
第２カウンタ６６では、再生処理部３８から再生回数を取得して、予め定めた再生回数だけ、動画再生時間テーブルの送出を繰り返す。
【００６３】
以下に本実施の形態の動作／作用を、図７〜図９のフローチャートに従い説明する。
【００６４】
図７は、本実施の形態に係るメインコントロール部２２で実行される監視システムメインルーチンを示す制御フローチャートである。
【００６５】
ステップ１００では、ユーザーインターフェイス２４から、処理の実行指示があったか否かを判断する。このステップ１００で否定判定された場合は、このルーチンは終了する。
【００６６】
また、ステップ１００で肯定判定されると、ステップ１０２へ移行して、処理モードを判定する。
【００６７】
ステップ１０２で処理モードが再生時間決定処理の場合は、ステップ１０４へ移行して、再生時間決定処理部３０を制御して、再生時間決定処理を実行する。
【００６８】
また、ステップ１０２で処理モードが監視処理の場合は、ステップ１０６へ移行して、監視処理部３２を制御して、監視処理を実行する。
【００６９】
（再生時間決定処理）
【００７０】
図８は、メインコントロール部２２からの指示で実行される再生時間決定処理部３０における再生時間決定処理ルーチンを示す制御フローチャートである。
【００７１】
ステップ１５０では、第１カウンタ５２の設定値をＮ１とし、かつ、監視カメラ数をＬとする。本実施の形態では、第１カウンタ５２の設定値Ｎ１として、１０〜５０が好ましいとしている。カウント値に特に制限はないが、例えば、再生時間決定のために、視線繰り返し平均値を採用する場合、最低１０回分のデータがないと適正な平均値が得られず、５０回以上行っても、平均値の精度は上がらないという観点から、一例として、Ｎ１＝１０〜５０とした。
【００７２】
一方、監視カメラ数Ｌは、図１に示す主幹路１２に沿って直線的に配置された４個の監視カメラ１８（図１で実線で図示）を、モニタ３６上の同時に再生（表示）するものとして設定した。この監視カメラ数に特に制限はないが、ベルトコンベア１２Ａ上の物品１４を監視する距離として必要十分であり、モニタ３６の画面を分割する場合に、２及び３分割では監視数が足りず、５分割以上では、一般的なサイズのモニタ（３０インチ程度）を想定した場合に表示単位サイズが小さくなるという観点から、一例として、Ｌ＝４とした(図４参照）。
【００７３】
次のステップ１５２では、変数ｉの初期値として０を設定し、次いで、ステップ１５４へ移行して、変数ｋの初期値として０を設定し、ステップ１５６へ移行する。
【００７４】
ステップ１５６では、変数ｉをインクリメント（ｉ＝ｉ＋１）し、次いで、ステップ１５８では、全ての分割表示領域（図４では、４個の領域）で、それぞれ再生動画の頭出しを実行し、一時停止状態として、ステップ１６０へ移行する。
【００７５】
ステップ１６０では、変数ｋをインクリメント（ｋ＝ｋ＋１）し、ステップ１６２へ移行する。
【００７６】
次のステップ１６２では、分割表示領域ｋの動画を再生開始し、ステップ１６４へ移行する。再生時間は、最大ｔｄ（デフォルト１０秒）である。
【００７７】
ステップ１６４では、アイトラッキングカメラ４０からの視線情報に基づき、監視者の視線又は顔が分割表示領域ｋからｋ＋１に移動したか否かを判断する。
【００７８】
このステップ１６４で否定判定された場合は現状の表示状態が維持され、肯定判定された場合は、ステップ１６６へ移行して、ｉ回目の分割表示領域ｋの動画の再生時間（監視者が再生動画を見ていた時間）ｔｋを取得し、ステップ１６８へ移行する。
【００７９】
ステップ１６８では、分割表示領域ｋの動作を再生終了し、ステップ１７０へ移行する。なお、ステップ１６８において、デフォルト値であるｔｄ時間再生を継続させてもよい。この場合、監視者が視線を移動しても、次の分割表示領域で再生が開始するまで、ｔｄの残時間分待機することになる。
【００８０】
ステップ１７０では、変数ｋがＬに到達したか（ｋ＝Ｌ）か否かを判断し、否定判定された場合は、ステップ１６０へ戻り、上記工程を繰り返す。
【００８１】
また、ステップ１７０で肯定判定された場合は、ステップ１７２へ移行して、変数ｉがＮ１に到達したか（ｉ＝Ｎ１）否かを判断し、否定判定された場合は、ステップ１５６へ戻り、上記工程を繰り返す。
【００８２】
また、ステップ１７２で肯定判定された場合は、ステップ１７４へ移行して、分割表示領域１〜Ｌにおける動画再生時間ｔｋを決定する。この場合、ｉ回の繰り返しによって得た情報の平均値としたり、中央値とすることができる。
【００８３】
なお、ステップ１７４において、過去の情報を全て記憶しておき、情報が膨大となった場合に、単純な平均値及び中央値ではなく、個別の監視者の視線情報の変化を学習して、監視時間帯、疲労度等を考慮して、監視者に適正な再生時間ｔｋを予測するようにしてもよい。
【００８４】
次のステップ１７６では、決定した再生時間ｔｋを、メインコントロール部２２の大規模記憶装置２６へ格納し、このルーチンは終了する。
【００８５】
なお、再生時間決定処理部３０が、独立した再生時間決定処理装置である場合は、当該独立した再生時間決定処理装置に、再生時間ｔｋを記憶する記憶部を設けてもおい。
【００８６】
（再生時間決定のためのモニタの動画再生の遷移）
【００８７】
図４は、４台の監視カメラ１８を、モニタ３６を４分割して同時に再生する場合を例示した、モニタ３６の動画再生遷移図である。
【００８８】
図４(Ａ）は、全ての分割表示領域が頭出しされて一時停止状態から、ｋ＝１のときのモニタ３６上の動画再生状態を示している。この場合、図４（Ａ）に示される如く、左上の分割表示領域がｔｄ秒（デフォルトとして１０秒）動画再生され、その他の分割表示領域（右上、左下、及び右下）は、一時停止状態（静止画）となる。
【００８９】
ここで、アイトラッキングカメラ４０からの視線情報に基づき、再生時間決定部５０では、左上の分割表示領域の動画再生開始から監視者の視線が右上の分割表示領域へ移動するまでの時間ｔ１を計測する。なお、全ての監視者が、左上から右上の分割表示領域へ直接移動するとは限らず、一旦、モニタ３６から視線をそらす場合もあるので、左上の分割表示領域から離れるまでの時間ｔ１としてもよい。
【００９０】
デフォルトの１０秒が経過すると、図４（Ｂ）に示される如く、右上の分割表示領域がｔｄ秒（デフォルトとして１０秒）動画再生され、左上の分割表示領域が表示終了状態となり（所謂砂嵐、ブラックアウト、ホワイトアウト、再生終了時の静止画、又は、次の頭出し状態等）、その他の分割表示領域（左下及び右下）は、一時停止状態（静止画）となる。
【００９１】
ここで、アイトラッキングカメラ４０からの視線情報に基づき、再生時間決定部５０では、右上の分割表示領域の動画再生開始から監視者の視線が左下の分割表示領域へ移動するまでの時間ｔ２を計測する。なお、全ての監視者が、右上ら左下の分割表示領域へ直接移動するとは限らず、一旦、モニタ３６から視線をそらす場合もあるので、右上の分割表示領域から離れるまでの時間ｔ２としてもよい。
【００９２】
デフォルトの１０秒が経過すると、図４（Ｃ）に示される如く、左下の分割表示領域がｔｄ秒（デフォルトとして１０秒）動画再生され、左上及び右上の分割表示領域が表示終了状態となり（所謂砂嵐、ブラックアウト、ホワイトアウト、再生終了時の静止画、又は、次の頭出し状態等）、その他の分割表示領域（右下）は、一時停止状態（静止画）となる。
【００９３】
ここで、アイトラッキングカメラ４０からの視線情報に基づき、再生時間決定部５０では、左下の分割表示領域の動画再生開始から監視者の視線が右下の分割表示領域へ移動するまでの時間ｔ３を計測する。なお、全ての監視者が、左下から右下の分割表示領域へ直接移動するとは限らず、一旦、モニタ３６から視線をそらす場合もあるので、左下の分割表示領域から離れるまでの時間ｔ３としてもよい。
【００９４】
デフォルトの１０秒が経過すると、図４（Ｄ）に示される如く、右下の分割表示領域がｔｄ秒（デフォルトとして１０秒）動画再生され、左上、右上、左下の分割表示領域が表示終了状態となる（所謂砂嵐、ブラックアウト、ホワイトアウト、再生終了時の静止画、又は、次の頭出し状態等）。
【００９５】
ここで、アイトラッキングカメラ４０からの視線情報に基づき、再生時間決定部５０では、右下の分割表示領域の動画再生開始から監視者の視線が、左上の分割表示領域へ移動するまでの時間ｔ４を計測する。なお、全ての監視者が、右下から左上の分割表示領域へ直接移動するとは限らず、一旦、モニタ３６から視線をそらす場合もあるので、右下の分割表示領域から離れるまでの時間ｔ４としてもよい。
【００９６】
上記図４（Ａ）〜（Ｄ）までが、変数ｉの１カウントとされ、各分割表示領域の再生決定時間ｔｋが決定する（ｔｋ＝ｔ１、ｔ２、ｔ３、ｔ４）。
【００９７】
（監視処理）
【００９８】
図９は、メインコントロール部２２からの指示で実行される監視処理部３２における監視処理ルーチンを示す制御フローチャートである。
【００９９】
ステップ２００では、初期設定として、第２カウンタ６６の設定値をＮ２とし、監視カメラ１８の数Ｌを４として、ステップ２０２へ移行する。
【０１００】
第２カウンタ６６の設定値は、検査対象の物品数に依存するため、数値的に言及されるものではなく、少なくとも１以上（正の整数）となる。また、監視カメラ１８は、図８に示す再生時間決定処理ルーチンに対応して、Ｌ＝４とする。
【０１０１】
ステップ２０２では、変数ｊの初期値として０を設定し、次いで、ステップ２０４へ移行して、変数ｋの初期値として０を設定し、ステップ２０６へ移行する。
【０１０２】
ステップ２０６では、監視者の個人識別情報に基づき、メインコントロール部２２の大規模記憶装置２６から、当該監視者の再生時間テーブルを読み出し、ステップ２０８へ移行する。なお、監視処理部３２が独立した再生時間決定処理装置である場合は、当該独立監視処理に、再生時間ｔｋを記憶する記憶部を設けてもよい。
【０１０３】
ステップ２０８では、変数ｊをインクリメント（ｊ＝ｊ＋１）し、次いで、ステップ２１０では、全ての分割表示領域（図６では、４個の領域）で、それぞれ再生動画の頭出しを実行し、一時停止状態として、ステップ２１２へ移行する。
【０１０４】
ステップ２１２では、変数ｋをインクリメント（ｋ＝ｋ＋１）し、ステップ２１４へ移行する。
【０１０５】
ステップ２１４では、ｊ回目の分割表示領域ｋの動画を再生開始し、ステップ２１６へ移行する。ステップ２１６では、再生開始後、ｔｋ秒経過したか否かを判断する。
【０１０６】
このステップ２１６で否定判定された場合は現状の表示状態が維持され、肯定判定された場合は、ステップ２１８へ移行して、ｊ回目の分割表示領域ｋの動画を再生終了し、ステップ２２０へ移行する。
【０１０７】
ステップ２２０では、変数ｋがＬに到達したか（ｋ＝Ｌ）か否かを判断し、否定判定された場合は、ステップ２１２へ戻り、上記工程を繰り返す。
【０１０８】
また、ステップ２２０で肯定判定された場合は、ステップ２２２へ移行して、変数ｊがＮ２に到達したか（ｊ＝Ｎ２）否かを判断し、否定判定された場合は、ステップ２０８へ戻り、上記工程を繰り返す。
【０１０９】
また、ステップ２２２で肯定判定された場合は、このルーチンは終了する。
【０１１０】
（監視処理のためのモニタの動画再生の遷移）
【０１１１】
図６は、４台の監視カメラ１８を、モニタ３６を４分割して同時に再生する場合を例示した、モニタ３６の動画再生遷移図である。
【０１１２】
図６(Ａ）は、全ての分割表示領域が頭出しされて一時停止状態から、ｋ＝１のときのモニタ３６上の動画再生状態を示している。この場合、図６（Ａ）に示される如く、左上の分割表示領域がｔ１秒動画再生され、その他の分割表示領域（右上、左下、及び右下）は、一時停止状態（静止画）となる。
【０１１３】
ｔ１秒が経過すると、図６（Ｂ）に示される如く、右上の分割表示領域がｔ２秒動画再生され、左上の分割表示領域が表示終了状態となり（所謂砂嵐、ブラックアウト、ホワイトアウト、再生終了時の静止画、又は、次の頭出し状態等）、その他の分割表示領域（左下及び右下）は、一時停止状態（静止画）となる。
【０１１４】
ｔ２秒が経過すると、図６（Ｃ）に示される如く、左下の分割表示領域がｔ３秒動画再生され、左上及び右上の分割表示領域が表示終了状態となり（所謂砂嵐、ブラックアウト、ホワイトアウト、再生終了時の静止画、又は、次の頭出し状態等）、その他の分割表示領域（右下）は、一時停止状態（静止画）となる。
【０１１５】
ｔ３秒が経過すると、図６（Ｄ）に示される如く、右下の分割表示領域がｔ４秒動画再生され、左上、右上、左下の分割表示領域が表示終了状態となる（所謂砂嵐、ブラックアウト、ホワイトアウト、再生終了時の静止画、又は、次の頭出し状態等）。
【０１１６】
上記図６（Ａ）〜（Ｄ）までが、変数ｊの１カウントとされ、各物品毎にｔ１＋ｔ２＋ｔ３＋ｔ４秒の動画が再生される。
【０１１７】
本実施の形態によれば、再生時間決定処理部３０において、監視者の視線等をアイトラッキングカメラ４０を用いて観察し、監視のためにどれだけの時間が必要かを監視者毎に再生時間を決定し記憶しておくことができる。
【０１１８】
また、監視処理部３２では、予め記憶した個人の再生時間に基づいて、動画を再生しながら監視を行うため、動画再生時間を必要十分な時間とすることができ、作業効率を向上することができる。
【０１１９】
比較例として、固定された時間（例えば、デフォルト値の１０秒）で監視すると、監視者が物品１４を、複数の動画で監視する場合に、待ち時間が長くなり、作業効率が低下することになる。
【０１２０】
これに対して、本実施の形態では、監視者毎に適正な再生時間ｔｋを決定したため、待ち時間が軽減することができ、必要十分な時間で、物品１４の監視が可能となる。
【０１２１】
なお、本実施の形態では、監視者の視線情報を得るためにアイトラッキングカメラ４０を配置して、自動的に視線の移動を検出するようにしたが、アイトラッキングカメラ４０に限定せず、監視者の入力操作（例えば、キー操作、ボタン操作等）、及び発話等を、視線の移動があったことを示すトリガーとしてもよい。
【０１２２】
また、本実施の形態では、再生時間決定処理部３０において、最適な同期差分を生成し、監視処理部３２における監視作業効率を向上するようにしたが、本発明は、例えば、映像配信に関わる複数コンテンツのザッピングにも、適用可能である。
【０１２３】
さらに、本実施の形態では、映像処理部２８、再生時間決定処理部３０、及び監視処理部３２を、メインコントロール部２２のＣＰＵ２２Ａによる処理プログラムによって一括管理する構成としたが、各処理部が独立したＣＰＵの処理プログラムで動作してもよい。また、何れか１つのＣＰＵが、他の処理部を制御するようにしてもよい。
【０１２４】
また、構造上、それぞれの個別の装置構成（映像処理部２８を映像処理装置、再生時間決定処理部３０を再生時間決定処理装置、及び監視処理部３２を監視処理装置としてユニット化）としてもよい。この場合、用途に応じて組み合わせ、通信インターフェイス等によって情報をやり取りして、再生時間決定処理モード及び監視処理モードを構築するようにしてもよい。
【０１２５】
なお、本実施の形態では、ＣＰＵがプログラムを実行することによってソフトウェアにより実現される機能を、例えば、半導体集積回路等のハードウェアにより実現してもよいし、ハードウェアとソフトウェアとの組み合わせにより実現してもよい。
【０１２６】
また、本実施の形態では、処理プログラムが予め記憶（インストール）されている態様を説明したが、これに限定されない。処理プログラムは、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＤＶＤ−ＲＯＭ（Digital Versatile Disc Read Only Memory）、及びＵＳＢ（Universal Serial Bus）メモリ等の記録媒体に記録された形態で提供されてもよい。また、処理プログラムは、ネットワークを介して外部装置からダウンロードされる形態としてもよい。
【符号の説明】
【０１２７】
１０    物品搬送ライン
１２    主幹路
１２Ａ    ベルトコンベア
１４    物品
１６Ａ、１６Ｂ    枝路
１８    監視カメラ
１８Ｇ    監視カメラ群
２０    監視システム
２２    メインコントロール部
２２Ａ    ＣＰＵ
２２Ｂ    ＲＡＭ
２２Ｃ    ＲＯＭ
２２Ｄ    入出力部（Ｉ／Ｏ）
２２Ｅ    バス
２４    ユーザーインターフェイス
２８    映像処理部
３０    再生時間決定処理部（タイミング情報設定部）
３２    監視処理部（表示制御部）
２６    大規模記憶装置
２６Ｔ    個人別テーブル
３４    映像情報蓄積部
３６    モニタ
３８    再生処理部
４０    アイトラッキングカメラ
４２    実行管理部
４４    同期差分デフォルト値読出部
４６    視線抽出部
４８    同期差分デフォルト値記憶部
５０    再生時間決定部
５２    第１カウンタ
５４    動画再生時間テーブル生成部
５６    監視モード実行指示受付部
５８    個人識別情報取得部
６０    動画再生時間テーブル読出部
６２    動画再生時間テーブル取得部
６４    テーブル一時記憶部
６６    第２カウンタ
【図１】
2020136954.tif 000003
【図２】
2020136954.tif 000004
【図３】
2020136954.tif 000005
【図４】
2020136954.tif 000006
【図５】
2020136954.tif 000007
【図６】
2020136954.tif 000008
【図７】
2020136954.tif 000009
【図８】
2020136954.tif 000010
【図９】
2020136954.tif 000011