(57)【要約】  発明の態様は少なくとも２つの埠頭クレーンのそれぞれのためのコンテナコード認識システム及び方法を含む。それぞれの埠頭クレーン上のカメラで撮影されたコンテナについての少なくとも１つの画像フレームシーケンスが埠頭クレーン操縦者に提供される。操縦者はコンテナについての画像フレームシーケンスに応答する。操縦者の応答が受信されるとそれぞれの埠頭クレーンで扱われるコンテナについてのコンテナコードが生成される。操縦者の応答はキーボード、ポインティングデバイス、音響インターフェース及び／または眼の動きの使用によることができる。発明はさらに、画像フレームシーケンスの少なくとも１つの画像フレームを、発明のプロセスの結果としてのコンテナについてのコンテナコードとともに含む。さらに、プロセス結果には埠頭クレーン識別標識及び／またはタイムスタンプを含めることができる。タイムスタンプは、埠頭クレーン積換えが行われた時刻及び／または操縦者が応答した時刻とすることができる。コンテナ在庫管理システムは、システムを更新するために用いることができる、発明のプロセスの結果の１つまたはそれより多くを受け取ることができる。発明のプロセスによって生成される達成可能な事項には、コンテナコード、画像フレームがあり、さらに、埠頭クレーン識別標識及び少なくとも１つのタイムスタンプが含まれることが好ましい。
2008500252.tif 000002
【特許請求の範囲】
【請求項１】
埠頭クレーンで扱われるコンテナについてコンテナ在庫管理システムを更新する装置において、少なくともＮ基の前記埠頭クレーンのそれぞれについて、
前記埠頭クレーンのそれぞれについて、前記埠頭クレーン上の少なくとも１台のカメラ及び前記コンテナ在庫管理システムと通信可能な態様で接続されたコンピュータ、および
前記コンピュータにアクセス可能な態様で接続されたメモリ、
を備え
前記コンピュータは操縦者と対話可能な態様であり、
前記コンピュータは前記メモリに常駐するプログラムステップを含むプログラムシステムによって少なくともある程度制御され、
前記プログラムシステムが、
前記埠頭クレーンのそれぞれについて、積換え作業中に前記埠頭クレーン上の前記カメラから撮影された前記コンテナについての少なくとも１つの画像フレームシーケンスを前記操縦者に提供するプログラムステップ、
前記埠頭クレーンのそれぞれについて、前記埠頭クレーンで扱われる前記コンテナについてのコンテナコードを生成するための、前記画像フレームシーケンスに基づく前記操縦者からの応答を受信するプログラムステップ、及び
前記埠頭クレーンのそれぞれについて、前記コンテナについての前記コンテナコードを前記コンテナ在庫管理システムに送信するプログラムステップ、
を含み、
前記積換え作業が荷積み作業及び荷揚げ作業を含む積換え作業集約リストの要素であり、
前記Ｎが少なくとも２である、
ことを特徴とする装置。
【請求項２】
前記プログラムシステムが、
前記埠頭クレーンの少なくとも１基について、前記応答に基づいて前記コンテナコードについての応答タイムスタンプを生成するプログラムステップ、
前記埠頭クレーンの少なくとも１基について、埠頭タイムスタンプを前記画像フレームシーケンスとともに受信するプログラムステップ、及び
前記埠頭クレーン少なくとも１基について、前記コンテナについての埠頭クレーン識別標識を生成するために前記コンテナコードについての前記埠頭クレーンを示すプログラムステップ、
を含む集約リストの少なくとも１つの要素をさらに含み、
前記コンテナコードを送信する前記プログラムステップが、
前記コンテナコードに対する前記応答タイプスタンプを前記コンテナ在庫管理システムに送信するプログラムステップ、
前記コンテナコードについての前記埠頭タイプスタンプを前記コンテナ在庫管理システムに送信するプログラムステップ、及び
前記コンテナコードについての前記埠頭クレーン識別標識を前記コンテナ在庫管理システムに送信するプログラムステップ、
を含む集約リストの少なくとも１つの要素をさらに含む、
ことを特徴とする請求項１に記載の装置。
【請求項３】
前記操縦者と対話可能な態様な前記コンピュータが、前記埠頭クレーンの少なくとも１基について、
前記画像フレームシーケンスを生成するために前記積換え作業中に前記埠頭クレーン上の前記カメラから撮影された前記コンテナに基づいて圧縮画像フレームシーケンスを処理するための手段、及び
前記画像フレームシーケンスを前記操縦者に表示するための手段、
をさらに有することを特徴とする請求項１に記載の装置。
【請求項４】
前記操縦者からの応答を受信する前記プログラムステップが、
前記コンテナコードを生成するための前記画像フレームシーケンスに基づく前記操縦者からのキーボード応答を受信するプログラムステップ、
前記コンテナコードを生成するための前記画像フレームシーケンスに基づく前記操縦者からのペンベース応答を受信するプログラムステップ、及び
前記コンテナコードを生成するための前記画像フレームシーケンスに基づく前記操縦者からの音響応答を受信するプログラムステップ、
を含む集約リストの少なくとも１つの要素をさらに含むことを特徴とする請求項１に記載の装置。
【請求項５】
前記操縦者からの音響応答を受信する前記プログラムステップが、
前記操縦者からの音響応答を収集するプログラムステップ、
前記音響応答を音声認識ツールに提供するプログラムステップ、及び
前記音声認識ツールから前記コンテナコードを受け取るプログラムステップ、
をさらに含むことを特徴とする請求項４に記載の装置。
【請求項６】
前記コンテナコードを送信する前記プログラムステップが、
前記コンテナについての前記コンテナコードを含むコンテナ更新メッセージを作成するプログラムステップ、及び
前記コンテナ更新メッセージを前記コンテナ在庫管理システムに送信するプログラムステップ、
をさらに含むことを特徴とする請求項１に記載の装置。
【請求項７】
前記コンテナ更新メッセージが、
前記埠頭クレーンの識別標識、
前記応答に基づく応答タイムスタンプ、及び
前記画像フレームシーケンスとともに受信される埠頭タイムスタンプ、
を含む集約リストの少なくとも１つの要素をさらに含むことを特徴とする請求項６に記載の装置。
【請求項８】
前記プログラムシステムが、
前記埠頭クレーンの少なくとも１基について、前記埠頭クレーン上の前記カメラからの前記画像フレームシーケンスに対応する光文字認識システムから光認識文字を受信するプログラムステップ、
をさらに含み、
前記コンテナコードを送信する前記プログラムステップが、
前記コンテナについての前記光認識文字を前記コンテナ在庫管理システムに送信するプログラムステップ、
をさらに含む、
ことを特徴とする請求項１に記載の装置。
【請求項９】
前記プログラムシステムが、前記埠頭クレーンの少なくとも１基について、
前記画像フレームシーケンスから画像フレームを選択するプログラムステップ、及び
前記埠頭クレーンで扱われる前記コンテナについての前記画像フレーム及び前記コンテナコードを含み、前記光認識文字を含む、達成可能な事項を生成するプログラムステップ、
をさらに含むことを特徴とする請求項８に記載の装置。
【請求項１０】
前記プログラムステップが、前記埠頭クレーンの少なくとも１基について、
前記画像フレームシーケンスから画像フレームを選択するプログラムステップ、及び
前記埠頭クレーンで扱われる前記コンテナについての前記画像フレーム及び前記コンテナコードを含む達成可能な事項を生成するプログラムステップ、
をさらに含むことを特徴とする請求項１に記載の装置。
【請求項１１】
前記達成可能な事項が、
前記埠頭クレーンの識別標識、
前記応答に基づく応答タイムスタンプ、及び
前記画像フレームシーケンスとともに受信される埠頭タイムスタンプ、
を含む集約リストの少なくとも１つの要素をさらに含むことを特徴とする請求項１０に記載の装置。
【請求項１２】
前記コンピュータが、命令プロセッサ、推論エンジン、ニューラルネットワーク及び有限状態機械を含む集約リストの少なくとも１つの要素を含み、
前記命令プロセッサは少なくとも１つの命令処理要素及び少なくとも１つのデータ処理要素を有し、前記データ処理要素のそれぞれは前記命令処理要素の少なくとも１つによって制御される、
ことを特徴とする請求項１に記載の装置。
【請求項１３】
前記プログラムシステムが、前記埠頭クレーンの少なくとも１基の上の前記カメラの少なくとも１台について、
前記埠頭クレーン上の前記カメラに対するカメラ指令を生成するための、前記画像フレームシーケンスに基づく前記操縦者からの第２の応答を受信するプログラムステップ、及び
前記埠頭クレーン上の前記カメラから撮影される前記画像フレームシーケンスを少なくともある程度制御するために前記埠頭クレーン上の前記カメラに前記カメラ指令を送信するプログラムステップ、
をさらに含み、
前記カメラ指令はズーム指令及びパン指令を含むカメラ指令集約リストの内の少なくとも１つの要素を含み、
前記ズーム指令は、少なくとも１つのズームイン指令、少なくとも１つのズームアウト指令及び標準ズーム復帰指令を含むズーム指令集約リストの要素であり、
前記パン指令は、左方パン指令、右方パン指令、上方パン指令及び下方パン指令を含むパン指令集約リストの要素である、
ことを特徴とする請求項１に記載の装置。
【請求項１４】
前記埠頭クレーンの少なくとも１基について、前記コンテナに向けられる少なくとも１台の照明灯が前記埠頭クレーン近傍に取り付けられ、
前記プログラムシステムが、
前記埠頭クレーン上の前記照明灯に対する照明指令を生成するための、前記画像フレームシーケンスに基づく前記操縦者からの第３の応答を受信するステップ、及び
前記埠頭クレーン上の前記カメラから撮影される前記画像フレームシーケンスを少なくともある程度制御するために前記埠頭クレーン上の前記照明灯に前記照明指令を送信するプログラムステップ、
をさらに含み、
前記照明指令が、照明灯点灯指令、照明灯消灯指令、照明上げ指令及び照明下げ指令を含む照明指令集約リストの少なくとも１つの要素を含む、
ことを特徴とする請求項１に記載の装置。
【請求項１５】
埠頭クレーンで扱われるコンテナについてコンテナ在庫管理システムを更新する方法において、少なくともＮ基の前記埠頭クレーンのそれぞれについて、
前記埠頭クレーンのそれぞれについて、積換え作業中に前記埠頭クレーン上の少なくとも１台のカメラから撮影された前記コンテナについての少なくとも１つの画像フレームシーケンスを操縦者に提供する工程、
前記埠頭クレーンのそれぞれについて、前記埠頭クレーンで扱われる前記コンテナについてのコンテナコードを生成するための前記画像フレームに基づく前記操縦者からの応答を受信する工程、及び
前記埠頭クレーンのそれぞれについて、前記積換え作業に伴う前記コンテナについての前記コンテナコードを前記コンテナ在庫管理システムに送信する工程、
を含み、
前記Ｎが少なくとも２であり、
前記積換え作業が荷積み作業及び荷揚げ作業を含む積換え作業集約リストの要素である、
ことを特徴とする方法。
【請求項１６】
前記埠頭クレーンの少なくとも１基について、前記応答に基づいて前記コンテナコードについての応答タイムスタンプを生成する工程、
前記埠頭クレーンの少なくとも１基について、埠頭クレーンタイムスタンプを前記画像フレームシーケンスとともに受信する工程、及び
前記埠頭クレーンの少なくとも１基について、前記コンテナについての埠頭クレーン識別標識を生成するために前記コンテナコードについて前記埠頭クレーンを示す工程、
を含む集約リストの少なくとも１つの要素をさらに含み、
前記コンテナコードを送信する前記工程が、
前記コンテナコードについての前記応答タイムスタンプを前記コンテナ在庫管理システムに送信する工程、
前記コンテナコードについての前記埠頭タイムスタンプを前記コンテナ在庫管理システムに送信する工程、及び
前記コンテナコードについての前記埠頭クレーン識別標識を前記コンテナ在庫管理システムに送信する工程、
を含む集約リストの少なくとも１つの要素をさらに含む、
ことを特徴とする請求項１５に記載の方法。
【請求項１７】
前記埠頭クレーンの少なくとも１基について、前記埠頭クレーン上の前記カメラから撮影された前記コンテナについての前記画像フレームシーケンスを前記操縦者に提供する前記工程が、
前記画像フレームシーケンスを生成するために前記積換え作業中に前記埠頭クレーン上の前記カメラから撮影される前記コンテナに基づいて圧縮画像フレームシーケンスを処理する工程、及び
前記画像フレームシーケンスを前記操縦者に表示する工程、
をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項１８】
請求項１７に記載のプロセスの結果として得られることを特徴とする前記圧縮画像フレームシーケンス及び前記受信された圧縮シーケンス。
【請求項１９】
前記操縦者からの応答を受信する前記工程が、
前記コンテナコードを生成するための前記画像フレームシーケンスに基づく前記操縦者からのキーボード応答を受信する工程、
前記コンテナコードを生成するための前記画像フレームシーケンスに基づく前記操縦者からのペンベース応答を受信する工程、及び
前記コンテナコードを生成するための前記画像フレームシーケンスに基づく前記操縦者からの音響応答を受信する工程、
を含む集約リストの少なくとも１つの要素をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項２０】
前記操縦者からの音響応答を受信する前記工程が、
前記操縦者からの音響応答を収集する工程、
前記音響応答を音声認識ツールに提供する工程、及び
前記音声認識ツールから前記コンテナコードを受け取る工程、
をさらに含むことを特徴とする請求項１９に記載の方法。
【請求項２１】
前記コンテナコードを送信する前記工程が、
前記コンテナについての前記コンテナコードを含むコンテナ更新メッセージを作成する工程、及び
前記コンテナ更新メッセージを前記コンテナ在庫管理システムに送信する工程、
をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項２２】
請求項２１のプロセスの結果であることを特徴とする前記コンテナ更新メッセージ。
【請求項２３】
前記コンテナ更新メッセージが、
前記埠頭クレーンの識別標識、
前記応答に基づく応答タイムスタンプ、及び
前記画像フレームシーケンスとともに受信される埠頭タイムスタンプ、
を含む集約リストの少なくとも１つの要素をさらに含むことを特徴とする請求項２１に記載の方法。
【請求項２４】
前記埠頭クレーンの少なくとも１基について、前記埠頭クレーン上の前記カメラからの前記画像フレームシーケンスに対応する光文字認識システムから光認識文字を受信する工程。
をさらに含み、
前記コンテナコードを受信する工程が、
前記コンテナについての前記光認識文字を前記コンテナ在庫管理システムに送信する工程、
をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項２５】
前記埠頭クレーンの少なくとも１基について、
前記画像フレームシーケンスから画像フレームを選択する工程、及び
前記埠頭クレーンで扱われる前記コンテナについての前記画像フレーム及び前記コンテナコードを含み、前記光認識文字を含む、達成可能な事項を生成する工程、
をさらに含むことを特徴とする請求項２４に記載の方法。
【請求項２６】
前記埠頭クレーンの少なくとも１基について、
前記画像フレームシーケンスから画像フレームを選択する工程、及び
前記埠頭クレーンで扱われる前記コンテナについての前記画像フレーム及び前記コンテナコードを含む達成可能な事項を生成する工程、
をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項２７】
請求項２６に記載のプロセスの結果であることを特徴とする前記達成可能な事項。
【請求項２８】
前記達成可能な事項が、
前記埠頭クレーンの識別標識、
前記応答に基づく応答タイムスタンプ、及び
前記画像フレームシーケンスとともに受信される埠頭タイムスタンプ、
を含む集約リストの少なくとも１つの要素をさらに含むことを特徴とする請求項２６に記載の方法。
【請求項２９】
前記工程のそれぞれに対して、前記工程のための手段を含むことを特徴とする請求項１５の方法を実施する装置。
【請求項３０】
前記工程の内の１つを実施する前記手段が少なくとも１つのコンピュータを含み、前記コンピュータは前記コンピュータにアクセス可能な態様で接続されたメモリに常駐する少なくとも１つのプログラムステップを含むプログラムシステムによって少なくともある程度制御され、
前記プログラムシステムは前記工程の少なくとの一部を程度実施し、
前記コンピュータは、命令プロセッサ、推論エンジン、ニューラルネットワーク及び有限状態機械を含む集約リストの少なくとも１つの要素を含み、
前記命令プロセッサは少なくとも１つの命令処理要素及び少なくとも１つのデータ処理要素を有し、前記データ処理要素のそれぞれは前記命令処理要素の少なくとも１つによって制御される、
ことを特徴とする請求項２９に記載の装置。
【請求項３１】
前記埠頭クレーンの少なくとも１基について、請求項１５に記載のプロセスの結果であることを特徴とする、前記操縦者に提供される前記画像フレームシーケンス、前記応答及び前記埠頭クレーンで扱われる前記コンテナについての前記コンテナコード。
【請求項３２】
前記Ｎが多くとも４であることを特徴とする請求項１５に記載の方法。
【請求項３３】
前記埠頭クレーンの少なくとも１基の上の前記カメラの少なくとも１台について、
前記埠頭クレーン上の前記カメラに対するカメラ指令を生成するための、前記画像フレームシーケンスに基づく前記操縦者からの第２の応答を受信する工程、及び
前記埠頭クレーン上の前記カメラから撮影される前記画像フレームシーケンスを少なくともある程度制御するために前記埠頭クレーン上の前記カメラに前記カメラ指令を送信する工程、
をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項３４】
前記カメラ指令がズーム指令及びパン指令を含むカメラ指令集約リストの少なくとも１つの要素を含み、
前記ズーム指令が、少なくとも１つのズームイン指令、少なくとも１つのズームアウト指令及び標準ズーム復帰指令を含むズーム指令集約リストの要素であり、
前記パン指令が、左方パン指令、右方パン指令、上方パン指令及び下方パン指令を含むパン指令集約リストの要素である、
ことを特徴とする請求項３３に記載の方法。
【請求項３５】
前記コンテナに向けられる少なくとも１台の照明灯をもつ前記埠頭クレーンの少なくとも１基について、
前記埠頭クレーン上の前記照明灯に対する照明指令を生成するための、前記画像フレームシーケンスに基づく前記操縦者からの第３の応答を受信する工程、及び
前記埠頭クレーン上の前記カメラから撮影される前記画像フレームシーケンスを少なくともある程度制御するために前記埠頭クレーン上の前記照明灯に前記照明指令を送信する工程、
をさらに含むことを特徴とする請求項１５に記載の方法。
【請求項３６】
前記照明指令が、照明灯点灯指令、照明灯消灯指令、照明上げ指令及び照明下げ指令を含む照明指令集約リストの少なくとも１つの要素を含むことを特徴とする請求項３５に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は岸壁クレーンによる荷積み及び荷揚げ中の貨物コンテナのコンテナコード認識に関する。
【背景技術】
【０００２】
コンテナターミナルは海上輸送と陸上輸送の間の積換え点である。これらのコンテナターミナルは常に増加し続けるコンテナに対する在庫管理を維持していかなければならない。これらのコンテナターミナルのそれぞれは、ベンダー、労働組合との契約によるか、あるいは国法及び政府の定める規程による、重大な法的規制の下で運営される。これらの規制は在庫管理のプロセス及びシステムへの改善の種類を制限する。これらの規制はこれらの改善の実施も制限する。
【０００３】
海上輸送と陸上輸送の間の積換え点は岸壁クレーン、すなわち、以降知られるように、埠頭クレーンである。積換え作業は、これらの埠頭クレーンの内の１つによるコンテナ船と陸上輸送車両の間のコンテナの積換えを指すことになろう。
【０００４】
コンテナ船からの荷揚げ中に、輸送されるコンテナのそれぞれのコンテナコードを事務員が、船荷目録として知られる、コンテナ及び船上のそれぞれの場所のリストと対照して確認する。コンテナの積換えには、一般に９０秒から１５０秒かかり、現在では一般に一人の専任事務員が従事して、コンテナコードの認識にその内の１５秒足らずから３０秒を費やす。必要なことは、事務員による船荷目録の確認の生産性を高める手段である。
【０００５】
コンテナコードは唯一の国際的に要求されている識別形態である。コンテナコードは全てのコンテナのいくつかの側面に目に見えるように示される。コンテナ及びその中身を追うにはコンテナコードの確認が必要である。事務員がコンテナコードを確認できなければ、近くで検分するために事務員はクレーン操縦者に通知してコンテナをかたわらに運ばせる。これは有害なプロセスである。コンテナはコンテナコードの確認が済むまでターミナルの保管置場に入ることができない。未確認コンテナコードの数を最小限に抑えることには経済的利点がある。これらの未確認コンテナは保安上のリスクも課し、コンテナは数トンにも及ぶ未知の重さの貨物を入れたまま既に陸上にある。
【０００６】
第２の事務員が船荷目録の確認を入力してターミナルのコンテナ在庫管理システムを更新する。一隻の船について数千個のコンテナが荷積み及び荷揚げされることが多いから入力プロセスには数時間がかかり得る。入力が完了するまで、ターミナル管理者はコンテナがどこにあるかを、あるいはコンテナが全て到着したか否かさえも、知ることはない。ターミナルコンテナ在庫管理システムを迅速に更新する必要がある。
【０００７】
現在、積み換えられるコンテナの外観状態の長期保存記録はつくられていない。現在、目に見える損傷を受けたコンテナをターミナル管理者に通知するための標準的手続きはない。いくつかの理由のため、積換え時にコンテナの検分及び／またはそのような記録の作成を行う必要がある。
【０００８】
・事務員が、コンテナコードを正しく確認せず、及び／またはコンテナ管理システムを正しく更新しないことがあり得る。コンテナ上のコンテナコードの外観の記録及び、確認され、コンテナ在庫管理システムに入力されたコンテナコードの記録はいずれも不一致の識別に役立ち得る。
【０００９】
・損傷したコンテナはターミナル管理者に対する訴訟及び保険請求を引き起こし得る。損傷は、ターミナル到着前に、ターミナルにおいて、あるいはターミナル出発後に、コンテナに生じ得る。これらのコンテナの検分は、目に見える損傷を受けたコンテナを識別し、責任の所在の正確な決定に役立ち得る。
【００１０】
船上へのコンテナの荷積みにも同様のプロセスがともなう。本発明は埠頭クレーンによる荷積み作業及び荷揚げ作業のいずれにも適用される。
【００１１】
埠頭クレーンで積み換えられるコンテナの重さは数トンにもなることが多く、これらのコンテナにともなう誤ちは埠頭クレーン近傍において危険な事故を生じ得る。この理由のため、埠頭クレーン近くの人数が少ないほど、危険な事故がおこる確率は低くなる。これはターミナルに対する保険料を低めることにつながり得る。埠頭クレーン近くで作業する人数を最小限に抑えることには安全上及び保険上の利点がある。
【００１２】
現在、事務員はコンテナ確認のためにクリップボード及び船荷目録ハードコピーを一般に用いている。事務員は船荷目録ハードコピー上のコンテナコードを丸で囲むことによってそのコードを確認する。次いで第２の事務員は確認を、コンテナ在庫管理システムの一部である、コンピュータに打ち込む。多くのターミナルにおいては、事務員に対して、事務員が、紙とペン、ペンコンピュータタブレットまたは音声インターフェースと対照して、キーボードを用いれば高額になる賃率規定がある。さらに、キーボードの反復使用は、被病者に苦痛を与え、保険請求の原因ともなる、業務関連健康問題を引き起こしがちである。
【発明の開示】
【発明が解決しようとする課題】
【００１３】
要約すれば、埠頭クレーンによるコンテナ積換えの事務員による確認の生産性及び確度を高める、コンテナコード認識システムが必要とされている。ターミナルのコンテナ在庫管理システムには迅速な更新が必要である。未確認コンテナコード数を最小限に抑えることには経済上及び安全上の利点がある。コンテナの検分及び／または積換え時に認識されるようなコンテナ及びコンテナコードの外観状態の長期保存記録の作成が必要であることが多い。埠頭クレーン近くで作業する人数を最小限に抑えることには利点がある。事務員によるキーボードの使用及び事務員数を最小限に抑えることにも利点がある。
【課題を解決するための手段】
【００１４】
本発明の態様は、積換え作業において埠頭クレーンで扱われるコンテナについてのコンテナコードの認識に対する様々な必要に対処する。
【００１５】
本発明の態様は、少なくとも２基の埠頭クレーンのそれぞれのためのコンテナコード認識システム及び方法を含む。埠頭クレーンのそれぞれの上のカメラで撮影されたコンテナについての少なくとも１つの画像フレームシーケンスが埠頭クレーン操縦者に提供される。操縦者はそのコンテナについての画像フレームシーケンスに応答する。操縦者の応答を受信すると、それぞれの埠頭クレーンで扱われるコンテナについてのコンテナコードが生成される。操縦者の応答は、キーボード、ポインティングデバイス、音響インターフェース及び／または眼の動きの使用によることができる。
【００１６】
本発明はさらに、本発明のプロセスの結果として、画像フレームシーケンスの少なくとも１つの画像フレームをコンテナについてのコンテナコードとともに含む。プロセスの結果の少なくとも１つにはさらに、埠頭クレーンの識別標識及び／またはタイムスタンプを含めることができる。タイプスタンプは、埠頭クレーンによる積換えが行われた時刻及び／または操縦者が応答した時刻とすることができる。
【００１７】
本発明のいくつかの態様において、コンテナ在庫管理システムは、システムを更新するために用いることができる、これらの結果の内の１つまたはそれより多くを受け取ることができる。
【００１８】
本発明のプロセスによって生成される達成可能な事項には、埠頭クレーン識別標識及び少なくとも１つのタイムスタンプが含まれることが好ましい。達成可能な事項は、詐欺を躊躇させるに役立ち、保険請求処理に役立ち得る。達成可能な事項もプロセスの結果である。
【００１９】
操縦者はさらに、ズーム方向及びパン方向の内の少なくとも１つに少なくとも１台のカメラを向けることができる。ズーム方向及びパン方向はコンテナコードを解像するに有用である。照明でコンテナを照らすことができる。
【発明を実施するための最良の形態】
【００２０】
本発明の態様は、積換え作業において埠頭クレーンで扱われるコンテナについてのコンテナコードを認識するための様々な必要に対処する。
【００２１】
本発明の態様は、埠頭クレーン１１０により積換え１２２が行われるコンテナ１２０及び埠頭クレーン２１０による積換え２２２が行われるコンテナ２２０に対する図１Ａ及び２におけるようなコンテナコード認識システム５００を含む。コンテナ１２０及び２２０についての画像フレームシーケンス１３０及び２３０の埠頭クレーン操縦者１０への提供３０２が行われる。操縦者１０の画像フレームシーケンス１３０及び２３０に対する応答３１２により、コンテナコード１４０及び２４０が生成される。次いでコンテナコード１４０及び２４０がコンテナ在庫管理システム３０に送信される。
【００２２】
図１Ａ及び２の積換え作業１２２及び２２２はコンテナ在庫管理システム３０からシステム５００に送信することができる。埠頭クレーン１１０及び２１０は積換え作業を報告することができる。操縦者１０は画像フレームシーケンス１３０及び２３０に基づいて積換え作業を判断することができる。
【００２３】
図１Ａの積換え作業１２２及び２２２は、荷積み作業６２及び荷揚げ作業６４を含む、図１Ｂの積換え作業集約リスト６０の要素である。
【００２４】
図１Ａは、埠頭クレーン１１０及び２１０上のカメラ１１２及び２１２で撮影された、コンテナ１２０及び２２０についての画像フレームシーケンス１３０及び２３０の操縦者１０への提供３０２を行う手段３００を示す。手段３１０は、コンテナ１２０及び２２０のそれぞれについての画像フレームシーケンス１３０及び２３０の受像１３２及び２３２に基づく、操縦者１０の応答の受信３１２を行う。手段３１０は、埠頭クレーン１１０及び２１０のそれぞれで扱われるコンテナ１２０及び２２０についてのコンテナコード１４０及び２４０の生成１４２及び２４２を行う。手段３２０は、コンテナ在庫管理システム３０へのコンテナコード１４０及び２４０の送信３２２を行う。
【００２５】
図２は光文字認識システム３０００と無線ネットワークインターフェース５２０の間の通信接続１１６を示す。光文字認識システムシステム３０００はカメラ１１２を操作して、画像フレームシーケンス２３０を提供し、好ましくは光認識文字３２５０を提供する。光文字認識システム３０００は光認識文字３２５０を生成するために光文字認識を用いる。
【００２６】
図１Ａ及び２の通信接続２１６には、有線物理的伝送あるいは、好ましくは、少なくとも１つの無線物理的伝送を用いることができる。コンテナ在庫管理システムとの通信接続３２２は接続１１６及び２１６のいずれかとまたはいずれとも異なっていてもいなくとも差し支えない。本発明のある態様において、コンテナ在庫管理システムには、個別の、有線ネットワークを用い得ることが好ましい。
【００２７】
図２は、いずれも無線ネットワークインターフェース５２０との通信インターフェース２１８を介する通信接続２１６がなされた、照明灯２２４及びカメラ２１２も示す。ある条件の下で、また本発明のある態様に対し、照明灯２２４は、積換え作業２２２中にコンテナ２２０の撮影２１４を行うために、埠頭クレーン２１０上のカメラ２１２とともに操作されることが好ましい。
【００２８】
図２のコンピュータ５１０は、操縦者１０の応答の受信３１２を行う、応答インターフェース５４０との通信接続５４６を有する。操縦者の応答は、キーボード、ポンティングデバイス、音響インターフェース及び／または眼の動きによることができる。
【００２９】
図２のコンピュータ５１０は、操縦者１０に画像フレームシーケンス１３０及び２３０の提供５３２を行う、ディスプレイ及びインターフェース５３０との通信接続５３６を有する。
【００３０】
図２のコンピュータ５１０は無線ネットワークインターフェース５２０との通信接続５２２を有する。コンピュータ５１０は在庫ネットワークインターフェース５６０との通信接続５６２も有する。
【００３１】
図２の通信インターフェース２１８は、好ましくは、図５Ａに示されるように、カメラ２１２からの第１の画像フレームシーケンス２８６の受像２８２を行うための手段２８０，第１の画像フレームシーケンス２８６を基礎２８４にして圧縮画像フレームシーケンス２９０を生成するための手段２８８，及び図５Ｂに示されるようにシステム５００内で圧縮シーケンスを生成するために圧縮画像フレームシーケンス２９０を伝送するための手段２９４を有することができる。画像フレームシーケンスは動画像シーケンスであることが好ましい。一般に、画像フレームは少なくとも１秒当り１フレームのレートで提供される。
【００３２】
圧縮画像フレームシーケンスは、圧縮された静止画像フレームのシーケンスあるいは圧縮された動画像フレームシーケンスを含むことができる。現在の手法では第１にＪＰＥＧ圧縮が用いられる傾向がある。圧縮動画像フレームシーケンスはＭＰＥＧフォーマットとすることができる。
【００３３】
図２のプログラムシステム１０００は、本方法の工程の実施を指揮するためにコンピュータ５１０によってアクセス５５２がおこなわれるメモリ５５０に常駐するプログラムステップを用いて、本発明の装置の動作方法を実施する。
【００３４】
以下の図の内のいくつかは、参照数字が付された矢印をもつ、本発明の少なくとも１つの方法のフローチャートを示す。これらの矢印は、コンピュータ上で実施される少なくとも１つのプログラム工程またはプログラムスレッド、推論エンジンにおける推論リンク、有限状態機械における状態遷移及びニューラルネットワーク内の学習応答を含む実施をサポートする、制御の流れを表すことができ、時にはデータの流れを表すことができる。
【００３５】
フローチャートを開始させる工程は、コンピュータにおけるマクロ命令シーケンスでのサブルーチンへの移入、推論グラフのさらに深いノードへの潜入、有限状態機械で、おそらくは帰還状態推進中の、状態遷移の指令、及びニューラルネットワークでニューロン集約の起動の内の少なくとも１つを指す。
【００３６】
フローチャートにおける終端の工程は、サブルーチンリターン、推論グラフでさらに高いノードへの浮上、有限状態機械における既格納状態のポッピング、及びニューラルネットワークの活動ニューロンの休止状態への帰還を生じさせ得る、上記工程の完了の内の少なくとも１つまたはそれより多くを指す。
【００３７】
本明細書に用いられるようなコンピュータは命令プロセッサを含むがこれには限定されないであろう。命令プロセッサは少なくとも１つの命令処理要素及び少なくとも１つのデータ処理要素を有し、それぞれのデータ処理要素は少なくとも１つの命令処理要素によって制御される。
【００３８】
フローチャートにおける工程は、少なくとも工程の一部を実施するデータ実行ユニットを制御するためのプログラムステップとしての工程に対する命令プロセッサの応答、少なくとも工程の一部を実施する推論データベースに基づき、推論データベースを修正する、推論グラフ内のノード及び遷移としての工程に対する推論エンジンの応答、少なくとも工程の一部を実施する刺激としての工程に対するニューラルネットワークの応答、並びに、少なくとも工程の一部を実施する状態及び状態遷移を含む有限状態集約リストの少なくとも１つの要素としての工程に対する有限状態機械の応答の内の少なくとも１つを指す。
【００３９】
図３Ａは、図１Ａ及び２のシステム５００の動作方法を、図２のプログラムシステム１０００内のプログラムステップとして示す。工程１０１２は、埠頭クレーンのそれぞれについて、積換え作業中に埠頭クレーン上のカメラから撮影されたコンテナについての少なくとも１つの画像フレームシーケンスの操縦者への提供をサポートする。工程１０２２は、埠頭クレーンのそれぞれについて、埠頭クレーンで扱われるコンテナについてのコンテナコードを生成するための画像フレームシーケンスに基づく操縦者からの応答の受信をサポートする。工程１０３２は、埠頭クレーンのそれぞれについて、コンテナ在庫管理システムへのコンテナについてのコンテナコードの送信をサポートする。
【００４０】
図３Ａ及び以降の図に示される方法は、これらの工程を実施するための手段として実装することができる。手段には、コンピュータにアクセス可能な態様で接続されたメモリに常駐する少なくとも１つのプログラムステップを有するプログラムシステムによって少なくともある程度制御される少なくとも１つのコンピュータを含めることができる。プログラムステップは工程の少なくとも一部を実施する。コンピュータには、命令プロセッサ、推論エンジン、ニューラルネットワーク及び有限状態機械を含む集約リストの少なくとも１つの要素が含まれる。命令プロセッサは少なくとも１つの命令処理要素及び少なくとも１つのデータ処理要素を有し、データ処理要素のそれぞれは命令処理要素の少なくとも１つによって制御される。
【００４１】
図３Ｂは、以下の工程の内の少なくとも１つをサポートする、図２及び３Ａのプログラムシステム１０００を示す。工程１０５２は、少なくとも１つの埠頭クレーン１１０について、応答５４２に基づくコンテナコード１４０についての応答タイムスタンプ１５０の生成をサポートする。工程１０６２は、少なくとも１つの埠頭クレーン１１０について、画像フレームシーケンス１３０を含む埠頭タイムスタンプ１３４の受信をサポートする。工程１０７２は、少なくとも１つの埠頭クレーン２１０について、コンテナ２２０についての埠頭クレーン識別標識２６０を生成するためのコンテナコード２４０に対する埠頭クレーン２１０の指定をサポートする。
【００４２】
図４Ａは、以下の内の少なくとも１つを含む、図３Ａの工程１０３２の詳細なフローチャートを示す。工程１０９２はコンテナ在庫管理システムへのコンテナコードについての応答タイプスタンプの送信をサポートする。工程１１０２はコンテナ在庫管理システムへのコンテナコードについての埠頭タイプスタンプの送信をサポートする。工程１１１２はコンテナ在庫管理システムへのコンテナコードについての埠頭クレーン識別標識の送信をサポートする。
【００４３】
図４Ｂは、図５Ａ及び５Ｂに示されるような圧縮画像フレームシーケンス２９０の受像をサポートする、図３Ａの工程１０１２の改善形態を示す。工程１１３２は、図２の画像フレームシーケンス２３０を生成するために積換え作業２２２中に埠頭クレーン２１０上のカメラ２１２から撮影されたコンテナ２２０に基づく圧縮画像フレームシーケンス２９０の処理をサポートする。工程１１４２は、操縦者への画像フレームシーケンスの表示をサポートする。
【００４４】
図５Ｂは、少なくとも１つの埠頭クレーンについて、図２のディスプレイ及びインターフェース５３０の、別の、好ましいことが多い、画像フレームシーケンス２３０を生成するために積換え作業２２２中に埠頭クレーン２１０上のカメラ２１２から撮影されたコンテナ２２０についての圧縮画像フレームシーケンス２９０の処理のための手段６２０、及び好ましくは操縦者１０への表示のために少なくとも１つのディスプレイ６００の駆動６１４を行う画像フレームシーケンス２３０を表示するための手段６１０を含む、実施形態を示す。本発明のある態様において、ディスプレイ及びインターフェース５３０は、１つまたはそれより多くのディスプレイ６００を駆動するグラフィックスアクセラレータ回路を有することが好ましく、手段６１０及び／または６２０を有することができる。
【００４５】
本発明の態様は、図５Ｃに示されるように、１つより多くのディスプレイを有することができ、図２及び５Ｂのディスプレイ及びインターフェース５３０は４つのディスプレイ６００，６０２，６０４及び６０６を有する。本例は、画像フレームシーケンスを提供する埠頭クレーンの数Ｎが少なくとも２であるような、ある状況において好ましいであろう。本発明のある態様において、Ｎは多くとも４であることが好ましい。
【００４６】
図３におけるような、図１Ａ及び２の操縦者１０から応答を受け取る、工程１０２２はさらに、図６Ａに示される以下の工程の内の少なくとも１つを含むことができる。工程１１５２はコンテナコードを生成するための画像フレームシーケンスに基づくキーボード応答の操縦者１０からの受取り３１２をサポートする。工程１１６２はコンテナコードを生成するための画像フレームシーケンスに基づくペンベース応答の操縦者１０からの受取り３１２をサポートする。工程１１７２はコンテナコードを生成するための画像フレームシーケンスに基づく操縦者からの音響応答の受取りをサポートする。
【００４７】
図６Ｂは図６Ａの工程１１７２の詳細を示す。工程１１９２は操縦者からの音響応答の収集をサポートする。工程１２０２は音響応答の音声認識ツールへの提供をサポートする。工程１２１２は音声認識ツールからのコンテナコードの受取りをサポートする。
【００４８】
図７Ａは図３Ａの工程１０３２の詳細なフローチャートを示す。工程１２３２はコンテナについてのコンテナコードを含むコンテナ更新メッセージの作成をサポートする。工程１２４２はコンテナ在庫管理システムへのコンテナ更新メッセージの送信をサポートする。
【００４９】
図７Ｂ及び７Ｃは図２のコンテナ更新メッセージ１７０の例を示す。コンテナコード１４０はいずれの例にも含まれる。コンテナ更新メッセージにはさらに、図７Ｃに示される、埠頭クレーン識別標識１６０，埠頭タイムスタンプ１３４，及び応答タイムスタンプ１５０の内の１つまたはそれより多くを含めることができる。
【００５０】
図７Ｄ及び７Ｅはそれぞれ、図２の達成可能な事項７１０及び７２０の例を示す。
【００５１】
図７Ｄにおいて、達成可能な事項７１０にはコンテナコード１４０及び図２の画像フレーム１３０-１が含まれる。達成可能な事項７１０にはさらに、好ましくは、埠頭タイムスタンプ１３４，埠頭クレーン識別標識１６０，応答タイプスタンプ１５０，積換え作業１２２及び光文字認識システム３０００によって生成された光認識文字３２５０を含めることができる。
【００５２】
図７Ｅにおいて、達成可能な事項７２０には、応答タイプスタンプ２５０を含むコンテナコード２４０及び画像フレーム２３０-２が含まれ、埠頭タイムスタンプ２３４及び図２の埠頭クレーン識別標識２６０がさらに含まれることが好ましい。達成可能な事項７２０には積換え作業２２２がさらに含まれることが好ましい。
【００５３】
図８Ａは図２の本発明の動作方法１０００の別の態様を示す。工程１２７２は、少なくとも１つの埠頭クレーンについて、埠頭クレーン１１０上のカメラ１１２からの画像フレームシーケンスに対応する光文字認識システム３０００からの光認識文字３２５０の受信をサポートする。
【００５４】
図８Ｂは図３Ａの工程１０３２の詳細なフローチャートを示す。工程１２９２は、コンテナ１２０についての光認識文字３２５０のコンテナ在庫管理システム３０への送信をサポートする。
【００５５】
図８Ｃは、少なくとも１つの埠頭クレーンについて、図２の本発明の方法１０００の別の態様を示す。工程１３１２は画像フレームシーケンス１３０からの画像フレーム１３０-１の選択をサポートする。工程１３２２は埠頭クレーン１１０で扱われたコンテナ１２０についての画像フレーム１３０-１及びコンテナコードを含む、達成可能な事項７１０の生成をサポートする。図２の埠頭クレーン１１０上におけるように、光文字認識システム３０００が利用できる場合は、達成可能な事項の生成工程１３２２に、図７Ｄに示されるように、光認識文字３２５０を含めることがさらに好ましいであろう。
【００５６】
図９Ａは図２の動作方法１０００のさらに詳細なフローチャートを示す。工程１２５２は埠頭クレーン２１０上のカメラ２１２に対するカメラ指令５８０を生成するための画像フレームシーケンス２３０に基づく第２の応答５４２の操縦者１０からの受信３１２をサポートする。工程１２６２は埠頭クレーン２１０上のカメラ２１２から撮影される画像フレームシーケンス２３０を少なくともある程度制御するための埠頭クレーン２１０上のカメラ２１２へのカメラ指令５８０の送信２１６をサポートする。
【００５７】
図２におけるようにコンテナ２２０に向けられた少なくとも１つの照明灯２３０が埠頭クレーン２１０の近くに取り付けられている場合、好ましくは、動作方法１０００に図９Ｂの工程をさらに含めることができる。工程１２７２は埠頭クレーン２１０上の照明灯２３０に対する照明指令５８２を生成するための画像フレームシーケンス２３０に基づく第３の応答２３０の操縦者１０からの受信をサポートする。工程１２８２は埠頭クレーン上のカメラ２１２から撮影される画像フレームシーケンス２３０を少なくともある程度制御するための埠頭クレーン２１０上の照明灯２３０への照明指令５８２の送信をサポートする。
【００５８】
図２及び９Ａのカメラ指令５８０には、ズーム指令８０２及びパン指令８０４を含む、図１０Ａに示されるような、カメラ指令集約リスト８００の少なくとも１つの要素が含まれる。
【００５９】
図１０Ａのズーム指令８０２は、少なくとも１つのズームイン指令８１２，少なくとも１つのズームアウト指令８１４及び標準ズーム復帰指令８１６を含む、図１０Ｂに示される、ズーム指令集約リスト８１０の少なくとも１つの要素である。
【００６０】
図１０Ａのパン指令８０４は、左方パン指令８２２，右方パン指令８２４，上方パン指令８２６及び下方パン指令８２８を含む、図１０Ｃに示される、パン指令集約リスト８２０の要素である。
【００６１】
図２及び９Ｂの照明指令５８２には、図１０Ｄに示される、照明指令集約リスト８８０の少なくとも１つの要素が含まれる。照明指令集約リストには、照明点灯指令８８２，照明消灯指令８８４，照明上げ指令８８６及び照明下げ指令８８８が含まれる。
【００６２】
当業者であれば、説明したばかりの好ましい実施形態の様々な改作及び改変は例として提供されたものであり、添付される特許請求の範囲の制限は目的とされていないことを理解するであろう。
【図面の簡単な説明】
【００６３】
【図１Ａ】２基の埠頭クレーン、人間による操縦工程、撮影工程、及びコンテナターミナルのコンテナ在庫管理システムを更新する例示的システムへの応答工程を含む、簡略化したシステムブロック図を示す
【図１Ｂ】積換え作業集約リストを示す
【図２】図１Ａの例示的システムの別形を示す
【図３Ａ】図２のプログラムシステムを示す
【図３Ｂ】さらなる作業をサポートする図２及び３Ａのプログラムシステムを示す
【図４Ａ】図３Ａの詳細なフローチャートを示す
【図４Ｂ】図３Ａの詳細なフローチャートを示す
【図５Ａ】図２の埠頭クレーン上の通信インターフェースの詳細を示す
【図５Ｂ】図２のディスプレイ及びインターフェースの一例示的実施形態を示す
【図５Ｃ】１つより多くのディスプレイを有する図２のディスプレイ及びインターフェースを示す
【図６Ａ】図１Ａ，２及び３の操縦者からの応答の受信の詳細なフローチャートを示す
【図６Ｂ】図６Ａの詳細なフローチャートを示す
【図７Ａ】図３Ａのコンテナコード送信の詳細なフローチャートを示す
【図７Ｂ】図２のコンテナ更新メッセージの例を示す
【図７Ｃ】図２のコンテナ更新メッセージの別の例を示す
【図７Ｄ】図２の達成可能な事項の例を示す
【図７Ｅ】図２の達成可能な事項の別の例を示す
【図８Ａ】図２の本発明の運用方法の別の態様を示す
【図８Ｂ】図２及び３Ａのコンテナ在庫管理システムへの送信を示す
【図８Ｃ】図２及び３Ａの本発明の方法の別の態様を示す
【図９Ａ】図２及び３Ａの本発明の方法のまた別の態様を示す
【図９Ｂ】図２及び３Ａの本発明の方法のまた別の態様を示す
【図１０Ａ】カメラ指令集約リストを示す
【図１０Ｂ】ズーム指令集約リストを示す
【図１０Ｃ】パン指令集約リストを示す
【図１０Ｄ】照明指令集約リストを示す
【図１１Ａ】提供するための手段を示す
【図１１Ｂ】受信するための手段を示す
【図１１Ｃ】送信するための手段を示す
【符号の説明】
【００６４】
１０    埠頭クレーン操縦者
３０    コンテナ在庫管理システム
１１０，２１０    埠頭クレーン
１１２，２１２    カメラ
１２０，２２０    コンテナ
１２２，２２２    積換え作業
１３０，２３０    画像フレームシーケンス
１４０，２４０    コンテナコード
５００    コンテナコード認識システム
５１０    コンピュータ
１０００    プログラムシステム
３０００    光文字認識システム
【図１Ａ】
2008500252.tif 000003
【図１Ｂ】
2008500252.tif 000004
【図２】
2008500252.tif 000005
【図３Ａ】
2008500252.tif 000006
【図３Ｂ】
2008500252.tif 000007
【図４Ａ】
2008500252.tif 000008
【図４Ｂ】
2008500252.tif 000009
【図５Ａ】
2008500252.tif 000010
【図５Ｂ】
2008500252.tif 000011
【図５Ｃ】
2008500252.tif 000012
【図６Ａ】
2008500252.tif 000013
【図６Ｂ】
2008500252.tif 000014
【図７Ａ】
2008500252.tif 000015
【図７Ｂ】
2008500252.tif 000016
【図７Ｃ】
2008500252.tif 000017
【図７Ｄ】
2008500252.tif 000018
【図７Ｅ】
2008500252.tif 000019
【図８Ａ】
2008500252.tif 000020
【図８Ｂ】
2008500252.tif 000021
【図８Ｃ】
2008500252.tif 000022
【図９Ａ】
2008500252.tif 000023
【図９Ｂ】
2008500252.tif 000024
【図１０Ａ】
2008500252.tif 000025
【図１０Ｂ】
2008500252.tif 000026
【図１０Ｃ】
2008500252.tif 000027
【図１０Ｄ】
2008500252.tif 000028
【図１１Ａ】
2008500252.tif 000029
【図１１Ｂ】
2008500252.tif 000030
【図１１Ｃ】
2008500252.tif 000031
【国際調査報告】
2008500252.tif 000032