(57)【要約】  製品のアクセプタビリティを電子的に示すためのコンピュータシステムおよび方法。画像撮像通信装置は、１以上のモニタ、認証要素および識別要素を含む製品ラベルを解析してもよい。画像撮像通信装置は、モニタ、認証要素および識別要素の形式および特徴を判定してもよい。画像撮像通信装置は、上記形式および特徴に基づくデータを、特に、アクセプタビリティレポートの様式で、ホスト製品に関連するデータを前記画像撮像通信装置へ送信しうるホストサーバへ送信してもよい。【選択図】図１
2015503138.tif 000002
【特許請求の範囲】
【請求項１】
画像撮像通信装置を用いて実施することができる、製品ラベルの光学的処理を行う方法であって、
カメラを用いて、第１形状およびモニタ状況を有し、選択的に環境履歴モニタである環境モニタを含む製品ラベルから、画像データを取得することと、
前記カメラを用いて、模様が付された領域により定義された第１識別子から画像データを取得することと、
前記第１環境モニタについて取得した画像データの第１サブセットを識別するために、前記第１形状に応じて前記画像データを処理することと、
前記画像データの前記第１サブセットから前記モニタ状況を判定することと、
前記判定した前記モニタ状況に基づくアクセプタビリティレポートを生成することと、を含む、
方法。
【請求項２】
前記第１識別子について取得した画像データの第２サブセットを識別するために、前記模様が付された領域に応じて前記画像データを処理するステップと、
前記識別子の出所を判定するステップと、を更に含み、
前記アクセプタビリティレポートは、更に、前記判定された出所に関する情報を含む、
請求項１に記載の方法。
【請求項３】
前記第１識別子は、前記製品ラベル上またはその近くに配置され、
前記処理するステップ、前記判定するステップおよび前記生成するステップは、前記画像撮像通信装置を用いて実行され、
前記画像撮像通信装置は、選択的に、前記処理するステップ、前記判定するステップおよび前記生成するステップのうちの少なくとも１つを実行するために、ホストサーバと通信するよう構成されている、
請求項２に記載の方法。
【請求項４】
前記画像撮像通信装置は、ディスプレイと、前記カメラと、を備える携帯機器であり、
前記アクセプタビリティレポートは、人が読み取れるものである、
請求項１に記載の方法。
【請求項５】
取得した前記画像データが前処理されるのを防止するように、前記カメラを制御するために用いられるアプリケーションプログラミングインターフェースを制御するステップを、更に含む、
請求項４に記載の方法。
【請求項６】
前記画像データは、画像データの複数のフレームを有し、
前記複数のフレームを見分けることと、
後続の処理のために、光学的欠陥を除去すること、または、１または複数のフレームを選択することと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項７】
前記模様が付された領域を参考として使用して、前記画像データのダイナミックレンジを調整するステップを、更に含み、
前記模様が付された領域は、黒および白のバーコードを含む、
請求項１から５のいずれか１項に記載の方法。
【請求項８】
前記カメラを用いて複数のアングルから前記画像データを取得する旨のユーザへの指示を表示するステップを、更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項９】
前記製品ラベルは、冷蔵が必要であるが、所定の期間、室温環境温度に曝すことができる製品とともに使用され、当該所定の期間を超えると、前記モニタ状況が前記画像データで検出できるほど変化する、
請求項１から５のいずれか１項に記載の方法。
【請求項１０】
前記モニタ状況と相関がある第１光密度値を判定するステップと、
前記第１光密度値と、前記製品の残りの貯蔵寿命と相関がある複数の光密度とを比較するステップと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１１】
前記アクセプタビリティレポートにおいて、前記製品について見積もった貯蔵寿命を提供するステップ、を更に含む、
請求項１０に記載の方法。
【請求項１２】
前記第１形状が略円形である場合、前記画像データ中の複数の楕円を識別して前記第１環境モニタを見つけるステップ、を更に含む、
請求項１０に記載の方法。
【請求項１３】
前記モニタ状況を判定する前に、前記画像データを処理して、前記製品ラベルを支持する対象物の曲面を補償するステップ、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１４】
前記カメラを用いて、選択的に、模様が付された領域により定義された第２識別子を含む第２ラベルから、画像データを取得するステップと、
記録管理システムに、前記製品ラベルに対する製品に関連するイベントおよび前記第２識別子に関連する主体、に関連するイベントデータを集めるステップと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１５】
前記イベントは、
前記製品を用いた主体へのワクチン接種と、
前記主体への前記製品の配給と、
前記主体に関する手続の実行と、
前記主体による前記製品の拒絶と、
前記主体による前記製品の消費と、
前記主体によるアクセプタビリティレポートの認識と、
前記製品を用いて実験を行う前記主体と、
前記２以上のイベントの組み合わせと、からなる群から選択される、
請求項１４に記載の方法。
【請求項１６】
前記第１識別子または前記ラベル上の他の印から、補足的なラベルデータを取得するステップと、
前記補足的なラベルデータを用いて前記画像データを処理するステップと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１７】
メモリと、
前記メモリと通信するプロセッサと、を備え、
前記メモリは、
選択的に環境履歴モニタ情報である環境モニタ情報を含む、前記製品ラベルについて取得された画像データの第１サブセットと、認証情報を含む画像データの第２サブセットと、を含む画像データの第１セットを、前記メモリに自動的に保存することと、
モニタ状況が判定されるように、前記画像データの第１サブセットを処理することと、
認証状況が判定されるように、前記画像データの第２サブセットを処理することと、
前記モニタ状況が、予め設定された許容レベルを満たし、前記認証状況について認証が確定した場合、前記製品が受け入れられるものであることを示すアクセプタビリティレポートを表示することと、を前記プロセッサに行わせる、前記プロセッサにより実行可能な命令を含む、
製品ラベルとともに提供される製品を処理するための、プロセッサに基づく自動システム。
【請求項１８】
前記メモリおよび前記プロセッサは、ホストサーバまたは携帯機器に配置されている、
請求項１７に記載のプロセッサに基づく自動システム。
【請求項１９】
前記メモリ装置は、更に、前記プロセッサにより実行された場合、
主体情報を含む画像データの第３サブセットを含み、前記主体に関連するラベルについて取得した、画像データの第２セットを、前記メモリに自動的に保存することと、
前記モニタ状況、前記認証状況および主体情報のデータベースまでのルートを決定することと、を前記プロセッサに行わせる命令を、更に含む、
請求項１７に記載のプロセッサに基づく自動システム。
【請求項２０】
前記主体は、患者、製品輸送会社、臨床試験管理者、病院、製薬会社、供給元、配送業者、品質管理サービス提供者、製造元および消費者からなる群から選択される、
請求項１９に記載のプロセッサに基づく自動システム。
【請求項２１】
前記画像データは、カメラにより取得され、
前記メモリ装置は、
前記プロセッサにより実行された場合、前記カメラを用いて取得された、前記画像データの第１サブセットおよび前記画像データの第２サブセットが、処理されずに前記メモリに保存されるように前記カメラを制御することを前記プロセッサに行わせる命令を、更に含む、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２２】
前記メモリ装置は、前記プロセッサにより実行された場合、前記画像データの第１セットのノイズまたはグレアを自動的に補償することを前記プロセッサに行わせる命令を更に含む、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２３】
前記プロセッサと電気的に通信するディスプレイを更に備え、
前記メモリ装置は、前記プロセッサにより実行された場合、ディスプレイを用いて、複数のアングルから前記画像データの第１セットを取得する旨をユーザに通知することを前記プロセッサに行わせる命令を更に含む、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２４】
選択的に環境履歴モニタである前記環境モニタは、前記製品の前記アクセプタビリティにとって不利な環境刺激に曝された場合、検出できる程度の色の変化を表し、
前記検出できる程度の変化は、選択的に、予め設定された累積曝露の後に現れる、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、製品のアクセプタビリティを電子的に示すための情報処理システムおよび情報処理方法に関する。
【背景技術】
【０００２】
メディカル製品およびヘルスケア製品には、よく、医者や介護福祉士、患者、一般人がメディカル製品やヘルスケア製品を使用するか否かを判断できるように、「保管期限」または「用途」が記されている。一般的に、期限日が製品ラベルにはっきりと表示されている。また、ラベルには、製品名や製造元の名称、住所、製造日時、ロット／バッチ番号、保管条件を含む種々の付加的な情報が含まれている。スーパーマーケットで手に入る肉や魚その他食品には、大抵「販売有効期限」または「消費期限」の日付が記されており、消費者が、その食品がまだ許容できる新鮮さであるうちに、消費したり或いは別な方法で使用したりすることの一助となっている。生の或いは冷凍の肉および魚の場合、一般的に「販売有効期限」または「消費期限」の日付が、その製品についてはっきりと表示されたラベルに記されている。また、ラベルは、製品説明、値段情報、重量情報および栄養情報を含む種々の付加的な情報も含んでいてもよい。また、種々のパーソナルケア用品および産業製品を含む、他の腐敗し易い製品も「消費期限」の日付が付されていてもよい。
【０００３】
モニタは、ホスト製品が温度のような１以上の特定の状況に曝されることを追跡するのに用いられる。環境モニタのようなモニタは、ある環境状況の存在、或いはある環境状況が予め設定された限度をいつ超えたかを示すように調整されていてもよい。いくつかのモニタは、これらの指標を生成するために視認できる或いは電気的な信号を提供する。
【０００４】
製品ラベルでモニタを使用することにより、老朽化や不利な条件により効果がなくなったりだめになったりしている製品を使用してしまうことをある程度防止され、消費者や患者或いはその他のエンドユーザに対して、所定の製品が使用を認められるものであるといういくらかの安心感を与えることができる。
【０００５】
また、市販品のアクセプタビリティを減らす要因は他にもある。例えば、製品が、偽物であってアクセプタビリティがほとんど或いは全くないことがある。偽物製品を排除し或いは見分けるために用いられる方法のいくつかには、製造元やその他適法な流出元から消費者その他ユーザに至るまでの製品の動きを追跡することにより信頼性を確証する、種々のトラック−トレースメソッドが含まれる。無線周波数認識（ＲＦＩＤ）およびバーコードは、追跡可能性の実現を助けるため用いることができる２つの技法である。ＲＦＩＤ装置は荷物や荷物のラベル或いは他の製品ラベルに組み込まれている。
【０００６】
米国やその他の監視機関では、医薬品に対して「系図」の要求を実施しているか、或いは実施することを考慮しつつある。例えば、系図は、「系図」として知られているものの中でも電子的に実現されている処方薬の配給に関する情報を含む保証記録である。
【発明の概要】
【課題を解決するための手段】
【０００７】
ある実施形態では、本発明は、
画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析することと、
前記画像撮像通信装置により、前記１以上の環境モニタ、前記１以上の認証要素および前記１以上の識別要素のうちの前記少なくとも２つのそれぞれについて、形式および当該形式に基づく１以上の特徴を判定することと、
前記画像撮像通信装置により、ホストサーバにアクセスすることと、
前記画像撮像通信装置により、前記１以上の環境モニタ、前記１以上の認証要素および前記１以上の識別要素のうちの前記少なくとも２つのそれぞれの前記形式および特徴に基づくデータを、前記ホストサーバへ送信することと、
前記画像撮像通信装置により、前記１以上の環境モニタ、前記１以上の認証要素および前記１以上の識別要素のうちの少なくとも２つの前記データに基づくアクセプタビリティレポートを、前記ホストサーバから受信することと、
前記画像撮像通信装置により、前記アクセプタビリティレポートを出力することと、を含む、
方法を提供する。
【０００８】
別の実施形態では、本発明は、
ホストサーバにより１以上の画像撮像通信装置から、１以上のホスト製品の認証性データ、製品識別データおよび現状の環境データを有する１以上の使用アクセプタビリティデータを含む、１以上のメッセージを受信することと、
前記ホストサーバにより、前記ホストサーバが１以上のホスト製品それぞれの少なくとも１つの環境履歴にアクセスできるか否かを判定することと、
前記ホストサーバにより、前記１以上のホスト製品の１以上の第２の使用アクセプタビリティデータを含む１以上の第２のメッセージを集計することと、
前記ホストサーバにより、前記１以上の第２のメッセージを前記１以上の画像撮像通信装置へ送信することと、を含み、
前記１以上の第２の使用アクセプタビリティデータは、
前記使用アクセプタビリティデータと、前記ホストサーバが前記１以上のホスト製品それぞれの、少なくとも１つの環境履歴にアクセスできる場合、前記１以上のホスト製品それぞれの前記少なくとも１つの環境履歴と、に基づいて集計されたものである、
方法を提供する。
【０００９】
一の実施形態では、本発明は、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析することと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、前記１以上の認証要素および前記１以上の識別要素のうちの少なくとも２つのそれぞれの形式および当該形式に基づく１以上の特徴を判定することと、
（ｃ）前記画像撮像通信装置により、ホストサーバへアクセスすることと、
（ｄ）前記１以上の環境モニタ、前記１以上の認証要素および前記１以上の識別要素のうちの前記少なくとも２つのそれぞれの前記形式および特徴に基づくデータを、前記ホストサーバへ送信することと、
（ｅ）前記画像撮像通信装置により、前記ホストサーバから、前記１以上の環境モニタ、前記１以上の認証要素および前記１以上の識別要素のうちの少なくとも２つの前記データに基づくアクセプタビリティレポートを受信することと、
（ｆ）前記画像撮像通信装置により、前記アクセプタビリティレポートを出力することと、を含む、
方法に関する。
【００１０】
１以上の環境モニタ、１以上の認証要素および１以上の識別要素は、１以上のＲＦＩＤまたは近距離無線通信（ＮＦＣ）装置を含んでいてもよい。
１以上の識別要素は、ＲＦＩＤ装置、ＮＦＣ装置、バーコードまたはその他識別子を含んでいてもよい。
１以上の認証要素は、前記１以上の環境モニタおよび前記１以上の識別要素を含んでいてもよい。
【００１１】
（ａ）の解析するステップは、更に、質問信号をＲＦＩＤ装置へ送信することを含む。  一実施形態では、出力は、グラフィカルな表示、音声出力或いはグラフィカルな表示と音声出力の両方で行われる。
前記画像撮像通信装置は、カメラ付きスマートフォンであってもよい。
前記画像撮像通信装置は、コンピュータおよびカメラであってもよい。
前記画像撮像通信装置は、バーコードスキャナを備えていてもよい。
前記画像撮像通信装置は、１以上の画像撮像通信装置からなる。
前記ホストサーバは、１以上のメモリおよび１以上の非一時的なコンピュータ可読記録媒体を備える１以上のコンピュータのような、１以上のプロセッサに基づく装置を備えるものであってもよい。
一実施形態では、前記ホストサーバが、２つ以上の場所に物理的に分散されている。  前記製品ラベルは、１以上の製品ラベルである。
前記ホスト製品は、１以上のホスト製品であってもよい。
【００１２】
一実施形態では、本発明が、画像撮像通信装置に関する。
前記装置は、
（a）コンピュータで実行可能なプログラムコードを記憶するための領域をそれぞれ少なくとも１つ有する１以上のメモリと、
（ｂ）前記１以上のメモリに記憶されたプログラムコードを実行するプロセッサと、を備え、前記プログラムコードが、
（ｂ）（ｉ）１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析するためのコードと、
（ｂ）（ｉｉ）前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定するためのコードと、
（ｂ）（ｉｉｉ）ホストサーバにアクセスするためのコードと、
（ｂ）（ｉｖ）前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの前記形式および特徴に基づくデータを、前記ホストサーバへ送信するためのコードと、
（ｂ）（ｖ）前記ホストサーバから、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを受信するためのコードと、
（ｂ）（ｖｉ）前記アクセプタビリティレポートを出力するためのコードと、を含んでもよい。
【００１３】
一実施形態では、本発明は、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析することと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定することと、
（ｃ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの前記形式および特徴に基づくデータを集計することと、
（ｅ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを生成することと、
（ｆ）前記画像撮像通信装置により、前記アクセプタビリティレポートを出力することと、を含む方法に関する。
【００１４】
一実施形態では、本発明は、コンピュータにより実行可能なソフトウェアコードが記憶されている非一時的なコンピュータ可読記憶媒体に関し、
前記コードは、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析するためのコードと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定するためのコードと、
（ｃ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの前記形式および特徴に基づくデータを集計するためのコードと、
（ｅ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを前記サーバから生成するためのコードと、
（ｆ）前記画像撮像通信装置により、前記アクセプタビリティレポートを出力するためのコードと、を含む。
【００１５】
一実施形態では、本発明は、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析することと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定することと、
（ｃ）前記画像撮像通信装置により、ホストサーバが利用可能か否かを判定することと、
（ｄ）上記ホストサーバが利用可能でないと判定した場合、
（ｄ）（ｉ）前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの前記形式および前記特徴に基づくデータを、前記画像撮像通信装置に保存することと、
（ｄ）（ｉｉ）前記画像撮像通信装置により、前記ホストサーバが利用可能か否かを判定することと、
（ｅ）前記ホストサーバが利用可能であると判定した場合、
（ｅ）（ｉ）前記画像撮像通信装置により、前記ホストサーバにアクセスすることと、  （ｅ）（ｉｉ）前記画像撮像通信装置により、前記ホストサーバへ前記データを送信することと、
（ｅ）（ｉｉｉ）前記画像撮像通信装置により、前記ホストサーバから、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを受信することと、
（ｅ）（ｉｖ）前記画像撮像通信装置により、前記アクセプタビリティレポートを出力することと、を含む、
方法に関する。
【００１６】
一実施形態では、本発明は、
（ａ）コンピュータにより実行可能なプログラムコードを記憶するための領域を少なくとも１つ有する少なくとも１つのメモリと、
（ｂ）前記メモリに記憶されている前記プログラムコードを実行するための少なくとも１つのプロセッサと、を備え、前記プログラムコードが実行されると、
（ｂ）（ｉ）１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析し、
（ｂ）（ｉｉ）前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定し、
（ｂ）（ｉｉｉ）選択的に、ホストサーバが利用可能か否かを判定し、
（ｂ）（ｉｖ）前記ホストサーバが利用可能でないと判定すると、
（ｂ）（ｉｖ）（ａ）選択的に、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの上記形式および上記特徴に基づいて、非一時的なコンピュータ可読記憶媒体にデータを保存し、および／または、上記プロセッサを用いてデータ処理を行いアクセプタビリティレポートを生成し、（ｂ）（ｉｖ）（ｂ）選択的に、上記ホストサーバが利用可能か否かを判定し、（ｂ）（ｖ）選択的に、上記ホストサーバが利用可能であると判定すると、（ｂ）（ｖ）（ａ）ホストサーバへアクセスし、（ｂ）（ｖ）（ｂ）ホストサーバへ前記データを送信し、（ｂ）（ｖ）（ｃ）前記ホストサーバから、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを受信し、（ｂ）（ｖ）（ｄ）場合によって前記ホストサーバまたは前記プロセッサを用いて生成された上記アクセプタビリティレポートを出力する。
【００１７】
一実施形態では、本発明は、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析することと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定することと、
（ｃ）前記形式および１以上の特徴が、前記製品ラベルに、参照領域およびアクティブ領域を有する１以上の色参照ゾーン、参照色領域またはアクティブ色変化領域の１以上が含まれているか否かを判定することと、
（ｄ）前記形式および１以上の特徴が、前記製品ラベルに、１以上の前記色参照ゾーン、前記参照色領域または前記アクティブ色変化領域が含まれていると判定すると、
（ｄ）（ｉ）前記画像撮像通信装置により、前記参照色領域の１以上の第１画素または色配置と、前記アクティブ領域の１以上の第２画素または色配置と、を比較することと、
（ｃ）前記画像撮像通信装置により、ホストサーバへアクセスすることと、
（ｄ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの前記形式および前記特徴に基づくデータを、前記製品ラベルが前記色参照ゾーンを含む場合、前記参照領域または前記参照色領域の１以上の第１画素の配置と前記アクティブ領域の１以上の第２画素の配置との比較を、前記ホストサーバへ送信することと、
（ｅ）前記画像撮像通信装置により、前記ホストサーバから、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを受信することと、
（ｆ）前記画像撮像通信装置により、前記アクセプタビリティレポートを出力することと、を含む方法に関する。一実施形態では、前記アクティブ領域はアクティブ色変化領域を含む。
【００１８】
一実施形態では、本発明は、
前記画像撮像通信装置により、前記参照領域または参照色領域の前記１以上の第１画素または色配置、および前記アクティブ領域の前記１以上の第２画素または色配置を計測することと、
前記画像撮像通信装置により、前記１以上の第１画素または色配置に基づく前記参照領域または前記参照色領域の第１ＲＧＢ値を判定するとともに、前記１以上の第２画素および色配置に基づく前記アクティブ領域の第２ＲＧＢ値を判定することと、
前記画像撮像通信装置により、前記第１ＲＧＢ値を第１色空間値に変換するとともに、前記第２ＲＧＢ値を第２色空間値に変換することと、
前記画像撮像通信装置により、前記第１色空間値と前記第２色空間値とを比較することと、を更に含む、
（ｄ）（ｉ）の比較するステップに関する。
【００１９】
一実施形態では、本発明は、コンピュータが実行可能な、ホスト製品のアクセプタビリティを示すためのソフトウェアコードが記録された非一時的なコンピュータ可読記録媒体に関し、
前記コードは、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、上記ホスト製品の製品ラベルを解析するためのコードと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定するためのコードと、
（ｃ）前記形式および前記特徴が、前記製品ラベルに、参照領域または参照色領域を有する色参照ゾーンおよびアクティブ領域が含まれるか否かを判定するためのコードと、
（ｄ）前記形式および１以上の特徴が、前記製品ラベルに、前記色参照ゾーンが含まれることを示すと判定した場合、前記画像撮像通信装置により、前記参照領域または前記参照色領域の１以上の第１画素配置と、前記アクティブ領域の１以上の第２画素配置とを比較するためのコードと、
（ｃ）前記画像撮像通信装置により、ホストサーバへアクセスするためのコードと、
（ｄ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの前記形式および前記特徴に基づくデータを、前記ホストサーバへ送信し、前記製品ラベルが前記色参照ゾーンを含む場合、前記参照領域または前記参照色領域の前記１以上の第１画素または色配置と、前記アクティブ領域の前記１以上の第２画素または色配置とを比較するためのコードと、
（ｅ）前記画像撮像通信装置により、前記ホストサーバから、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを受信するためのコードと、
（ｆ）前記画像撮像通信装置により、前記アクセプタビリティレポートを出力するためのコードと、を含む。
【００２０】
一実施形態では、本発明は、
（ａ）ホストサーバにより、ホスト製品の製品ラベルを読み込んだ画像撮像通信装置から、認証要素データおよび環境履歴モニタデータを含む、前記ホスト製品に関連するデータを、受信することと、
（ｂ）非一時的なコンピュータ可読記録媒体に前記データを保存することと、
（ｃ）前記ホストサーバにより、前記ホスト製品の前記ラベルを読み込んだ第２の画像撮像通信装置から、更新された認証要素データおよび更新された環境履歴モニタデータを含む、前記ホスト製品に関連する第２データを受信することと、
（ｄ）前記第２データを、非一時的なコンピュータ可読記録媒体に保存することと、
（ｅ）前記ホストサーバにより、前記認証要素データ、環境履歴モニタデータ、更新された認証要素データおよび更新された環境履歴モニタデータに基づいて、前記ホスト製品が使用を認められるものであるか否かを判定することと、
（ｆ）前記ホストサーバにより、前記第２画像撮像通信装置へ、前記ホスト製品が使用を認められるものであるか否かを示す第３データを送信することと、を含む、
方法に関する。
【００２１】
一実施形態では、本発明は、臨床試験から回収した、患者または開業医からのホスト製品を再利用する方法に関し、
前記方法は、
（ａ）ホストサーバにより、前記臨床試験での前記ホスト製品の配給を通じて前記ホスト製品の製品ラベルを１以上読み込んだ画像撮像通信装置から、製品識別情報、製品認証情報および環境履歴モニタ情報を含む、前記ホスト製品に関連するデータを受信することと、
（ｂ）前記データを非一時的なコンピュータ可読記録媒体に保存することと、
（ｃ）前記ホストサーバにより、前記製品識別情報、製品認証情報および環境履歴情報に基づいて、診療所、第２患者または医師による使用が認められるものであるか否かを判定することと、
（ｄ）前記ホストサーバにより、前記画像撮像通信装置へ、アクセプタビリティレポートを送信することと、を含む。
一実施形態では、患者識別子は、指紋や網膜スキャンのようなバイオメトリックデータを用いて入力してもよい。前記バイオメトリックデータは、画像撮像通信装置を用いて収集され処理される。
【００２２】
一実施形態では、本発明は、サプライチェーンのエンドユーザから返却されてきたホスト製品を再利用する方法に関し、
前記方法は、
（ａ）ホストサーバにより、製品識別情報、製品認証情報および環境履歴モニタ情報を含む、前記ホスト製品に関連するデータを、サプライチェーンにおける前記ホスト製品の配給を通じて前記ホスト製品の製品ラベルを１以上読み取った画像撮像通信装置から受信することと、
（ｂ）前記データを非一時的なコンピュータ可読記録媒体に保存することと、
（ｃ）前記ホストサーバにより、前記製品識別情報、製品認証情報および環境履歴情報に基づいて第２エンドユーザが使用を認められるか否かを判定することと、
（ｄ）前記ホストサーバにより、前記画像撮像通信装置へアクセプタビリティレポートを送信することと、を含む。
前記非一時的なコンピュータ可読記録媒体は、１以上の非一時的なコンピュータ可読記録媒体であってもよく、前記ホストサーバは１以上のホストサーバであり、前記画像撮像通信装置は、１以上の画像撮像通信装置であり、前記製品ラベルは、１以上の製品ラベルである。
前記非一時的なコンピュータ可読記憶媒体は、１以上の非一時的なコンピュータ可読記録媒体であり、前記ホストサーバは、１以上のサーバであり、前記画像撮像通信装置は、１以上の画像撮像通信装置であり、前記製品ラベルは、１以上の製品ラベルである。前記非一時的なコンピュータ可読記録媒体は、１以上の非一時的なコンピュータ可読記録媒体であってもよく、前記ホストサーバは１以上のホストサーバであり、前記画像撮像通信装置は、１以上の画像撮像通信装置であり、前記製品ラベルは、１以上の製品ラベルである。
【００２３】
一実施形態では、本発明が、
（ａ）画像撮像通信装置により、１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析することと、
（ｂ）前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定することと、
（ｃ）選択的に、前記画像撮像通信装置により、ホストサーバが利用可能であるか否かを判定することと、
（ｄ）選択的に、前記ホストサーバが利用可能でないと判定された場合、
（ｄ）（ｉ）選択的に、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの前記少なくとも２つのそれぞれの前記形式および特徴に基づくデータを前記画像撮像通信装置に保存することと、
（ｄ）（ｉｉ）選択的に、前記画像撮像通信装置により、プロセッサを用いて、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づいて、前記ホスト製品の使用が認められるか否かを示すレポートを生成することと、
（ｅ）選択的に、前記ホストサーバが利用可能であると判定されると、
（ｅ）（ｉ）選択的に、前記画像撮像通信装置により、前記ホストサーバへアクセスすることと、
（ｅ）（ｉｉ）選択的に、前記画像撮像通信装置により、前記ホストサーバへ前記データを送信することと、
（ｅ）（ｉｉｉ）選択的に、前記画像撮像通信装置により、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの前記少なくとも２つのそれぞれのデータに基づくアクセプタビリティレポートを、前記ホストサーバから受信することと、
（ｅ）（ｉｖ）前記画像撮像通信装置により、場合に応じて、前記プロセッサまたは前記ホストサーバにより生成された前記アクセプタビリティレポートを出力することと、を含む、
方法に関する。
【００２４】
一実施形態では、本発明は、
（ａ）コンピュータにより実行可能なプログラムコードを保存するための少なくとも１つの領域を有する少なくとも１つのメモリと、
（ｂ）前記メモリに保存された前記プログラムコードを実行するための少なくとも１つのプロセッサと、を備えるプログラミングされたコンピュータシステムに関し、
前記プログラムコードは、それが実行されると、
（ｂ）（ｉ）１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つを含む、ホスト製品の製品ラベルを解析し、
（ｂ）（ｉｉ）前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つそれぞれの形式および当該形式に基づく１以上の特徴を判定し、
（ｂ）（ｉｉｉ）選択的に、ホストサーバが利用可能か否かを判定し、
（ｂ）（ｉｖ）選択的に、前記ホストサーバが利用可能でないと判定すると、
（ｂ）（ｉｖ）（ａ）選択的に、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの前記少なくとも２つそれぞれの前記形式および特徴に基づくデータを、非一時的なコンピュータ可読記録媒体に保存し、
（ｂ）（ｉｖ）（ｂ）選択的に、前記プロセッサを用いて、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づいて前記ホスト製品の使用が認められるか否かを示すレポートを生成し、
（ｂ）（ｖ）選択的に、前記ホストサーバが利用可能であると判定すると、
（ｂ）（ｖ）（ａ）選択的に、前記ホストサーバへアクセスし、
（ｂ）（ｖ）（ｂ）選択的に、前記ホストサーバへ前記データを送信し、
（ｂ）（ｖ）（ｃ）選択的に、前記ホストサーバから、前記１以上の環境モニタ、１以上の認証要素および１以上の識別要素のうちの少なくとも２つのデータに基づくアクセプタビリティレポートを受信し、
（ｂ）（ｖ）（ｄ）場合に応じて、前記プロセッサまたは前記ホストサーバを用いて作成された前記アクセプタビリティレポートを出力する。
【００２５】
（本発明の追加実施形態）
一実施形態では、本発明は、画像撮像通信装置を実装可能に用いる製品ラベルを光学的に処理する方法に関する。
前記方法は、
カメラを用いて、第１形状およびモニタ状況を有し、選択的に環境履歴モニタである環境モニタを含む製品ラベルから、画像データを取得することと、
前記カメラを用いて、模様が付された領域により定義された第１識別子から画像データを取得することと、
前記第１環境モニタについて取得した画像データの第１サブセットを識別するために、前記第１形状に応じて前記画像データを処理することと、
前記画像データの前記第１サブセットから前記モニタ状況を判定することと、
前記判定した前記モニタ状況に基づくアクセプタビリティレポートを生成することと、を含む。
所望により、前記画像撮像通信装置は、ユーザが手に持つことができ、前記製品ラベルの画像形成を容易にするために、前記製品ラベルに適切に関連する画像撮像通信装置が並べて操作されるものであってもよい。
【００２６】
前記方法は、
前記第１識別子について取得した画像データの第２サブセットを識別するために、前記模様が付された領域に応じて前記画像データを処理するステップと、
前記識別子の出所を判定するステップと、を更に含み、
前記アクセプタビリティレポートは、更に、前記判定された出所に関する情報を含む。
前記第１識別子は、前記製品ラベル上またはその近くに配置され、
前記処理するステップ、前記判定するステップおよび前記生成するステップは、前記画像撮像通信装置を用いて実行され、
前記画像撮像通信装置は、選択的に、前記処理するステップ、前記判定するステップおよび前記生成するステップのうちの少なくとも１つを実行するために、ホストサーバと通信するよう構成されている。
【００２７】
一実施形態では、
前記画像撮像通信装置は、ディスプレイと、前記カメラと、を備える携帯機器であり、
前記アクセプタビリティレポートは、人が読み取れるものである。
前記方法は、更に、
取得した前記画像データが前処理されるのを防止するように、前記カメラを制御するために用いられるアプリケーションプログラミングインターフェースを制御するステップを、更に含んでいてもよい。
前記画像データは、画像データの複数のフレームを含み、
前記複数のフレームを見分けることと、
後続の処理のために、光学的欠陥を除去すること、または、１または複数のフレームを選択することと、を更に含む。
前記方法は、更に、
前記模様が付された領域を参考として使用して、前記画像データのダイナミックレンジを調整するステップを、更に含んでもよく、
前記模様が付された領域は、黒および白のバーコードを含むものであってもよい。
【００２８】
なお、前記方法は、更に、
前記カメラを用いて複数のアングルから前記画像データを取得する旨のユーザへの指示を表示するステップを、更に含んでもよい。
一実施形態では、
前記製品ラベルは、冷蔵保存が必要であるが、所定の期間、室温環境温度に曝すことができる製品とともに使用され、当該所定の期間を超えると、前記モニタ状況が画像データで検出できるほど変化する。
前記方法は、更に、
前記モニタ状況に相関する第１光密度値を判定するステップと、
前記第１光密度値と、前記製品の残りの貯蔵寿命に関連する複数の光密度とを比較するステップと、を更に含んでもよい。
一実施形態では、前記方法は、更に、
前記アクセプタビリティレポートにおいて、前記製品について見積もった貯蔵寿命を提供するステップ、を更に含んでいてもよい。
なお、前記方法は、
前記第１形状が略円形である場合、前記画像データ中の複数の楕円を識別して前記第１環境モニタを見つけるステップ、を更に含んでもよい。
【００２９】
更に別の実施形態では、前記方法が、
前記モニタ状況を判定する前に、前記画像データを処理して、前記製品ラベルが付された対象物の曲面を補償するステップ、を更に含んでもよい。
前記方法は、
前記カメラを用いて、選択的に、模様が付された領域により定義された第２識別子を含む第２ラベルから、画像データを取得するステップと、
記録管理システムに、前記製品ラベルに対する製品に関するイベントおよび前記第２識別子に関する主体、に関連するイベントデータを集める（ｐｏｐｕｌａｔｅ）ステップと、を更に含んでもよい。
一実施形態では、
前記イベントは、
前記製品を用いた主体へのワクチン接種と、
前記主体への前記製品の配給と、
前記主体に関する手続の実行と、
前記主体による前記製品の拒絶と、
前記主体による前記製品の消費と、
前記主体によるアクセプタビリティレポートの認識と、
前記製品を用いて実験を行う前記主体と、
前記２以上のイベントの組み合わせと、からなる群から選択される。
前記方法は、
前記第１識別子または前記ラベル上の他の印から、補足的なラベルデータを取得するステップと、
前記補足的なラベルデータを用いて前記画像データを処理するステップと、を更に含んでもよい。
【００３０】
部分的には、本発明の一実施形態は、製品ラベルを付して提供された製品を処理するためのプロセッサに基づく自動システムに関する。
前記システムは、
メモリと、
前記メモリと通信するプロセッサと、を備え、
前記メモリは、
選択的に環境履歴モニタ情報である環境モニタ情報を含む、前記製品ラベルについて取得された画像データの第１サブセットと、認証情報を含む第２サブセットと、を含む画像データの第１セットを、前記メモリに自動的に保存することと、
モニタ状況が判定されるように、前記画像データの第１サブセットを処理することと、
認証状況が判定されるように、前記画像データの第２サブセットを処理することと、
前記モニタ状況が、予め設定された許容レベルを満たし、前記認証状況について認証が確定した場合、前記製品が受け入れられるものであることを示すアクセプタビリティレポートを表示することと、を前記プロセッサに行わせる、前記プロセッサにより実行可能な命令を含む。
前記メモリおよび前記プロセッサは、ホストサーバまたは携帯機器に配置されていてもよい。
前記メモリ装置は、前記プロセッサにより実行された場合、
主体情報を含む画像データの第３サブセットを含み、前記主体に関連するラベルについて取得した、画像データの第２セットを、前記メモリに自動的に保存することと、
前記モニタ状況、前記認証状況および主体情報のデータベースまでのルートを決定することと、を前記プロセッサに行わせる命令を、更に含んでもよい。
【００３１】
また、一実施形態では、
前記主体は、患者、製品輸送会社、臨床試験管理者、病院、製薬会社、供給元、配送業者、品質管理サービス提供者、製造元および消費者からなる群から選択される。
前記画像データは、カメラにより取得され、
前記メモリ装置は、前記プロセッサにより実行された場合、前記カメラを用いて取得された、前記画像データの第１サブセットおよび前記画像データの第２サブセットが、処理されずに前記メモリに保存されるように前記カメラを制御することを前記プロセッサに行わせる命令を、更に含む。
前記メモリ装置は、前記プロセッサにより実行された場合、前記画像データの第１セットのノイズまたはグレアを自動的に補償することを前記プロセッサに行わせる命令を更に含んでもよい。
プロセッサに基づく自動システムは、
前記プロセッサと電気的に通信するディスプレイを更に備え、
前記メモリ装置は、前記プロセッサにより実行された場合、ディスプレイを用いて、複数のアングルから前記画像データの第１セットを取得する旨をユーザに通知することを前記プロセッサに行わせる命令を更に含んでもよい。
前記環境モニタは、製品にダメージを与える環境刺激に曝した場合、検出できる程度の色変化を受けるものであってもよい。前記環境モニタは、環境履歴モニタであってもよい。検出できる程度の変化は、所定の累積的な曝露の後に表れてもよい。
【００３２】
一実施形態では、本発明は、１以上の検出モジュール、光学的補償モジュール、報告作成モジュールおよび画像データ処理モジュールを含み、プロセッサにより実行可能な命令が実行された場合、１以上の画像アングルから１以上の画像データのフレームを取得することと、モニタの位置の決定、画像データの処理およびアクセプタビリティレポートの作成をすることと、をプロセッサに行わせる、複数のソフトウェアモジュールとして構成された、コンピュータにより実行可能な命令を含む、環境をモニタ、スキャンおよび報告するシステムを実行するための非一時的なコンピュータ可読媒体に関する。
【００３３】
一実施形態では、画像データの多重フレーム、フィルタおよびその他の補償の常套手段に関する異なる計測値が、ラベルのグレアを低減したり、画像処理において実質的にグレアを無くしたりするのに用いられ、寒冷を示すマーカのような１以上の環境マーカを、よりよく識別し、位置を確認し、および／または解読できるようにしている。
【００３４】
本発明の実施形態に係る特徴および他の実施例を、以下、添付図面とともに説明する。
【図面の簡単な説明】
【００３５】
【図１】本発明の一実施形態に係るシステムを示す図である。
【図２Ａ】本発明の一実施形態に係る製品ラベルを示す図である。
【図２Ｂ】本発明の別の実施形態に係る製品ラベルを示す図である。
【図２Ｃ】本発明の別の実施形態に係る携帯機器、関連要素およびソフトウェアモジュールを示す図である。
【図２Ｄ】本発明の別の実施形態に係る製品ラベルから画像データを取得するよう構成された携帯機器を示す図である。
【図２Ｅ】本発明の別の実施形態に係る典型的なアクセプタビリティレポートを示す図である。
【図２Ｆ】本発明の別の実施形態に係る典型的なアクセプタビリティレポートを示す図である。
【図３】本発明の一実施形態に係る方法を示す図である。
【図４】本発明の別の実施形態に係る方法を示す図である。
【図５】本発明の別の実施形態に係る方法を示す図である。
【図６Ａ】本発明の別の実施形態に係る方法を示す図である。
【図６Ｂ】本発明の別の実施形態に係る方法を示す図である。
【図６Ｃ】本発明の別の実施形態に係る方法を示す図である。
【図７Ａ】本発明の別の実施形態に係る方法を示す図である。
【図７Ｂ】本発明の別の実施形態に係る方法を示す図である。
【図７Ｃ】本発明の別の実施形態に係る方法を示す図である。
【発明を実施するための形態】
【００３６】
図面は、代表的なものを示すものでありこれに限定されるものではない。上記全ての図面において、複数の図面で同じ番号を付されたものは同じものを示すことを意図する。
【００３７】
ここでは、本発明の種々の実施形態を、図面を参照しながらより詳細に説明する。
【００３８】
図１に示すように、本発明の一実施形態は、１以上のホストサーバ１９０とネットワーク１８５または移動体通信ネットワーク１８０を介して直接的および間接的に接続されている、１以上の画像撮像通信装置１２０、１３０、１４０、１５０、１７０、１６０、１１０を備えるものであってもよい。ホストサーバ１９０は、直接的または間接的に１以上のデータベース１９５に接続されていてもよい。一実施形態では、ホストサーバは、サーバ、サーバクラスタ、携帯機器、または、プロセッサに基づく適当な電子機器や電子設備を備えていてもよい。画像撮像通信装置１７０、１６０、１１０は、１以上の製品ラベル１００からデータを受信して、それを適宜データベース１９５に保存する。
【００３９】
上記ホストサーバは、アクセプタビリティレポートのようにデータベース１９５に保存することができる種々の報告１９７を生成したり受信したりすることができる。これらの報告１９７は、上記画像取得装置に表示可能であり、所定のラベル１００上の情報を用いて索引に載せたり追跡したりすることができる。画像撮像通信装置を用いて、環境モニタおよび／または所定のラベル上に配されたコードのような識別子から取得した情報が、アクセプタビリティレポート、データベース１９５またはその両方に入力するために使用されてもよい。
【００４０】
一実施形態では、上記画像撮像通信装置は、カメラまたは他の光学的データ収集装置を有する携帯機器を備えるものであってもよい。本発明の実施形態での使用に適した携帯機器は、スマートフォン、タブレット機器、ラップトップ機器または他の適当なポータブル機器を含んでいてもよいが、これらに限定されるものではない。以下の実施形態に示す説明では、「携帯機器」が、携帯電話、遠隔制御機器、携帯情報端末、携帯用コンピュータ、ウルトラモバイルパーソナルコンピュータ等を含んでいるが、これらに限定されるものではない。上記携帯機器およびこれに採用される方法は、携帯用インターネットインターフェースまたはウェブブラウザを含んでいてもよい。携帯用ウェブブラウザにより、ユーザはインターネットに接続された無線ネットワークを通じてインターネットを見てこれに接し、報告を再度調べ、所定のラベル１００に関連するデータにアクセスすることができる。「ユーザ」とは携帯機器を使用する個人を示す。一実施携帯において、「自動的に」とは、人が介入することなくという意味である。
【００４１】
一実施携帯では、画像撮像通信装置は、製品ラベル１００または他のラベルを解析し、当該解析結果から収集されたデータを、例えばネットワーク１８５または移動体ネットワーク１８０のようなネットワークを通じてホストサーバ１９０または他の所定の受信機器または受信システムへ送信するように、エンコードまたはプログラミング等がなされたハードウェア単体またはハードウェアの組み合わせであってもよい。上記画像撮像通信装置は、ハードディスクドライブ、ＲＡＭ、ＲＯＭ、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、フロッピディスクドライブおよび／または固体メモリドライブのような１以上の非一時的データ記憶装置と、キーボード、タッチパッド、マウス、カメラ、ビデオカメラ、イメージスキャナ、バーコードスキャナ、濃度計、分光計、および／または、ＲＦＩＤまたは近距離無線通信（ＮＦＣ）用読み取り機のような１以上の入力装置と、１以上の中央演算処理部（ＣＰＵ）と、ディスプレイ、ディスクドライブおよび／または固体メモリドライブのような１以上の出力装置と、赤外線ポート、ユニバーサルシリアルバスポート、シリアルポート、イーサネット（登録商標）ポート、移動体通信ポート、ＨＤＭＩ（登録商標）ポート、ディスプレイポート、モデムポート、Ｂｌｕｅｔｏｏｔｈ（登録商標）ポートおよび／または無線ネットワーク制御部のような入力／出力（Ｉ／Ｏ）通信ポートと、を備えていてもよい。上記ハードウェアは、共通のデータバスおよび／または専用接続線により別のハードウェアと通信するものであってもよい。上記画像撮像通信装置は、コンピュータまたは機器が実行可能なプログラムコードを保存するための少なくとも１つの領域を有する１以上のメモリと、上記メモリに保存された上記プログラムコードを実行するための、１以上のＣＰＵ、電子機器または回路と、を備えていてもよい。
【００４２】
上記実行可能なプログラムコードは、認証要素、モニタおよび識別要素を読み込むための命令を含んでいてもよい。実行可能なプログラムコードは、上記画像撮像通信装置による再調査または認証要素、モニタおよび識別要素との通信に基づくデータを保存する命令を含んでいてもよい。上記実行可能なプログラムコードは、ホストサーバと通信し、上記データをホストサーバへ送信し、当該送信に対して応答されたデータを受信し、受信したデータに基づいて報告を生成して表示する命令を含んでいてもよい。上記実行可能なプログラムコードは、上記画像撮像通信装置による再調査または認証要素、モニタおよび識別要素との通信により取得した上記データに基づく報告を生成する命令を含んでいてもよい。上記実行可能なプログラムコードは、質問信号を、ＲＦＩＤまたはＮＦＣ装置へ出力するとともに、当該ＲＦＩＤまたはＮＦＣ装置からデータを受信しおよび／または解読する命令を含んでいてもよい。
【００４３】
更に、上記実行可能プログラムコードは、１次元、２次元および／若しくは３次元のバーコードまたは他の標識、印または識別子を読み込んで、当該バーコードからデータを取得し、並びに／または解読する命令を含んでいてもよい。上記実行可能なプログラムコードは、所定の画像内で模様を見つけて認識する命令を含んでいてもよい。例えば、上記実行可能なプログラムコードは、保存されている、例えば、白黒の領域、線、円または楕円のような幾何学模様のテンプレートに類似する画像部分を見つけるものであってもよい。
【００４４】
一実施形態では、所望の模様が配置された後、当該模様について更に解析を行い、例えばバーコードの明るい画素と暗い画素の解読を行ったり、円形の断面を有するモニタの存在を識別するために楕円列を処理したりしてもよい。これらの命令は、模様認識またはマシンビジョンのソフトウェアライブラリ、例えば、画像解析およびバーコード読み取りのためのルーチンを含む、マトロックスイメージングライブラリのルーチンを含んでいてもよい。更に、上記命令は、環境モニタを識別し、グレアまたは、その上またはその中に配置された標識を識別したり或いは読み取ったりすることの妨げとなる他の光学的効果を補償するよう構成されたルーチンを含んでいてもよい。一実施形態では、上記ラベルに用いられるバーコードまたは識別子は、データマトリクスバーコードおよびデグマーカと呼ばれる閾値温度標識を含んでいてもよい。更に、上記バーコードは、ＧＳ１データベースを含んでいてもよく、ここでは、ソフトウェアの実施形態が、そこからデータを処理し抽出するものとして構成される。
【００４５】
一実施形態では、上記実行可能なプログラムコードが、蓄積交換式のデータに対する命令を含んでいてもよい。このような実施形態は、例えばホストサーバが利用可能である、ネットワークまたは移動体通信ネットワークが利用可能である、および／または送信価格率が減少した場合に、後で送信するために上記画像撮像通信装置による１以上のメモリ内に一時的にデータを保存することを含んでいてもよい。
【００４６】
上記実行可能なプログラムコードは、赤、緑、青（ＲＧＢ）の光学的視認範囲内の離散値を取得し、取得した離散値を比較用の他の色空間に変換するための命令を含んでいてもよい。例えば、ＲＧＢ値の平均値であるグレイスケール、または、その全スケール値を分母とする分数として表されるＲ値の１０を底とする負の対数であるシアンＯＤがある。
【００４７】
一実施形態では、上記画像撮像通信装置１１０は、アップル社のｉＰｈｏｎｅ（登録商標）と呼ばれるスマートフォン、ｉＰａｄ（登録商標）、リサーチインモーション社のＢＬＡＣＫＢＥＲＲＹ（登録商標）と呼ばれるスマートフォン、または、Ｇｏｏｇｌｅ（登録商標）のＡｎｄｒｏｉｄ（登録商標）オペレーティングシステムを使用する機器のようなカメラおよび／またはビデオカメラが組み込まれた携帯機器である。例えば、アップル社のｉＰｈｏｎｅ３Ｇまたは３Ｇｓ（登録商標）、または、リサーチインモーション社のＢＬＡＣＫＢＥＲＲＹ  Ｂｏｌｄ９７００またはＣｕｒｖｅ８３００（登録商標）がある。
【００４８】
一実施形態では、上記画像撮像通信装置１６０が、カメラ１２０に接続されたコンピュータ１５０を備えていてもよい。別の実施形態では、上記画像撮像通信装置１７０が、カメラ１３０に接続されたコンピュータ１４０を備えていてもよい。カメラ１２０、１３０は、ビデオカメラまたはビデオ撮影できないカメラのいずれかとすることができる。コンピュータ１４０、１５０は、通常、それぞれ１以上のデータ記憶装置と、１以上のＣＰＵと、１以上の入力装置と、１以上の出力装置と、１以上のＩ／Ｏ通信ポートと、コンピュータ１４０、１５０の機能性能を向上させる他のハードウェア要素と、を備えるコンピュータである。コンピュータ１４０および１５０は、タブレット型ＰＣであってもよい。或いは、コンピュータ１４０および１５０は、ラップトップコンピュータであってもよい。カメラ１２０および１３０は、それぞれコンピュータ１５０に直接的または間接的に接続されたカメラであってもよい。
【００４９】
例えば、カメラ１２０および１３０は、ＵＳＢポートを介して接続されたデジタルカメラであってもよいし、或いは、カメラ１２０および１３０が、カメラ１２０および／または１３０から固体メモリカードを取り除いて、コンピュータ１４０および／または１５０に接続された固体メモリカードリーダを据えることより、コンピュータ１４０および／または１５０に接続されたビデオカメラであってもよい。カメラ１２０および／または１３０は、コンピュータ１４０および／または１５０に作り込まれているかまたは実装されていてもよい。別の実施形態では、画像撮像通信装置が、コンピュータ１４０および／または１５０への中継器（テザリング）として機能するスマートフォンを含むものであってもよい。カメラ１２０および／または１３０は、カメラ１２０および／または１３０から固体メモリカードを取り除いて、スマートフォンに接続された固体メモリカードリーダを据えることによりスマートフォンに接続されるものであってもよい。
【００５０】
ネットワーク１８５は、クライアント／サーバ型、ピアツーピア型、または、ハイブリットアーキテクチャのようなあらゆる形式のネットワークインフラを含んでもよい。ネットワーク１８５は、インターネットを含んでもよい。一実施形態では、移動体通信ネットワーク１８０が、任意の移動体通信ネットワークである。移動体通信ネットワーク１８０は、０Ｇ、１Ｇ、２Ｇ、２Ｇｔｒａｓｉｔｉｏｎａｌ、３Ｇ、３Ｇｔｒａｓｉｔｉｏｎａｌ、並びに／または４Ｇ、またはその他の標準のような、携帯電話標準の下で動作していてもよい。移動体通信ネットワーク１８０は、ネットワーク１８５および／またはホストサーバ１９０に直接的または間接的に接続されていてもよい。
【００５１】
１以上のホストサーバ１９０は、遠隔またはローカルネットワーク、ネットワーク１８５のようなインターネットを介して、または、移動体通信ネットワーク１８０のような無線ネットワークインフラを通じて、アクセス可能な１以上の遠隔コンピュータシステムであってもよい。ホストサーバ１９０は、コンピュータ１４０および１５０に帰属するハードウェアの全てを備えていてもよい。ホストサーバ１９０は、２以上の物理的に離れた場所に分散されていてもよい。ホストサーバ１９０は、１以上のデータベースを備えていてもよく、或いは１以上のデータベース１９５に直接的または間接的に接続されていてもよい。１以上のデータベース１９５は、解析データベース、作業データベース、階層化データベース、ネットワークデータベースまたはリレーショナルデータベースのように、あらゆる種類のデータベースであってもよい。例えば、マイクロソフトＳＱＬサーバ、ＭｙＳＱＬ、オラクルデータベース、マイクロソフトアクセス、マイクロソフトＥｘｃｅｌファイル、並びに／またはカンマ区切りテキストデータ、またはタブで区切られたファイルがある。別の実施形態では、データベース１９５が、テーブル、スタック、列、リスト、リンクされたリスト、配列、ツリーおよび／またはヒープのような、データ構造またはデータの入れ子構造の任意の形式を有しているか或いは含んでいてもよい。データベース１９５は、患者またはヘルスケア提供者のデータ、ワクチンデータ、荷物の輸送、追跡および配達のデータ、１以上の製品の期限データおよび本明細書で説明されていたり参照されたりしている他のデータを含んでいてもよい。
【００５２】
製品ラベル１００は、１以上のモニタ、認証要素、および／または識別要素を有する任意の製品または包装のラベルであってもよい。製品ラベル１００は、１以上のホスト製品に関連していてもよい。例えば、製品ラベル１００は、製品自体、製品の包装、または、輸送のための複数の製品を収容した容器、箱またはパレットに付されていてもよく、或いはそれらの一部をなしていてもよく、或いは、それら自体であってもよい。
【００５３】
ホスト製品は、例えば、ヘルスケア関連の消費材、例えば、ワクチン、常用薬、薬品、調合薬、化粧品、栄養剤、機能性食品、機能食品、医療機器、予防薬と、産業や治療で使用される生体材料、例えば、培養菌、器官および他の人または動物の体の一部と、血液および血液の消費材と、消費材を含む診断装置、診断キットおよび診断材料と、バッテリ、バッテリを備える装置および電気器具と、生の或いは調理された魚、肉、乳製品、果物、野菜、焼かれた料理、デザート等を含む食料品と、飲食店で提供される料理を含む外食製品と、嗜好食品、腐敗しやすい動物用食品、根切りおよび根切りされていない花と、化粧品、例えば、生物製剤または他の状態が変化し易い材料を含む化粧品と、化粧品と、軍需品および兵器の消費材と、浄化パックおよび浄化製品の消費材と、酒類、例えば、ワイン、ビール、シャンパン、ポートワイン、ウイスキー、コニャックと、を含む。
【００５４】
本発明の実施形態によれば、図２Ａおよび２Ｂに示すように、製品ラベル１００は、識別子としても参照される、１以上のモニタ２１０および２２５、認証要素２０２、および／または識別要素２００および２０５を含んでいてもよい。図２Ａのラベルは、モニタ２１０、２２５および認証要素２０２の下のラベル１０１の領域に示すように付加的な詳細説明を含んでいる。一実施形態では、領域１０１に示す情報、当該情報の一部、付加的な情報または異なる情報が、ここで説明するアクセプタビリティレポートとして表示されていてもよい。上記モニタは、環境履歴モニタであってもよい。環境履歴モニタは、それに関連するホスト製品の環境履歴の１以上の状況を示すものであってもよく、例えば、環境履歴モニタが、ホスト製品が過去に晒された１以上の環境状況を示すものであってもよい。環境履歴モニタの外観が時間とともに変化することにより、モニタしている状況の変化度合が示されてもよい。
【００５５】
環境履歴モニタにより監視することができる環境状況の一例として、熱曝露度がある。環境履歴モニタは、平均累積温度として、または所定の間隔で特定の温度を上回るまたは下回る頻度として、熱曝露度を監視してもよい。このような熱監視を行う環境履歴モニタの例は、累積時間−温度指標と、寒冷指標と、溶解指標と、過去に周囲温度よりも高い温度或いは別の所定温度よりも高い温度に晒されたという１つのイベントを示すことができる閾値指標と、を含んでもよい。
【００５６】
環境履歴モニタが監視しうる他の環境状況は、湿度、機械的衝撃、気体曝露度、酸素曝露度、毒素曝露度、化学品曝露度、生物由来物質曝露度、化学線曝露度、Ｘ線曝露度、および／またはマイクロ波曝露度を含む。
【００５７】
取得可能な指標画像または他の取得可能な監視状況の指標を表示する、種々の環境モニタおよび時間−温度指標の種々の構成は、説明しようとしている本発明の実施に採用してもよい。モニタは、重合することにより発色する、１以上の無色の或いは明るい色のジアセチレンモノマーを有する時間−温度指標（ここでは「ＴＴＩ」という。）を含んでもよい。段階的な発色現象が、温度の上昇の割合で生じる。種々のジアセチレン系化合物への採用に適した時間−温度指標のいくつかの例が、例えばPatelの米国特許第3,999,946号明細書、第4,189,399号明細書、第4,384,980号明細書、第5,045,283号明細書、第5,053,339号明細書および第5,254,473号明細書、Preziosiらの米国特許第4,789,637号明細書および第4,788,151号明細書、Prusikらの米国特許出願公開第2008/0004372号明細書、Baughmanらの米国特許出願公開第2009/0131718号明細書、Castillo Martinesらの米国特許出願公開第2011/0086995号明細書に開示されており、これらの特許および特許公報はそれぞれ本明細書に参照として組み込まれる。
【００５８】
モニタは、２つの指標形式を１つの装置に集約した多機能時間−温度指標を含んでもよい。例えば、このような多機能時間−温度指標は、所定の累積的な時間−温度曝露の結果、色変化を発する第１の指標と、所定の温度になったことをきっかけとして設定される第２の指標と、を含んでもよい。このような多機能時間−温度指標の例のいくつかは、Prusikらの米国特許第5,057,434号明細書およびTaylorらの米国特許第7,490,575号明細書に開示されており、これらは本明細書に参照として組み込まれる。
【００５９】
モニタは、指標の構成がバーコードと同一の広がりをもつように製品ラベルに貼り付けることができる色形成時間−温度指標システムを含む活性化可能時間−温度指標システムを含んでもよい。ホスト製品が有用な貯蔵寿命が過ぎると、色の濃度が、例えば、小売市場コンピュータシステムのようなバーコード読み取りシステムにおいて、不良品或いは危険な製品として登録できるのに十分な程度にバーコードが見にくくなるレベルにまで達する。このような活性化可能時間−温度指標の例のいくつかは、Prusikらの米国特許第6,544,925号明細書に開示されており、これは本明細書に参照として組み込まれる。
【００６０】
モニタは、本質的に活性化温度または当該活性化温度よりも高い温度で熱的に反応する、光学的に読み取り可能な熱感知指標要素を備えていてもよく、当該モニタは、例えばHuffmanらの米国出願第13/238,686号に開示されている側鎖結晶性ポリマーのような合成ポリマー材料を含む指標要素を採用してもよい。上記米国出願は本明細書に参照として組み込まれる。
【００６１】
モニタは、無線周波数認識装置（ここでは「ＲＦＩＤ」と称す。）と環境状況指標タグとの組み合わせを含んでもよい。例えば製品ＩＤおよび関連データのような上記ＲＦＩＤから得られる情報は、検査ステーションにおいてＲＦＩＤの質問信号により読み込まれる機械であってもよく、視認可能な状況指標は同じ検査ステーションにおいて機械により光学的に読み取られるものであってもよい。信号は、検査ステーションにおいて局所的に利用されるものであってもよく、その場所から離れた場所で用いられるものであってもよい。このようなＲＦＩＤと環境状況指標タグとの組み合わせのいくつかは、Martinらの米国特許7,209,042に開示されており、これは本明細書に参照として組み込まれる。或いは、環境状況指標は、ＲＦＩＤ装置により読み込み可能な電気的特性を有するものであってもよい。例えば、このような指標がPatelらの米国出願公報2009/0301382に開示されているように、酸によるアルミニウムフィルムの食刻に基づく環境指標であってもよい。
【００６２】
ジアセチレンモノマーおよび共沈したモノマーからポリマーを生成する固相重合は、時間−温度指標としておよびその中において有用である。モノマーは基質活性剤として用意してもよいし、溶媒蒸発、溶融再結晶化、酸形成、金属形成、塩形成、酸、金属および塩の連鎖除去を含む多くの方法により必要に応じて活性化するものであってもよい。このような方法および装置の例のいくつかは、本明細書で前述した特許公報に、種々のジアセチレン化合物を用いた時間−温度指標として開示されている。
【００６３】
時間−温度指標は、基質に固定され反応して時間および温度に応じて色変化を生じる酵素を含んでもよい。温度に依存して脱色するスピロピランの照射により着色した写真は、時間−温度指標として用いることができる。
【００６４】
時間−温度指標は、第１反応物質を有する上層と、きっかけにより第１反応物質との反応に適した第２反応物質を有するベース層と、を備えてもよい。ＴＴＩは、感熱紙および感熱紙上に配置された活性化フィルムから形成されていてもよい。指標は、食品の一部に混合されてもよく、例えばｍ−ニトロフェノール、ｐ−ニトロフェノールおよびリトマスの緑から赤／ピンクへの変化を検出することにより、直接食品の変質、例えばｐＨの変化を検出する。
【００６５】
時間−温度指標は、合わせて互いに貼り付けられた２つの面を有し、その一方に酸−塩基指標、他方に活性剤を有する。時間−温度指標は、キャッピングされたジアゾニウム化合物とカップリング成分との間のアゾカップリング反応に基づくものであってもよい。酵素系時間−温度指標は、尿素を消費してアンモニアおよび二酸化炭素を生成し、これによりｐＨが変化してｐＨ指標の色を変化させる尿素分解酵素を含む。
【００６６】
時間−温度指標は、フリーラジカル反応性染料およびキャリアの過酸化物から用意されてもよい。時間−温度指標は、規定の温度よりも高い温度で転位可能となる拡散層を含んでもよい。指標フィルムは、拡散層の一方の側に設けて、指標フィルムに接触すると色が変化しうる反応物質から分離させてもよい。
【００６７】
時間−温度指標は、蒸気浸透技術を用いて作製することができる。活性化可能時間−温度指標は、酸素感受性染料コーティングおよび当該コーティング上に形成される除去可能な酸素保護膜を含んでもよい。一実施形態では、環境マーカが、色変化が遅れて生じる閾値温度指標を含んでもよい。一実施形態では、デグマーカが、閾値よりも高い（例えば４０℃よりも高い）温度変動域を示す閾値温度指標として構成された環境マーカである。更に、ワクチン容器モニタは、その他がワクチン容器とともに使用されるように形作られ、構成された時間−温度指標である。本明細書に記載された環境モニタのいくつかは、バブルキャップ、ラミネート層、略半球状の蓋、またはグレア或いはらの望ましくない光学的効果を引き起こす他の表面のような、反射コーティングまたは蓋を有する。人は種々の知覚的な技術を用いてこれらの望ましくない光学的効果を克服できる。しかしながら、機械やカメラが色感受性指標について画像データを取得するために用いられる場合、グレアまたは他の光学的効果により正しくない結果が出てしまい、処理システムが故障してしまいかねない。
【００６８】
このような問題は、円形環境モニタまたは他の規則的な形状を有するモニタを識別するのに用いられる検出アルゴリズムが、異なる視点から見た場合に表れる上記規則的な形状を含むマスタ形状の検出を試みることにより発生しうる。例えば、円形モニタの場合、画像データ収集システムは、真上からとは異なるアングルから見ると円が楕円に見えるので、楕円追跡ルーチンを実行するように構成されている。これを処理するための種々のプロセッサに基づく方法を以下に説明する。以上の説明にもかかわらず、いくつかの実施形態では、環境モニタがつや消し仕上げ面或いはグレア除去層を含み、光学的処理中におけるモニタ検出を改善してもよい。更に、所望の色変化、分析が困難な色または種々のモニタ設定に関連する色の範囲のような所定の周知の問題について、画像データを処理するよう構成されたソフトウェアモジュールが、モニタ仕様の特徴に基づいて予め設定された特定の色等に敏感であってもよい。例えば、いくつかのカメラは、期限切れに関連する赤の状態を検出しにくくてもよい。これにより、上記ソフトウェアモジュールは、低い赤の閾値または窓を指定してこのようなモニタ状況が存在する場合にその状況が検出される確率を向上させることができる。
【００６９】
一実施形態では、認証要素２０２が上記モニタに関連するホスト製品に認証を与えるとともに、当該認証を確証するものであってもよい。認証要素は、人や機械によって読み取り可能であってもよい。例えば、認証要素は。特殊なインク、記号または複製が難しい対象物を含んでいてもよく、また、他の実施形態では、それらが時間とともに視覚的に変化するものであってもよい。認証要素は、識別要素および／またはモニタに組み込まれていてもよい。識別要素は、認証要素を参照する情報を含んでいてもよい。例えば、このような情報が認証要素２０２の認証に失敗した場合、当該要素を検索し読み込んだ人またはコンピュータは、ラベルおよびそれが適用される可能性がある製品が偽物であると判定することができる。
【００７０】
一実施形態では、認証要素２０２によりホストサーバまたは別の適当な遠隔主体が、ホスト製品の認証を確認したり評価したりすることができる。本発明のいくつかの実施形態では、ホストサーバまたは別の適当な遠隔主体が、認証要素からの情報を解読してホスト製品が認証されたものである、偽物であって認証を受けたホスト製品の供給元からのものではない転用されたものである、または、並行して取引されたものであって認証を受けたホスト製品の供給元からのものであるが、認証されていない流通経路を通じて流通するものである、ということを判定できるものであってもよい。この情報のいくつかまたは全てが、望まれるのであれば、アクセプタビリティレポートを含んでいてもよい。ホストサーバまたは別の適当な遠隔主体は、認証要素および識別要素を採用しているのであれば、それらから取得した情報を、例えばデータベースを調査することによる認証性の判定を助けるために使用し、認証要素および識別要素から取得した情報の組み合わせが認証されたホスト製品を示す情報の正当な組み合わせか否かを判定するものであってもよい。また、望まれるのであれば、上記環境モニタから取得した情報を、ホスト製品の認証性を評価するのを助けるために採用してもよい。
【００７１】
一実施形態では、識別要素は、ホスト製品の身元を示す。例えば、識別要素は、一次元バーコード、二次元バーコード、三次元バーコードまたはＲＦＩＤ装置を含んでもよい。識別要素は、印刷されていてもよく、視認性があり、且つ／または、機械読み取り可能であってもよい。例えば、識別要素は、主として近赤外線を反射するインクを用いて印刷されていてもよく、近赤外光に対する感度がよいデジタルカメラにより読み取り可能なものであってもよい。識別要素は、人が読み取り可能な上記識別要素と同等なもの、例えばテキスト文字、アイコン、絵文字または他の人が認識できる絵または記号とともに用いられるものであってもよい。
【００７２】
更なる例としては、本発明の実施に用いられる認証要素または識別要素は、光学的に読み取り可能な絵、記号、しるし、マーク、文字、アルファベット文字と数字を組み合わせた文字、模様、または、前述の光学的に読み取り可能な要素の個々または複数の組み合わせを含んでもよい。光学的に読み取り可能な１または複数の要素は、任意の適当な媒体により表されてもよく、例えば、異なるアングルから見た場合に見え方の変化を生じる光学可変回折装置またはその他の装置、色ズレインク、ホログラム、マイクロレンズアレイ、虹色のもの、発光、ギロッシェ、熱変色性インク、赤外インク、機械読み取り可能な光学的情報、マイクロテキスト、ナノテキスト、マイクロ画像、ペン露出マーク、レーザ認証、透かし、電子透かし、条件等色、浮き出し加工、凹刻印刷、または前述の媒体の２以上の組み合わせにより表されてもよい。認証要素は、顕在なもの、言い換えると、顕微鏡のような見る人が読み取るのに通常使用しないような専用の観察機器の助けを借りなくても明瞭であり視認できるものであってもよいし、或いは、潜在なもの、言い換えると、覆われたり隠されたりしている特徴、即ち、明瞭でなく専用の読み取り或いは観察機器を用いて初めて視認できる特徴を有するものであってもよい。
【００７３】
識別要素は、特殊でありそれに関連するホスト製品を識別できるものであってもよい。識別要素は、例えば在庫ユニットに、特定の個々のホスト製品の身元を示す品目識別子を含んでもよい。
【００７４】
一実施形態では、識別要素は、シリアルグローバルトレード識別番号（ＳＧＴＩＮ）を含んでもよい。例えば、「ＳＧＴＩＮ−９６」タグがある。ＳＧＴＩＮ−９６タグデータ仕様では、各タグに対して６つのフィールドを設け、６つのフィールド全ての組み合わせにより各ダグが唯一無二であることを保証している。６つのフィールドは、以下に示すように、８ビットで構成されるヘッダと、３ビットで構成され、タグが品物、箱またはパレットのいずれに付されているかを明示することが可能なフィルタ情報と、３ビットで構成され、後に続くフィールドが正しいデータを取得するようにそれぞれどのように分割されているかを示す区画情報と、２０−４０ビット（上記区画に依存する）で構成される会社識別情報と、２４−４ビット（上記区画に依存する）で構成され、品目のグローバルトレード識別番号「ＧＴＩＮ」を含み得る品目参照情報と、３８ビットで構成され、品物に固有のシリアル番号を含むシリアル番号と、から構成される。
【００７５】
識別要素は、医薬品追跡に用いられる電子系図コードでもある。一実施形態では、識別要素がＲＦＩＤまたは他の電子装置を含み、識別要素は、１以上のモニタ２１０および２２５および／または認証要素２０２のような製品ラベル１００の他の要素を読み込むための電子的光学的装置を含んでいてもよい。環境履歴モニタのようなモニタは、１以上の環境状況に晒されたことを示す電気信号および視認性のある信号の両方を生成する。このような電気信号は、他に識別要素として機能する関連するＲＦＩＤに出力されてもよい。
【００７６】
製品ラベル１００のモニタ２１０および２２５、認証要素２０２および識別要素２００および２０５からの情報は、画像撮像通信装置１１０、１６０および１７０または人認識による、写真取り込み、スキャン、パターン認識、画像比較により利用することができるものであってもよい。
【００７７】
図２Ａに示すように、本発明の一実施形態によれば、製品ラベル１００は、医薬品のうちの１以上の販売単位を含む箱に貼り付けることができるように構成されていてもよい。製品ラベル１００は、自己粘着性があり箱に貼り付けることができるものであってもよい。製品ラベル１００は、一回または複数回の印刷により形成できるものであってもよい。ラベル１００全体が印刷可能なものであってもよい。１以上のモニタ、認証要素、および／または識別要素は、別々に形成されてもよく、また、ラベル１００に貼り付けられるものであってもよいし塗布されるものであってもよい。製品ラベル１００は、物理的に埋め込まれていない、または、同じ面または同じ筐体に配置されている、１以上のモニタ、認証要素および／または識別要素を含んでもよい。但し、この実施形態では、モニタ、認証要素および／または識別要素は、同一の１以上のホスト製品に関連しているであろう。
【００７８】
図２Ａに示すように、本発明の一実施形態によれば、ラベル１００は、ラベル上部の見出し行に、識別要素２００、二次元バーコード２０５、モニタ２１０を有していてもよい。ラベルの見出し行の下には、医薬品名と強さとが顕著に表示されている。医薬品名の下には、製品番号またはリスト番号、例えば１５５Ｚ５５５５５５５５５５、バッチ番号またはロット番号、例えばＦ６６６６６、医薬品または他のホスト製品の有効期限日、箱の中身の表記、例えば１箱当たり１０ユニット、販売単位表記、例えば１カートン当たり２シリング、医薬品の製造日、温度変動の許容範囲および保管形式といった保管条件、例えば、冷蔵保存、供給元の名前、工場の住所、配送日時、および箱番号、例えば７２／１０００といった付加的なデータが明記されている。識別要素２００は、製品／リスト番号と同じまたは異なる製品番号を含んでもよい。識別要素は、製品の有効期限日およびバッチ番号またはロット番号と同じまたは異なるものであってもよい。識別要素２００内の情報のいくつかまたは全ては、識別要素２０５にエンコードされてもよい。識別要素２０５は、１以上の認証要素、例えばシリアル番号またはラベル１００の他の情報に関連するコード、即ち、例えば箱のようにホスト製品単位を個別に識別し偽物を排除するものを含んでもよい。認証要素２３０は、１以上の識別要素を含んでもよい。別の観点からすれば、モニタ２１０および／または２２５は、１以上の識別および／または認証要素を含んでもよい。
【００７９】
一の観点からすれば、モニタ２１０は、時間−温度指標として動作する環境履歴モニタである。モニタ２１０は、一度それに関連する画像データの一部が、当該モニタが許容できない温度範囲に晒されたか晒されていないかというようなモニタ状況を提供すると判定されると、読み込まれるものであってもよい。また、識別要素２００は、バーコード、他の記号、または、情報を含むコード、または主体、人または対象物に関連するファイルおよび関連情報を識別するためのデータベースへのリンクを含むコードのような識別子であってもよい。一実施形態では、識別子は、患者識別子、移植のための器官または他の生体材料の識別子のような生体試料識別子、荷物輸送、追跡、拒否、配達または他の類似の情報、関連する臨床試験参加者の識別子、候補医薬識別子、または、識別子の暗号化または使用或いは識別子を用いたデータベースへのアクセスに適した他の情報源を含んでもよい。患者識別子は、指紋、網膜画像、または携帯式または固定式カメラまたは画像システムを用いた画像形成に適した患者の他の特定の生体的特徴のような生物測定情報を含んでもよい。
【００８０】
一実施形態では、モニタ２１０が時間−温度指標として働く環境履歴モニタである。モニタ２１０は、任意の適当な形状を有する、アクティブ区域２２０および付加的参照区域２１５といった２以上の色領域を含んでもよい。例えば、アクティブ区域２２０は、図示のように矩形状であってもよいし、正方形、多角形、円形または細長であってもよく、或いは、他の規則的な形状または非規則的な形状を有していてもよい。また、参照区域２１５は、それを採用する場合、図示のように、外周円形でありアクティブ区域２２０の周りを囲むように延びていてもよいし、または、他の形状および／または配置を有するものであってもよい。
【００８１】
アクティブ区域２２０は色が変化してもよい。例えば、アクティブ区域２２０は、ホスト製品の許容限界を超える時間の累積的熱曝露に反応すると暗くなってもよい。この色変化がモニタ状況であってもよい。アクティブ区域２２０が参照区域２１５と同程度に暗くなったりまたは参照区域２１５よりも暗くなったりした場合、モニタ２１０は、視認できる信号により、当該モニタに関連するホスト製品がもはや使用を認めることができない、或いはもはや使用を認めることができないだろうということを示している。暗くなる程度はモニタ２１０が被った累積的な時間−温度の量に関連しうる。アクティブ区域２２０が参照区域２１５よりも暗くないということは、関連するホスト製品が使用が認められる状態にあることを示していてもよい。
【００８２】
別の実施形態では、アクティブ区域２２０がホスト製品の許容限界を超える累積的な温度曝露に反応して発光してもよい。このような実施形態では、アクティブ区域２２０が参照区域２１５よりも明るい場合、モニタ２２０は、視認できる信号により、当該モニタに関連するホスト製品がもはや使用を認めることができない、或いはもはや使用を認めることができないだろうということを示している。
【００８３】
更なる実施形態では、アクティブ区域２２０において検出可能な、任意の適当な色パラメータまたは色パラメータの組み合わせは、参照区域２１５において検出可能な、対応する色パラメータまたは色パラメータの組み合わせ、例えばグレイスケール反射率、グレースケール濃度、色光学密度、ＲＧＢ値、Ｌａｂ値、明るさ、色調および／または色強度、と比較されるものであってもよい。これらのいずれを比較することによってもモニタ状況を示すことができる。本発明の更なる実施形態では、参照区域２１５は、例えば２つから６つの複数の区画を含んでおり、異なる累積的熱曝露に対応して異なる見え方をし、ホスト製品の異なる状態、例えば、「新鮮」、「まだ新しい」、「使用できる」、「使用できない」、を示すことができるものであってもよい。
【００８４】
アクセプタビリティレポートは、アクティブ区域２２０、および、適宜参照区域２１５から連想される情報から導き出されるホスト製品の起こりうる状況に対応する指標を含むものであってもよい。これらの区域は、携帯機器のような装置のメモリに保存され、一連の画像データの一部として処理される。製品ラベルに配置された環境モニタに関連する色パラメータまたは他の光学的パラメータのいずれかは、反射パラメータ、ダイナミックレンジ、周囲の光量およびカメラによりフレーム単位で取得する画像データを用いる他のパラメータについて解析されるものであってもよい。
【００８５】
更に、バーコード、画像記号、しるしまたは他のマークは、より正確且つ素早く画像データを処理する助けとなる付加的なラベルデータとして用いてもよい。付加的なラベルデータは、ラベルが配置された対象物の形状、ラベル上の環境モニタの形式および特徴、ラベル上の要素の関連する空間的位置、識別子が以前に検索したときに関連する追跡情報、および／または識別子ラベル上の要素に関連する他の任意のパラメータについての画像データ処理を実行するソフトウェアを通知するものであってもよい。
【００８６】
図２Ａおよび２Ｂを参照するに、所定のラベル１００は、紙、プラスチックまたは他の材料の基材を含んでもよい。当該基材は、箱、容器、包装、小包その他容器の一部であってもよく、ラベル１００がそこに配置されてもよい。容器は、１以上のホスト製品またはホスト製品アイテムを収納できる。要素２０２、２２５、２０５、２１０、２１５および２２０は、所定の要素が他の要素或いはラベルの縁または境界に関係する基準としての役割をするように、基材の上または中であったり、互いに隣接したり或いは互いに離間したりと種々に配置されてよい。所定のラベルは、カメラから画像データを取得している最中に、ラベル上に配置され、所定の背景および要素と関連し、解析可能な縁形状、境界形状または他の幾何学的要素を含んでもよい。このような幾何学的要素または縁は、要素がバーコード、文字列、モニタまたは別の要素のいずれであるかを識別するための検出部または処理部により用いられてもよい。また、これらの幾何学的要素は、認証要素としての役割を担うよう構成されていてもよい。データの各識別要素は、一度識別されると、それぞれの要素に関連する画像データの関連する画素または部分から読み込まれるものであってもよい。
【００８７】
図２Ｃは、本発明の実施形態を実行するための典型的な携帯機器２３０の構成を示す機能ブロック図である。携帯機器２３０は、好ましくは、システムバス２３１と、処理部２３２と、システムメモリ２３４と、記憶部２３６と、通信インターフェース２３８と、入力装置２４０と、カメラ２４１と、出力装置２４２と、ＲＦＩＤリーダ２４４と、を備えるのがよい。システムバス２３１は、これに限定されるわけではないが、システムメモリ２３４と処理部２３２とを含むシステム構成同士を接続する。処理部２３２は、種々の利用可能なプロセッサのいずれかであってもよい。一実施形態では、処理部２３２は、中央演算処理装置、図形処理装置または他のプロセッサ或いはこれらの組み合わせを含んでもよい。種々のソフトウェアモジュールまたはアプリケーションは、処理部２３２により実行され、メモリ２３４または記憶装置２３６に保存されていてもよい。図示のように、検出処理モジュール２４５ａ、光学的補償モジュール２４５ｂおよび報告生成処理モジュール２４５ｃ並びに他の種々のモジュールが使用されてもよい。
【００８８】
入力装置２４０は、ユーザからデータを取得するのに用いられるものであり、キーボードに限定されず、ユーザが触れると反応するタッチスクリーンまたは普及している任意のタッチスクリーンを含んでもよい。更にまた、入力装置２４０は、本発明の１以上の実施形態の調整および設定を行うための、ボイスコマンドを含む他の複数の入力または制御を含んでもよい。出力装置２４２は、ＬＣＤ表示スクリーンまたはＬＥＤ表示スクリーンのような１以上の変更可能なアイコン、釦、入力ボックス、メニュー、タブ等を表示してユーザが携帯機器２３０、２３０’を操作し易くする表示装置であってもよい。タッチスクリーンまたは他の入力または出力装置は、ラベル１００の描画に関連し且つ装置のカメラを用いてラベルの構成要素に対応する情報を取得する命令により始動および反応するよう構成されていてもよい。また、画像データのような報告および他のデータは、出力装置２４２を用いて表示されてもよい。取得した画像データは、製品ラベルが認証されたものであるか否かを判定し、元の情報であることを確証し、またはモニタされたホスト製品が良品であるか否かを判定したり、或いは、ホスト製品に関する他の情報、例えば、ホスト製品が過度に熱いまたは寒い状況に晒されたことがあること、または、ホスト製品の残りの大凡の使用期間に関する情報を提供したりするために環境モニタを処理するために用いられる。また、有効期限日は、所定のラベルについて取得した画像データに基づいて再計算されたり変更されたりしてもよく、アクセプタビリティレポートに含まれる、ホストサーバにおいて参照され、および／または別の方法で利用されるものであってもよい。
【００８９】
一実施形態では、通信インターフェース２３８が、病院、医療記録レポジトリ、輸送会社、ストレージエリアネットワーク、ホストサーバ、医薬供給元、生体供給元、政府事業体、および、例えばラベル１００の使用に適した識別子を提供する主体のような他の適当な主体のような、種々のプラットフォームおよびシステムへおよびこれらからインターフェースを通じてデータ交換を容易にする。このように、このインターフェースはレポート１９７を送信したり受信したりするとともに、環境モニタまたは識別子に関連した記録にアクセスするように、データベース１９５に対する検索を開始したりするのに用いてもよい。通信インターフェース２３８に接続するためのハードウェアおよびソフトウェアは、典型的な目的のためだけに、例えばＰＣＳ、ＧＳＭ（登録商標）、ＣＤＭＡ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ、ＩｒＤＡ、ＷｉＭＡＸまたは他の周知の無線規格を含む複数の標準プロトコルにより、無線でデータの送信および受信を行う内部構成および外部構成を含む。
【００９０】
記憶装置２３６またはメモリ２３４は、携帯用または固定用、揮発性または不揮発性或いは読み取り専用または書き換え可能な、コンピュータ可読記録媒体を含んでもよい。コンピュータ可読媒体は、汎用または専用の携帯機器によりアクセス可能な任意の利用可能媒体であってもよい。例によれば、これに限定されるわけではないが、このようなコンピュータ可読媒体は、フラッシュメモリ、ＲＡＭ、ＲＯＭ、電気的消去可能プログラマブル読み取り専用メモリ（ＥＥＰＲＯＭ）、光ディスク記憶装置、磁気ディスク記憶装置または他の磁気記憶装置、或いは携帯機器で電子情報を保存するのに用いることができる他の任意の媒体から構成されていてもよい。
【００９１】
図２Ｃが、携帯機器２３０に示されているユーザと基本資源との間の中継器として動作しうるソフトウェアを表していることは明らかである。このようなソフトウェアは、好ましくはオペレーティングシステムと、ラベル１００を処理するよう構成された１以上のソフトウェアモジュールと、本発明の他の特徴と、を含むのがよい。記憶装置２３６に常駐させることができるオペレーティングシステムは、携帯機器２３０の資源の制御および割り当てを行うものであってもよい。システムアプリケーションは、オペレーティングシステムにより、システムメモリ２３４または記憶装置２３６のいずれかに保存されている、プログラムモジュールおよびプログラムデータ、画像データおおび／またはモニタデータを用いて、資源の管理を行えるという利点がある。更には、本発明が種々のオペレーティングシステムまたはオペレーティングシステムの組み合わせとともに実行されることは明らかである。本発明の実施形態で用いるのに適した、ソフトウェアアーキテクチャおよびソフトウェアモジュールの更なる詳細は、図２Ｄに示されている。
【００９２】
コンピュータ可読媒体は、プログラム、機能および／または命令を具現化したものであり、携帯機器または他の適当な画像撮像通信装置を、それらに示されている特定の予め設定された方法で動作させる。しかし、この分野の当業者にとっては、以下に示す処理がハードウェアからアプリケーションソフトウェアまでの間の任意のレベルで、任意の適切な物理的配置において実行されてもよいことはすでに明らかであろう。例えば、本発明は、携帯機器２３０により実行され、任意の適当なコンピュータ言語を用いたものであり、前述した任意の記憶媒体に保存され、携帯機器２３０のロジックとして設定可能な、ソフトウェアコードとして実現されていてもよい。このようなソフトウェアコードは、Ｃのような任意の適当なプログラミング言語を用いて記述されており、携帯機器２３０により、画像処理部および中央演算処理部を並行して用いつつ実行されるものであってもよい。
【００９３】
いくつかのソフトウェア構成のより詳細な説明の前に、図１、２Ａおよび２Ｂに示すようなラベル１００への典型的な影響に関係する携帯機器の一般的な動作を考慮すべきことについて説明しておく。図２Ｄは、図２Ｃに示す構成の全部または一部、追加的な特徴または本明細書に記載された本発明に関する実施形態を含み得る典型的な携帯機器２３０’を示す。
【００９４】
より具体的には、図２Ｄは、ネットワーク２９５と通信するフラッシュ付きカメラ２９４を有する携帯機器２３０’を示しており、製品ラベル２９７を連想できるように、製品ラベル２９７と並ぶ形で描かれている。また、製品ラベルでないラベルまたは別の製品ラベル２９８も示されている。説明のために、製品ラベル２９７は図２Ｂのラベル１００に示す情報を含むものとする。カメラはビデオカメラまたはスチルカメラのようなビデオカメラでないカメラであってもよい。カメラは、製品ラベル２９７の一部またはラベル全体から連想される１以上の画像フレームを取得するよう構成されている。一実施形態では、図２Ｄに示すように、ユーザがラベル２９７を探してから、認証、識別およびモニタに関する情報を含むラベルについて情報を取得するために、図示のようにカメラを手に持って近づける。
【００９５】
ラベル２９７は一連のラベルとして図示されているが、一実施形態では、１以上のラベルまたは画像形成可能な要素が適宜異なる供給元から提供されるものであってもよい。このように、第２ラベルまたは他のオブジェクト２９８もラベル２９７を第１ラベルとして画像形成される前またはその語に画像形成されるものであってもよい。第２ラベルまたは他のオブジェクト２９８は、本明細書で示されているような、ラベル１００、２９７その他に関する識別子、モニタおよび他の要素を含んでもよい。一実施形態では、第２ラベルまたは他のオブジェクト２９８が、バーコード付きの院内ブレスレット、追跡ラベルまたは発送会社ラベル、臓器輸送追跡装置、またはラベル２９７を有する製品の使用、保存、消費、輸送に関する他の形式のラベルまたは追跡装置のような、患者に関連したバーコードまたは他の走査可能且つ画像形成可能な要素のような識別子を含んでもよい。
【００９６】
１以上の場所からラベル２９７の画像データの１以上のフレームを取得する場合、アクセプタビリティレポートのような報告１９７は、適当なディスプレイまたはタッチスクリーンを用いて携帯機器２３０に表示してもよい。例えば、報告１９７はラベル２９７および／または第２ラベルまたはオブジェクト２９８に関連したホスト製品のアクセプタビリティに関するアクセプタビリティレポートであってもよい。報告１９７は、人が理解できる形式、例えば文字列または他の筆記文字であってもよく、適宜図形またはアイコン等とともに表されていてもよい。報告１９７は、平均的に読み書きできる大人が難なく読んで理解でき、特別な機器を使う必要がないものが有用である。望まれるのであれば、報告１９７は、携帯機器２３０’からプリンタに、例えばＩＲインターフェースを介して出力でき、紙或いはこれに匹敵するものに印刷できるものであってもよい。更に、報告１９７は、望まれるのであれば例えば携帯機器２３０’の音響コンポーネントから耳に聞こえる形で出力されるものであってもよい。一実施形態では、ユーザの操作を簡素化するために、データ取得時において、データ取得が行われ続け、ラベル２９７について１以上のアングルから複数のフレームが取得されるものであってもよい。一実施形態では、最も良いフレームを使用し、他のフレームは破棄する。別の実施形態では、画像データのフレームが他のフレームと比較され、その結果がグレアの補償および所定のラベル内またはその上に存在する異なる要素を識別するのに用いられる。
【００９７】
一実施形態では、機器２３０についてユーザがアプリケーションを選択することにより、ラベルの走査、製品識別子の評価または別の処理に関連する処理が開始される。このように選択する場合、グラフィックユーザインターフェースは、ユーザに種々の選択肢および指令を与えることができる。いくつかの場合、指令は、適宜、装置２３０’により周囲の明るさ状況を検出して取得された情報に基づく明るさを考慮するように通知する。指令は、周囲の明るさ状況がラベルの画像形成ができず、画像データ収集の際にフラッシュライトから１以上の光パルスを入れる必要がある程度であることを示すものであってもよい。または、機器２３０’がユーザにランプまたは太陽光のような外部の光源を用いるように指示するものであってもよい。色感受性は入射光の色バランスに依存するので、いくつかの場合、画像撮像通信装置による写真撮影のために利用可能な光源を用いて周知の色バランスの光を採用するのが有利である。一実施形態では、フラッシュランプは予め設定された色バランスを有する光を出力するように制御されてもよい。
【００９８】
或いは、画像形成装置の外部にある標準的な光源を用いることにより、色レベルの拡張測定量を取得してもよい。ユーザインターフェースはユーザに外部光が必要か否かに関する指令を表示するものであってもよい。しかしながら、本発明のいくつかの実施形態では、携帯機器およびカメラが、外部から光を照射したり、ユーザのためにデータ収集処理を簡素化したりすることなく所望のラベルデータを収集することができる。データ収集は、以下の一実施形態における概要の説明のように、データの複数のフレームを用いて行われるものであってもよい。
【００９９】
図２Ｄに示すように、携帯機器２３０’は、図２Ａ,２Ｂその他の図面について本明細書で説明されているように、種々の要素が配置されたラベル２９７との関係で位置決めされる。画像データは、周囲光、携帯機器２３０’または外部光源からの１以上のフラッシュ光或いは他の種類の光である光λが存在する中でカメラ２９４を用いることにより収集することができる。一実施形態では、ラベル２９７および／またはラベル２９８についてカメラ２９４を用いて取得した画像データの１フレームがあれば、要素２０２の認証、モニタ２１０および２２５の識別、モニタ２１０および２２５からの曝露レベルの読み込みおよび取得、２Ｄバーコードのような識別要素２０５の処理および識別、図２Ｄに示す製品情報のような他の文字列または情報、即ち、製品名「ＶａｃｃｉｎｅＡ」。参照番号「５１２２０」および日付「１２／１／２０１４」の取得のうちの１以上を十分に実行できるものであってもよい。一度これらの処理が実行されたり或いはデータが収集されたりすると、画像データは処理または保存のためにホストサーバへ送られたり或いは装置２３０’で処理されたりしてもよい。アクセプタビリティレポートのような報告１９７は、図示のように携帯機器に表示されてもよい。図２Ｅおよび２Ｆは、あり得るアクセプタビリティレポートの例を示す。これらの報告は、取得した画像データを用いて携帯機器から離れたところ或いは携帯機器で生成されてもよい。
【０１００】
ここで注目すべきことは、グレア、かすみおよび他の好ましくない光学的効果が、バーコード、環境モニタを解析したり、または、検出モジュールがラベル上の所定の環境モニタまたは他の要素の関連する場所を探すのに用いる楕円または他の形状を見つけ出したりする装置の能力に影響し得ることである。更に、ユーザにとって、重なりに配慮してラベルの位置決めを行ったり外部光源を使用したりしなければならないことに比べれば、携帯機器アプリケーションを始動させたり、ビデオ、またはスチル画像またはビデオ画像としての複数のフレームを取得したりすることは容易である。
【０１０１】
これらの問題を処理するために、いくつかの実施形態では、画像データが例えば機器２３０’がラベルに関連した適当な曲線軌道に沿って動いているときに当該機器２３０’から取得したビデオのように、複数のフレームとして収集してもよい。従って、図２Ｄの矢印で示すように、機器２３０’を位置ＡからＢへ動かすとともに位置ＢからＡへ戻すこと、および／または携帯機器２３０’を位置ＣからＤへ動かすこと、および／または携帯機器２３０’を位置ＤからＣへ戻すことにとっては有益である。更に、携帯機器のこのような動き、動きのパターンまたは適度に自由な動きを実行するための指令は、ユーザに機器のディスプレイを介して伝えられるものであってもよい。動いている最中は、ラベル２９７および／またはラベル２９８から、画像データの種々の異なるアングルからの複数の連続したフレームが収集される。一実施形態では、携帯機器２３０’の位置情報（ＧＰＳ、Ｗｉ−Ｆｉ、携帯電話、その他）および電話番号情報が、携帯機器２３０’を用いて送信され、これらの情報は適宜画像データの１以上のフレームについてまたは画像データを取得する各セッションにおいてデータベースに保存される。この情報は、種々の報告で用いられ、ラベル処理イベントの装置および場所の認証および／または記録に用いられてもよい。
【０１０２】
データの複数のフレームを取得することは、無視すべき高いグレアのようなエラーを含むデータフレームを許容することになり得る。更に、時間インデックスをフレームに付すこと、および／または加速度計の表示を追跡したり、加速度計付き携帯機器２３０’を用いたりまたは他の画像データのパラメータを用いることにより、画像データのフレームについて異なる解析がなされて、ラベルの要素をより良好に識別し且つ表示をより良好に分析できる。また、画像データフレーム間の相関は、効果的にグレアを除去したり、或いは、所定のラベルの別の領域から環境モニタを正確に区別するために、サーバまたは処理部において実行する検出モジュールのようなアルゴリズムの正確性を増加させる相関を判定したりするために用いられてもよい。曲面を有する容器では、強度が低く色変化を読み取りにくいモニタ、汚れたバーコードおよび他の読み取り困難なラベル要素、異なる分析およびデータフレームの付加的な組み合わせは、ラベルの読み取りおよび処理を改善し得る。
【０１０３】
更に、フラッシュは、データフレームの全てを取得、またはデータフレームのうちのいくつかを取得し他は取得していないことに起因して始動することにより、データセットにおける周知の付加的変化を、画像形成の精度の向上に用いるようにしてもよい。同様に、バーコードまたは他の記号がラベルに使用された場合、黒および白の領域（または他の模様または着色領域）が、カメラにより取得された画像データのダイナミックレンジ、例えば、特定の取得した画像データセットにより表された１以上の種々の光学的パラメータの限界値を評価するために用いられてもよい。
【０１０４】
また、特定の記号は、モニタ、或いは、アルゴリズムがラベル上の所定の要素の検出処理または所定のラベル要素の読み取り処理を改善するために暗号化する他の要素の周りに配置されていてもよい。使用することができる特定の記号の例は、種々の照明条件の下で区別できる画像を提供できたり、上記アルゴリズムがモニタ画像、バーコード画像または他の要素画像を配置可能な画像領域の境界を画定して認識されるようにできたりする、小文字のＬの形状のコーナーブラケットを含む。携帯機器は、カメラによって取得された画像データ中に存在し、アルゴリズムによって認識され且つアクセスされうる画像についての情報を含んでいてもよい。更に、バーコードまたは番号のようなラベル上の要素は、同じラベルに存在する他の要素および所定の画像データセットにおいて環境曝露レベルを取得するために質問がなさるべき位置を明記したデータベースにおける情報またはインデックス情報を含んでもよい。指標、バーコード、モニタが、全てを個々に識別できる、異なる見え方および光学的特性を有しているので、処理または無視する付加的データを有するとともに、所定のラベルの予め知られている特徴を利用することによって、画像データ処理で正確なアクセプタビリティレポートを出力することが容易になっている。
【０１０５】
一実施形態では、アプリケーションプログラミングインターフェース（ＡＰＩ）は、携帯機器のカメラおよび／またはフラッシュを制御したり使用したりするために用いられる。本発明によれば画像処理ソフトウェアの実施形態は、ＡＰＩを変形したりＡＰＲを無効にして機器に予めインストールされたソフトウェアモジュールが生画像データを受信してラベル１００の画像形成および処理を容易にするものであってもよい。カメラを制御することにより、アプリケーションプログラムインターフェースまたはカメラの制御に用いられる他のソフトウェアまたはハードウェアの構成要素を制御することにより、本発明による画像処理ソフトウェアの一実施形態によれば、カメラを用いて取得した画像データが前処理がなされるのを防ぐ。例えば、いくつかの携帯機器は、一般的にホワイトバランスフィルタ、赤目軽減モードまたは他の処理ステップを実行するように、種々の方法で画像データの前処理を行う。本明細書に記載のソフトウェアは、このような前処理を無効にし、生カメラデータを取得できるようにすることができる。この方法では、収集された画像データが色補正による修正がなされておらず、検査において携帯機器およびラベルへの入射光の曝露レベルの指標を含んでもよい。いくつかの環境下では、画像データの前処理がなされない場合、コントラスト、ホワイトバランスまたは他のフィルタのアプリケーションが、所定のラベル上の要素、例えば環境モニタを識別したり読み込もうとしたりしたときにエラーとなる。
【０１０６】
モニタの参照区域、色参照区域およびアクティブ領域の色を定量化するために、画像における黒および白の色量を識別して画像を調整する必要がある。これらの値は、バーコードの黒と白の構成要素の色値を測定することにより取得されてもよい。また、他の周知または予め設定されたラベルの構成要素を用いてもよい、
【０１０７】
図２Ｄに示すように、携帯機器２３０’のような画像形成装置は、装置に表示される報告１９７を生成するために処理がなされた画像データを取得している。一実施形態では、この報告がアクセプタビリティレポートであってもよい。別の実施形態では、報告１９７がラベルを有する製品についての画像データの取得および処理の間に生成され、またはこれらから導出された記録管理システムの事前設定に適した任意のデータを含んでもよい。例えば、ラベル２９７のような製品ラベルに関連するホスト製品に関する第１主体および第２主体の間で生じる干渉およびイベントが、携帯機器を用いて追跡でき且つ１以上のデータベースに記録できるものであってもよい。追跡および記録は、第２主体に関連し、１以上の識別子、モニタ、文字列、認証要素および本明細書に記載されている他の要素を有する第２ラベル２９８を走査することにより可能となってもよい。
【０１０８】
一実施形態では、レポート１９７が患者データ等の医療データを含んでいてもよい。従って、製品ラベル２９７がワクチン容器または他のワクチン収納器に貼り付けられている場合、特定の患者において可能性のあるワクチン接種の記録が、図２Ｄに示す画像データ取得の一部で、携帯機器による、第２ラベル２９８またはオブジェクトのようなラベルおよび患者識別子を走査した結果として生成されてもよい。使用条件が分かっている場合、例えば医療専門家がワクチンの管理とともに走査を実行することが知られている場合、ワクチン接種イベントが高い信頼性の下に記録されてもよい。データファイルが規則エンジンまたは他の論理システムを用いて前処理または解析がなされることによりトランザクションが解読され医療記録管理システムのデータベースへのルートが決定され、これにより患者の処置の記録を提供する。この場合、患者のためのワクチン容器を走査する際に読み取られた患者が、ソフトウェアにより解読され、患者がワクチン接種を受けたことを示すようにすることができる。ワクチン接種の日付と場所は、携帯機器のタイムスタンプおよびＧＰＳを用いることにより自動的に生成されるものであってもよい。従って、アクセプタビリティレポートは、製品ラベルにより関連するホスト製品が使用を認められるものであるか否かを明らかにされる情報とともに、このようなトランザクションの情報を含んでもよい。また、ラベル２９７に関連する輸送および追跡情報は、報告１９７に含まれていてもよく、ラベル２９７が付されたホスト製品の配送日程の最初と最後についての情報を有する報告にしてもよい。輸送および追跡情報は、ホストサーバおよび／または携帯機器２３０’により報告１９７に追加されてもよい。例えば、携帯機器２３０’は、適宜患者識別子、手書きのアドレスまたは他のラベル要素から導出されるアドレス情報を含み得る、ラベル２９７および／またはラベル２９８から導出される配送情報を提供するものであってもよい。また、ユーザがホスト製品の使用に先立ってラベル２９７および／または２９８を走査する場合、携帯機器２３０’がＧＰＳ機能または別の位置情報提供機能を有するのであれば位置情報とともに携帯機器２３０’の日付／時間時計により提供される使用日および／または使用時刻のような情報を提供するものであってもよい。別の例では、ラベル２９７が走査されると医薬製品シリアル番号情報が生成され、ラベル２９８が走査されると患者情報が生成され、ホストサーバがその患者と特定の直列化された医薬製品アイテムとが紐付けできるようにしてもよい。
【０１０９】
図２Ｅおよび３Ｆにはアクセプタビリティレポートの例が示されている。図２Ｅでは、アクセプタビリティレポートが、ラベルに関して実行された認証性、環境状況（この場合、温度）および有効日のチェックの全てにおいて許容限界内であることを示しているとされたことにより、当該ラベルに関連する製品が使用されうることを示す。逆に、図２Ｆでは、アクセプタビリティレポートは、画像データを取得したラベルに関連する製品は使用されるべきではないことを示す。この結果および関連するユーザへの指示（「製品を使用してはならない」）は、認証性および有効日チェックが許容範囲内であるが１以上の環境モニタを介してチェックされる熱曝露度が許容限界内ではないことを示しているので、ユーザは容易に理解することができる。例えば、ラベルを有する製品が過度の高熱環境または寒冷環境に晒されたり、過度に長い時間不適切な状況に晒されたりした場合、モニタから読み取られる指標、関連するモニタ状況が、これらを反映する。同様に、モニタ画像データは、ソフトウェアアプリケーションがアクセプタビリティの判定を行うための解析が可能であることの証拠を提供する。
【０１１０】
冷蔵保存を要求することが好ましいが、限られた期間、例えば輸送されている間に室温に晒されうるホスト製品、例えば生体医薬品のアクセプタビリティの確認に、本明細書で説明するソフトウェアに基づくシステムを使用する可能性がある。環境モニタは、互いに異なる種類の環境刺激に反応するものであってもよい。このような刺激の例には、累積的熱曝露度、閾値よりも高い温度に曝されること、閾値よりも低い温度に曝されることが含まれるが、これらに限定されるわけではない。例えば、閾値温度よりも高くなっている時間を計測する環境モニタが、冷蔵保存を要求することが好ましいが、限られた期間、例えば輸送されている間に室温に曝されうるホスト製品、例えば生体医薬品のアクセプタビリティの確認のために用いられてもよい。このようなラベルを走査することに関連する画像データを用いて、自動的に関連する環境モニタを識別して予め設定された期間を超えたか否かを示す色変化を判定するようにしてもよい。
【０１１１】
図３のステップ３００に示すように、本発明の一実施形態では、画像撮像通信装置が、ホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂに示す）を解析してもよい。この解析に基づいて、例えば、ステップ３０５に示すように、画像撮像通信装置が、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素が示す視覚的信号または電気信号を取得するために走査することにより、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１１２】
一実施形態では、認証要素、モニタまたは識別要素の形式が、画像撮像通信装置が認証要素、モニタまたは識別要素からデータを引き出す方法を画像撮像通信装置に示す。例えば、識別要素の形式が、一次元バーコードであり、画像撮像通信装置がバーコードを走査してバーコードデータを解読することを示している。別の例では、モニタの形式が、アクティブ区域および参照区域を有する環境モニタであり、画像撮像通信装置が比較のために２つの区域の画像を取得することを示している。別の例では、認証要素の形式がＲＦＩＤであり、画像撮像通信装置が質問信号を送信してＲＦＩＤからデータを引き出すことを示している。
【０１１３】
１以上の認証要素、モニタおよび／または識別要素それぞれの１以上の特徴は、認証要素、モニタおよび識別要素に保存されたデータを提供するために用いられる認証要素、モニタおよび識別要素の形式に関連する特徴である。例えば、識別要素の形式が一次元バーコードである場合、上記特徴は、バーコードに関連した線および／または数字であってもよい。別の例では、モニタの形式がアクティブ区域および参照区域を含む環境モニタである場合、モニタの特徴がアクティブ区域の色および参照区域の色であってもよい。別の例では、認証要素の形式がＲＦＩＤである場合、認証要素の特徴がＲＦＩＤに保存されたデータであってもよい。
【０１１４】
更に、本発明の一実施形態に係る図３のステップ３１０に示すように、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）にアクセスするものであってもよい。画像撮像通信装置は、ネットワーク１８５（図１に示す）および／または移動体ネットワーク１８０（図１に示す）を通じてホストサーバ１９０に接続することにより、このようなアクセスを実現するものであってもよい。他の実施形態では、画像撮像通信装置が、直接衛星リンクを通じてホストサーバ１９０に接続するものであってもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバに接続されると、ステップ３１５に示すように、画像撮像通信装置が、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、ショートメッセージサービス（ＳＭＳ）文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介してホストサーバ１９０（図１に示す）へ形式および特徴を送信してもよい。
【０１１５】
画像撮像通信装置は、ステップ３２０に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。画像撮像通信装置は、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。更に他の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬにおいて利用可能なウェブサイトへ送る。
【０１１６】
更に、本発明の一実施形態に係る図３のステップ３２５に示すように、画像撮像通信装置が、アクセプタビリティレポートを表示してもよい。例えば、画像撮像通信装置１７０、１６０および／または１１０が文字列に基づくおよび／または図形に基づく、アクセプタビリティレポートを、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイまたは陰極線管（ＣＲＴ）のような表示装置に出力してもよい。
【０１１７】
アクセプタビリティレポートは、ホスト製品が使用の認められたものであるか、ホスト製品が認証されているか、製品識別データ、ホスト製品の環境履歴を含む製品履歴データ、ユーザがホスト製品のアクセプタビリティに基づいて実施する方法についての命令、ＳＧＴＩＮおよび／または系図認証のような系図細目および新しい有効期限または使用日が環境曝露に基づいて提供されたものであるか、のいずれかを示す文字列、記号および／または図形を含んでもよい。ホスト製品が医薬品である場合、患者情報シートをダウンロードするためのリンクを含んでいてもよい。また、生じうる不利な反応に関する破壊警告、製品リコール情報、このような情報の案内、要求またはリンクが上記報告に含まれていてもよい。アクセプタビリティレポートは、ホスト製品の所持者が再度ホスト製品を注文したり、ホスト製品を返品したりするためのリンクを含んでもよい。このような情報は、１以上の認証要素、モニタおよび／または識別要素から受信したデータによって生じるものであってもよい。
【０１１８】
アクセプタビリティレポートは、画像撮像通信装置から音声出力されてもよい。例えば、画像撮像通信装置が、ホストサーバまたは画像撮像通信装置のいずれかに配置されている、文字列を音声化するルーチンまたは音声ライブラリを使用するものであってもよい。この実施形態によれば、視覚障害を有するユーザが、ホスト製品が使用を認められるものであるか否かを理解しうる。
【０１１９】
図４のステップ４００に示すように、本発明の一実施形態によれば、１以上の画像撮像通信装置１７０、１６０および１１０（図１に示す）が、ホスト製品の形式に基づいて形式および１以上の特徴を有するモニタを解析するものであってもよい。１以上の画像撮像通信装置は、モニタの静止写真または静止画像を取得してもよい。ステップ４０５において、１以上の画像撮像通信装置が、上記形式に基づいてモニタの形式および１以上の特徴を判定するものであってもよい。ステップ４１０において、１以上の画像撮像通信装置は、１以上の特徴および／または形式が、モニタ２１０（図２Ａに示す）に含まれるような、モニタに色参照区域が含まれていることを示しているか否かを判定するものであってもよい。
【０１２０】
特徴および／または形式がモニタに色参照区域が含まれることを示している場合、ステップ４１５において、１以上の画像撮像通信装置が、ラベルの、またはモニタの一部としての参照領域または参照色領域の１以上の第１画素の配置およびアクティブ領域の１以上の第２画素の配置を計測してもよい。一実施形態では、ステップ４１５における計測が、パターン認識ルーチンを実行することによりなされる。ステップ４２０では、１以上の画像撮像通信装置が、１以上の第１画素の配置に基づく参照領域または参照色領域の第１ＲＧＢ値、および１以上の第２画素の配置に基づくアクティブ領域の第２ＲＧＢ値を導出してもよい。ステップ４２５では、１以上の画像撮像通信装置が、第１ＲＧＢ値を第１色空間値に変換するとともに、第２ＲＧＢ値を第２色空間値に変換するものであってもよい。ステップ４３０では、１以上の画像撮像通信装置が、第１色空間値と第２色空間値とを比較してもよい。例えば、色空間値は、ＲＧＢ値の平均値を計算することにより取得されるグレイスケールであってもよい。色空間値の別の例としては、フルスケール値を分母とする分数として表されたＲ値の１０を底とする負の対数であるシアンＯＤであってもよい。
【０１２１】
ステップ４３５において、１以上の画像撮像通信装置は、例えば静止写真または静止画像が１以上の画像撮像通信装置または１以上のホストサーバ１９０（図１に示す）がモニタからの利用可能な製品情報の全てを提供するのに十分正確な色空間値を導出するのに十分な色解像度を含んでいるか否かを判定するものであってもよい。例えば、照明条件が具備しておらず画像撮像通信装置が十分な光を出せていない場合、画像撮像通信装置は、アクティブ区域が参照区域よりも暗いか或いは明るいかを判定するのに十分なデータを引き出すことはできるが、比較してより多くのデータを導出する必要がある暗さおよび明るさの程度を正確に判定するのに十分なデータを引き出すことはできないことがある。
【０１２２】
従って、１以上の画像撮像通信装置が静止画像または静止写真が十分な色解像度を含んでいないと判定した場合、ステップ４４０において、１以上の画像撮像通信装置が、比較（ステップ４３０）に基づいて、ホスト製品が使用を認められるか否かを判定するものであってもよい。更に別の実施形態では、十分な色を具備していないために、下りで生成されたアクセプタビリティデータが、ホスト製品は使用が認められるものであるか否かを示しているが、アクセプタビリティの程度、例えば特定の状況への曝露の程度を正確に示していないものであってもよい。この実施形態では、アクセプタビリティの程度は、アクセプタビリティレポートから削除されていてもよい。
【０１２３】
一実施形態では、ステップ４４０において色解像度が、色の正確な計測およびアクセプタビリティの程度の正確な判定を行うのに十分でない場合でも、アクセプタビリティ領域において色値を評価するには十分かもしれない。例えば、一実施形態では、環境曝露度の４つの領域が、許容できる環境曝露度の０％、２５％、５０％、７５％および１００％に境界を有するものとして定義されていてもよい。他の例では、異なる数の曝露領域および異なる許容境界を採用してもよい。色の計測は、曝露度がどの領域にあるかを判定するのに十分な精度および解像度を有する。これらの領域は、所定のラベルおよび関連する製品の環境曝露度が、使用を認められるものとして報告されることを保証するか否か、或いは、使用を認められないものとして報告されることを要求するか否かを見積もるために順に用いられる。
【０１２４】
１以上の画像撮像通信装置が静止画像または静止写真に十分な色解像度が含まれないと判定する場合、ステップ４４５において、１以上の画像撮像通信装置が、比較（ステップ４３０）に基づいて、ホスト製品が使用を認められるものであるか否かを判定するとともに、下りで生成された任意のアクセプタビリティレポートの中の使用のアクセプタビリティの程度を示すものであってもよい。一実施形態では、ホスト製品の許容限界を超える時間累積的に熱に曝された場合、アクティブ区域の色が暗くなってもよい。アクティブ区域の色が参照区域と同じ暗さになった或いは参照区域よりも暗くなった場合、モニタが、視覚的な信号によって、それに関連するホスト製品がもはや使用を認められないものであることを示していてもよい。別の実施形態では、ホスト製品の許容限界を超える時間累積的に熱に曝された場合、アクティブ区域の色が明るくなってもよい。この実施形態では、アクティブ区域の色が参照区域の色よりも明るい場合、モニタが、視覚的な信号によって、それに関連するホスト製品がもはや使用を認められないものであることを示していてもよい。
【０１２５】
ステップ４１０において、１以上の画像撮像通信装置が特徴および／または形式がモニタに色参照区域が含まれないことを示していると判定した場合、ステップ４６０において、１以上の画像撮像通信装置がアクティブ領域の１以上の第１画素または色配置を評価してもよい。一実施形態では、ステップ４６０における評価が、パターン認識ルーチンを実行することによりなされる。ステップ４６５では、１以上の画像撮像通信装置が、モニタの形式および／または特徴に基づいて、モニタが色によって環境状況のような情報を提供するか否かを判定する。モニタが色によって情報を提供する場合、ステップ４７０において、１以上の画像撮像通信装置が、１以上の第１画素または色配置に基づいてアクティブ領域の第１ＲＧＢ値を導出してもよい。ステップ４７５において、１以上の画像撮像通信装置が、第１ＲＧＢ値を第１色空間値に変換してもよい。ステップ４８０において、１以上の画像撮像通信装置が、色空間値が値の体系に対して小さいか、等しいか、または大きいかを判定するために、モニタの形式および／または特徴に基づいて、第１色空間値と値の体系とを比較してもよい。比較（ステップ４８０）に基づいて、１以上の画像撮像通信装置が、ステップ４８１において、ホスト製品が使用を認められるものであるか否かを判定してもよい。
【０１２６】
モニタが色による情報を提供しない場合、ステップ４８５において、１以上の画像撮像通信装置が、モニタに関する特定の視覚的パターンを判定することにより情報が提供されるか否かを判定する。例えば、一実施形態では、ある環境状況が存在する場合、アクティブ領域に、図２ＢＡのモニタ２２５に示されるチェックマークのような記号が表れてもよい。ステップ４８６において、視覚的パターンがモニタに存在する場合、１以上の画像撮像通信装置が、視覚的パターンに基づいて、ホスト製品が使用を認められるものであるか否かを判定してもよい。モニタの形式および特徴によっては、視覚的パターンの存在が、ホスト製品が使用を認められるものである、或いは使用を認められないものであることを示してもよいし、或いは、画像撮像通信装置および／またはホストサーバにより、ホスト製品が使用を認められるものであるか否かを判定するために、視覚的パターンが、他のモニタ、認証要素および／または識別要素のような他のデータに照らして、解釈される必要があってもよい。
【０１２７】
ステップ４５０において、１以上の画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）に画像撮像通信装置がネットワーク１８５（図１に示す）を通じて直接的または間接的に接続されているか否かを判定する。１以上の画像撮像通信装置が、１以上のホストサーバに画像撮像通信装置がネットワーク１８５を通じて接続されていると判定した場合、画像撮像通信装置は、ステップ４９０において、形式、特徴、比較結果（ステップ４３０および／または４８０における）、および／または判定結果（ステップ４３５、４４０、４８１および／または４８６における）を含むデータを、１以上のホストサーバへ送信してもよい。ステップ４９２において、画像撮像通信装置は、ホストサーバから、モニタに関連する１以上のホスト製品に関するデータを受信するとともに、アクセプタビリティレポートの様式のデータを出力する（図３のステップ３２５に示す）。このデータは、ホスト製品の名称、強度、表示（例えば、充填済注射器、水薬瓶、アンプル等）、量、製品識別番号、シリアル数字識別子（ＳＮＩ）、ＳＧＴＩＮ、薬品番号コード（ＮＤＣ）、ロット番号、期限日、製造場所、製造日、保管条件、識別、認証およびモニタを含む読み取り単位毎の日付／時間および状況、読み取り情報またはＧＰＳ情報のサイト、読み取り装置、人または読み取る主体の素性、製品仕様情報（例えば、仕様書、添付文書、取扱説明書等）、リコール状況、保証情報、製品割引クーポン、製品の状況変化の通知（例えば、製品がリコールその他の活動の対象となっている場合、通知が自動的にアクセプタビリティ装置を読む最終主体に送られるようにしてもよい。）、再注文製品の通知、緊急情報コール、またはｅメールアドレスを含んでもよい。
【０１２８】
１以上の画像撮像通信装置が、１以上のホストサーバに自装置がネットワーク１８５を通じて接続されていないと判定した場合、１以上の画像撮像通信装置は、ステップ４５１において、それらがＳＭＳのようなメッセージを、移動体ネットワーク１８０を通じて、１以上のホストサーバへ送信できるか否かを判定する。１以上の画像撮像通信装置がメッセージを送信できると判定すると、ステップ４９５において、１以上の画像撮像通信装置が、ホストサーバから、モニタに関連する１以上のホスト製品に関するデータを受信してもよい。一実施形態では、データがＵＲＬのようなリンク形式であり、１以上のホストサーバが生成したアクセプタビリティレポートを提供するウェブページを参照するものであってもよい（図３のステップ３２５に示す）。
【０１２９】
１以上の画像撮像通信装置が、メッセージを送信できないと判定した場合、ステップ４５５において、１以上の画像撮像通信装置が、ユーザへ、ステップ４３０、４３５、４４０、４８０、４８１および／または４８６における比較および判定の結果に基づくアクセプタビリティレポートを出力してもよい。出力は、視覚的表示および／または聴覚的表示の形であってもよい。
【０１３０】
図５のステップ５００に示すように、本発明の一実施形態では、１以上のホストサーバ１９０（図１に示す）が、１以上の画像撮像通信装置１７０、１６０および１１０（図１に示す）から、当該画像撮像通信装置１７０、１６０および１１０が解析する製品ラベルに存在する１以上の認証要素、モニタおよび／または識別情報それぞれの形式および特徴を含むメッセージまたは他のデータを受信してもよい。更に他の実施形態では、メッセージまたはデータが、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信される。
【０１３１】
更に、図５のステップ５０５に示すように、メッセージまたはデータに基づいて、ホストサーバ１９０（図１に示す）が１以上のデータベース１９５（図１に示す）からホスト製品に関する情報を引き出し、画像撮像通信装置１７０、１６０および１１０（図１に示す）から受信したメッセージまたはデータを、データベース１９５に保存する。ホスト製品に関する情報は、ホスト製品の名称、強度、表示（例えば、予め充填されている注射器、水薬瓶、アンプル等）、量、製品識別番号、ＳＮＩ、ＳＧＴＩＮ、ＮＤＣ、ロット番号、期限日、製造場所、製造日、保管条件、識別、認証およびモニタを含む読み取り単位毎の日付／時間および状況、読み取り情報またはＧＰＳ情報のサイト、読み取り装置、人または読み取る主体の素性、製品仕様情報（例えば、仕様書、添付文書、取扱説明書等）、リコール状況、保証情報、製品割引クーポン、製品の状況変化の通知（例えば、製品がリコールその他の活動の対象となっている場合、通知が自動的にアクセプタビリティ装置を読む最終主体に送られるようにしてもよい。）、再注文製品の通知、緊急情報コール、またはｅメールアドレスを含んでもよい。
【０１３２】
更に別の実施形態では、ステップ５１０において、メッセージまたはデータに基づいて、ホストサーバ１９０（図１に示す）が、例えば、ホスト製品が認証されているか否か、および／またはホスト製品が、ホスト製品の設定限界を外れるほど環境状況に曝されたか、または上記設定限界内で環境状況に曝されたかを判定してもよい。ステップ５１５において、１以上のホストサーバ１９０（図１に示す）が、判定（ステップ５１０においてなされた）を参照する情報を、１以上のデータベース１９５（図１に示す）に保存してもよい。ステップ５２０において、ホストサーバ１９０（図１に示す）が、判定（ステップ５１０で行われた）に基づいて、アクセプタビリティレポートを生成してもよい。一実施形態では、アクセプタビリティレポート（ステップ５２０で生成された）の生成は、ＨＴＭＬに基づくウェブページおよび当該ウェブページを示すＵＲＬを生成することを含んでもよい。ステップ５２５において、ホストサーバ１９０（図１に示す）が、ＵＲＬを含むメッセージまたはデータを、画像撮像通信装置へ、移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を介して送信してもよい。
【０１３３】
別の実施形態では、アクセプタビリティレポート（ステップ５２０で生成された）の生成は、判定（ステップ５１０で行われた）および／またはホスト製品の他の特性に基づいて、データを表にすることを含んでもよい。この実施形態では、ステップ５２５において、１以上のホストサーバ１９０（図１に示す）が、このような表形式のアクセプタビリティレポートを、画像撮像通信装置１７０、１６０および／または１１０（図１に示す）へ、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して送信してもよい。
【０１３４】
図６Ａ、６Ｂおよび６Ｃに示すように、本発明の一実施形態によれば、ホスト製品の製造は、本発明のシステムおよび方法を用いてホスト製品の臨床試験の各段階において、ホスト製品のアクセプタビリティを追跡してもよい。例えば、ステップ６００において、製造者が、１以上のホスト製品を、１以上のモニタ、製品識別要素および認証要素のうちの少なくとも２つを含む、製品ラベル１００（図１、２Ａおよび２Ｂに示す）に関連付けしてもよい。関連付け（ステップ６００における）の間、製造者は、１以上のモニタ、製品識別要素および／または認証要素それぞれに対応する限界または他のデータを設定してもよく、或いは製造者が、１以上のモニタ、製品識別要素および／または認証要素を、特定のホスト製品に適した予め設定された限界および／またはデータとともに用いてもよい。
【０１３５】
ステップ６０４において、製造者が臨床試験において製品を使用するために封切りする前に、画像撮像通信装置がホスト製品の製造現場において、ホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂに示す）を解析してもよい。この解析に基づいて、例えば、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素が示す視覚的信号または電気信号を走査することにより、画像撮像通信装置は、ステップ６０５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式または特徴を判定する。
【０１３６】
ステップ６１０において、画像撮像通信装置は、１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。画像撮像通信装置は、ホストサーバ１９０にネットワーク１８５（図１に示す）および／または移動体ネットワーク１８０（図１に示す）に接続することにより、このようなアクセスを実現してもよい。他の実施形態では、画像撮像通信装置が、ホストサーバ１９０に衛星リンクを通じて直接接続してもよい。一度画像撮像通信装置がホストサーバに直接的または間接的に接続されると、画像撮像通信装置が、ステップ６１５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、形式および特徴を、ホストサーバ１９０（図１に示す）へ、ショートメッセージサービス（ＳＭＳ）文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して送信してもよい。
【０１３７】
更に、画像撮像通信装置は、ホストサーバ１９０（図１に示す）から、ステップ６２０に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に他の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬで利用可能なウェブサイトへ送る。
【０１３８】
本発明の一実施形態によれば、ステップ６２５において、画像撮像通信装置がアクセプタビリティレポートを出力してもよい。例えば、画像撮像通信装置１７０、１６０および／または１１０は、文字列に基づく、および／または図形に基づくアクセプタビリティレポートを、ＬＣＤディスプレイ、ＬＥＤディスプレイまたはＣＲＴディスプレイのような表示装置に出力するものであってもよい。更に、音声報告が、図形により表示される報告に代えて、またはこれに加えて、出力されるものであってもよい。ステップ６３０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザが、或いはその装置自体が、ホスト製品が使用の認められるものであるか否かを判定してもよい。例えば、アクセプタビリティレポートが、正確に「使用を認められない」または「使用が認められる」と記載されているものであってもよいし、ユーザまたは装置／ホストサーバ自体により解釈される特定のデータを提供するものであってもよい。ステップ６３４において、ホスト製品が使用を認められないものである場合、それは出荷することができない。更に別の実施形態では、アクセプタビリティレポートが、製造元によって生成され送信された、ユーザによる使用の認められていない製品の扱いに関する指示を含むものであってもよい。製品の使用が認められる場合、ステップ６３５において、ホスト製品が、病院のような診療所で封切られる。
【０１３９】
ステップ６４０において、診療所および／または配送業者が、診療所でホスト製品の倉庫で付与された製品ラベル１００（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づいて、画像撮像通信装置が、ステップ６４５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を判定する。
【０１４０】
ステップ６５０において、画像撮像通信装置が１以上のホストサーバ１９０（図１に示す）へアクセスしてもよい。一度画像撮像通信装置がホストサーバに直接的または間接的に接続されると、画像撮像通信装置は、ステップ６５５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信する。画像撮像通信装置は、ステップ６６０に示すように、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、製造現場で収集したデータを含む、ホスト製品に関する履歴情報を考慮したものであってもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬで利用可能なウェブサイトへ送る。
【０１４１】
ステップ６６５において、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。ステップ６７０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザが、或いはその装置自体が、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ６７１において、ホスト製品が使用を認められないものであれば、そのホスト製品は、出荷されずに製造元へ返却されてもよい。更に別の実施形態では、アクセプタビリティレポートが、製造元によって生成され送信された、診療所による使用を認められていない製品の扱いに関する指示を含んでもよい。製品が使用の認められたものである場合、ステップ６７５において、ホスト製品は、診療所が当該ホスト製品を患者または医者に与えると決定する時まで保管されてもよい。
【０１４２】
ステップ６８０において、診療所が、診療所において保管されているホスト製品の製品ラベル（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づいて、画像撮像通信装置が、ステップ６８５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１４３】
ステップ６９０において、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置がホストサーバに直接的または間接的に接続されると、ステップ６９５に示すように、画像撮像通信装置は、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信する。ステップ７００に示すように、画像撮像通信装置は、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、診療所において製造現場および受取現場で収集されたデータを含む、ホスト製品に関する履歴情報を考慮したものであってもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信するものであってもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬで利用可能なウェブサイトへ送る。
【０１４４】
ステップ７０５において、画像撮像通信装置がアクセプタビリティレポートを出力してもよい。ステップ７１０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザが。または当該装置自体が、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ７１１において、ホスト製品が使用を認められないものである場合、当該ホスト製品が、臨床試験での使用のために患者または医師に配布されなくてもよい。更に別の実施形態では、アクセプタビリティレポートが、製造元により生成され送信された、診療所による使用を認められなかった製品の扱いに関する指示を含むものであってもよい。製品が使用を認められるものである場合、ステップ７１５において、ホスト製品が患者または医師へ配布されてもよい。
【０１４５】
ステップ７２０において、患者または医師は、医院、患者の家またはホスト製品が患者のために管理されている他の場所において、ホスト製品の製品ラベル（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づいて、画像撮像通信装置が、ステップ７２５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１４６】
ステップ７３０において、画像撮像通信装置は、１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置がホストサーバへ直接的または間接的に接続されると、画像撮像通信装置が、ステップ７３５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、ステップ７４０に示すように、ホストサーバ１９０（図１に示す）から、ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、診療所において、製造現場、受取現場および発送現場で収集されたデータを含む、ホスト製品に関する履歴情報を考慮したものであってもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、ホストサーバ１９０（図１に示す）からアクセプタビリティレポートを受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）がアクセプタビリティレポートをＵＲＬで利用可能なウェブサイトへ送る。
【０１４７】
ステップ７４５において、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。ステップ７５０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザが、或いは当該装置自体が、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ７５１において、ホスト製品が使用を認められない場合、そのホスト製品は、臨床試験において患者または医師により使用されない或いは使用できないようにされて製造元へ返却される。更に別の実施形態では、アクセプタビリティレポートが、製造元により生成され送信された、診療所による使用が認められなかった製品の扱いに関する指示を含んでもよい。製品が使用を認められるものである場合、ステップ７５５において、ホスト製品が、患者または医師により使用される、或いは使用できるようにされてもよい。
【０１４８】
ステップ７６０において、患者または医師が臨床試験を止めてホスト製品を診療所へ返却する。ホスト製品が返却されると、診療所は、ホスト製品の製品ラベル（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づいて、画像撮像通信装置は、ステップ７６５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１４９】
ステップ７７０において、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置がホストサーバに直接的または間接的に接続されると、画像撮像通信装置が、ステップ７７５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、ステップ７８０に示すように、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素の形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、診療所および医院、患者の家および／またはホスト製品が患者のために管理されている他の場所において、製造現場、受取現場および発送現場で収集されたデータを含む、ホスト製品に関する履歴情報を考慮するものであってもよい。更に別の実施形態では、製品ラベル１００から画像撮像通信装置により収集されたデータが、製品アクセプタビリティレポートの履歴情報として考慮されてもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬにおいて利用可能なウェブサイトへ送る。
【０１５０】
ステップ７８５において、画像撮像通信装置がアクセプタビリティレポートを出力してもよい。ステップ７９５において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザが、または当該装置自体が、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ７９６において、ホスト製品が使用を認められるものでない場合、そのホスト製品は、再使用されず、そのために診療所または製造元へ再分配されず、破壊処分するために製造元へ返却されるものであってもよい。更に別の実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信され、診療所による使用の認められない製品の扱いに関する指示を含むものであってもよい。製品の使用が認められる場合、ステップ８００において、ホスト製品が、補充および／または再梱包のために製造元へ返却されてもよい。更に別の実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信され、診療所による使用の認められない製品の扱いに関する指示を含むものであってもよい。
【０１５１】
ステップ８０５において、ホスト製品の返却について、製造元がホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂに示す）を解析してもよい。この解析に基づいて、画像撮像通信装置が、ステップ８１０に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１５２】
ステップ８１５において、画像撮像通信装置が、１以上のホストサーバ（図１に示す）にアクセスしてもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバに接続されると、ステップ８２０において、画像撮像通信装置が、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、ステップ８２５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素に基づくアクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、受信してもよい。更に、アクセプタビリティレポートは、製造現場、受取現場および発送現場で収集されたデータを含む、ホスト製品に関する履歴情報を、診療所および医院、患者の家および／または患者のためにホスト製品を管理する他の場所において、考慮してもよい。更に別の実施形態では、画像撮像通信装置が製品ラベル１００から収集したあらゆるデータが、製品アクセプタビリティレポートの履歴情報として考慮されてもよい。画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬにおいて利用可能なウェブサイトへ送る。
【０１５３】
ステップ８３０において、画像撮像通信装置がアクセプタビリティレポートを出力してもよい。ステップ８３５において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ８３６において、ホスト製品が使用を認められるものではない場合、そのホスト製品は、補充または再梱包がなされることなく、破壊処分に送られてもよい。更に別の実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信され、診療所による使用の認められない製品の扱いに関する指示を含むものであってもよい。製品が使用を認められるものである場合、ステップ８４０において、ホスト製品が、診療所および／または患者または医師のために、補充、再梱包および／または再発行されてもよい。
【０１５４】
ステップ６００−８４０において、１以上の画像撮像通信装置が、同一の画像撮像通信装置であってもよいし、異なる画像撮像通信装置であってもよいし、または、いくつかのステップでは同じ装置でありその他のステップでは異なる装置であってもよい。
【０１５５】
図７Ａ、７Ｂおよび７Ｃに示すように、本発明の一実施形態によれば、ホスト製品の製造元が、ホスト製品のサプライチェーンまたは物流チェーンの段階全体に亘って、ホスト製品のアクセプタビリティを追跡するために、本発明のシステムおよび方法を使用してもよい。例えば、ステップ９００において、製造元が、１以上のホスト製品を、１以上のモニタ、製品識別要素および認証要素のうちの少なくとも２つを含む製品ラベル１００（図１、２Ａおよび２Ｂに示す）に関連づけてもよい。この関連付け（ステップ９００における）において、製造元は、１以上のモニタ、製品識別要素および／または認証要素それぞれの限度または他のデータを設定したり、或いは、製造元が、予め設定された限度および／またはデータとともに、１以上のモニタ、製品識別要素および／または認証要素を、特定のホスト製品に適したものとして使用したりしてもよい。
【０１５６】
ステップ９０４において、製造元がそのサプライチェーンを通じて配給する製品を流通させる準備がなされる前に、画像撮像通信装置が、ホスト製品の製造現場において、ホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂに示す）を解析してもよい。この解析に基づいて、例えば、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素を示す視覚的信号または電気信号を走査することにより、ステップ９０５に示すように、画像撮像通信装置が、１以上の認証要素、モニタおよび／または識別要素のそれぞれの形式および１以上の特徴を判定する。
【０１５７】
ステップ９１０において、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）へアクセスしてもよい。画像撮像通信装置が、ネットワーク１８５（図１に示す）および／または移動体ネットワーク１８０（図１に示す）を通じてホストサーバ１９０に接続することにより、このアクセスを実現してもよい。他の実施形態では、画像撮像通信装置が、ホストサーバ１９０へ衛星リンクを通じて直接接続してもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバへ接続されると、ステップ９１５に示すように、画像撮像通信装置が、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。
【０１５８】
一実施形態では、画像撮像通信装置が、上記形式および特徴を、ホストサーバ１９０（図１に示す）へショートメッセージサービス（ＳＭＳ）文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して送信してもよい。画像撮像通信装置は、ステップ９２０に示すように、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置がアクセプタビリティレポートをホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、ＵＲＬにおいて利用可能なウェブサイトへアクセプタビリティレポートを送る。
【０１５９】
ステップ９２５において、本発明の一実施形態によれば、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。例えば、画像撮像通信装置１７０、１６０および／または１１０が、文字列に基づくおよび／または図形に基づくアクセプタビリティレポートを、ＬＣＤディスプレイ、ＬＥＤディスプレイまたはＣＲＴディスプレイのような表示装置に、アクセプタビリティレポートを出力してもよい。更に、聴覚的な報告が、グラフィカルに表示される報告に代えて、或いはこれに加えて出力されてもよい。ステップ９３０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。例えば、アクセプタビリティレポートは、実際に「流通させることが容認されない。」または「流通させることが容認される」と記述するものであってもよいし、或いは、ユーザまたは装置自体／ホストサーバ自体により解読できる特定のデータを提供するものであってもよい。ステップ９３１において、ホスト製品の使用が認められない場合、そのホスト製品が出荷されなくてもよい。更に別の実施形態では、アクセプタビリティレポートが、製造元により生成されまたは送信され、ユーザが使用を認められなかった製品の扱いに関する指示を含むものであってもよい。製品の使用が認められる場合、ステップ９３５において、ホスト製品が、配送業者または卸売業者のようなサプライチェーンの中間業者に流通する。
【０１６０】
ステップ９４０において、診療所および／または配送業者は、診療所において、受け取ったホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂ）を解析してもよい。ステップ９４５に示すように、この解析に基づいて、画像撮像通信装置が、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１６１】
ステップ９５０において、画像撮像通信装置が１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバへ接続されると、画像撮像通信装置が、ステップ９５５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、ステップ９６０に示すように、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づく報告を受信してもよい。更に、アクセプタビリティレポートは、製造現場で収集されたデータを含む、ホスト製品に関する履歴情報を考慮していてもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更に別の実施形態では、
画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）がアクセプタビリティレポートをＵＲＬで利用可能なウェブサイトへ送る。
【０１６２】
ステップ９６５において、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。ステップ９７０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ９７１において、ホスト製品が使用を認められないものである場合、そのホスト製品は、サプライチェーンの過程を止めて（例えば、更なるホスト製品の流通を止める）、製造元へ返却されてもよい。更なる実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信された、サプライチェーンの中間業者による使用を認められない製品の取り扱いに関する指示を含んでもよい。製品が使用を認められるものである場合、ステップ９７５において、サプライチェーンの中間業者によりホスト製品をエンドユーザへリリースすることを決定するまで、ホスト製品が保管されてもよい。
【０１６３】
ステップ９８０において、サプライチェーンの中間業者が、保管されているホスト製品の製品ラベル（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づいて、ステップ９８５に示すように、画像撮像通信装置が、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定してもよい。
【０１６４】
ステップ９９０において、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバに接続されると、画像撮像通信装置が、ステップ９９５に示すように、製品ラベル１００に存在する１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置が、ステップ１０００に示すように、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、サプライチェーンの中間業者において、製造現場および受取現場で収集したデータを含む、ホスト製品に関する履歴情報を考慮するものであってもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更なる実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、ホストサーバ１９０（図１に示す）からアクセプタビリティレポートを受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬで利用可能なウェブサイトへ送る。
【０１６５】
ステップ１００５において、画像撮像通信装置は、アクセプタビリティレポートを出力してもよい。ステップ１０１０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ１０１１において、ホスト製品が使用を認められない場合、当該ホスト製品がエンドユーザへ配送されず、製造元へ返却されてもよい。更なる実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信された、サプライチェーンの中間業者による使用を認められなかった製品の取り扱いに関する指示を含んでもよい。製品が使用を認められる場合、ステップ１０１５において、ホスト製品がエンドユーザへ配送されてもよい。
【０１６６】
ステップ１０２０において、エンドユーザが、ホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づいて、画像撮像通信装置が、ステップ１０２５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１６７】
ステップ１０３０において、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）へアクセスしてもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバへ接続されると、画像撮像通信装置が、ステップ１０３５に示すように、製品ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。ステップ１０４０に示すように、画像撮像通信装置は、ホストサーバ１９０（図１に示す）から、製品ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、サプライチェーンの中間業者の位置において、製造現場、受取現場および発送現場で収集されたデータを含む、ホスト製品に関する履歴情報を考慮するものであってもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更なる実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートをホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートをＵＲＬで利用可能なウェブサイトへ送る。
【０１６８】
ステップ１０４５において、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。ステップ１０５０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ１０５１において、ホスト製品が使用を認められない場合、そのホスト製品は、エンドユーザにより使用されない、または使用されないようにされるとともに、製造元へサプライチェーンの中間業者を通じて直接的または間接的に返却されてもよい。更なる実施形態では、アクセプタビリティレポートは、製造元により生成され且つ送信された、使用を認められない製品の取り扱いに関する指示を含んでもよい。製品が使用を認められる場合、ステップ１０５５において、ホスト製品が、エンドユーザにより使用される、或いは使用されるようになるものであってもよい。
【０１６９】
ステップ１０６０において、エンドユーザが、ホスト製品を、サプライチェーンの中間業者或いは製造元へ返却するよう決定してもよい。ホスト製品がサプライチェーンの中間業者に返却されると、サプライチェーンの中間業者は、ホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂ）を解析してもよい。この解析に基づき、画像撮像通信装置は、ステップ１０６５に示すように、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１７０】
ステップ１０７０において、画像撮像通信装置が１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバへ接続されると、画像撮像通信装置が、ステップ１０７５に示すように、ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置は、ステップ１０８０に示すように、ホストサーバ１９０（図１に示す）から、ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。
【０１７１】
更に、アクセプタビリティレポートは、サプライチェーンの中間業者の立場およびエンドユーザの立場またはホスト製品を使用した場所において、製造現場、受取現場および発送現で収集されたデータを含む、ホスト製品に関する履歴情報を考慮したものであってもよい。更なる実施形態では、任意の画像取得装置が製品ラベル１００から収集した任意のデータが、製品アクセプタビリティレポートのための履歴情報として考慮されてもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更なる実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）が、アクセプタビリティレポートを、ＵＲＬで利用可能なウェブサイトへ送る。
【０１７２】
ステップ１０８５において、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。ステップ１０９０において、出力されたアクセプタビリティレポートに基づき、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ１０９１において、ホスト製品が使用を認められない場合、そのホスト製品が再使用されず、それにより診療所または製造元により再度分配されず、破壊処分のために製造元へ返却されてもよい。更なる実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信された、サプライチェーンの中間業者による使用の認められない製品の取り扱いに関する指示を含んでもよい。製品が使用を認められる場合、ステップ１０９５において、ホスト製品が補充および／または再梱包のために、製造元へ返却される。更なる実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信された、サプライチェーンの中間業者による使用を認められない製品の取り扱いに関する指示を含んでもよい。
【０１７３】
ステップ１１００において、ホスト製品が返却されると、製造元が、ホスト製品の製品ラベル１００（図１、２Ａおよび２Ｂに示す）を解析してもよい。ステップ１１０５に示すように、この解析に基づいて、画像撮像通信装置が、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および１以上の特徴を判定する。
【０１７４】
ステップ１１１０において、画像撮像通信装置が、１以上のホストサーバ１９０（図１に示す）にアクセスしてもよい。一度画像撮像通信装置が直接的または間接的のいずれかによりホストサーバに接続されると、画像撮像通信装置が、ステップ１１１５に示すように、製品ラベル１００に存在する、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴を送信してもよい。画像撮像通信装置が、ステップ１１２０に示すように、ホストサーバ１９０（図１に示す）から、１以上の認証要素、モニタおよび／または識別要素それぞれの形式および特徴に基づくアクセプタビリティレポートを受信してもよい。更に、アクセプタビリティレポートは、サプライチェーンの中間ユーザの位置およびエンドユーザの位置またはエンドユーザがホスト製品を使用した場所において、製造現場、受取現場および発送現場で収集されたデータを含む、ホスト製品に関する履歴情報を考慮したものであってもよい。
【０１７５】
更なる実施形態では、製品ラベル１００から任意の画像撮像通信装置により収集された任意のデータが、製品アクセプタビリティレポートのための履歴情報として考慮されてもよい。画像撮像通信装置は、アクセプタビリティレポートを、ホストサーバ１９０（図１に示す）から、ＳＭＳ文字列メッセージ、ＴＣＰ／ＩＰメッセージ、ｅメール、ＦＴＰ、ＰＩＮｅメールおよび／またはインスタントメッセージを介して受信してもよい。更なる実施形態では、画像撮像通信装置が移動体ネットワーク１８０（図１に示す）またはネットワーク１８５（図１に示す）を通じてアクセスするウェブサイトへのユニフォームリソースロケータ（ＵＲＬ）を、ホストサーバ１９０が提供することにより、画像撮像通信装置が、ホストサーバ１９０（図１に示す）からアクセプタビリティレポートを受信してもよい。この実施形態では、ホストサーバ１９０（図１に示す）がアクセプタビリティレポートをＵＲＬで利用可能なウェブサイトへ送る。
【０１７６】
ステップ１１２５において、画像撮像通信装置が、アクセプタビリティレポートを出力してもよい。ステップ１１３０において、出力されたアクセプタビリティレポートに基づいて、画像撮像通信装置のユーザ、または当該装置自体のいずれかが、ホスト製品が使用を認められるものであるか否かを判定してもよい。ステップ１１３１において、ホスト製品が使用を認められないものであれば、そのホスト製品は、補充または再梱包がなされず、破壊処分へ送られてもよい。更なる実施形態では、アクセプタビリティレポートが、製造元により生成され且つ送信された、製造元による使用が認められない製品の取り扱いに関する指示を含んでもよい。製品が使用を認められる場合、ステップ１１３５において、ホスト製品が、サプライチェーンの中間ユーザおよび／またはエンドユーザのために、補充、再梱包および／または再発行されてもよい。
【０１７７】
ステップ９００−１１３５において、１以上の画像撮像通信装置が、同一の画像撮像通信装置であってもよいし、異なる画像撮像通信装置であってもよいし、或いはいくつかのステップでは同じ装置でありその他のステップでは異なるステップでは異なる装置であってもよい。一実施形態では、携帯機器またはホストサーバが、環境モニタからの情報と、他の同等の製品アイテムからの、知られている製品アイテム履歴情報、例えば、配送情報、電子系図および／または環境モニタ情報とを、環境モニタ情報の信頼性の評価および当該評価を用いた認証性の判定のために、関連づけることができる。
【０１７８】
一実施形態では、本発明が、画像撮像通信装置に、問合せ先、認証媒体、または、認証された供給元として承認されたホストサーバとのセキュリティ通信を許容するとともに、適宜、セキュリティ侵害を防ぐため、または偽の或いはセキュリティがなされていないホストサーバとの通信を防ぐための情報を提供することを含む。例えば、認証された供給元の問合せ先、またはセキュリティ特性が、ラベルの画像形成および画像データの処理のために、画像取得装置にインストールされたソフトウェアアプリケーションに埋め込まれていてもよい。
【０１７９】
一実施形態では、本発明が、製品ラベルおよび／または個別のラベル要素の高解像度画像をホストサーバへ送信するよう構成されたソフトウェアモジュールまたは実行可能なコードに関連する。一実施形態では、画像ファイルの大きさを低減するために用いられる圧縮方法のような解像度低減手法が、遠隔通信のための装置により用いられる場合、この手法が無効とされたり或いは実行を回避されたりしてもよい。従って、高解像度のデータが保存されている場合、自動画像データフィルタのようなソフトウェアモジュールが、遠方で受信した高解像度画像を処理することにより、画像を効果的に拡大したり、或いはバーコードの模様が付された領域、または環境モニタのモニタ状態を示す色付き画素を構成する画素のような、関心のある画素を含む画像の領域を局所化したりしてもよい。同様に、ソフトウェアが、製品ラベルにおける通常人には見えない要素を、自動的に解読するよう構成されていてもよい。この解読では、例えば、マイクロ文字列または、顕微鏡のような特別な観察装置の助けを借りなければ人が読み取ることができないような他の情報を読み取ることにより、認証性を確かめてもよいし、光学的数値のデータベースと比較することができるモニタにおける色の変化を判定してもよいし、或いは、バーコードをそれに含まれる、またはそれにリンクする、またはデータベース内のデータへの変換を行ってもよい。
【０１８０】
一実施形態では、本発明は、適宜ラベル上で協同するマーキングとともに、製品ラベル領域または取得される領域を囲むフレームである視野フレームを生成できる実行可能なコードまたはソフトウェアモジュールに関する。この処理または方法は、ユーザの適切な指示に沿って、特定の視野角で見たときの画像が取得されるように幾何学的に調整された視野フレームを、適宜２以上の視野角を提供する２以上の視野フレームとともに、提供することを含んでもよい。これらの視野角により、認証要素のような光可変装置、またはその一部を、異なる視野から見て、画像形成することで、光可変装置の読み取りを容易にすることが可能となる。従って、複数フレームでの画像データを取得することにより、ソフトウェアが、不要なフレームを選択的に無視したり、認証要素のような共通の特徴を複数の画像データセットを通じて解析したりしてもよい。実行可能なコードは、視野画像が、画像を取得する画像撮像通信装置から予め設定された距離だけ離れるように視野フレームに関連する視野画像の位置決めを行うユーザからの指示、望まれるのであれば、適宜、ラベルに対して平行な方向のように、予め設定された方向または別の位置決めパラメータを含んでもよい。
【０１８１】
（実施形態の詳細に基づく、他のコンピュータおよび携帯機器）
本発明は、プロセッサ（例えば、マイクロプロセッサ、マイクロコントローラ、デジタルシグナルプロセッサまたは汎用のコンピュータ）とともに使用するためのコンピュータプログラムロジック、プログラマブルロジックデバイス（例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）または他のＰＬＤ）とともに使用するためのプログラマブルロジック、ディスクリートコンポーネント、集積回路（例えば、特定用途向け集積回路（ＡＳＩＣ））またはこれらの組み合わせを含む任意の手段を含む多くの異なる形式で実現されてもよい。但し、形式は決してこれらに限定されるわけではない。
【０１８２】
本発明の一実施形態では、これらの画像データおよび組み合わせのいくつかまたは全てが、コンピュータで実行可能な形式に変換され、コンピュータ可読媒体にそのまま保存され、且つマイクロプロセッサにより、オペレーティングシステムの制御の下で実行されるコンピュータプログラム命令またはソフトウェア命令一式を用いて、処理され変換される。一実施形態では、ラベルから取得した画像データは、アクセプタビリティレポートを生成したり、ラベル要素の読み取りおよび識別した結果を、１以上のデータ管理システムに紐付けしたりするのに適した、プロセッサが理解できる命令に変換される。
【０１８３】
前述した機能の全部または一部を実行するコンピュータプログラムロジックは、ソースコード形式、コンピュータが実行可能な形式、および種々の中間形式（例えば、アセンブラ、コンパイラ、リンカまたはロケータにより生成された形式）を含む種々の形式で実現されてもよい。但し、形式は決してこれらに限定されるわけではない。ソースコードは、種々のオペレーティングシステムまたはオペレーティング環境とともに使用するための、種々のプログラム言語（例えば、オブジェクトコード、アセンブラ言語、またはＦｏｒｔｒａｎ、ＯｐｅｎＧＬ、ＧＰＵ命令セット、Ｃ、Ｃ＋＋、Ｃ＃、ＪＡＶＡ（登録商標）またはＨＴＭＬのような高級言語）のいずれかにより実行されるコンピュータプログラム命令のシリーズを含んでもよい。
【０１８４】
ソースコードは、光学補償、製品ラベルと製品ラベルではないラベルとの対応づけおよびデータルーティング、画像データの取得および処理、認証、環境モニタの検出および読み取り、および本明細書に記載されている他の種々の発明の特徴を含む、本明細書に記載されている本発明の実施形態を実行することに関連する或いは適している、種々のデータ構造、方法および命令を、定義するとともに使用してもよい。ソースコードは、コンピュータで実行可能な形式（例えばインタプリタを介して）であってもよいし、または、ソースコードがコンピュータで実行可能な形式（例えば、トランスレータ、アセンブラまたはコンパイラを介して）に変換されてもよい。
【０１８５】
コンピュータプログラムは、任意の形式（例えば、ソースコード形式、コンピュータ可読形式または中間形式）で、半導体メモリ装置（例えば、ＲＡＭ、ＲＯＭ、ＰＲＯＭ、ＥＥＰＲＯＭまたはフラッシュプログラマブルＲＡＭ）、磁気メモリ装置（例えば、ディスケットまたは固定ディスク）、光学メモリ装置（例えば、ＣＤ−ＲＯＭ）、ＰＣカード（例えば、ＰＣＭＣＩＡカード）または他のメモリ装置のような有形の記憶装置に、永久的または一時的のいずれかの形で固定されていてもよい。
【０１８６】
コンピュータプログラムは、アナログ技術、デジタル技術、光技術、無線技術、ネットワーク技術、インターネット技術を含む種々の通信技術のいずれかを用いてコンピュータへ送信することができる信号に任意の形で固定されていてもよい。但し、通信技術は決してこれらに限定されるわけではない。コンピュータプログラムは、印刷された文書または電子文書（例えば、圧縮ソフトウェア）とともに携帯用記憶媒体に保存されるような任意の形式で配布されてもよいし、コンピュータシステム（例えば、システムＲＯＭまたは固定ディスク上の）に予め読み込まれていてもよいし、或いはネットワークを通じて配布されてもよい。
【０１８７】
プログラマブルロジックは、半導体メモリ装置（例えば、ＲＡＭ、ＲＯＭ、ＰＲＯＭ、ＥＥＰＲＯＭまたはフラッシュプログラマブルＲＡＭ）、磁気メモリ装置（例えば、ディスケットまたは固定ディスク）、光学メモリ装置（例えば、ＣＤ−ＲＯＭ）または他のメモリ装置のような有形の記憶装置に、永久的または一時的のいずれかの形で固定されていてもよい。プログラマブルロジックは、アナログ技術、デジタル技術、光技術、無線技術（例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標））、ネットワーク技術およびインターネット技術を含む種々の通信技術のいずれかを用いてコンピュータへ送信することができる信号に任意の形で固定されていてもよい。但し、通信技術は決してこれらに限定されるわけではない。プログラマブルロジックは、印刷された文書または電子文書（例えば、圧縮ソフトウェア）とともに携帯用記憶媒体に保存されるような任意の形式で配布されてもよいし、コンピュータシステム（例えば、システムＲＯＭまたは固定ディスク上の）に予め読み込まれていてもよいし、或いは、通信システム（例えば、インターネットまたはＷｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂ）上のサーバ電子または掲示板から配布されてもよい。
【０１８８】
適当な処理モジュールの種々の例について以下より詳細に説明する。ここでは、モジュールまたはソフトウェアモジュールは、特定のデータ処理、データ送信タスクまたは他のプロセッサまたはコンピュータを用いる、自動化された機能または処理を実行するのに適した、ソフトウェア、ハードウェアまたはファームフェアを参照する。一実施形態では、モジュールまたはソフトウェアモジュールが、１以上の方法、ステップ、または、画像データ、データフレームまたはこれらの組み合わせを処理したりまたは用いたり、或いは、本発明の実施形態に関する別の方法を実行するのに適した、ソフトウェアルーチン、プログラムまたは他のメモリ常駐アプリケーションを参照する。
【０１８９】
更に、グラフィックプロセッサを有する携帯機器であれば、所定のラベルの解析を促進させるために、画像処理がグラフィックプロセッサを用いて実行されるよう構成されていてもよい。代わりに、携帯機器が十分な処理力を欠いている場合、または多くのラベルを処理している場合、または他の理由のために、画像データの圧縮バージョンが、画像データを処理するためのホストサーバのような遠隔サーバに送信されてもよい。同様に、アクセプタビリティレポートまたは画像データから導出された他のデータがサーバにから携帯機器へ返信されてもよい。
【０１９０】
一実施形態では、画像撮像通信装置は、当該装置にインストールされており或いは当該装置からアクセス可能であり、ラベルデータ、患者データ、エンティティデータ、画像データおよび／または他の形式のデータを、検出処理ソフトウェアモジュール、光学補償ソフトウェアモジュール、報告生成ソフトウェアモジュール、データ処理ソフトウェアモジュール、ユーザインターフェースソフトウェアモジュール、スクリプト命令ソフトウェアモジュール、他のソフトウェアモジュールおよび／または１以上のホストサーバとの間で交換する、１以上の実行可能なソフトウェアアプリケーションを用いてプログラミングされているか、或いは、これらを有している。
【０１９１】
本明細書に記載されているコンピュータおよびコンピュータシステムは、データ取得、データ処理、データ保存および／またはデータ通信に用いられる、ソフトウェアアプリケーションまたは命令セットを保存するためのメモリのような、動作上関連するコンピュータ可読媒体を含んでもよい。このようなメモリは、それに動作上関連するコンピュータまたはコンピュータシステムに対して、内部、外部、遠方または同じ場所に存在してもよい。
【０１９２】
また、メモリは、例えば、ハードディスク、光ディスク、フロッピー（登録商標）ディスク、ＤＶＤ（デジタル多目的ディスク）、ＣＤ（コンパクトディスク）、メモリスティック、フラッシュメモリ、ＲＯＭ（リードオンリーメモリ）、ＲＡＭ（ランダムアクセスメモリ）、ＤＲＡＭ（動的ランダムアクセスメモリ）、ＰＲＯＭ（プログラマブルＲＯＭ）、ＥＥＰＲＯＭ（電気的消去可能プログラマブルＲＯＭ）および／または他のコンピュータ可読媒体を含む、ソフトウェアまたは他の命令を保存するための任意の手段を含んでもよい。但し、上記手段は、これらに限定されない。
【０１９３】
一般的に、本明細書に記載された本発明の実施形態に関連するコンピュータ可読記録媒体は、プログラム可能な装置により実行される命令を保存することができる任意の記録媒体を含んでもよい。適宜、本明細書に記載されている方法ステップが、コンピュータ可読記録媒体または記録媒体に保存された命令として実現されたり或いは実行されたりしてもよい。
【０１９４】
本発明の図および説明では、本発明の明確な理解のために関連する要素が簡素化して描かれており、一方、明確化を目的としてらの要素が削除されているものとして理解されたい。しかし、本分野の通常の技術を有する者であれば、これらおよび他の要素が望まれることは認識するであろう。しかしながら、これらの要素は、この分野では周知であり、本発明のより良い理解の手助けとはならないので、これらの要素の説明は、本明細書では取り上げない。図が実例を挙げて説明するために存在し、本発明の構成図として存在するものではないことは理解されるべきである。詳細の省略、改変または別の実施形態もこの分野の通常の技術を有する人の創作の範囲内に含まれる。
【０１９５】
本発明のある実施形態において、単一の構成が複数の構成に置き換えられるとともに、複数の構成が単一の構成に置き換えられて、要素または構造の提供、または所定の機能の実行がなされてもよいことは明らかである。本発明のある実施形態を実行する上このような代用がなされない場合を除いて、このような代用は本発明の範囲内と看做される。
【０１９６】
本明細書に現れる例は、本発明の性能および特定の実施を説明することが意図されている。これらの例は、主として当業者のために本発明を説明することを目的とすることが意図されていることは明らかである。本発明の真意から逸脱しない限り、本明細書に記載されたこれらの図表または動作の変形例があってもよい。例えば、ある場合には、方法ステップまたは動作が、異なる順序で実施または実行されてもよいし、或いは動作が追加されたり、削除されたり或いは改変されたりしてもよい。
【０１９７】
更には、本明細書では、本発明の特定の実施形態が本発明を例示する目的で記載されており、これと同じものに限定する目的では記載されていないのではあるが、要素、ステップ、構造および／または部品の詳細、材料および配列の数多くの変形例が、請求項に記載されている本発明から逸脱しない限り、本発明の原理および範囲内で形成されることは、通常の当業者には明らかであろう。
【０１９８】
本発明の実施形態、特徴および例は、全ての面で例示的なものであると看做されるべきであり、本発明を限定することを意図するものではなく、本発明の範囲は請求項のみにより定義される。他の実施形態、修正例および使用例は、それが請求項に記載された発明の原理および範囲から逸脱しない限り、当業者には明白なものであろう。
【０１９９】
出願における見出しおよび章の使用は、本発明を限定することを意味するものではなく、各章は、本発明の任意の実施形態または特徴に適用できる。
【０２００】
システムまたは装置が特定の構成を有する、含むまたは構成するように記載されたり、或いは処理が特定の処理ステップを有する、含むまたは構成するように記載されたりしている出願全体を通じて、本発明のシステムまたは装置もまた、列挙された構成から構成されていてもよく、或いは実質的にこれらから構成されていてもよいとともに、本発明が示唆する処理もまた、列挙された処理ステップから構成されていてもよく、或いは実質的にこれらから構成されていてもよいことが考えられる。
【０２０１】
要素または構成が列挙された要素または構成のリストに含まれおよび／またはこのリストから選択されているとしている本出願において、要素または構成が、列挙された要素または構成のいずれか１つであってもよいし、または２以上の列挙された要素または構成から成るグループから選択されたものであってもよいことは理解されるべきである。更に、本明細書に記載されている構成、装置または方法の要素および／または特徴は、本明細書で明示的または暗示的に示す原理および範囲から逸脱しない限り、種々の方法で組み合わされてもよいことは理解されるべきである。
【０２０２】
"include"、"includes"、"including"、"have"、"has"または"having"の用語の使用は、具体的に記載されているか否かに関わらず、一般的に制限のない非限定的なものとして理解されるべきである。
【０２０３】
本明細書での単数は、具体的に記載されているか否かに関わらず、複数も含む（逆もまた同様）。その上、単数形"a"、"an"および"the"は、文脈上明確に規定されているか否かに関わらず、複数形を含む。更に、量的な値の前に"about"の用語を用いる場合、ここで示すこともまた、具体的には記載されているか否かに関わらず、具体的な量的値自体を含む。
【０２０４】
ステップの順序またはある動作を実行する順序は、ここで示すことが動作可能である限り、重要ではない。その上、２以上のステップまたは動作が同時に行われてもよい。
【０２０５】
値の範囲またはリストが提供された場合、値の範囲またはリストの上限および下限の間の各値が個別に考慮されるとともに、本発明内に、各値が本明細書に具体的に列挙されているかのように含まれている。更に、所定の範囲の上限および下限を含む当該所定の範囲の間のより小さい範囲は、本発明に含まれるものとする。代表的な値または範囲を列挙することは、所定の範囲の上限および下限を含む当該所定の範囲の間の他の値または範囲について特許を請求しないということではない。
【０２０６】
例示した実施形態が本明細書に詳細に示され説明されているが、明確に示され説明されたこれらの実施形態と等価な数多くの変形例および他の実施形態が存在することは、留意すべきであり当業者には明白なことであろう。例えば、本発明の範囲が、説明した順序に従って前述のステップを実行する全ての場合に限定される必要はない。具体的に記載されているか否かに関わらず、本明細書において、用語および表現は、説明のための用語として用いられており、限定する用語として用いられていない。従って、本発明は、具体的に例示され説明された実施形態（または、それらの説明に使用された用語または表現）により限定されることはなく、請求項の範囲によってのみ限定される。
【０２０７】
（関連出願の相互参照）
本願は、２０１０年４月２０日に出願された、「製品のアクセプタビリティを電子的に示す情報処理システムおよび方法」と題する、米国特許出願第12/799,252号の一部継続出願である。この出願内容の全てが、参照により本明細書に組み込まれる。
【図１】
2015503138.tif 000003
【図２Ａ】
2015503138.tif 000004
【図２Ｂ】
2015503138.tif 000005
【図２Ｃ】
2015503138.tif 000006
【図２Ｄ】
2015503138.tif 000007
【図２Ｅ】
2015503138.tif 000008
【図２Ｆ】
2015503138.tif 000009
【図３】
2015503138.tif 000010
【図４】
2015503138.tif 000011
【図５】
2015503138.tif 000012
【図６Ａ】
2015503138.tif 000013
【図６Ｂ】
2015503138.tif 000014
【図６Ｃ】
2015503138.tif 000015
【図７Ａ】
2015503138.tif 000016
【図７Ｂ】
2015503138.tif 000017
【図７Ｃ】
2015503138.tif 000018
【手続補正書】
【提出日】平成25年8月19日(2013.8.19)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像撮像通信装置を用いて実施することができる、製品ラベルの光学的処理を行う方法であって、
カメラを用いて、第１形状およびモニタ状況を有し、時間温度指標を含む環境履歴モニタである環境モニタを含む製品ラベルから、画像データを取得することと、
前記カメラを用いて、模様が付された領域により定義された第１識別子から画像データを取得することと、
前記第１環境モニタについて取得した画像データの第１サブセットを識別するために、前記第１形状に応じて前記画像データを処理することと、
前記画像データの前記第１サブセットから前記モニタ状況を判定することと、
前記判定した前記モニタ状況に基づくアクセプタビリティレポートを生成することと、を含む、
方法。
【請求項２】
前記第１識別子について取得した画像データの第２サブセットを識別するために、前記模様が付された領域に応じて前記画像データを処理するステップと、
前記識別子の出所を判定するステップと、を更に含み、
前記アクセプタビリティレポートは、更に、前記判定された出所に関する情報を含む、
請求項１に記載の方法。
【請求項３】
前記第１識別子は、前記製品ラベル上またはその近くに配置され、
前記処理するステップ、前記判定するステップおよび前記生成するステップは、前記画像撮像通信装置を用いて実行され、
前記画像撮像通信装置は、選択的に、前記処理するステップ、前記判定するステップおよび前記生成するステップのうちの少なくとも１つを実行するために、ホストサーバと通信するよう構成されている、
請求項２に記載の方法。
【請求項４】
前記画像撮像通信装置は、ディスプレイと、前記カメラと、を備える携帯機器であり、
前記アクセプタビリティレポートは、人が読み取れるものである、
請求項１に記載の方法。
【請求項５】
取得した前記画像データが前処理されるのを防止するように、前記カメラを制御するために用いられるアプリケーションプログラミングインターフェースを制御するステップを、更に含む、
請求項４に記載の方法。
【請求項６】
前記画像データは、画像データの複数のフレームを有し、
前記複数のフレームを見分けることと、
後続の処理のために、光学的欠陥を除去すること、または、１または複数のフレームを選択することと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項７】
前記模様が付された領域を参考として使用して、前記画像データのダイナミックレンジを調整するステップを、更に含み、
前記模様が付された領域は、黒および白のバーコードを含む、
請求項１から５のいずれか１項に記載の方法。
【請求項８】
前記カメラを用いて複数のアングルから前記画像データを取得する旨のユーザへの指示を表示するステップを、更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項９】
前記製品ラベルは、冷蔵が必要である製品とともに使用されるよう構成され、
前記時間温度指標は、累積的な時間温度指標であり、
前記製品が、少なくとも所定の期間、室温環境温度に曝されると、前記モニタ状況が、前記画像データで検出できるほど変化する、
請求項１から５のいずれか１項に記載の方法。
【請求項１０】
前記モニタ状況と相関がある第１光密度値を判定するステップと、
前記第１光密度値と、前記製品の残りの貯蔵寿命と相関がある複数の光密度とを比較するステップと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１１】
前記アクセプタビリティレポートにおいて、前記製品について見積もった貯蔵寿命を提供するステップ、を更に含む、
請求項１０に記載の方法。
【請求項１２】
前記第１形状が略円形である場合、前記画像データ中の複数の楕円を識別して前記第１環境モニタを見つけるステップ、を更に含む、
請求項１０に記載の方法。
【請求項１３】
前記モニタ状況を判定する前に、前記画像データを処理して、前記製品ラベルを支持する対象物の曲面を補償するステップ、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１４】
前記カメラを用いて、選択的に、模様が付された領域により定義された第２識別子を含む第２ラベルから、画像データを取得するステップと、
記録管理システムに、前記製品ラベルに対する製品に関連するイベントおよび前記第２識別子に関連する主体、に関連するイベントデータを集めるステップと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１５】
前記イベントは、
前記製品を用いた主体へのワクチン接種と、
前記主体への前記製品の配給と、
前記主体に関する手続の実行と、
前記主体による前記製品の拒絶と、
前記主体による前記製品の消費と、
前記主体によるアクセプタビリティレポートの認識と、
前記製品を用いて実験を行う前記主体と、
前記２以上のイベントの組み合わせと、からなる群から選択される、
請求項１４に記載の方法。
【請求項１６】
前記第１識別子または前記ラベル上の他の印から、補足的なラベルデータを取得するステップと、
前記補足的なラベルデータを用いて前記画像データを処理するステップと、を更に含む、
請求項１から５のいずれか１項に記載の方法。
【請求項１７】
メモリと、
前記メモリと通信するプロセッサと、を備え、
前記メモリは、
時間温度指標からの情報を含む環境履歴モニタ情報を含む環境モニタ情報を含む、前記製品ラベルについて取得された画像データの第１サブセットと、認証情報を含む画像データの第２サブセットと、を含む画像データの第１セットを、前記メモリに自動的に保存することと、
モニタ状況が判定されるように、前記画像データの第１サブセットを処理することと、
認証状況が判定されるように、前記画像データの第２サブセットを処理することと、
前記モニタ状況が、予め設定された許容レベルを満たし、前記認証状況について認証が確定した場合、前記製品が受け入れられるものであることを示すアクセプタビリティレポートを表示することと、を前記プロセッサに行わせる、前記プロセッサにより実行可能な命令を含む、
製品ラベルとともに提供される製品を処理するための、プロセッサに基づく自動システム。
【請求項１８】
前記メモリおよび前記プロセッサは、ホストサーバまたは携帯機器に配置されている、
請求項１７に記載のプロセッサに基づく自動システム。
【請求項１９】
前記メモリ装置は、更に、前記プロセッサにより実行された場合、
主体情報を含む画像データの第３サブセットを含み、前記主体に関連するラベルについて取得した、画像データの第２セットを、前記メモリに自動的に保存することと、
前記モニタ状況、前記認証状況および主体情報のデータベースまでのルートを決定することと、を前記プロセッサに行わせる命令を、更に含む、
請求項１７に記載のプロセッサに基づく自動システム。
【請求項２０】
前記主体は、患者、製品輸送会社、臨床試験管理者、病院、製薬会社、供給元、配送業者、品質管理サービス提供者、製造元および消費者からなる群から選択される、
請求項１９に記載のプロセッサに基づく自動システム。
【請求項２１】
前記画像データは、カメラにより取得され、
前記メモリ装置は、
前記プロセッサにより実行された場合、前記カメラを用いて取得された、前記画像データの第１サブセットおよび前記画像データの第２サブセットが、処理されずに前記メモリに保存されるように前記カメラを制御することを前記プロセッサに行わせる命令を、更に含む、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２２】
前記メモリ装置は、前記プロセッサにより実行された場合、前記画像データの第１セットのノイズまたはグレアを自動的に補償させることを前記プロセッサに行わせる命令を更に含む、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２３】
前記プロセッサと電気的に通信するディスプレイを更に備え、
前記メモリ装置は、前記プロセッサにより実行された場合、ディスプレイを用いて、複数のアングルから前記画像データの第１セットを取得する旨をユーザに通知することを前記プロセッサに行わせる命令を更に含む、
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２４】
選択的に環境履歴モニタである前記環境モニタは、前記製品の前記アクセプタビリティにとって不利な環境刺激に曝された場合、検出できる程度の色の変化を表し、
前記検出できる程度の変化は、選択的に、予め設定された累積曝露の後に現れる
請求項１７から２０のいずれか１項に記載のプロセッサに基づく自動システム。
【請求項２５】
前記時間温度指標は、累積的な時間温度指標であり、
前記命令は、更に、前記製品が少なくとも予め設定された期間、予め設定された閾値よりも高い温度に曝されると、前記プロセッサに、前記画像データの第１サブセットを処理させ、前記製品が少なくとも前記予め設定された期間、前記閾値よりも高い温度に曝されたことの表示を生成させる、
請求項１７から２０のいずれか１項に記載の、製品ラベルとともに提供される製品を処理するための、プロセッサに基づく自動システム。
【国際調査報告】
2015503138.tif 000019