(57)【要約】  本発明は、画像の検査におけるエラーを制限することを目的とした共同対話型の画像処理のためのシステム（１００）および方法を提案する。本発明に従ったシステムは、処理される画像（２００）を分配するための分配コンソール（１１０）であって、処理される画像を表示できる少なくとも２つの処理インターフェース（１２０）とローカルに通信することができる注釈付き画像を収集するための分配コンソール（１１０）を備える。コンソールとインターフェースが、処理される画像のコピーを分配コンソールから各処理インターフェースに送信し、注釈付き画像を得るように各インターフェース上の画像のコピーを修正するためのツールを提供し、各注釈付き画像を各処理インターフェースから分配コンソールに送信し、決定された組み合せアルゴリズムを使用して、注釈付き画像から注釈付き画像間の共通点および相違点を表す結果画像を生成するようにプログラムされる。
2021506049.tif 000002
【特許請求の範囲】
【請求項１】
共同対話型の画像処理システム（１００）であって、
処理される画像（２００）を分配し、注釈付き画像（２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、２０１ｅ）を収集するためのコンソール（１００）であって、処理される画像を表示できる少なくとも２つの処理インターフェース（１２０）とローカルで通信できるコンソール（１００）を含み、
コンソールとインターフェース（１２０）が、
グラフィック修正で注釈が付けられた画像を得るために各インターフェース上で画像のコピーをグラフィックカルに修正するためのツール（Ｂ３、Ｂ３ａ、Ｂ３ ｂ）を提供するように、処理される画像のコピーを分配コンソール（１１０）から各処理インターフェース（１２０）に送信し、
各処理インターフェース (１２０) から各注釈付き画像を分配コンソール（１１０）へ送信し、
注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、
ようにプログラムされていることを特徴とする、共同対話型の画像処理システム。
【請求項２】
コンソール（１１０）およびインターフェース（１２０）が、
処理される画像のコピー上に、一意の識別子で画定された少なくとも１つの対象領域（３００、３０１、３０２、３０３）、対象領域を表す形状および処理される画像のコピー内の座標をマークすることを可能にする、
ようにプログラムされた、請求項１記載の画像処理システム。
【請求項３】
コンソール（１１０）およびインターフェース（１２０）が、
各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にするようにならびに個別モードと指示モードとの間の変更が双方に可能であり、最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にする、
ようにプログラムされた、請求項１または２記載の画像処理システム。
【請求項４】
−▲  ローカル無線信号を送受信する無線トランシーバ（１１１）と；
▲  少なくとも１つの処理される画像および少なくとも１つの結果画像を格納するメモリと；
▲  プログラムされた中央ユニットと、
を含むデータ分配ならびに収集コンソール（１１０）と、：
−▲  無線信号を介してデータ交換をローカルで可能にするコンソールのトランシーバと互換性のあるローカルな無線信号を送受信する無線トランシーバと；
▲  少なくとも１つの処理される画像および少なくとも１つの注釈画像を格納するメモリと；
▲  プログラムされた中央ユニットと、
を含む、少なくとも２つの処理インターフェースと、：
を含む請求項１〜３のいずれか１項記載の共同対話型の画像処理システム。
【請求項５】
共同対話型の画像処理システムであって、コンソール（１１０）の中央ユニットおよび各インターフェース（１２０）の中央ユニットが、
−  少なくとも１つの処理される画像のコピーを全てのインターフェースに送信し;
−  各インターフェース上に処理される画像全体を表示し；
−  コマンドにより表示される画像を拡大および／または縮小し、画像全体に対する表示される画像のズームレベルを表すズーム値および画像全体に対する表示される画像の位置を記憶し；
−  他の全てのインターフェース上に最初のインターフェースの表示と同一の表示を指示することにより、最初のインターフェースから、他のインターフェースを表示する双方指示モードで表示を実行し；
−  注釈付き画像を生成するために、処理される画像に少なくとも１つのグラフィック注釈マークを付け；
−  注釈付き画像を送信したインターフェースを表す識別子とともに、コンソールに各注釈付き画像を記録し、送信する、
ようにプログラムされた、請求項４記載の共同対話型の画像処理システム。
【請求項６】
指令モードでの表示がユーザーによって起動される場合、コンソールの中央ユニットおよび各インターフェースの中央ユニットが,
各インターフェースの初期表示を事前に保存し、
全ての他のインターフェース上に最初のインターフェースの表示と同一の表示を指示し、
指令モードが非起動のとき各インターフェースの初期表示を再表示する、
ようにプログラムされた、請求項５記載の画像処理システム。
【請求項７】
コンソールの中央ユニットが、
各インターフェースによって送信された注釈付き画像を結合し、
注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、
ようにプログラムされた、請求項４〜６のいずれか１項記載の共同対話型の画像処理システム。
【請求項８】
コンソールの中央ユニットが、
決定された類似度閾値より大きい類似度レベルを有する注釈付き画像上のグラフィック注釈マーク（３０１-３０２）が第１のグラフィック形式で表示され、決定された類似度閾値未満の類似度レベルを有する注釈付き画像上のグラフィック注釈マーク（３０３、Ｍ１、Ｍ２、Ｍ３、Ｍ４）が少なくとも１つの第２のグラフィック形式で表示される結果画像（４００）を生成する、
ようにプログラムされた、請求項７記載の画像処理システム。
【請求項９】
コンソールの中央ユニットが、グラフィック注釈マークの統計解析を実行する、
ようにプログラムされた、請求項８記載の画像処理システム。
【請求項１０】
統計解析が、
決定された類似度閾値より大きい類似度レベルを有する注釈マークのパーセンテージを計算することと、
決定された類似度閾値より小さい類似度レベルを有する注釈マークのパーセンテージを計算することとを含む、請求項９記載の画像処理システム。
【請求項１１】
類似度閾値が設定可能である、請求項８〜１０のいずれか１項記載の画像処理システム。
【請求項１２】
コンソールおよび／または各インターフェースの中央ユニットがまた、
注釈付き画像内の少なくとも位置座標およびその作成者によって定義される各グラフィック注釈マーク間の対応表を生成する、
ようにプログラムされた、請求項８〜１１のいずれか１項に記載の画像処理システム。
【請求項１３】
コンソールの中央ユニットがまた、
各グラフィック注釈マークの作成者識別子を結果画像に表示する、
ようにプログラムされた、請求項１２記載の画像処理システム。
【請求項１４】
各コンソールの中央ユニットが管理者コードまたはユーザーコードで起動され得、
コンソールの中央ユニットが、管理者コードで起動されたインターフェース上に管理ツールを表示するようにプログラムされ、
管理ツールが、中央ユニットのメモリに存在する処理される画像リスト、参加者の識別子リスト、ユーザーによって選択可能な対象オブジェクトまたは対象領域の記述子リストを含み、
各記述子が異なる既定のグラフィック注釈マークに関連する、
請求項４〜１３のいずれか１項に記載の画像処理システム。
【請求項１５】
コンソールが、コンソールの中央ユニットに接続された脱着可能なメモリに接続するための接続ポート（１１２）を含む、請求項１４記載の画像処理システム。
【請求項１６】
コンソールが、コンソール（１１０）の中央ユニットに接続されたネットワーク接続ポートを含み、
前記コンソールが、少なくとも１つの処理される画像をダウンロードしてメモリに格納するために、通信ネットワークを介してリモートサーバ（１４０）と通信する、
ようにプログラムされた、請求項１４または１５のいずれか１項記載の画像処理システム。
【請求項１７】
リモートサーバ（１４０）が、
機密識別情報に関連付けられた元画像を格納する第１のメモリと、
機密識別情報無しに一意の識別子に関連付けられた対応する処理される画像を格納する第２のメモリと、
原画像と処理される画像との間の対応表とを含む、請求項１６記載の画像処理システム。
【請求項１８】
コンソールの中央ユニットが、
処理される画像に注釈を付けた後に得た結果画像に、処理される画像の一意の識別子を追加し、一意の識別子が付与された結果画像をリモートサーバに送信する、
ようにプログラムされた、請求項１７記載の画像処理システム。
【請求項１９】
コンソールの中央ユニットおよびインターフェースの中央ユニットが、
用語データベースを伴う逐次注釈ガイドを表示し、
各専門家の回答を逐次的に記録し、
各専門家の対応が逐次的に報告され結合される処理される画像のための検査レイアウトを含む予備検査報告を生成する、
ようにプログラムされた、請求項４〜１８のいずれか１項記載の画像処理システム。
【請求項２０】
予備検査報告が、処理される画像の一意の識別子、結果画像、および結果画像の統計解析の標準化された記録を含む、請求項１９記載の画像処理システム。
【請求項２１】
処理される画像（２００）を分配し注釈付き画像（２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、２０１ｅ）を収集するための、少なくとも２つの互いに通信することができるコンソール（１１０）を含み、
コンソールが、コンソールが階層的に構造化され得る設定可能な状態を有する、
ようにプログラムされた、請求項１〜２０のいずれか１項記載の画像処理システム。
【請求項２２】
コンソールの１つが１次ステータスを有するようにプログラムされるのに対し、他のコンソールが２次ステータスを有し、１次ステータスを有するコンソールが２次ステータスを有するコンソールに指示できる、請求項２１記載の画像処理システム。
【請求項２３】
−  処理される画像（２００）を、少なくとも２つの処理インターフェース（１２０）とローカルに通信可能なコンソール（１１０）のメモリに配置するステップと；
−  処理される画像のコピーを分配コンソールから各処理インターフェースに送信するステップと;
−  ユーザーが処理される画像のコピーにグラフィック修正を行って注釈付き画像（２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、２０１ｅ）を生成できるように、各処理インターフェース上に処理される画像のコピーをグラフィックカルに修正するためのツール（Ｂ３、Ｂ３ａ、Ｂ３ｂ）を表示するステップと；
−  各注釈付き画像を各処理インターフェースから分配コンソールに送信するステップと、
−  注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、ように分配コンソールを使用するステップ、を含むことを特徴とする共同参加型の画像処理方法。
【請求項２４】
決定された類似度閾値より大きい類似度レベルを有する注釈付き画像のグラフィカルな注釈が、結果画像に第１のグラフィック形式でマークされ、
決定された類似度閾値より小さい類似度レベルを有する様々な画像のグラフィカルな注釈が、結果画像に少なくとも１つの第２のグラフィック形式でマークされる、請求項２３記載の画像処理方法。
【請求項２５】
−  各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にするステップと、
−  最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にし、個別モードと指示モードとの間の変更が双方に可能であるステップを含む、請求項２３または２４のいずれか１項に記載の画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例として、産業品質検査に関連してまたは医療診断または教育の支援に関連して、共同対話型の画像処理のためのシステムおよび方法に関する。
【０００２】
本発明は、とりわけ産業分野（例として航空機器やマイクロエレクトロニクス）、医療分野、及び個々の判断ミスのリスクを制限するために意見の共有及び画像のグラフィック解析を必要とするその他の分野に適用する。
【０００３】
多くの技術分野において、画像の形態でグラフィックデータを解析するには、高品質なデータ解析を保証し、適切な診断を行うために、複数の専門家からのいくつかの意見および／または貢献が必要である。医療分野、特に放射線医学画像および組織学的検査のデジタルスライドには、当然のことながら考慮が払われているが、そこでは、正確な診断を行い、正しい治療を提案できるようにするために、良好な観察品質を有する正確な解析が不可欠である。
【０００４】
また、特定の構成部品または組立品が変形したり、航空機での役割と両立しない処理を受けたりしないように、構造解析を定期的に行なう必要がある航空分野についても考慮が払われている。
【０００５】
これらの解析を担当する専門家または専門家らが構造物の画像上の対象領域、例えば医療分野における癌細胞または航空分野における微小亀裂およびその範囲を正確に特定できることが不可欠である。
【０００６】
本発明は、また、教師が生徒に特定の画像（医療画像や産業画像）を解析する方法を教えることができ、客観的な技術基準に関してこれらの同じ生徒を評価できるように、教育分野にも適用される。本発明は、また、同期モード(換言すれば同時に)または非同期モード(換言すればワーキングセッション中の別の時間に)において、対面する生徒（換言すればリモートの生徒ではなく、授業に出席している生徒）が画像の特定の領域について教師に容易に質問できるようにすることを目的とする。
【０００７】
本発明のより特定の適用分野の一例は、病理解剖学および細胞学の適用分野である(以下「ＰＡＣ」という)。
【０００８】
これは、臓器から採取したサンプルの中から組織や細胞の異常を探し出すことにある医学の専門分野である。検査は、患者から採取した組織またはその派生物の肉眼および／または顕微鏡観察に基づく。組織または細胞の組織構造スライド（以下「スライド」）は、病理解剖学および細胞学の医師（または「ＰＡＣ医師」）が観察し、報告書をもって観察結果のリスト化、定量化ならびに承認を行う。前記報告は、治療を行う医師または臨床医に渡され、その医師が例として、外科的検査を要請するためにまたは最初の生検検査に基づいて外科手術を直接提案するためにまたは直接診断して治療を提案するために、他の検査からの他の医学データを考慮して解釈する。
【０００９】
ＰＡＣは、特に腫瘍の診断、癌または特定の非癌性疾患の患者に合わせた治療ケアおよび標的治療において使用されるが、炎症性疾患、変性疾患、代謝性疾患または感染性疾患の診断にも使用される。
【００１０】
ＰＡＣファイルの数の増加、ＰＡＣ医師の人口の減少と追跡可能なＰＡＣファイルの必要性が浮上したという背景から、１９９０年代にＰＡＣと高速デジタル化技術の合体により「デジタル病理学」の概念が出現した。
【００１１】
スライドスキャナの開発は、このように、この新しい分野の出現を可能にし、スライドスキャナは、強力な教育ツールのみならず医学検査および研究ツールとなった。
【００１２】
公知のように、スライドスキャナは、多数の画素（例として、１００００×１００００ピクセルから２０００００×２０００００ピクセル）を有するので、通常数十メガバイトから数ギガバイト（例として、１０MBから１０GB）の非常に多くのバイト数で表され、「高解像度」画像と呼ばれる仮想スライド（以下「仮想スライド」）を生成する。
【００１３】
ＰＡＣで仮想スライドを使用すると、開業医（ＰＡＣの医師、研究者、医療専門家）がさらにいくつかの用途を有することができる：
a)  個人での使用：開業医は、１つ以上の症例について医学的診断を行うまたは意見を出すために症例ライブラリーから１つ以上のタイプ症例を閲覧する;
b)  共同使用：開業医は、１つ以上の症例を同僚に提出して意見を求める(例として、医療チームやＰＡＣ審査委員会)または症例の学習を軸に他の開業医のグループを形成する(例として、大学のセミナーや大学卒業後のセミナー)または科学刊行物に結びつく可能性のある特定のスライドに関連して同僚と共同で研究プロジェクトを実施する。
【００１４】
全ての共同使用のためには、たいへん多くの場合、情報を共有したり、編集したり、情報を追跡したり、協力して作業を整理したりする必要性が生じる。この必要性を最新のソフトウェアおよび／またはハードウェアは、満たしていない。
【００１５】
具体的には、いくつかの企業が仮想スライドの読み取りと解析、場合によっては、診断を支援する専用のソフトウェアを開発している。
【００１６】
これらのソフトウェアは、全て同じ機能を有する:仮想スライド画像のインデックス作成、個々の画像の表示と操作、対象領域（以下「ＲＯＩ」）または対象オブジェクト（以下「ＯＯＩ」）の定義、計数ならびに注釈（換言すれば、画像、ＯＯＩまたはＲＯＩに対するコメント)。それらのいくつかは、また、数学的アルゴリズムに基づく自動形状認識および計数ソリューションを提供する。
【００１７】
その主な利益は、仮想スライドの保存と配信が容易になり、紛失や損傷を防ぎ、画像への注釈やＲＯＩやＯＯＩの計数にかかる時間が短縮することである。
【００１８】
しかし、今日では、これらのソフトウェアは、開業医のコンピュータからの個別の使用向きにできている。それらは、また、一般的に使用が難しく、あまり人間工学に基づかないと考えられている。
【００１９】
仮想スライドおよび大概の画像は、その一部が通信手段（例としてクラウドホスティング）を介してアクセスできるコンピュータまたはサーバに格納されている。仮想スライドのバイト単位のサイズを考慮すると、使用する計算装置（コンピュータとサーバ）は、計算能力と伝送速度の両方に関して、かなりのハードウェア資源を備える必要がある。したがって、これらのソフトウェアは、開業医の非常に多様で一貫性のない、かなりの異成分から成るコンピューティングアーキテクチャと利用可能な通信ネットワークに依存する。実際、多くの場合、仮想スライドを表示および操作する際に流動性の欠如が起こり（例として待ち時間）、これが仮想スライドの観察品質に有害な効果を及ぼし、したがって、本発明の最初の主要な課題となる。
【００２０】
さらに、これらのソフトウェアは、共同型や対話型ではない。それらは、複数のＰＡＣ医師による検査間の矛盾のトレーサビリティとそのグラフィック解析の両方を保証するための、あるいはデータ匿名化の問題を解決するためソリューションを一切提供しない。
【００２１】
現在、医療分野や航空分野では、最も複雑な場合の医療画像や機械部品の組立の解釈については、専門家のネットワークを求めることが一般的である。その後、複数の専門家の意見に基づく矛盾した診断に到達するまで、最初の個別診断は、仲間との交流を通して強化される。しかし、多くの場合、国内または国外の、これらのネットワークは、リモートで問い合わせが行われ、各専門家は、利用可能なときに自分自身で作業を行う。
【００２２】
加えて、医療分野では、データの匿名化が求められるため、情報の共有の管理が困難である。したがって、各専門家に対して、データに付随する識別コードを提供することにより、患者を特定できないように匿名化の形式でデータ（サンプル、サンプルの画像、年齢、患者の性別等）を送信する必要がある。次に、この識別コード付きの報告書が送信されるが、この報告書は、患者の正しい身元情報を付けて、治療を行っている医師に返送する必要がある。この匿名化／再特定化の連鎖は、人為的ミスの原因であり、チェックポイントを多く含む必要がある。さらに、この連鎖は、相談を受ける専門家の数が多いほど複雑となる。リスクを制限するために、これは、少数の専門家、換言すれば２、３人のみが相談を受けることになる。
【００２３】
これにもかかわらず、ある患者の結果が別の患者に渡ることは、珍しくなく、これが関係する全てにマイナスの結果をもたらす。
【００２４】
ネットワークのメンバー間の意思疎通の欠如およびデータ匿名化の問題は、本発明の第２の課題となる。
【００２５】
さらに、これらのソフトウェアは、テキストで画像に注釈を付けるツールを提供し、用語の定義およびその実施は、開業医の裁量に任されている。同じ画像を閲覧する何人かの開業医は、このようにして異成分から成るＯＯＩまたはＲＯＩカテゴリおよび注釈モジュールを定義し、最終的には、異なる診断を導く場合がある。
【００２６】
例として、仮想スライドを使用する診断支援システムを説明する文書ＵＳ２０１４０２９２８１４に言及することができ、そこでは、複数の開業医が画像の認知解析由来のテキストによるコメントを仮想スライド画像に追加することができる。したがって、複数の作成者が余白にテキスト内の単語にリンクされるコメントを追加できる文書処理と全く同じ方法で、テキスト領域を画像内のオブジェクトにリンクさせることによって、画像内の所与のオブジェクトを示すテキスト領域にコメントを追加することができる。
【００２７】
このシステムが主張する利益は、全てのコメントを画像の上に同時に表示できることであり、換言すれば、コメントされたオブジェクトの位置に応じてグループ化して並置することができる。したがって、読者は、テキスト領域の表示フォーマットに応じて、作成者(またはその機能)を容易に特定することができるが、表示された画像からコメントの意味を直接推測することはできない。
【００２８】
具体的には、一方で、これらのコメントは、画像上に単に重ね合わされるだけであり、それにより画像が修正されることはない。
【００２９】
画面に表示される画像の画素は、実際に修正されコメントを表示できるが、画像ファイルの画素は、それにより修正されない。このように、コメントは、重ね合わせた形態で表示され、換言すれば、画面上の画像と並べて表示されるが、画像ファイル自体には、挿入されない。これは、コメントが付けられた領域上にカーソルが置かれたときにのみコメントが現れる態様によっても示される。
【００３０】
換言すると、その文書内の注釈は、テキスト領域に重ねられたコメントとデジタルテキストフォーマットのみからなるのに対して、画像は、デジタル画像フォーマットである。これらの注釈は、画像上のグラフィカルな注釈ではなく、換言すれば、画像画素のデジタル画像フォーマットの修正ではない。
【００３１】
したがって、その文書においては、コメントと画像は、同じデジタルフォーマットではない。
【００３２】
他方では、その文書内のシステムは、コメントを読者が意味的に解釈する必要のあるテキストであり、その機能をアルゴリズムによって自動で実行できないため、コメントの解析ができない。
【００３３】
したがって、このシステムは、コメントを意味的に解析してその意味を推論することができないので、例として、類似の意見のコメントと異なる意見の様々なコメントをグループ化する単独のコメントの形式で、これらのコメントの要約を生成することはできない。したがって、エンドユーザーは、画像が表示されるときに(画像自体は、修正されていない)、画像に並置され重ねられた全てのコメントを読み、意味的に解釈し、知的に要約しなければならない。
【００３４】
このようなシステムは、したがって、コメントする作成者および／またはオブジェクトの数が多くなるほど、使いにくくなるのは、表示が読みにくくなり、説明が冗長で退屈となるからである。
【００３５】
さらに、文書ＵＳ２０１４０２９２８１４のシステムは、特に使用される語彙に関して、各作成者に自分のコメントの編集を自由させているので、これらのコメントを自動的に解釈することは、絶対に不可能である。
【００３６】
したがって、この解析にあたっての自動解析および自動要約を可能にすることは、本発明の１つの課題である。
【００３７】
画像にグラフィック注釈を付ける際にユーザーを指導することは、本発明の別の課題である。
【００３８】
したがって、本発明は、複数の人が対面し、同期的にまたは非同期的に行う作業用に設計され、参加者が用語データベースと背景（例として病理学）に特有の同一のおよび予め記録された決定過程に関連するグラフィック注釈ツールを用いて、同一の画像を共同で検査し、意見および個々の検査を共有することを可能にする、共同対話型のツールを提案することを目的とする。
【００３９】
共同作業とは、複数の人々が同時に同じ画像を研究し、その画像の解析とコメント付けに参加できることを意味すると解される。
【００４０】
対話型とは、複数の人が同じ画像の処理（解析とマーキング）に参加できること、換言すれば、複数の人が同時に、単独でまたは対話型で、修正または注釈を付けるためにその画像上で作業することができるまたはできないことを意味すると解される。
【００４１】
グラフィック注釈とは、画像の画素、ひいては、画像のデータを修正することを意味すると解され、この注釈には、何らの意味論的意味はない。
【００４２】
したがって、本発明は、また、標準化された予備報告を自動的に確立することができるように共通点およびグラフィカルな相違を解析し、専門家によるグラフィック検査の結果を自動的に比較することを可能にすることを目的とし、従って、これらのデータの全てが追跡可能であることを保証し、これらのグラフィックデータを統計的に解析することを含む。
【００４３】
本発明は、また、作成者として指名された一人の専門家が他の参加者との交流によって教示された、自身の画像解釈でこの予備報告を補足することを目的とする。
【００４４】
この報告書によって、このように作成者は、この症例における教示された意見、換言すれば、専門家の解析における共通点と矛盾点および１つまたは複数の画像を分析した専門家パネルにおける代表性を十分に理解した上で、後に診断する責任者（医師、チームリーダー等）に伝達することができる。
【００４５】
したがって、本発明は、共同対話型診断支援ツールを提案することを目的とするが、本発明のシステムまたは方法は、診断自体を確立することはできない。
【００４６】
このために、本発明は、処理される画像を分配し、注釈付き画像を収集するためのコンソールであって、処理される画像を表示できる少なくとも２つの処理インターフェース（１２０）とローカルで通信できるコンソールを含み、コンソールとインターフェースが、グラフィック修正で注釈が付けられた画像を得るために各インターフェース上で画像のコピーをグラフィックカルに修正するためのツールを提供するように、処理される画像のコピーを分配コンソールから各処理インターフェース（に送信し、各処理インターフェースから各注釈付き画像を分配コンソールへ送信し、
注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、
ようにプログラムされる、共同対話型の画像処理システムを提案する。
【００４７】
組み合わせアルゴリズムとは、アルゴリズムが注釈付き画像間のグラフィカルな注釈の類似度を評価し、グループごとに単一のフォーマットで結果画像に挿入する前に類似グループごとにグラフィカルな注釈を結合し、結果画像上で直接識別できることを意味すると解される。換言すると、本発明による組み合わせアルゴリズムは、画像データを解析し、この解析の結果得られる単一の画像を生成することによってこの解析を合成し、次いで、この合成結果を表示して、ユーザーは、そこから直接的に意味を推定する。
【００４８】
互いに組み合わせることができる他の態様によれば：
●  コンソールおよびインターフェースは、処理される画像のコピー上に、一意の識別子で画定された少なくとも１つの対象領域、対象領域を表す形状および処理される画像のコピー内の座標をマークすることを可能にするようにプログラムできる；
●  コンソールおよびインターフェースは、各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にするようにならびに最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にするようにプログラムすることができ、個別モードと指示モードとの間の変更は、双方に可能である;
●  システムは、以下の装置を含むことができる：
−  データ分配ならびに収集コンソールは、：
▲  ローカル無線信号を送受信する無線トランシーバと;
▲  少なくとも１つの処理される画像および少なくとも１つの結果画像を格納するメモリと;
▲  プログラムされた中央ユニットを含む;
−  少なくとも２つの処理インターフェースは、：
▲  無線信号を介してデータのローカル交換を可能にするコンソールのトランシーバと互換性のあるローカルな無線信号を送受信する無線トランシーバと;
▲  少なくとも１つの処理される画像および少なくとも１つの注釈画像を格納するメモリと;
▲  プログラムされた中央ユニットを含む;
●  コンソールの中央ユニットおよび各インターフェースの中央ユニットは、以下をプログラムすることができる：
−  少なくとも１つの処理される画像のコピーを全てのインターフェースに送信する;
−  少なくとも１つの処理される画像のコピーを全てのインターフェースに送信する;
−  各インターフェース上に処理される画像全体を表示する、
−  コマンドにより表示される画像を拡大および／または縮小し、画像全体に対する表示される画像のズームレベルを表すズーム値および画像全体に対する表示される画像の位置を記憶する；
−  他の全てのインターフェース上に最初のインターフェースの表示と同一の表示を指示することにより、最初のインターフェースから、他のインターフェースを表示する双方指示モードで表示を実行する;
−  注釈付き画像を生成するために、処理される画像に少なくとも１つのグラフィック注釈マークを付ける;
−  注釈付き画像を送信したインターフェースを表す識別子とともに、コンソールに各注釈付き画像を記録し、送信する;
●  指令モードでの表示がユーザーによって起動される場合、コンソールの中央ユニットおよび各インターフェースの中央ユニットは、各インターフェースの初期表示を事前に保存し、全ての他のインターフェース上に最初のインターフェースの表示と同一の表示を指示し、指令モードが非起動のとき各インターフェースの初期表示を再表示するようにプログラムできる；
●  コンソールの中央ユニットは、各インターフェースによって送信された注釈付き画像を結合し、注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために、注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成するようにプログラムできる;
●  コンソールの中央ユニットは、決定された類似度閾値より大きい類似度レベルを有する注釈付き画像上のグラフィック注釈マークが第１のグラフィック形式で表示され、決定された類似度閾値未満の類似度レベルを有する注釈付き画像上のグラフィック注釈マークが少なくとも１つの第２のグラフィック形式で表示される結果画像を生成するようにプログラムできる；
●  コンソールの中央ユニットは、グラフィック注釈マークの統計解析を実行するようにプログラムすることができる;
●  統計解析は、決定された類似度閾値より大きい類似度レベルを有するグラフィック注釈マークのパーセンテージを計算することと、決定された類似度閾値より小さい類似度レベルを有するグラフィック注釈マークのパーセンテージを計算することとを含むことができる；
●  類似度の閾値は、設定可能である;
●  コンソールおよび／または各インターフェースの中央ユニットは、また、注釈付き画像内の少なくとも位置座標とその作成者によって定義される各グラフィック注釈マーク間の対応表を生成するようにプログラムできる；
●  コンソールの中央ユニットは、また、各グラフィック注釈マークの作成者識別子を結果画像に表示するようにプログラムできる;
●  各インターフェースの中央ユニットが、管理者コードまたはユーザーコードで起動され得るようにプログラムでき、コンソールの中央ユニットが、管理者コードで起動されたインターフェース上に管理ツールを表示するようにプログラムされ、管理ツールが、中央ユニットのメモリに存在する処理される画像リスト、参加者の識別子リスト、ユーザーによって選択可能な対象オブジェクトまたは対象領域の記述子リストを含み、各記述子が異なる既定のグラフィック注釈マークに関連する；
●  コンソールは、コンソールの中央ユニットに接続された脱着可能なメモリに接続するための接続ポートを含むことができる;
●  コンソールは、コンソールの中央ユニットに接続されたネットワーク接続ポートを含むことができ、前記コンソールは、少なくとも１つの処理される画像をダウンロードしてメモリに格納するために通信ネットワークを介してリモートサーバと通信するようにプログラムされる；
●  リモートサーバは、機密識別情報に関連付けられた元画像を格納する第１のメモリと、機密識別情報無しに一意の識別子に関連付けられた対応する処理される画像を格納する第２のメモリと、原画像と処理される画像との間の対応表とを含むことができる；
●  コンソールの中央ユニットは、処理される画像に注釈を付けた後に得た結果画像に、処理される画像の一意の識別子を追加し、一意の識別子が付与された結果画像をリモートサーバに送信するようにプログラムできる；
●  コンソールの中央ユニットおよびインターフェースの中央ユニットは、用語データベースを伴う逐次注釈ガイドを表示し、各専門家の回答を逐次的に記録し、各専門家の応答が逐次的に報告され結合される処理される画像のための検査レイアウトを含む予備検査報告を生成するようにプログラムできる;
●  予備検査報告は、処理される画像の一意の識別子、結果画像および結果画像の統計解析の標準化された記録を含むことができる;
●  システムは、処理される画像を分配し注釈付き画像を収集するための、少なくとも２つの互いに通信することができるコンソールを含み、コンソールは、コンソールが階層的に構造化され得る設定可能な状態を有するようにプログラムされる；および／または
●  コンソールの１つが１次ステータスを有するようにプログラムできるのに対し、他のコンソールが２次ステータスを有し、１次ステータスを有するコンソールが２次を有するコンソールに指示できる。
【００４９】
「グラフィック形式」とは、注釈が示される視覚的フォーマットを意味すると解される。これは、本質的には、色、形状（長方形、円、十字等）、輪郭線（点線、破線、三角形の線、四角形の線等）である。グラフィック形式は、コンピュータが解釈できるファイルのフォーマット、例として、デジタルテキストフォーマット（ｔｘｔ、ｄｏｃ等）やデジタル画像フォーマット（ｂｐｍ、ｊｐｅｇ、ｔｉｆｆ等）である「デジタルフォーマット」と混同してはならない。
【００５０】
本発明のもう１つの主題は、以下のステップを含む共同的かつ参加型の画像処理方法である。
−  処理される画像を、少なくとも２つの処理インターフェースとローカルに通信可能なコンソールのメモリに配置する；
−  処理される画像のコピーを分配コンソールから各処理インターフェースに送信する;
−  ユーザーが処理される画像のコピーをグラフィックカルに修正するための注釈付き画像を生成できるように、各処理インターフェース上に処理される画像のコピーにグラフィック修正を行うツールを表示する；
−  各注釈付き画像を各処理インターフェースから分配コンソールに送信ならびに、
−  注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、ように分配コンソールを使用する。
【００５１】
互いに組み合わせることができる他の態様によれば：
●  決定された類似度閾値より大きい類似度レベルを有する注釈付き画像のグラフィカルな注釈は、結果画像に第１のグラフィック形式でマークされることができ、決定された類似度閾値より小さい類似度レベルを有する様々な画像のグラフィカルな注釈は、結果画像に少なくとも１つの第２のグラフィック形式でマークされることができる；
●  この方法は、さらに以下のステップを含むことができる：
−  各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にするステップならびに、
−  最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にし、個別モードと指示モードとの間の変更が双方に可能とするステップ。
【図面の簡単な説明】
【００５２】
本発明の他のフィーチャは、添付された図に関連して与えられた以下の詳細な説明によりそれぞれ概説される：
【図１】図１は、本発明による共同対話型の画像処理システムの最初の態様の概略図を示し、表示されている画像は、全て同一である；
【図２】図２は、本発明による共同対話型の画像処理システムの概略図を示し、表示されている画像は、インターフェースごとに異なる；
【図３】図３は、本発明による処理インターフェースのディスプレイの一例の上方から見た概略平面図を示す；
【図４】図４および図５は、統計解析の目的で、２人の異なるユーザーが対象オブジェクトに注釈を付けた画像と、２人のユーザー間の注釈の違いを示した画像を上方から見た概略平面図をそれぞれ示す；
【図５】図４および図５は、統計解析の目的で、２人の異なるユーザーが対象オブジェクトに注釈を付けた画像と、２人のユーザー間の注釈の違いを示した画像を上方から見た概略平面図をそれぞれ示す；
【図５ａ】図５ａは、統計解析の目的で、いくつかのユーザーのグループ間の注釈の違いを示す画像の上方から見た概略平面図を示す；ならびに
【図６−９】図６〜９は、処理される画像、第１のユーザーの注釈付き画像、第２のユーザーの注釈付き画像およびコンソールにより生成された結果画像の上方からの概略平面図をそれぞれ示す。
【発明を実施するための形態】
【００５３】
本発明による画像処理システムの例示的な態様を図１に示す。
【００５４】
システム１００は、処理される画像を分配し、注釈付き画像を収集するためのコンソール１１０と、処理される画像２００を表示できる少なくとも２つの処理インターフェース１２０とを含む。
【００５５】
コンソール１１０は、矢印Ｆ１が示すように、インターフェース１２０とローカルに通信することができる。
【００５６】
より正確には、コンソール１１０は、ローカル無線信号、有利には、Ｗｉ−Ｆｉ、ＬｏＲａまたはＳｉｇＦｏｘ信号を送受信するための無線トランシーバ１１１を含む。それは、また、少なくとも１つの処理される画像、少なくとも１つの結果画像、好ましくは、注釈付き画像用の記憶メモリ(図示されていない)を含む。
【００５７】
それは、さらに、本発明による画像処理方法を実施するようにプログラムされた中央ユニット(図示されていない)を含む。
【００５８】
コンソールは、好ましくは、コンソールの中央ユニットに接続される脱着可能なメモリ用の接続ポート１１２を含む。例として、ＵＳＢポートから画像をダウンロードすることが可能となる。
【００５９】
コンソール１１０は、また、例えばインターネットの通信ネットワークを介してリモートサーバ１４０に接続するために、（コンソールの中央ユニットに接続されたインターネット接続ポートを経由した無線または有線の）ネットワーク接続を含むことができる。次に、コンソール１１０の中央ユニットは、少なくとも１つの処理される画像をダウンロードし、それをメモリに格納するために、リモートサーバ１４０と通信するようにプログラムされる。
【００６０】
これは、好ましくは、ファンがなく、ローカルで安定したＷｉ−Ｆｉ、ＬｏＲａまたはＳｉｇＦｏｘ信号を送信するＮＡＳ（ネットワーク接続ストレージ）ミニルーターでもよい。このタイプのコンソールは、持ち運びできるので移動が容易で、雑音が少ないため、ワーキングセッションが中断されることがない。
【００６１】
好ましくは、コンソール１１０がインターネット接続を含む場合、コンソール１１０の中央ユニットは、画像処理中にこの接続を中断し、結果画像および／または検査報告のリモートサーバ１４０への安全な転送中にのみ、この接続を再確立するようにプログラムされる。これにより、ワーキングセッションの準備時に接続が事前に確立され、その後接続が中断されるため、グループワークは、サーバとの通信の質に依存しない。
【００６２】
処理インターフェース１２０または処理端末は、有利には、タッチスクリーンタブレットであり、好ましくは、より正確を期すためにスクリーン上で画像に直接注釈付けできるタッチペンが備えられている。
【００６３】
代替として、それらは、ポータブルコンピュータでもよい。この場合、マウスまたはタッチパッドを使用して画像に注釈が付けられる。重要なのは、ユーザーが画像を操作（移動、拡大/縮小、注釈付け）し、コンソール１１０と通信できることである。
【００６４】
この目的のために、インターフェース１２０は、無線信号（矢印Ｆ１）を介してローカルでデータ交換を可能にするために、コンソール１１０のトランシーバ１１１と互換性のあるローカル無線信号を送受信するための無線トランシーバ（図示されていない）を含む。各インターフェース１２０はまた、少なくとも１つの処理される画像及び少なくとも１つの注釈付き画像用の記憶メモリと、中央ユニットとを含む。
【００６５】
ローカル通信は、安定していて質が良い。さらに、結果がハッキングされる危険がなく、前記の作業が 「オフライン」 で実行されるので、暗号化と作業の保護ができる。
【００６６】
ワーキングセッションの準備
【００６７】
ワーキングセッションは、「管理者」と呼ばれるユーザーによって準備され、主導される。これは、ワーキングセッションに参加する専門家であってもなくてもよい。
【００６８】
本発明によるシステムでは、各インターフェースの中央ユニットは、管理者コードまたはユーザーコードで起動できるようにプログラムされる。
【００６９】
ワーキングセッションの前に、ワーキングセッションの担当者がインターフェースの１つに管理者コードを入力すると、インターフェースをコンソールに接続する効果を有し、コンソールの管理ツールにアクセスできるようになる。コンソールの中央ユニットは、管理者コードで起動されたインターフェース上に、中央ユニットのメモリ（またはコンソールに接続された外部メモリやリモートサーバのメモリ）内に存在する処理される画像のリスト、参加者の名前のリスト、各記述子が異なる既定の注釈マーク(異なる形状、異なる線の形式、異なる色等）に関連付けられ、ユーザーによって選択可能な対象オブジェクトおよび／または対象領域の記述子のリスト、予め記録された検査タイプのリスト、又は管理者が準備した新しいタイプの検査を記録するモジュールを含む管理ツールを表示するようにプログラムされている。
【００７０】
画像に関しては、仮想スライドまたは独自仕様のフォーマット（各スライドスキャン会社は、独自の画像フォーマットを有する）のスライド（他のタイプの画像）は、管理者によって、ＵＳＢキーの使用またはリモートストレージサーバ１４０へのリモート接続によって、分配コンソールに送られる。
【００７１】
分配コンソール１１０は、次に画像を標準フォーマット、有利には、ＪＰＥＧフォーマットに自動的に変換する。
【００７２】
このようにして、コンソール１１０のメモリにローカルに格納された画像ベースと、インターフェース１２０上で画像を選択して処理できるようにするためのこれらの画像のリストとを生成する。
【００７３】
最初の態様では、各画像は完全なままであり、したがって、単一の処理される画像のみを含み、そのコピーは、処理のために各インターフェースに送信される。この態様は、コンソール１１０とインターフェース１２０との間の転送時間を制限するために、好ましくは、小さい画像用に確保される。
【００７４】
本発明は、また、転送時間の短縮と流動性の改善のために、多数の画素を含む非常に大きな画像のための１つの有利である態様を提案する。
【００７５】
この態様では、各ベース画像の一部の１つのコピーのみが各インターフェースに送信される。
【００７６】
このために、分配コンソール１１０は、各ベース画像を一連のタイル（例として、サイズが２５６ピクセル×２５６ピクセルまたは５１２ピクセル×５１２ピクセル）に分割する。コンソール１１０は、画像内の各画素の（ｘ、ｙ）座標の一意のペアを生成するために、地図格子を各画像（したがって各タイルに）に関連付け、初期画像内の各タイルの位置を確認する。処理の詳細は、以下に述べる。
【００７７】
これにより、ユーザーが画像の一部を拡大する際に、コンソール１１０とインターフェース１２０との間でやり取りされるデータ量を削減することができ、それによって画像の操作（移動、ズーム等）を可能な限り円滑にすることができる。
【００７８】
管理者は、次にまた、参加者のリストを記入し、ワーキングセッション中に注釈が付けられた各画像に注釈を付けた専門家を関連付けられるようにする。
【００７９】
次に、管理者は、参加者が識別しなければならない対象オブジェクトおよび／または対象領域のリストを用意する。記述子が事前に用意されたリストの一部を形成するか、管理者が新しい記述子を作成するための編集ツールを有する。管理者は、次に注釈マークを対象各オブジェクトおよび／または対象領域に関連付ける。
【００８０】
１つの好ましい態様では、管理者が事前に既定の検査の種類を各画像に関連付けることができるので、前のステップが自動的に実行される。
【００８１】
各検査の種類は、ＯＯＩおよび／またはＲＯＩのリストおよびそれらに対応する注釈マークに関連付けられる。
【００８２】
これにより、ユーザーは、検査の種類に関連する各画像用に既定のグラフィック注釈ツールを有する。したがって、所与の検査のために、それらのツールは、既定の対象領域をグラフィッカルに画定しおよび／または既定の対象オブジェクト、例えばリンパ球の観察による炎症性浸潤の有無、あるいは、血球の有無による出血部の有無に、グラフィックマークを付加しなければならない。既定のグラフィック注釈マーク（例として、自由表面、十字、正方形、円、三角形、実線または点線、異なる色等）は、各記述子に関連付けられる。
【００８３】
有利には、各検査の種類は、また、以下に関連付けられる:
−  逐次注釈ガイド；および、好ましくは、
−  用語データベース。
【００８４】
逐次注釈ガイドは、一連の質問および／または指示および／または命令であり、逐次的に、換言すれば所与のシーケンスで段階的に、各専門家が正確に検査を行うよう導く。質問および／または指示および／または命令のシーケンスは、有利には、事前に構造化された決定木によって決定される場合がある。換言すると、質問／指示／命令は、先の質問／指示／命令に対応する専門家が取る行動に依存する場合がある。
【００８５】
したがって、検査の種類に関連する各画像に対して、ユーザーは、逐次的かつ動的に(換言すれば前の質問に応じて)表示される一定数の質問および／または指示および／または命令に対応しなければならない。例として、所与の検査について、専門家は、観察された細胞の規則性および／または輪郭の範囲、それらのグループ化または分散等に関する質問に回答しなければならない。
【００８６】
システムは、また、専門家が利用できる用語データベースを有することができるよう措置を行う（例として、医療分野の特定のオントロジーを参照して）。これは、用語エントリと関連情報を含むデータベースである。これは、専門家が同じ概念に対して同じ用語を同じズームレベルで使用してコメントを付けられるようにするための辞書である。
【００８７】
このように、検査中に、コンソールの中央ユニットおよびインターフェースは、画像のコピーと共に用語データベースを伴う逐次注釈ガイドを表示し、各専門家の回答が逐次的に報告され結合される処理される画像のための検査レイアウトを含む予備検査報告を生成するようにプログラムされる。
【００８８】
ワーキングセッション中に、検査中の専門家を指導しながら、検査ステップを忘れずに均一な言語を使用できるという利益に加えて、逐次注釈ガイドと用語データベースを使用することで、予測できなかったためにこれらのデータの一部を脇に置くことなく、各専門家が生成した全てのデータから完全な予備報告を生成することが可能になる。この点において、注釈ガイドに提供された「一般的コメント」セクションにより、専門家は、検査シーケンスで想定されてないが関連している可能性があり、同時に予備報告において考慮される所見を述べることができる。
【００８９】
有利には、検査の種類は、事前に記録されており、コンソール１１０のメモリまたは専用データベースのオンラインで利用できる。
【００９０】
このように、逐次注釈ガイドおよび用語データベースは、専門機関による調整と設計が可能であり、したがって、検査の標準化が保証される。
【００９１】
代案として、試験の種類は、管理者が自ら用意してもよい。この場合、管理者自身が以下を定義する：
−  任意で：逐次注釈ガイドと用語データベース。
−  管理者が、専門家の利用可能を望み、所与のグラフィック注釈マーク（例として、定義する自由形状領域の色、十字、正方形、円、三角形、破線または点線等）と関連付ける記述子（換言すれば、ＯＯＩおよび／またはＲＯＩ）。
【００９２】
いずれの場合も(事前に用意された検査または管理者が用意した検査)、システムは、各専門家によって作成された注釈マークの数を記憶しながら、各ＯＯＩまたはＲＯＩ上のマークをカウントすることができる。
【００９３】
本発明によるシステムは、さらに、各注釈マーク、少なくとも画像内の１対のｘ、ｙ座標とそれを作成した専門家の識別とを関連付けるようにプログラムされる。コンソールおよび／または各インターフェースの中央ユニットは、このように、注釈付き画像内の位置座標、その種類（十字、正方形、円、三角形、破線または点線、定義する空きエリアの色等）、可能であればその範囲（画素数に換算して）、それが表すＯＯＩまたはＲＯＩおよびその作成者によって定義される、各マーク間の対応表を生成するようにプログラムされる。
【００９４】
セッションが準備されると、管理者は、管理者の管理者セッションを終了し、管理者が検査に参加している場合は、従来のユーザーコードで接続できる。
【００９５】
画像がリモートサーバから既にダウンロードされている場合、コンソール１１０の中央ユニットは、有利には、検査前にネットワーク接続を中断するようにプログラムされ（図２に図示されているように）、それによって、第一に検査中に不正な接続がないこと、第二にネットワーク接続の品質とは無関係に作業が完全に円滑に行われることを確実にできる。
【００９６】
ワーキングセッションのシーケンス
【００９７】
管理者が作成したリストに示されているユーザーのみが、少なくとも１つの識別子とパスワードを使用して画像ベースにアクセスできる。他のアクセス保護手段、例えば網膜識別または指紋を使用してもよい。
【００９８】
コンソールとインターフェースとの間の通信は、さらに好ましくは、暗号化される。
【００９９】
インターフェース１２０上の表示の一例が図３に図示される。
【０１００】
最初の領域のＷ１は、画像自体を表示するために確保される。Ｗ１よりも小さい領域Ｗ２は、解析されたサンプルの画像全体（図３の中抜きの六角形）、画像全体のｘ、ｙデータでのその位置を有するＷ１に表示された画像の一部を示す。したがって、ユーザーは、自分が見ている一部がサンプルの残りに関してどこなのかを常に知ることができる。
【０１０１】
第３の領域Ｗ３は、さまざまなデータと検査に必要な対話ボタンをグループ化する。
【０１０２】
例として、領域Ｗ３は、画像全体に対する表示された画像のズームインジケータＢ１を含む。
【０１０３】
領域Ｗ３はさらに、セッションを終了するためまたは、例として、検査で専門家に利用可能とされた記述子を追加するよう管理者モードに変更するための接続ボタンＢ２を含む。
【０１０４】
また、領域Ｗ３は、表示される画像のドロップダウンリストＬ１と、画像上に配置され検査される対象領域のドロップダウンリストＬ２とを含む。これら２つのリストは、ワーキングセッションの準備段階で管理者によって選択された。
【０１０５】
領域Ｗ３は、また、例として、対象領域を画定するためのツールバーを起動するボタンＢ３ａと、対象オブジェクトに記述子を用いて注釈を付ける様々なグラフィックマーク用のツールバーを起動するボタンＢ３ｂとを含む、グラフィック注釈ツール領域Ｂ３を含む。
【０１０６】
表示領域Ｗ３は、また、注釈（マークおよびＲＯＩ）をカウントするためのカウンタＣ１、Ｃ２およびＣ３を含む。図示の例では、２１個のまっすぐな十字（第１の種類のＯＯＩに対応）と、１２８個の斜め十字（第２の種類のＯＯＩに対応）が配置され、そして３つの対象領域が画定されている。
【０１０７】
最後に、表示領域Ｗ３は、行った作業を保存するボタンＢ４を含む。代替としてまたは組み合わせて、各インターフェース１２０の中央ユニットは、定期的に注釈付き画像を自動的に保存するようにプログラムできる。手動または自動保存は、インターフェース１２０のメモリによりローカルでおよび／またはコンソール１１０のメモリによりリモートで実行される。
【０１０８】
有利には、領域Ｗ３は、特定の病理に特化した特有の注釈モジュールを表示するスクロールメニューＬ３も含む。
【０１０９】
注釈
【０１１０】
本発明によれば、注釈付き画像２０１ａ、２０１ｂ、２０１ｃを得るために処理される画像のコピーに対し各インターフェース１２０上でグラフィック修正を可能にするために、コンソール１１０およびインターフェース１２０は、処理される画像のコピー２００ (ベース画像全体またはタイル、換言すればベースイメージ画像の一部)を分配コンソール１１０から各処理インターフェース１２０に送信できるようにプログラムされる。
【０１１１】
低解像度で小さなベース画像全体のコピー（サムネイル、したがって非常に小さい）が各インターフェースに送信され、表示領域Ｗ２に表示される。このコピーは、処理されるベース画像のレイアウトを構成する。
【０１１２】
ベース画像が小さい場合は、ベース画像全体のコピーが、領域Ｗ１に表示するため、および注釈および検査のために各インターフェース１２０に送信される。
【０１１３】
次に、ユーザーは、領域Ｗ１に表示された画像全体を拡大することができる。
【０１１４】
ベース画像が大きい場合、タイルに分割され、複数の処理される画像が形成される。この場合、デフォルトで画定されている、処理される１つのタイルのコピーがレイアウトとともに送信され、その全体が領域Ｗ１表示される。
【０１１５】
ユーザーは、このタイルに注釈を付けて、移動や拡大ができ、あるいは、画像全体を動かそうとする。この場合、画像のズームレベルおよびユーザーが自分のインターフェース１２０から行った動作に応じて、そのインターフェースは、コンソール１１０に送信する要求を生成する。これは、少なくとも基準 (ｘ，ｙ) 座標と、ｘおよびｙに関する(画素数に関する）次元のペアを含む。コンソール１１０は、要求に応じて、対応する１つまたは複数のタイルをインターフェースに送信し、インターフェースは、領域Ｗ１内の前記１つまたは複数のタイル全体を表示する。ユーザーは、これらの新しいタイルを拡大し、タイル間を移動したり、注釈を付けたりできる。
【０１１６】
各専門家は、そのインターフェース１２０上で処理される画像のコピー（画像全体または少なくとも１つのタイル）を見て、それを操作し（画像内の移動、拡大、縮小）、それにグラフィック注釈を付ける（換言すれば画像を形成しているピクセルを修正する）ことができる。
【０１１７】
この作業は、全ての専門家によって同時に行われるが、各専門家によって独立しても行われる。したがって、図２に示すように、コンソールおよびインターフェースは、各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にするようにプログラムされており、これによりインターフェース１２０ａを操作する専門家が画像の２０１ａの部分に注釈を付け、インターフェース１２０ｂを操作する専門家が画像の２０１ｂの部分に注釈を付け、インターフェース１２０ｃを操作する専門家が画像の２０１ｃの部分に注釈を付ける。
【０１１８】
図示の例で提供されるグラフィック注釈マークは、斜め十字（×）２０２およびまっすぐな十字（＋）２０３である。これらのマークは、そのマークが配置された画像の画素を置き換える。
【０１１９】
注釈マークは、次の２つのモードで配置できる。
a)  管理者がＯＯＩカテゴリを定義し、ユーザーがこれらのカテゴリに基づいて画像の要素にグラフィック注釈マークを追加するシンプルモード。これは、ＯＯＩ（またはＲＯＩ）をカウントするおよび／またはＯＯＩ（またはＲＯＩ）を探すおよび／または各専門家によって定義されるＯＯＩ／ＲＯＩの範囲を評価する操作となる。
b)  さまざまなＯＯＩおよび／またはＲＯＩカテゴリに加えて、管理者が決定木のロジックに従って一連の注釈を含む逐次注釈ガイドを定義または選択するガイドモード。
コンソールの中央ユニットおよびインターフェースは、各専門家の回答を逐次的に記録するために、画像のコピー、用語データベースを伴う逐次注釈ガイドを表示するようにプログラムされる。
したがって、各ユーザーは、逐次注釈ガイドが定義したクローズドクエスチョンに回答する。各回答に応じて、コンソールまたはインターフェース（本発明によるシステムおける選択した実施に応じて）は、対応するシーケンスに応じて、どのＯＯＩ／ＲＯＩマークをツールバーＢ３ａおよびＢ３ｂに表示するかを決定する。
次に、ユーザーは、各シーケンス中にグラフィック注釈マークを配置し、したがって画像の画素を修正し、次の質問に進む。したがって、全てのカテゴリに同時にアクセスすることはできない。したがって、ユーザーは、自分の診断に導かれる。
【０１２０】
この動作モードにより、任意の検査前に専門家（その分野の専門家）は、用語および検査シーケンスを作成し確認することができる。これにより、診断ステップが均一化され、開業医グループ間の診断モードの差が最小になる（最終記録では、同一画像上で均質で比較可能な方法に従ったユーザー間の診断の差を比較することができる)。
【０１２１】
注釈は、各インターフェース（ＲＯＩおよび／またはＯＯＩの注釈マーク、決定木内でたどるパス、画面のコピーおよび全てのデータのタイムスタンプ）から自由または課せられた方法で；例として、ユーザーごとにマークされる固有の領域を課すことで、作成することができる。様々な専門家によって示された各ＲＯＩは、完全なトレーサビリティを確保するために、その作成者、一意の番号および配置された画像によって識別される。次に、注釈が、換言すれば注釈の各画素（ｘ；ｙ）の位置がコンソールに送信される。注釈は、対面で、同期で(全てのユーザーによって同時に)または非同期で(全てのユーザーによって、ただしワーキングセッション中の異なる時間に)、課せられたモードで作成できる。
【０１２２】
タイムスタンプを使用すると、時間の経過に伴うユーザーの展開（注釈を複数回作成する可能性)と共に、全てのユーザーの行動を簡単に追跡できる。これは、結果を統合し、展開を比較する場合に有効である(例として、画像が２つの異なる時間に同じ専門家に提出されたとしても)。
【０１２３】
各インターフェースの注釈は、種類によってカウントされ、その位置は、画像内の少なくとも１対のｘ、ｙ座標を使用して記録される。
【０１２４】
次に、注釈付き画像が記録され、コンソール１１０に送信される。
【０１２５】
有利には、各インターフェースの中央ユニットは、注釈付き画像内の少なくとも位置座標とその作成者によって定義される各グラフィック注釈マーク間の対応表を生成するようにプログラムされる。注釈の種類および注釈シーケンスは、好ましくは、各注釈マークを定義するのにも役立つ。したがって、注釈付き画像が記録されるとき、コンソール１１０に送信されるのは、注釈付き画像を表すこの対応表のみである。次に、前記コンソールは、生成される結果画像上の各注釈マークの画素を置換することができ、それにより、送信されるデータの量を制限し、したがって円滑さに寄与する。
【０１２６】
本発明における「注釈付き画像」とは、したがって、そのグラフィック注釈マークを備えた（例えば、ｊｐｅｇ形式の）注釈付き画像または注釈付き画像を表すグラフィック注釈データの表のいずれかを意味すると解される。
【０１２７】
ディスプレイ共有
【０１２８】
本発明によるシステムによって、検査中に専門家間の真の協力を可能にすることができる。
【０１２９】
このために、最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にするようにプログラムされ、個別モードと指示モードとの間の変更が双方に可能となる。
【０１３０】
図１の矢印Ｆ２によって概説されるように、本発明による指示された表示は、コンソールを介して数人のユーザーが互いに通信することを可能にする。
【０１３１】
したがって、他の専門家の注目を引きたいまたは質問をしたい専門家は、他の専門家に自分のインターフェースで画像の特有の領域を示すことができる。
【０１３２】
指示モードを起動／停止するために、インターフェースは、インターフェース１２０の画面上でユーザーによって直接選択可能なボタンＢ５を含む。
【０１３３】
ディスプレイのみが指示を受け、システムの他の機能は、各インターフェース上で利用可能なままである。したがって、最初のインターフェースによって指示された表示中に、他のインターフェースのユーザーは、表示される画像の一部にグラフィック注釈を付ける機会から利益を得ることが可能である。
【０１３４】
この双方コマンド表示機能には、次の２つの利益がある。
【０１３５】
１つ目は、指示された表示中に、座標とズームレベルのみが他のインターフェースに送信され、画像部分自体は送信されないため、指示された表示の完全な応答性と完全な円滑さが保証されることである。
【０１３６】
各ユーザーは、さらに、引き続き自由に自分の画像に注釈を付けられる。換言すると、各インターフェース上に同じ画像部分が表示されても、画像自体は、インターフェースに固有のままであり、したがって、ユーザーに対しても固有であり、したがって、他のインターフェースから独立して注釈を付けることができる。
【０１３７】
指示された表示を有効にしたユーザーは、自分の画像の注釈を指示したり強制したりせずに、画像の特定の領域に他のユーザーの注目を引くことができる。したがって、画像の共同検査中に指令された表示機能が起動された場合でも、各ユーザーの結果を統計的バイアスなしに解析することが可能である。
【０１３８】
１つの有利な態様によって、指令モードでの表示がユーザーによって起動される場合、コンソールの中央ユニットおよび／または各インターフェースの中央ユニットは、各インターフェースの初期表示を事前に保存し、全てのインターフェース上に最初のインターフェースの表示と同一の表示を指令するようにプログラムされる。
【０１３９】
初期表示は、有利には、画像全体（換言すれば、ズームレベルと連動する実際の値に換算した尺度）に対する表示される画像のズームレベルを表すズーム値と、１組のｘ、ｙ座標の形式で画像全体に対する表示される画像の位置とからなる。
【０１４０】
したがって、最初のユーザーが指令モードを起動して制御する場合、他のユーザーは、指令モードへの変更時に見ていた画像の位置やズームレベルを失う心配をする必要がない。
【０１４１】
指令モードが停止されると、コンソールの中央ユニットおよび／または各インターフェースの中央ユニットは、各インターフェースの初期表示を再表示するようにプログラムされる。その後、各ユーザーは、指令モードが起動される前の表示に戻り、作業を継続することができる。
【０１４２】
この初期位置の再表示は、指示された表示の前に注釈を付けていた箇所に戻る前に、表示された画像部分に注釈を付ける時間を残すように、自動的にまたは各ユーザーからの要求に応じておこなわれる。
【０１４３】
この操作モードでは、画像と意見を同時に共有できる。管理するユーザーは、他のユーザーに自分とって問題の原因となっている画像領域または注意を向けたい画像領域を直接表示できる。
【０１４４】
さらに、送信されるわずかな情報（注釈の画素のｘ、ｙ座標とズーム値）により、非常に円滑で高速なナビゲーションと表示が可能になる。
【０１４５】
作業が終了し、画像に完全なグラフィック注釈が付けられ、場合により、逐次注釈ガイドおよび用語データベースに従ってコメントが付けられると、コンソール１１０およびインターフェース１２０は、また、各注釈付けされた画像が各処理インターフェース１２０から分配コンソール１１０に送信（ユーザーの指示により自動または手動で）されることを可能にするようにプログラムされる。先に記載したように、これは、注釈付き画像それ自体でもよいが、好ましくは、注釈の種類(例としてその記述子によって)および注釈付き画像内の位置座標によって定義される各注釈マークとその作成者との対応関係を含む注釈付き画像を表す注釈データの表である。このような表は、画像よりもはるかに少ないデータを含むため、転送は、非常に迅速に行われ、複数の専門家が同時に注釈を転送できる。
【０１４６】
結果画像の生成
【０１４７】
注釈データ（各注釈付き画像を表す注釈データの注釈付き画像または表）を受信した後、コンソール１１０の中央ユニットは、また、注釈付き画像間の共通点および相違を識別する（換言すれば、図示する）ために、決定された組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成するようにプログラムされる。
【０１４８】
一般的に言えば、組み合わせアルゴリズムは、注釈付き画像間の類似のグラフィック修正と異なるグラフィック修正とを決定するために、各注釈付き画像のグラフィック修正を解析する。次に、この解析を合成し、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成する。
【０１４９】
１つの簡略化した例は、図４および５に図示されている。
【０１５０】
この例では、対象領域３００は、実線で図示されている。第１のユーザーは、インターフェース上に点線で図示される代表形状３０１を使用してこの対象領域を画定し、第２のユーザーは、自分のインターフェース上に点鎖線で図示される形状３０２を使用してこの対象領域を画定し、第３のユーザーは、破線で図示されている自分のインターフェース上の形状３０３を使用して、この対象領域を画定している。
【０１５１】
コンソールの中央ユニットは、好ましくは、処理される画像と同一の形式（換言すれば、注釈付きの画像と同じ形式）の結果画像を生成するようにプログラムされており、そこでは、決定された類似度閾値より大きい類似度レベル（例として、形状、位置、マークの種類に関して）を有する注釈付き画像の注釈マーク（換言すれば、注釈マークの画素）が融合されて１つの第１のグラフィック形式（線、色、線の形式、位置）で表示され、決定された類似度閾値より小さい類似度レベルを有する様々な画像の注釈マークが融合されて少なくとも１つの２番目グラフィック形式で表示される。
【０１５２】
図５に図示されている例では、第１と第２の専門家の対象領域３０１および３０２は、非常に近い類似度レベルを有するので、単一の第１の線３０１-３０２の形で融合され、グループ化されており、専門家らは、対象領域３００を正確に画定している。たとえ両者の間にわずかな相違があるとしても、これは、検査を変える種類のものではない。ＲＯＩ３０１および３０２は、決定された類似度閾値よりも高い類似度レベルを有する。
【０１５３】
類似度閾値は、管理者が決定することができるし、システムに予め設定することもできる。代替的にまたは組み合わせて、類似度閾値は、結果画像が生成される前または後に、例として、後者が多すぎる異なるマークを含み、過度に高い類似度閾値により様々な専門家のマークを十分にグループ化することが不可能な場合に、設定可能であることができる。
【０１５４】
第３の専門家が画定したＲＯＩ３０３は、決定された類似度閾値よりも低い他の２つのＲＯＩ ３０１および３０２と類似のレベルを有する。したがって、第１の線から離れた位置に第２の線の形式で表示される。
【０１５５】
類似のＲＯＩを表す線は、計算し、例として、類似の線の位置の平均位置に配置することができる。代替として、類似の線の１つとして選択することができる。非類似のＲＯＩの線についても同様である。代替として、各非類似線は、ユーザーが作成した位置に表示できる。
【０１５６】
したがって、本発明の意味における組み合わせアルゴリズムは、類似度グループ（換言すれば、同一であるまたはその相違が決定された類似度閾値よりも小さいグラフィック注釈）ごとにグラフィック注釈を融合することと、それらを各グループ間では異なるが同じグループ内では同じであるグラフィック形式の画素の形態で結果画像に挿入することからなる。グラフィック形式は、色または形状の組み合わせ（例として、破線、点線、三角形の線、実線）を意味すると解される。
【０１５７】
換言すると、結果画像を生成するために、アルゴリズムは、処理される画像から開始し、注釈付き画像に基づいて様々な専門家のグラフィック注釈間の類似度を解析し、類似度グループを形成し、次いで、その解析を、画像の元の画素が結果画像を観察する観察者が直接識別できる固有のグラフィック形式の画素に自動的に置き換えられる結果画像の形態で合成する。例として、観察者が直接識別できるグラフィック形式を自動的に選択するために、アルゴリズムは、組み合せの結果を表示する必要がある画像の画素のスペクトルまたは画像の領域を解析するステップと、画像または解析された画像部分の画素に関して閾値コントラストレベルよりも大きいコントラストレベルを有する色を選択するステップとを含むことができる。
【０１５８】
具体的には、アルゴリズムは、２つの注釈マーク間の画素を比較し、それらを２つのカテゴリ、同一のカテゴリ（換言すれば、専門家らが同じ画素を修正する）および異なるカテゴリ（換言すれば、専門家らが同じ画素を同じ方法で修正していない）に分類する。
【０１５９】
次いで、アルゴリズムは、異なる画素が類似度閾値を決定する閾値画素数分、同一画素から離間しているかどうかを決定する。この目的のために、同一の画素領域の周囲にわたる側にｎ画素のウィンドウを使用することができ、異なる画素がウィンドウ内にある場合には、それらの画素の分類を修正することができる(同一画素に分類される)。ウィンドウの外側に残っている画素は、引き続き異なると見なされる。
【０１６０】
好ましくは、分類ステップが追加され、同一の画素数に対して残存する異なる画素のパーセンテージを計算する。このパーセンテージが閾値のパーセンテージより小さい場合、異なる画素は、同一の画素として分類され、２人のユーザーのマークは、画像上で厳密には、同一の位置に配置されていなくても、同一であると見なされる。このパーセンテージが閾値パーセンテージより大きい場合、同一画素は、第１のグラフィック形式で表示され、異なる画素は、別のグラフィック形式で表示される。
【０１６１】
もちろん、これは、３人以上のユーザーのマークに適用される。この場合、類似画素は、類似度グループごとに融合され、画素のグループ数と同じ数のグラフィック形式で表示される。
【０１６２】
代替としてまたは組み合わせて、これらの画素内の類似度で分類された少なくとも２つのグループを決定するために、第１段階で異なると分類された画素について解析を繰り返すことができる。したがって、これにより相違が認定され、換言すれば、いくつかの相違グループ（図５ａのコメントを参照）がグラフィカルに明らかになる。
【０１６３】
様々な専門家からの注釈は、このように、単に並置されるのではなく、グラフィカルに単一の画像に結合され、画像解析の評価に、とりわけ対象オブジェクトまたは対象領域および／または専門家の数が多い場合には、有害な影響を及ぼす。
【０１６４】
したがって、システムが生成する単一の結果画像は、注釈付き画像を解釈する必要のないユーザーに、少なくとも以下の３種類の情報を視覚的かつ直接的に与える：
●  専門家間で解析の違いがあるかどうか；
●  どの専門家が同意していないか（ユーザーは、専門家が画像のグラフィック解析に同意しているかどうかを自分で判断する必要はない）;
●  相違と共通点に関する空間的情報：それらの位置、それらの形状。
【０１６５】
特定の一態様では、アルゴリズムは、いくつかのグループの相違を定義することができる。したがって、相違に条件を付けることが可能であり、換言すれば、共通の画素、第２の類似度レベルを有する画素の第１のクラウン、第３の類似度レベルを有する画素の２番目のクラウン等、いくつかのグループのグラフィク注釈を明らかにすることが可能である。これにより、専門家の意見のばらつきや意見の相違の階層を、例として、類似、ほぼ類似、異なる、非常に異なる等、視覚的に明らかにすることが可能となる。
【０１６６】
図５ａに図示される例示的な応用例は、手術前の腫瘍の範囲の画定に関する。
【０１６７】
組み合わせアルゴリズムによる解析および合成の後、生成された結果画像により、ユーザー５０１、５０２および５０３が第１の中央領域に小さな範囲の腫瘍を画定したことが明らかになる。ユーザー５０４および５０５においては、腫瘍がさらにわずかに拡大していると考えた。最後に、ユーザー５０６および５０７は、腫瘍がさらにもっと拡大していると考えた。
【０１６８】
したがって、本発明によるシステムは、専門家が解析において意見が一致していないという事実に対し直ちに注意を喚起する。ユーザーは、また、結果画像から、一部のユーザー（５０６〜５０７） がその形状が非常に複雑であり、従って、将来の治療を根本的に変える可能性がある腫瘍を画定したことを直接推定する。したがって、システムは、特に対象領域の数および／または専門家の数が多い場合に、エンドユーザーが修正された画像の解析から大変苦労して推定できなかったであろうまたは推定できたであろうデータを生成する。
【０１６９】
したがって、このシステムは、貴重な時間を節約すること、さまざまな専門家のグラフィック解析を意味的ではなく視覚的に扱うこと、将来の診断と選択した治療の妥当性を改善することを同時に可能にする。
【０１７０】
図６〜９は、本発明によるシステムを使用して、異なる専門家によってマークされた対象オブジェクトに関する結果画像を取得する別の例を図示する。
【０１７１】
図６は、全てのインターフェースに送信し処理される画像２００を示す。図７は、第１の専門家が注釈付けした画像２０１ｄを示し、図８は、第２の専門家が注釈付けした画像２０１ｅを図示する。最後に、画像９は、本発明によるシステムが生成した結果画像４００を示す。
【０１７２】
結果画像において、決定された類似度閾値よりも大きい類似度レベル（位置と種類に関する）を有する最初および第２の専門家が注釈付けした画像の注釈マークは、ここでは、実線で第１のグラフィック形式で示される。決定された類似度閾値より小さい類似度レベルを有する注釈マークＭ１、Ｍ２、Ｍ３およびＭ４は、ここでは、点線で少なくとも第２のグラフィック形式で示される。
【０１７３】
本発明による表示方法は、好ましくは、結果画像を表示し、マウスカーソルを画像上に移動させると、各注釈の作成者の名前が重ねられた形態で動的に表示することを含む。有利には、動的表示は、決定された類似度閾値より小さい類似度レベルを有する注釈マークＭ１、Ｍ２、Ｍ３およびＭ４のみに関する。
【０１７４】
動的表示は、少なくとも注釈付き画像内の位置座標とその作成者によって定義される各注釈マーク間の対応テーブルであって、本発明によるシステム（コンソールおよび／または各インターフェースの中央ユニットによって）によって生成される対応テーブルによって可能になる。
【０１７５】
コンソールの中央ユニットは、また、グラフィック注釈マークの統計解析を実行するようにプログラムされる。
【０１７６】
例として、統計解析は、決定された類似度閾値より大きい類似度レベルを有する注釈マークのパーセンテージの計算と、決定された類似度閾値より小さい類似度レベルを有する注釈マークのパーセンテージの計算を含む。
【０１７７】
この結果により、画像が専門家の間で検査に関する強い意見の一致を有するかどうかを示すことができ、たとえ多数のマークおよび／または多数の専門家であっても非常に迅速かつ直接的にそれを行うことができる。この解析は、より詳細に、相違する注釈マークの範囲内でのみ実行することができる。次に、相違が単なる注釈エラーであるかどうかを確認でき、例として、ある所与のＯＯＩ（ｘ、ｙ座標で識別される）と２０人の専門家パネルに対し、マークの９５％同一で、５％のみが異なる場合、これは、マークエラーである可能性が高く、作成者に確認を求めることができる。対照的に、あるＯＯＩがパネルの半数で異なる注釈を付けられている場合、統計解析により、検査を担当する専門家がこのＯＯＩに対し注意を喚起するまたは専門家パネルにこのＯＯＩを再度解析して議論するよう依頼することができる。本発明による指示表示モードは、この状況において特に有益である。
【０１７８】
予備報告の生成
【０１７９】
専門家が検査のどの段階も忘れないことを確実にするという利益に加えて、逐次注釈ガイドおよび用語データベースを使用することにより、本発明によるシステムは、結果画像の後に、検査を担当する専門家が当然完成しなければならない予備報告を自動的に生成することができる。
【０１８０】
産業構造の品質調査や健康診断には、様々なチェックポイントを有する検査が必要である。理想的には、検査の厳格性を担保するために、検査は、明確な順序に従って検査カテゴリに編成する。残念ながら、これは、そうとばかりはいえず、検査官または医師が検査を行う際に記録を付ける。これは、検査者の技量とは無関係に、検査のトレーサビリティや再現性で問題を引き起こし、具体的には、省略される点がある。さらに、それぞれの語彙に応じて画像の記述子に大きなばらつきがあり、それによって理解不足のリスクにつながる可能性がある。最後に、異なる時間に異なる人々が行った２つの検査を比較することは、記録の配置が同一でない場合、非常に退屈であり、不可能でさえある場合がある。
【０１８１】
本発明によるシステムは、また、これを是正することを可能にする。
【０１８２】
コンソールが結果画像を生成すると、コンソールは、各専門家の回答が逐次報告され結合される、処理される画像の検査レイアウトを含む予備検査報告も生成する。予備報告のレイアウトとその内容は、逐次注釈ガイド（検査レイアウトとアンケート）とそれに付随する用語データベースによって決定され、ワーキングセッションの準備時に管理者が選択（または作成）する。
【０１８３】
結果画像が生成されると、コンソールの中央ユニットは、処理される画像の検査レイアウトにしたがって、処理される画像の一意の識別子、結果画像およびアンケートに対する専門家の回答を含む予備検査報告を生成するようにプログラムされる。
【０１８４】
予備報告は、好ましくは、結果画像の統計解析の標準化した記録も含む。すなわち、予備報告は、あらかじめ決められた語句の形態による統計解析の結果を含む。例として：「対象オブジェクトのカテゴリＡ（管理者により既定）では、専門家のＸ１パーセントが実例Ｎ１より数が少ないことがわかったが、１００−Ｘ１パーセントは、それより数が多いことがわかった。」Ｘ１は、０〜１００の実数であり、Ｎ１は、検査に基づいて決定された０以上の整数である。マクロファージを含む気管支肺胞洗浄 (ＢＡＬ) の種々の細胞に連続番号付けを必要とする細胞学的プロフィールの評価を伴うＢＡＬ解析の例示的な応用例において、予備報告は、「解析は、サンプルが解析されたサンプルの全細胞集団に関連してマクロファージのＸ２パーセントを含むことを示す」という種類の語句を含むことができる。
【０１８５】
検査を追跡できるようにするために、システムによって、誰が最も多くの、誰がより少ないＲＯＩ／ＯＯＩを見つけたかを確かめることができる。
【０１８６】
専門家が質問に対して異なる回答をする場合、予備報告は、その質問が依存する章において、例として、次のようなあらかじめ決められた語句の形態で標準化された記録を含むことができる。「Ｙ（管理者により既定）の有無については、Ｎ２のうちｎ名の専門家は、肯定的な回答であったが、 Ｎ２−ｎは、否定的な回答であった」において、Ｎ２は画像処理に参加した専門家の総数であり、ｎは、０〜Ｎ２の整数である。
【０１８７】
これは、例として、乳癌に関連する場合である。術前生検を解析することは、治療の指針となる質問のリストから、有糸分裂指数を確立することを可能にする質問「表面積※※※※（管理者により既定）mm２における有糸分裂数」を含む。予備報告は、問題が依存する章に、次のような種類の語句を含むことができる。「有糸分裂数に関しては、Ｎ２のうちｎ名の専門家によるカウントでは、・・・の有糸分裂指数であったが、Ｎ２−ｎによるカウントでは、・・・の有糸分裂指数であった。」
【０１８８】
したがって、本発明によるシステムは、事前に記入された文書を生成し、回答の統計的解析結果および専門家の注釈を所定の順序で収集することができ、審査を忘れたり、情報を失ったりするリスクがない。しかしながら、予備報告は、様々な専門家の注釈の自動解析の統計結果を標準化され組織化された方法で開示することを目的としているので、診断を含むものではない。
【０１８９】
この予備報告は、報告の起草を担当する作成者が完成させる。
【０１９０】
本発明による処理システムによって可能となる報告の標準化とデータのトレーサビリティにより、妥当性と有効性を確保するために、本発明によるシステムなしでは、不可能であった情報損失のリスク（多人数参加型の検査固有のリスク）なしで、統計解析を伴う多人数参加型の検査を行うことが可能となる。
【０１９１】
具体的には、本発明によるシステムがなければ、同時にまたは同条件下で行われなかった検査に関する相当量のデータを、不均質な記録に基づいて解析する必要があるであろう。これが表す作業量の抑制に加えて、データが過度に多くのパラメータに依存しているため、そのような解析結果は、非常に疑わしいものになるであろう。
【０１９２】
本発明によるシステムによって、これらのパラメータの数を減らすことができ、検査の解析が迅速で、容易で、かつ、非常に意義がある。
【０１９３】
有利には、予備検査報告は、処理される画像の一意の識別子、結果画像および結果画像の統計解析の標準化された記録を含む。
【０１９４】
他の態様によれば、
●  本発明によるシステムは、データの匿名化を確実に実行でき、そのため、専門家の何れも検査しているサンプルの患者の個人情報を知ることはない。この目的のため、リモートサーバは、機密識別情報に関連付けられた元画像を格納する第１のメモリと、機密識別情報無しに一意の識別子に関連付けられた対応する処理される画像を格納する第２のメモリと、原画像と処理される画像との間の対応表とを含む。
機密情報の削除、一意の識別子の作成および対応するデータ表の作成は、この目的のためにプログラムされたリモートサーバが自動的に実行できる。
コンソールの中央ユニットは、処理される画像に注釈を付けた後に得た結果画像に、処理される画像の一意の識別子を追加し、一意の識別子が付与された結果画像をリモートサーバに送信するようにプログラムされる。
次に、前記リモートサーバは、個人情報を患者、結果画像および検査報告に再び割り当て、そのため、患者の担当医は、ファイルの取り違えのリスクなしに、かつ専門家が患者の個人情報を知ってしまうリスクなしに、検査結果を患者に報告できる。
●  本発明によるシステムによって、本発明による最初のシステムのコンソールは、また、最初のシステムからリモートにネットワーク通信に設置された本発明による別のシステムのコンソールと、具体的にかつ安全に通信できる。この配置により、２つ以上のリモートユーザーグループ（専門家、学生等）間でのワーキングセッションが可能となる。
このように、本発明によるシステムは、処理される画像を分配し注釈付き画像を収集するための、少なくとも２つの互いに通信することができるコンソールを含み、コンソールは、コンソールが階層的に構造化され得る設定可能な状態を有するようにプログラムされる。
この場合、コンソールの階層構造に従い、少なくとも２つのコンソール間でデータ交換が行われる。したがって、どちらかのコンソールが１次ステータスを、他のコンソールが２次ステータスを有し、ワーキングセッションは、１次コンソールが準備し、２次コンソールに送信する。検査中、各コンソールは、自身が依存するグループのデータを集中化する役割を果たし、グループ内で指示された表示を管理し、結果画像を生成し、グループのデータの統計解析を行う。
１次コンソールは、２次コンソールを制御することができ、換言すれば、２次コンソールを指示することができ、例として、全てのグループのメンバーに対しグループのあるメンバーが指示した表示を可能にする。
また、他のグループのコンソールが直接送信した注釈付き画像から結果画像を生成するまたは各２次コンソールが生成し送信した２次結果画像から１次結果画像を生成することもできる。この第２のオプションは、最終的な結果画像を生成するために、全てのコンソール間で計算処理能力が分配されるという効果を有する。しかしながら、この態様は、本発明による様々なシステムのコンソール間の通信の品質に依存する。交換されるデータ量は、限られているので、それは、依然として非常に有益である。ＬｏＲａまたはＳｉｇＦｏｘワイヤレスネットワークは、通信ネットワークとして役立つ。
●  インターフェースは、有利には、同一であり、それによって、インターフェース上の均一性を確保し、ハードウェアに起因する診断エラーを低減することができる。したがって、これにより検査の質が向上する。
●  本発明によるシステムで使用できるインターフェースは、携帯端末、コンピュータおよびその画面、タブレット、好ましくは、タッチスクリーンタブレット、ユーザーの焦点面に位置するマイクロディスプレイ装置、仮想現実ヘッドセット等であってよい。
【０１９５】
本発明により、コンソールがローカルモードでインターフェースと動作するために第三者のネットワーク接続を必要としないので、ユーザーは、ハードウェア性能および通信ネットワークの速度に関する制約を克服する。
【０１９６】
システムは、さらに複数の画像フォーマットを扱う。対照的に、現行のソフトウェアは、単一の専用の画像フォーマット（ソフトウェアを販売するスキャナーメーカーの画像フォーマット）で動作する。
【０１９７】
さらに、本発明によるシステムは、既存の実験室用管理システム、例えばＰＡＣＳ（病院で使用される「画像保管通信システム」）と相互運用可能である。
【０１９８】
本発明は、主に医療分野での実施様態の記述である。それは、この分野のみにとどまらず、画像の対象のみで決まる。
【０１９９】
本発明は、診断補助または品質検査ツールとして産業分野で非常によく使用され得る。
【０２００】
本発明は、車両レンタルのための診断支援および観察追跡のためのツールとして、自動車レンタルの分野にも応用できる。
【０２０１】
このシステムにより、レンタル会社とレンタル業者は、インターフェース（好ましくは、タッチスクリーンタブレット）上で車両の同じ画像（写真やレイアウト）に注釈を付け、コンソールは、その結果を決定された類似度レベルと比較する。相違が大きすぎる場合、観察は、有効ではなく、参加者は、注釈を比較し、類似度レベルが十分になるように修正するよう求められる。この場合、コンソールは、結果画像を生成した後、警告と各インターフェース上の相違点を構成する画像（好ましくは、それらの処理画像）を返す。有利には、コンソールはまた、各インターフェース上に、レベル値を表すカラーコードで類似度値を動的に表示し、類似度レベルが不十分な場合には、赤色でフォーマットする。次に、参加者は、意見を一致させ、処理された画像を修正する。注釈修正を通して、コンソールは、対話的かつ動的に２つの再処理された画像の類似度レベルを計算し、類似度レベルが十分になるまでそれを各コンソールに表示する。コンソールが信号（例として緑色の類似度レベル）を表示し、観察結果が確認される。
【０２０２】
その後、保存され、異議がある場合には、上記の観察結果と比較することができる。用語データベースと予め設定した注釈マークを伴う逐次注釈ガイドを使用することにより、観察結果は、迅速かつ確実に作成され、各当事者の役割を迅速に識別するための信頼できるログが可能になる。
【図１】
2021506049.tif 000003
【図２】
2021506049.tif 000004
【図３】
2021506049.tif 000005
【図４】
2021506049.tif 000006
【図５】
2021506049.tif 000007
【図５ａ】
2021506049.tif 000008
【図６】
2021506049.tif 000009
【図７】
2021506049.tif 000010
【図８】
2021506049.tif 000011
【図９】
2021506049.tif 000012
【手続補正書】
【提出日】令和2年8月7日(2020.8.7)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
個々の判断ミスのリスクを制限するために、意見の共有及び画像のグラフィック解析を必要とする分野のための共同対話型の画像処理システム（１００）であって、
●  処理される画像（２００）を分配し、注釈付き画像（２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、２０１ｅ）を収集するためのコンソール（１００）であって、処理される画像を表示できる少なくとも２つの処理インターフェース（１２０）とローカルで通信できるコンソール（１００）を含み、
●  コンソール（１１０）とインターフェース（１２０）が、
〇  処理される画像のコピーを分配コンソール（１１０）から各処理インターフェース（１２０）に送信し、処理される画像が検査の種類に関連し、検査の種類が対象オブジェクトおよび／または対象領域のリストに関連し、各対象オブジェクトおよび／または対象領域が注釈マークに関連し、
〇 グラフィック修正で注釈が付けられた画像を得るために各インターフェース上で画像のコピーをグラフィックカルに注釈を付けるためのツール（Ｂ３、Ｂ３ａ、Ｂ３ ｂ）を提供し、グラフィック注釈ツールが画像用に既定され、グラフィック注釈ツールにより既定の対象領域をグラフィッカルに画定できおよび／または既定の対象オブジェクトにグラフィックマークを付加でき、
〇  各処理インターフェース (１２０) から各注釈付き画像を分配コンソール（１１０）へ送信し、
〇  注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成し、
〇 各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にし、
〇 個別モードと指示モードとの間の変更が双方に可能であり、最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にする、
ようにプログラムされていることを特徴とする、共同対話型の画像処理システム。
【請求項２】
コンソール（１１０）およびインターフェース（１２０）が、
処理される画像のコピー上に、一意の識別子で画定された少なくとも１つの対象領域（３００、３０１、３０２、３０３）、対象領域を表す形状および処理される画像のコピー内の座標をマークすることを可能にする、
ようにプログラムされた、請求項１記載の画像処理システム。
【請求項３】
−▲  ローカル無線信号を送受信する無線トランシーバ（１１１）と；
▲  少なくとも１つの処理される画像および少なくとも１つの結果画像を格納するメモリと；
▲  プログラムされた中央ユニットと、
を含むデータ分配ならびに収集コンソール（１１０）と、：
−▲  無線信号を介してデータのローカル交換を可能にするコンソールのトランシーバと互換性のあるローカルな無線信号を送受信する無線トランシーバと；
▲  少なくとも１つの処理される画像および少なくとも１つの注釈画像を格納するメモリと；
▲  プログラムされた中央ユニットと、：
を含む、少なくとも２つの処理インターフェースと、
を含む請求項１または２のいずれか１項記載の共同対話型の画像処理システム。
【請求項４】
共同対話型の画像処理システムであって、コンソール（１１０）の中央ユニットおよび各インターフェース（１２０）の中央ユニットが、
−  少なくとも１つの処理される画像のコピーを全てのインターフェースに送信し;
−  各インターフェース上に処理される画像全体を表示し；
−  コマンドにより表示される画像を拡大および／または縮小し、画像全体に対する表示される画像のズームレベルを表すズーム値および画像全体に対する表示される画像の位置を記憶し；
−  全ての他のインターフェース上に最初のインターフェースの表示と同一の表示を指示することにより、最初のインターフェースから、他のインターフェースを表示する双方指示モードで表示を実行し；
−  注釈付き画像を生成するために、処理される画像に少なくとも１つのグラフィック注釈マークを付け；
−  注釈付き画像を送信したインターフェースを表す識別子とともに、コンソールに各注釈付き画像を記録し、送信する、
ようにプログラムされた、請求項３記載の共同対話型の画像処理システム。
【請求項５】
指令モードでの表示がユーザーによって起動される場合、コンソールの中央ユニットおよび各インターフェースの中央ユニットが,
各インターフェースの初期表示を事前に保存し、
全ての他のインターフェース上に最初のインターフェースの表示と同一の表示を指示し、
指令モードが非起動のとき各インターフェースの初期表示を再表示する、
ようにプログラムされた、請求項４記載の画像処理システム。
【請求項６】
コンソールの中央ユニットが、
各インターフェースによって送信された注釈付き画像を結合し、
注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析する組み合わせアルゴリズムであって、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、
ようにプログラムされた、請求項３〜５のいずれか１項記載の共同対話型の画像処理システム。
【請求項７】
コンソールの中央ユニットが、
決定された類似度閾値より大きい類似度レベルを有する注釈付き画像上のグラフィック注釈マーク（３０１-３０２）が第１のグラフィック形式で表示され、決定された類似度閾値未満の類似度レベルを有する注釈付き画像上のグラフィック注釈マーク（３０３、Ｍ１、Ｍ２、Ｍ３、Ｍ４）が少なくとも１つの第２のグラフィック形式で表示される結果画像（４００）を生成する、
ようにプログラムされた、請求項６記載の画像処理システム。
【請求項８】
コンソールの中央ユニットが、グラフィック注釈マークの統計解析を実行する、
ようにプログラムされた、請求項７記載の画像処理システム。
【請求項９】
統計解析が、
決定された類似度閾値より大きい類似度レベルを有する注釈マークのパーセンテージを計算することと、
決定された類似度閾値より小さい類似度レベルを有する注釈マークのパーセンテージを計算することとを含む、請求項８記載の画像処理システム。
【請求項１０】
類似度閾値が設定可能である、請求項７〜９のいずれか１項記載の画像処理システム。
【請求項１１】
コンソールおよび／または各インターフェースの中央ユニットがまた、
注釈付き画像内の少なくとも位置座標およびその作成者によって定義される各グラフィック注釈マーク間の対応表を生成する、
ようにプログラムされた、請求項７〜１０のいずれか１項に記載の画像処理システム。
【請求項１２】
コンソールの中央ユニットがまた、
各グラフィック注釈マークの作成者識別子を結果画像に表示する、
ようにプログラムされた、請求項１１記載の画像処理システム。
【請求項１３】
各コンソールの中央ユニットが管理者コードまたはユーザーコードで起動され得、
コンソールの中央ユニットが、管理者コードで起動されたインターフェース上に管理ツールを表示するようにプログラムされ、
管理ツールが、中央ユニットのメモリに存在する処理される画像リスト、参加者の識別子リスト、ユーザーによって選択可能な対象オブジェクトまたは対象領域の記述子リストを含み、
各記述子が異なる既定のグラフィック注釈マークに関連する、
請求項３〜１２のいずれか１項に記載の画像処理システム。
【請求項１４】
コンソールが、コンソールの中央ユニットに接続された脱着可能なメモリに接続するための接続ポート（１１２）を含む、請求項１３記載の画像処理システム。
【請求項１５】
コンソールが、コンソール（１１０）の中央ユニットに接続されたネットワーク接続ポートを含み、
前記コンソールが、少なくとも１つの処理される画像をダウンロードしてメモリに格納するために、通信ネットワークを介してリモートサーバ（１４０）と通信する、
ようにプログラムされた、請求項１３または１４のいずれか１項記載の画像処理システム。
【請求項１６】
リモートサーバ（１４０）が、
機密識別情報に関連付けられた元画像を格納する第１のメモリと、
機密識別情報無しに一意の識別子に関連付けられた対応する処理される画像を格納する第２のメモリと、
原画像と処理される画像との間の対応表とを含む、請求項１５記載の画像処理システム。
【請求項１７】
コンソールの中央ユニットが、
処理される画像に注釈を付けた後に得た結果画像に、処理される画像の一意の識別子を追加し、一意の識別子が付与された結果画像をリモートサーバに送信する、
ようにプログラムされた、請求項１６記載の画像処理システム。
【請求項１８】
コンソールの中央ユニットおよびインターフェースの中央ユニットが、
用語データベースを伴う逐次注釈ガイドを表示し、
各専門家の回答を逐次的に記録し、
各専門家の対応が逐次的に報告され結合される処理される画像のための検査レイアウトを含む予備検査報告を生成する、
ようにプログラムされた、請求項３〜１７のいずれか１項記載の画像処理システム。
【請求項１９】
予備検査報告が、処理される画像の一意の識別子、結果画像、および結果画像の統計解析の標準化された記録を含む、請求項１８記載の画像処理システム。
【請求項２０】
処理される画像（２００）を分配し注釈付き画像（２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、２０１ｅ）を収集するための、少なくとも２つの互いに通信することができるコンソール（１１０）を含み、
コンソールが、コンソールが階層的に構造化され得る設定可能な状態を有する、
ようにプログラムされた、請求項１〜１９のいずれか１項記載の画像処理システム。
【請求項２１】
コンソールの１つが１次ステータスを有するようにプログラムされるのに対し、他のコンソールが２次ステータスを有し、１次ステータスを有するコンソールが２次ステータスを有するコンソールに指示できる、請求項２０記載の画像処理システム。
【請求項２２】
個々の判断ミスのリスクを制限するために、意見の共有及び画像のグラフィック解析を必要とする分野のための共同参加型の画像処理方法であって、
−  処理される画像（２００）を、少なくとも２つの処理インターフェース（１２０）とローカルに通信可能なコンソール（１１０）のメモリに配置するステップと；
−  処理される画像のコピーを分配コンソールから各処理インターフェースに送信し、処理される画像が検査の種類に関連し、検査の種類が対象オブジェクトおよび／または対象領域のリストに関連し、各対象オブジェクトおよび／または対象領域が注釈マークに関連するステップと;
−  ユーザーが処理される画像のコピーにグラフィック修正を行って注釈付き画像（２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ、２０１ｅ）を生成できるように、各処理インターフェース上に処理される画像のコピーをグラフィックカルに注釈を付けるためのツール（Ｂ３、Ｂ３ａ、Ｂ３ｂ）を表示し、グラフィック注釈ツールが画像用に既定され、グラフィック注釈ツールにより既定の対象領域をグラフィッカルに画定できおよび／または既定の対象オブジェクトにグラフィックマークを付加できるステップと；
−  各インターフェースの表示が他のインターフェースから独立している個別モードでの表示を可能にするステップと、
−  個別モードと指示モードとの間の変更が双方に可能であり、最初のインターフェースの表示が他のインターフェースの表示を指示する指示モードでの表示を可能にするステップと、
−  各注釈付き画像を各処理インターフェースから分配コンソールに送信するステップと、
−  注釈付き画像間で類似のグラフィック修正および異なるグラフィック修正を決定するために各注釈付き画像のグラフィック修正を解析し、類似のグラフィック修正と異なるグラフィック修正との間で異なるグラフィック形式の画素で構成される結果画像を生成することによって、この解析を合成する組み合わせアルゴリズムを使用して、注釈付き画像から結果画像を生成する、ように分配コンソールを使用するステップ、を含むことを特徴とする共同参加型の画像処理方法。
【請求項２３】
決定された類似度閾値より大きい類似度レベルを有する注釈付き画像のグラフィカルな注釈が、結果画像に第１のグラフィック形式でマークされ、
決定された類似度閾値より小さい類似度レベルを有する様々な画像のグラフィカルな注釈が、結果画像に少なくとも１つの第２のグラフィック形式でマークされる、請求項２２記載の画像処理方法。
【国際調査報告】
2021506049.tif 000013
2021506049.tif 000014
2021506049.tif 000015
2021506049.tif 000016
2021506049.tif 000017
2021506049.tif 000018