(57)【要約】【課題】本発明の目的は、医用画像表示装置において、複数の動画像の中から所望の動画像を選択する作業を支援することにある。【解決手段】本発明に係る医用画像表示装置は、複数の医用動画像ファイルを保管する画像保管装置２０２又は１０７と、複数の医用動画像ファイル各々からサムネイル画像を生成するとともに、複数の医用動画像ファイル各々から複数のダイジェスト画像を生成するＣＰＵ１０１と、サムネイル画像を一覧で表示するとともにサムネイル画像の一覧から選択されたサムネイル画像と医用動画像ファイルが共通する複数のダイジェスト画像を表示させるグラフィックボード１０４とを具備する。【選択図】      図２
2005270328.tif 000002
【特許請求の範囲】
【請求項１】
複数の医用動画像ファイルを保管する手段と、
前記複数の医用動画像ファイル各々から、サムネイル画像を生成する手段と、
前記複数の医用動画像ファイル各々から、複数のダイジェスト画像を生成する手段と、
前記サムネイル画像を一覧で表示するとともに、前記サムネイル画像の一覧から選択されたサムネイル画像と前記医用動画像ファイルが共通する前記複数のダイジェスト画像を表示する手段とを具備することを特徴とする医用画像表示装置。
【請求項２】
前記医用動画像ファイル各々の最初のフレームから所定時間経過後のフレームの画像に基づいて前記サムネイル画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項３】
前記複数の医用動画像ファイル各々から一定時間間隔でまたは一定フレーム数ごとに抽出したフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項４】
前記複数の医用動画像ファイル各々からフレーム間差分の総和又はその導出値に基づいて抽出したフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項５】
前記医用動画像ファイルが、寝台の移動と停止を繰り返しながら各停止位置で撮影を繰り返す撮影方法で収集されたとき、前記各停止位置で最初に撮影したフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項６】
前記医用動画像ファイルが、撮影途中で造影剤を断続的に繰り返し注入する方法で収集されたとき、前記造影剤の流入直前に撮影したフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項７】
前記医用動画像ファイルが、撮影途中で造影剤を注入する方法で収集されたとき、前記造影剤の濃度が所定値より高いフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項８】
前記医用動画像ファイルが、寝台をその長手位置に沿って連続的に移動しながら撮影を繰り返す方法で収集されたとき、前記寝台の一定間隔ごとの離散的な位置で撮影されたフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項９】
前記医用動画像ファイルの中の操作者が指定した関心フレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項１０】
前記医用動画像ファイルの中の心拍位相の異なるフレームの画像に基づいて前記複数のダイジェスト画像を生成することを特徴とする請求項１記載の医用画像表示装置。
【請求項１１】
前記医用動画像ファイルが、２方向同時撮影方法で収集されたとき、方向ごとに前記複数のダイジェスト画像を生成することを特徴とする請求項３乃至請求項１０のいずれか一項記載の医用画像表示装置。
【請求項１２】
前記複数のダイジェスト画像の中から指定された単一のダイジェスト画像を前記サムネイル画像に置き換える手段を更に備えることを特徴とする請求項１記載の医用画像表示装置。
【請求項１３】
前記複数のダイジェスト画像の中から指定された単一のダイジェスト画像のフレームを起点として前記医用動画像ファイルを再生する手段を更に備えることを特徴とする請求項１記載の医用画像表示装置。
【請求項１４】
複数の医用動画像ファイルを保管する手段と、
前記複数の医用動画像ファイルから複数のサムネイル画像を生成する手段と、
前記複数のサムネイル画像を一覧で表示する手段とを具備し、
前記複数のサムネイル画像各々は、前記複数の医用動画像ファイル各々から抽出された複数のダイジェスト画像から構成され、前記複数のダイジェスト画像はアニメーション様に順番に切り替え表示されることを特徴とする医用画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の動画像ファイルを保存し、選択的に表示する医用画像表示装置に関する。
【背景技術】
【０００２】
保存されている複数の画像から一つあるいは複数を選択して呼び出して表示する場合において、元の画像が静止画の場合はそれを単純に縮小した画像（サムネイル画像）を用意して、また複数のフレーム（静止画）から構成される動画像の場合はそれらのフレームの中から一つを選択して作成したサムネイル画像を用意し、これらのサムネイル画像を複数同時に表示して一覧する方法（サムネイル一覧表示）がある（図１０参照）。最終的には前記サムネイル一覧表示で選択した元画像を、別手段にて動画再生表示することとなる。
【０００３】
従来、画像表示装置が扱っている画像が動画像の場合は、動画像を構成する複数のフレームの中から一つのフレームのみを抽出してサムネイル画像を表示していた。この場合、一つのフレームのみでは情報量が少なく、動画像を好適に選択することは難しく、画像内容の傾向が似たようなものは結局のところ元画像を全て参照してみないと内容が判別できないため、元画像を代わる代わる何度も呼び出して見ることになる。または元画像の呼び出しの時間を多く要するなど、画像選択において問題があった。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、医用画像表示装置において、複数の動画像の中から所望の動画像を選択する作業を支援することにある。
【課題を解決するための手段】
【０００５】
本発明に係る医用画像表示装置は、複数の医用動画像ファイルを保管する手段と、前記複数の医用動画像ファイル各々から、サムネイル画像を生成する手段と、前記複数の医用動画像ファイル各々から、複数のダイジェスト画像を生成する手段と、前記サムネイル画像を一覧で表示するとともに、前記サムネイル画像の一覧から選択されたサムネイル画像と前記医用動画像ファイルが共通する前記複数のダイジェスト画像を表示する手段とを具備する。
【発明の効果】
【０００６】
本発明によれば、複数の動画像の中から容易に所望の動画像を選択することができるようになる。
【発明を実施するための最良の形態】
【０００７】
以下図面を参照して本発明の実施形態を説明する。本実施形態では、図１に例示する動画像選択のための画面を構成し表示する。周知の通り、動画像ファイルは、時間軸に沿って配列される複数のフレーム（静止画）から構成される。本実施形態では、複数の動画像ファイル各々から、任意のルールに従って単一のフレームを抽出し、そのフレームの画像から典型的には縮小処理してサムネイル画像１を生成する。複数の動画像ファイルにそれぞれ対応する複数のサムネイル画像１が、一覧２で表示される。サムネイル画像１は、元の静止画を縮小する以外に、拡大あるいは等倍の静止画であってもよい。サムネイル画像１の一覧２とともに、選択状態にあるハイライトのサムネイル画像５と元の動画像ファイルが共通する複数のダイジェスト画像３が、サムネイル画像１の一覧２と同一画面内で隣接する又は別画面で提供されるダイジェスト画像表示領域４に表示される。動画像ファイルを構成する一連のフレームから任意のルールで離散的に抽出した複数のフレームの画像に基づいて、複数のダイジェスト画像３が生成される。サムネイル画像１と同様に、ダイジェスト画像３は、元の画像を、典型的には縮小処理して生成する。複数のダイジェスト画像３のうち選択状態にある画像８がハイライトで表示される。サムネイル指定ボタン７がクリックされたとき、そのとき選択状態にあるダイジェスト画像８が、一覧２の中の対応するサムネイル画像に置き換わる。動画像表示ボタン６がクリックされたとき、そのとき選択状態にあるサムネイル画像５に対応する動画像ファイルの動画像としての表示が開始される。
【０００８】
図２に本実施形態に係る医用画像表示装置の構成例を示す。図２では、本実施形態に係る医用画像表示装置１００は、医用画像ファイル、ここでは動画像ファイルを発生する医用画像収集装置２００にＬＡＮ等の電子的通信回線を介して接続されている。それに限定されず、医用画像表示装置１００は、ＰＡＣＳ（医用画像保管通信システム）に電子的通信回線を介して接続されていてもよい。また医用画像収集装置２００及び／又はＰＡＣＳを含めて医用画像表示装置１００として定義しても良い。
【０００９】
医用画像収集装置２００は、動画像ファイルを発生することのできる医用画像装置として、Ｘ線診断装置、Ｘ線コンピュータ断層撮影装置（ＣＴスキャナ）、磁気共鳴映像装置（ＭＲＩ）、超音波診断装置、ガンマカメラ、ＰＥＴ又はＳＰＥＣＴである画像収集装置２０１を有する。画像収集装置２０１としてここでは典型的なＸ線診断装置を例に説明する。医用画像収集装置２００は、画像収集装置２０１とともに、画像収集装置２０１で発生した動画像ファイルを保管するための画像保管装置２０２を有する。画像保管装置２０２に記憶される動画像ファイルには、患者情報、撮影情報、ファイル情報、心電波形取得装置２０４から得られる心電波形データ等が関連付けられる。撮影情報は、撮影日時、撮影装置の種類、撮影パラメータ、撮影方法、画像取得の際の位置情報、造影剤注入装置２０３から得られる造影剤の注入量及び注入時刻データ等が含まれる。ファイル情報には、フレームサイズ、フレーム枚数、タイムコード等が含まれる。
【００１０】
さらに医用画像収集装置２００は、被検体に造影剤を自動で注入するための造影剤注入装置２０３、被検体の呼吸や心拍等の生体現象を計測するための装置２０４、被検体を載置する寝台２０５とを有する。生体現象計測装置２０４として、ここでは典型的な心電波形計測装置を例に説明する。
【００１１】
医用画像表示装置１００は、ＣＰＵ１０１を中心として、画像保管装置２０２で保管されている複数の動画像ファイルの全て又は一部の表示対象（読影対象）の動画像ファイルを記憶する画像保管装置１０７と、サムネイル画像及びダイジェスト画像を記憶するための補助画像保管装置１０２とを有する。ＣＰＵ１０１は、医用画像表示装置１００全体の制御を司るとともに、ルール記憶部１０６に記憶されたルールに従って、画像保管装置１０７に保管されている動画像ファイルからサムネイル画像を生成し、また動画像ファイルからダイジェスト画像を生成する。さらに医用画像表示装置１００は、ＣＰＵ１０１の制御のもとで、サムネイル画像およびダイジェスト画像を含む動画像選択のための画面を構築するためのグラフィックボード１０４、画像表示デバイス１０５，１０６、マウス及びキーボード等の入力デバイス１０３を有している。
【００１２】
図３には、本実施形態による動画撮影から動画再生までの処理の流れを示している。まず、被検体に対して画像収集装置２０１で撮影が行われる（Ｓ１）。それにより動画像ファイルが発生される。発生された動画像ファイルは、患者情報、撮影情報、ファイル情報、心電波形データ等が関連付けられて、画像保管装置２０２、１０７に保管される。ここで、サムネイル画像、ダイジェスト画像を事前、つまり動画像ファイルの発生と同時に生成することが決められているとき（Ｓ２）、ルール記憶部１０６に記憶されたサムネイルルールに従って、動画像ファイルからサムネイル画像を生成し補助画像保管装置１０２に保管し（Ｓ３）、ルール記憶部１０６に記憶されたダイジェストルールに従って、図４に示すように動画像ファイルから複数のダイジェスト画像を生成し補助画像保管装置１０２に保管する（Ｓ４）。
【００１３】
ルール記憶部１０６には、複数のサムネイルルールが記憶されている。複数のサムネイルルールのうち単一のサムネイルルールが予め初期ルールとして選択される。初期ルールに従って生成されたサムネイル画像が、動画像選択画面に初期的に表示される。あるサムネイルルールでは、動画像ファイルを構成する複数のフレームのうち、最初のフレームから所定時間経過時点のフレームの画像から、サムネイル画像を生成する。他のサムネイルルールでは、動画像ファイルを構成する複数のフレームのうち、最初のフレームから所定フレーム数経過したフレームの画像から、サムネイル画像を生成する。さらに他のサムネイルルールでは、動画像ファイルを構成する複数のフレームのうち、最初、最後又は中間位置のフレームの画像から、サムネイル画像を生成する。
【００１４】
ルール記憶部１０６には、複数のダイジェストルールが記憶されている。複数のダイジェストルールのうち単一のダイジェストルールが予め初期ルールとして選択される。初期ルールに従って生成されたダイジェスト画像が、動画像選択画面に初期的に表示される。複数のダイジェストルールについて以下に例示する。
【００１５】
１）動画像ファイルを構成する一連のフレームから、あらかじめ決めた所定の時間間隔に従って離散的に複数のフレームを、ダイジェスト画像生成のための元画像として抽出する。
【００１６】
２）動画像ファイルを構成する一連のフレームから、あらかじめ決めた所定のフレーム数ごとに従って離散的に複数のフレームを、ダイジェスト画像生成のための元画像として抽出する。
【００１７】
３）動画像ファイルを構成する一連のフレームにおいて、前後２フレーム間の差分の総和又はその導出値として例えば二乗和が、所定のしきい値を超過した前又は後のフレームを、ダイジェスト画像生成のための元画像として抽出する。
【００１８】
４）上記ルール１）又は２）において、抽出間隔を一定ではなく、可変とする。例えば数フレーム前の画像との差分の総和が所定のしきい値より大きい期間、つまり変化の激しい期間では、時間間隔を短く、フレーム数を少なくし、逆に所定のしきい値より小さい期間、つまり変化の少ない期間では、時間間隔を長く、フレーム数を多くする。
【００１９】
上記４つの基本ルールの他に、循環器用Ｘ線画像診断では、以下に例示する固有のダイジェストルールを初期ルールとして指定可能である。動画像ファイルに関連付けられた撮影方法に基づいて、ＣＰＵ１０１は、その動画像ファイルが循環器用Ｘ線画像診断により発生したものか否かを判定することができる。
【００２０】
５）寝台２０５を任意の距離間隔で移動と停止を繰り返し、停止期間（ステージ）に撮影を所定回数繰り返す撮影方法（ステッピング撮影法）であれば、各ステージで最初に撮影したフレームの画像を、ダイジェスト画像生成のための元画像として抽出する。
【００２１】
６）撮影途中で造影剤を断続的に繰り返し注入する撮影方法であれば、造影剤の流入直前又は直後に撮影したフレームの画像に基づいて複数のダイジェスト画像を生成する。
【００２２】
７）撮影途中で造影剤を注入する撮影方法であれば、造影剤の濃度が所定値より高い、つまり非造影のマスク像との差分の総和が所定のしきい値より高いフレームの画像を、ダイジェスト画像生成のための元画像として抽出する。
【００２３】
８）寝台２０５をその長手位置に沿って連続的に移動しながら撮影を繰り返す撮影方法（ボーラスＤＳＡ）であれば、寝台２０５の一定間隔ごとの離散的な位置で撮影されたフレームの画像を、ダイジェスト画像生成のための元画像として抽出する。
【００２４】
９）撮影時又は再生時に技師又は読影医師が指定した関心フレームの画像を、ダイジェスト画像生成のための元画像として抽出する。
【００２５】
１０）図５に示すように、心電波形の心拍ごとに少しずつ心拍位相がずれたフレームの画像を、ダイジェスト画像生成のための元画像として抽出する。
【００２６】
１１）循環器系のＸ線診断装置では、周知のとおり、Ｘ線管球とＸ線検出器との対を正面系（フロンタル）と側面系（ラテラル）との２系統備えるものがある。その２系統を使って２方向同時撮影を行い、動画像ファイルを収集するとき、方向ごとに複数のダイジェスト画像を生成する。動画像ファイルから複数のダイジェスト画像を生成するルールは上記１）乃至１０）のいずれか任意のルールが適用される。表示順としては、図６に示すように、正面系で撮影した画像と側面系実で撮影した画像とを交互に表示し、又は正面系で撮影した画像を連続的に表示し、それに続いて側面系で撮影した画像を連続的に表示する。
【００２７】
上記Ｓ２において、サムネイル画像、ダイジェスト画像を予め生成することが決められていないとき、ＣＰＵ１０１は、操作者から動画像の一覧表示の指示が、入力デバイス１０３を介して入力されるのを待機する。操作者から動画像の一覧表示の指示が入力されたとき（Ｓ５）、ＣＰＵ１０１は、画像保管装置１０７（又は２０２）に保管されている複数の動画像ファイルのうち未読影の動画像ファイルを特定し、その未読影の動画像ファイルのサムネイル画像がＳ３において既に作成済みで補助画像保管装置１０２に保管されているか否かを判定する（Ｓ６）。サムネイル画像が既に作成済みのとき、ＣＰＵ１０１は、補助画像保管装置１０２からグラフィックボード１０４に未読影の動画像ファイルに関するサムネイル画像のデータを読み出させる。グラフィックボード１０４は、図１に示すように、複数のサムネイル画像を一覧で表示する（Ｓ７）。サムネイル画像が作成されていないとき、ＣＰＵ１０１は、Ｓ３と同様に未読影の動画像ファイルからサムネイル画像を作成し、グラフィックボード１０４に供給する（Ｓ８）。グラフィックボード１０４は、図１に示すように、複数のサムネイル画像を一覧で表示する（Ｓ７）。
【００２８】
複数のサムネイル画像の一覧のなかで、入力デバイス１０３のポインタにより所望のサムネイル画像が選択される（Ｓ９）。選択されたサムネイル画像の枠線が例えばハイライト（高輝度）５で表示される。ＣＰＵ１０１は、選択されたサムネイル画像が対応する動画像ファイルに関するダイジェスト画像がＳ４において既に作成済みで補助画像保管装置１０２に保管されているか否かを判定する（Ｓ１０）。ダイジェスト画像が既に作成済みのとき、ＣＰＵ１０１は、補助画像保管装置１０２からグラフィックボード１０４に未読影の動画像ファイルに関するダイジェスト画像のデータを読み出させる。グラフィックボード１０４は、図１に示すように、複数のダイジェスト画像を一覧で表示する（Ｓ１１）。ダイジェスト画像が作成されていないとき、ＣＰＵ１０１は、Ｓ４と同様に未読影の動画像ファイルからダイジェスト画像を作成し、グラフィックボード１０４に供給する。グラフィックボード１０４は、図１に示すように、作成された複数のダイジェスト画像を一覧で表示する（Ｓ１２）。
【００２９】
操作者が入力デバイス１０３を操作して、ポインタを他のサムネイル画像上に移動させたとき、他のサムネイル画像が選択状態になり、他のサムネイル画像が対応する動画像ファイルに関する複数のダイジェスト画像に表示が切り替わる。
【００３０】
このようにサムネイル画像とともに、各動画像ファイルの特徴をサムネイル画像よりも端的に表す複数のダイジェスト画像を表示することで、動画像ファイルの内容確認精度が向上する。
【００３１】
ＣＰＵ１０１は、次の操作指示を待機する（Ｓ１３）。次の操作としては、サムネイル画像の交換操作と、動画像ファイルの再生操作である。操作者がサムネイル画像を、複数のダイジェスト画像のいずれかと置き換えたいとき（Ｓ１４）、図7に示すように、まず、対象のサムネイル画像を選択する。そのサムネイルと動画像ファイルが共通する複数のダイジェスト画像が表示される。複数のダイジェスト画像の中から所望のダイジェスト画像を選択状態にして、「サムネイル選択」ボタンをクリックすることで、そのダイジェスト画像が当該動画像ファイルのサムネイル画像として以前のサムネイル画像から置き換わってサムネイル画像一覧に表示される。また、補助画像保管装置１０２に保管されるサムネイル画像のデータも、当該ダイジェスト画像のデータに更新される。次回、当該動画像ファイルのサムネイル画像を表示するに際しては、置き換えたダイジェスト画像がサムネイル画像として表示される。
【００３２】
操作者が所望の動画像ファイルを再生したいとき（Ｓ１５）、動画像ファイルが再生される（Ｓ１６）。再生方法には２種類が用意されている。まず、サムネイル画像の一覧の中から、所望のサムネイル画像を選択状態にして、一方、どのダイジェスト画像も選択状態にはしないで、「表示ボタン」をクリックすることで、そのサムネイル画像の動画像ファイルが最初のフレームから動画再生される。また、図８に示すように、サムネイル画像の一覧の中から、所望のサムネイル画像を選択状態にするとともに、所望のダイジェスト画像を選択状態にした上で、「表示ボタン」をクリックすることで、そのサムネイル画像及びダイジェスト画像に対応する動画像ファイルが、当該選択されたダイジェスト画像のフレーム位置から再生される。
【００３３】
このように本実施形態によれば、サムネイル一覧表示とそこで選択状態にある元画像のダイジェスト画像を同時表示することで、元の動画像の内容が判別しやすくなり、元の動画像の呼び出しの操作を少なくする、複数の動画像の中から所望の動画像を容易に特定することが可能となる。また、サムネイル画像を決定する際に元画像の特徴をよく表わすフレームを選択することで、サムネイル一覧表示における眺望性を高めることができる。
【００３４】
なお、本実施形態では、サムネイル画像の一覧に代えて、図９に示すように、サムネイル画像の各領域に、複数のダイジェスト画像を一定間隔で切り替え表示して、簡易アニメーションのように表示するようにしても良い。例えば単純に一秒間に数度の頻度でダイジェスト画像を切り替えて再生することでパラパラマンガのように簡易ではあるが十分な情報量でもって動画像ファイルの選択を支援することができる。このような複数のダイジェスト画像による簡易的なアニメーションの一覧表示は、サムネイル画像の一覧表示とを切り替え可能とすることが好ましい。
【００３５】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【００３６】
【図１】本発明の実施形態により表示される動画像選択画面の例を示す図。
【図２】本発明の実施形態に係る医用画像表示装置の構成を示す図。
【図３】本発明の実施形態における動画像選択処理手順を表したフローチャート。
【図４】図１のダイジェスト画像群の説明図。
【図５】図３のダイジェスト画像抽出ルールの例を示す図。
【図６】図３のダイジェスト画像抽出ルールの例を示す図。
【図７】本実施形態において、ダイジェスト画像からサムネイル画像を選択する手順を示す図。
【図８】本実施形態において、ダイジェスト画像の指定を契機とした動画像の再生を示す図。
【図９】本実施形態において、簡易アニメサムネイル一覧表示画面を示す図。
【図１０】従来のサムネイル一覧表示の例を示した図
【符号の説明】
【００３７】
１００…医用画像表示装置、１０１…ＣＰＵ、１０２…補助画像保管装置、１０３…入力デバイス、１０４…グラフィックボード、１０５…画像表示デバイス、１０６…画像表示デバイス、１０７…画像保管装置、１０…、２００…医用画像収集装置、２０１…画像収集装置、２０２…画像保管装置、２０３…造影剤注入装置、２０４…心電波形取得装置、２０５…寝台。
【図１】
2005270328.tif 000003
【図２】
2005270328.tif 000004
【図３】
2005270328.tif 000005
【図４】
2005270328.tif 000006
【図５】
2005270328.tif 000007
【図６】
2005270328.tif 000008
【図７】
2005270328.tif 000009
【図８】
2005270328.tif 000010
【図９】
2005270328.tif 000011
【図１０】
2005270328.tif 000012