(57)【要約】【課題】術中に行われた診療行為に対応する腸内画像を特定可能にすること。【解決手段】情報処理装置１０１は、撮像装置１０２により撮像された複数の撮像画像を時系列順に表示する際に、撮像装置１０２の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、複数の撮像画像に隣接する位置に並列表示する。すなわち、情報処理装置１０１は、術者である医師、あるいは、術者をサポートする助手や看護師等が、術中に発した声の音圧レベルを示すデータを時系列順に表示する。【選択図】図１
2018047068.tif 000002
【特許請求の範囲】
【請求項１】
腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する、
処理をコンピュータに実行させることを特徴とする表示制御プログラム。
【請求項２】
腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する、
処理をコンピュータに実行させることを特徴とする表示制御プログラム。
【請求項３】
時刻の指定に応じて、前記複数の撮像画像のうち指定された前記時刻に対応する撮像画像を表示するとともに、指定された前記時刻に対応するバイタル値を表示し、少なくとも前記撮像画像の前後の撮像画像の撮像タイミングの間に挟まれる時間帯に取得された発話音声又は指定された前記時刻を基準に特定した時間幅内に取得された発話音声の再生指示を受け付け可能な操作画面を表示させる、
ことを特徴とする請求項１又は２に記載の表示制御プログラム。
【請求項４】
前記時刻の指定は、スライド可能な時刻指定バーにより受け付ける、
ことを特徴とする請求項３に記載の表示制御プログラム。
【請求項５】
前記バイタル値の表示は、指定された前記時刻に取得されたバイタル値、又は、指定された前記時刻を基準に特定した時間幅内に取得されたバイタル値の最大値又は最小値又は平均値の表示である、
ことを特徴とする請求項３又は４に記載の表示制御プログラム。
【請求項６】
腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する、
処理をコンピュータが実行することを特徴とする表示制御方法。
【請求項７】
腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する、
処理をコンピュータが実行することを特徴とする表示制御方法。
【請求項８】
腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する制御部、
を有することを特徴とする情報処理装置。
【請求項９】
腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する制御部、
を有することを特徴とする情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示制御プログラム、表示制御方法、および情報処理装置に関する。
【背景技術】
【０００２】
内視鏡検査は、内視鏡の先端部を体内に挿入し、先端部に搭載されたカメラで体内の様子をモニタに映し出すことで、医師が体内の様子を直接目で見ることができる検査である。例えば、大腸内視鏡検査では、医師は、最初に内視鏡の先端部を小腸の入り口部分まで挿入した後、引き出しながら腸内を観察し、ポリープ等の病変部分を発見したら画像を撮影する。
【０００３】
先行技術としては、内視鏡検査中に患者に関するデータをユーザが入力できるようにするためのインターフェースを提供するディスプレイ装置を備え、患者の生存指標情報に関する値のエントリを可能にする個別のグラフィック制御装置を含むシステムがある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特表２００７−５１６０１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来技術では、内視鏡検査等において撮像された腸内画像のうち、例えば、電気メスによるポリープ切除などの何らかの診療行為が行われたときに撮像された腸内画像を特定することが難しい場合がある。
【０００６】
一つの側面では、本発明は、術中に行われた診療行為に対応する腸内画像を特定可能にすることを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一態様によれば、腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する表示制御プログラム、表示制御方法、および情報処理装置が提案される。
【０００８】
また、本発明の一態様によれば、腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する表示制御プログラム、表示制御方法、および情報処理装置が提案される。
【発明の効果】
【０００９】
本発明の一側面によれば、術中に行われた診療行為に対応する腸内画像を特定可能にすることができる。
【図面の簡単な説明】
【００１０】
【図１】図１は、実施の形態にかかる表示制御方法の一実施例を示す説明図である。
【図２】図２は、医療支援システム２００のシステム構成例を示す説明図である。
【図３】図３は、情報処理装置１０１のハードウェア構成例を示すブロック図である。
【図４】図４は、患者ＤＢ２２０の記憶内容の一例を示す説明図である。
【図５】図５は、撮像画像ＤＢ２３０の記憶内容の一例を示す説明図である。
【図６】図６は、バイタルサインＤＢ２４０の記憶内容の一例を示す説明図である。
【図７】図７は、投与薬剤ＤＢ２５０の記憶内容の一例を示す説明図である。
【図８】図８は、音声ＤＢ２６０の記憶内容の一例を示す説明図である。
【図９】図９は、機器使用状況ＤＢ２７０の記憶内容の一例を示す説明図である。
【図１０】図１０は、情報処理装置１０１の機能的構成例を示すブロック図である。
【図１１】図１１は、統合ビュー画面１１００の画面例を示す説明図である。
【図１２】図１２は、スポットビュー画面１２００の画面例を示す説明図である。
【図１３】図１３は、インデックス情報の表示例を示す説明図である。
【図１４】図１４は、情報処理装置１０１の表示制御処理手順の一例を示すフローチャート（その１）である。
【図１５】図１５は、情報処理装置１０１の表示制御処理手順の一例を示すフローチャート（その２）である。
【発明を実施するための形態】
【００１１】
以下に図面を参照して、本発明にかかる表示制御プログラム、表示制御方法、および情報処理装置の実施の形態を詳細に説明する。
【００１２】
（実施の形態）
図１は、実施の形態にかかる表示制御方法の一実施例を示す説明図である。図１において、情報処理装置１０１は、腸内に挿入され、腸内画像を撮像する撮像装置１０２により撮像された複数の撮像画像を表示するコンピュータである。撮像装置１０２は、静止画又は動画を撮像する機器であり、例えば、内視鏡１１０の先端部に搭載されるＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）である。
【００１３】
内視鏡１１０は、体内の腔所を観察するための医療器具である。内視鏡検査（あるいは、腹腔鏡手術）では、内視鏡１１０の先端部を体内に挿入し、先端部に搭載された撮像装置１０２で体内の様子をモニタに映し出すことで、医師が体内の様子を直接目で見て検査（あるいは、手術）することができる。検査対象の器官としては、例えば、大腸、小腸、十二指腸などがある。
【００１４】
例えば、大腸内視鏡検査では、医師は、患者の肛門から内視鏡１１０を挿入し、内視鏡１１０の先端部を小腸の入り口部分まで挿入した後、引き出しながら腸内を観察し、ポリープ等の病変部分を発見したら腸内画像を撮影する。また、エビデンスを残すという観点から、腸内の問題がない部分についても撮影することがある。
【００１５】
また、術後において、医師が、術中に撮影した腸内画像を確認して、今後の治療方針を決めたり、診療内容を評価したりすることがある。このため、例えば、電気メスによるポリープ切除などの診療行為が行われた際に撮像された腸内画像は判別可能に記録することが望ましい。
【００１６】
ところが、術中は、医師は内視鏡１１０を操作するために両手がふさがっていることが多く、各画像がどのような意図で撮影したものであるかといったことがわかるように記録することは難しい。また、術中は、医師が検査等に集中できるように、内視鏡１１０の操作以外の作業はできるだけ少ないほうが望ましい。
【００１７】
このため、術者である医師本人が、腸内を撮影した各画像についてどのような意図で撮影したものであるかを頭で覚えておいて、術後にその記憶をもとに検査記録を記載することが考えられる。ところが、１回の内視鏡検査で撮影される画像は数十枚になることもあり、各画像がどのような意図で撮影したものであるかを医師が覚えきれない場合がある。
【００１８】
そこで、本実施の形態では、内視鏡検査等において撮像された複数の腸内画像を時系列順に表示する際に、術中に外科的処置、診断、薬剤投与等の診療行為が行われた際に撮像された腸内画像を特定可能に表示する表示制御方法について説明する。
【００１９】
例えば、情報処理装置１０１は、撮像装置１０２により撮像された複数の撮像画像を時系列順に表示する際に、撮像装置１０２の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、複数の撮像画像に隣接する位置に並列表示する。ここで、音圧レベルは、音圧の大きさを表す値であり、例えば、基準値との比の常用対数によって表現される（単位：［ｄＢ］）。
【００２０】
すなわち、情報処理装置１０１は、術者である医師、あるいは術者をサポートする助手や看護師等が術中に発した声の音圧レベルを示すデータを時系列順に表示する。例えば、鎮静剤注射や電気メスによるポリープ切除などの診療行為を行うときは、術者が、声に出して、その旨を説明したり、助手や看護師に指示したりすることがある。また、腸内の検査対象となる部位が変わるときは、声に出して、その旨を伝えたりする。
【００２１】
また、情報処理装置１０１は、複数の撮像画像を時系列順に表示する際に、撮像装置１０２の腸内への挿入中に測定されたバイタルデータを時系列順に並列表示することにしてもよい。バイタルデータは、例えば、患者の体温、心拍、脈拍、血圧などのバイタルサインを示す情報である。
【００２２】
図１の例では、大腸内視鏡検査において撮像装置１０２により撮像された撮像画像１２１〜１２４と、撮像装置１０２の腸内への挿入中に測定されたバイタルデータ１３０とが時系列順にディスプレイ１２０に並列表示されている。バイタルデータ１３０は、患者の心拍数の時系列変化を示すグラフである。
【００２３】
また、撮像装置１０２の腸内への挿入中に測定された発話の音圧レベルの時系列変化を示す音圧レベルデータ１４０が、撮像画像１２１〜１２４およびバイタルデータ１３０と時間軸（図１中、「ＴＩＭＥ」）を合わせてディスプレイ１２０に並列表示されている。なお、ディスプレイ１２０は、情報処理装置１０１が有していてもよく、また、情報処理装置１０１に接続される他のコンピュータが有していてもよい。
【００２４】
音圧レベルデータ１４０によれば、ユーザは、音圧レベルが高くなっている時期を、術中に医師等が発話したタイミングとして特定することができる。そして、ユーザは、医師等が発話したタイミングを何らかの診療行為が行われたタイミングと推定して、当該タイミングに撮像された腸内画像を特定することができる。
【００２５】
図１の例では、時期１４１は、電気メスによるポリープ切除が行われたタイミングであり、術者が当該診療行為にかかる発言をしたため、時期１４１の音圧レベルが高くなっている。このため、ユーザは、時期１４１に対応する撮像画像１２２が、診療行為が行われた際に撮像された腸内画像であると推定することができる。
【００２６】
また、ユーザは、バイタルデータ１３０を参照することにより、各撮像画像１２１〜１２４が撮像された際の心拍数を確認することができる。例えば、ユーザは、撮像画像１２２が撮像された際の患者の心拍数が高くなっていることがわかり、電気メスの使用や使用時間等が適切であったのかといったことの判断に役立てることができる。
【００２７】
また、上述した説明では、撮像画像１２１〜１２４を時系列順に表示する際に、発話の音圧レベルの時系列変化を示す音圧レベルデータ１４０を並列表示することにしたが、これに限らない。例えば、術者が、医療行為を行うにあたり、助手や看護師に説明したり指示したりする場合、ささやくような声ではなく、はっきりとした声を出すことが想定される。
【００２８】
そこで、情報処理装置１０１は、複数の撮像画像を時系列順に表示する際に、撮像装置１０２の腸内への挿入中に測定された発話の音圧レベルが、所定の基準を超える時期に対応する撮像画像を特定可能に表示することにしてもよい。所定の基準は、任意に設定可能であり、例えば、５０〜６０［ｄＢ］程度の値に設定される。
【００２９】
また、術者が、医療行為を行うにあたり、助手や看護師に説明したり指示したりする場合、専門の医学用語を使うことが想定される。術中に使用される医学用語としては、例えば、電気メスやシリンジポンプなどの医療機器の名称や、上行結腸、横行結腸、下行結腸などの腸内の部位の名称などが挙げられる。
【００３０】
そこで、情報処理装置１０１は、複数の撮像画像を時系列順に表示する際に、撮像装置１０２の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示することにしてもよい。所定のキーワードは、任意に設定可能であり、例えば、医学用語辞書に登録されている用語であってもよく、また、医療現場で頻繁に使用される用語をピックアップしたものであってもよい。
【００３１】
一例として、時期１４１の音圧レベルが所定の基準を超える場合を想定する。この場合、情報処理装置１０１は、図１中の吹き出し部分（符号１５０）に示すように、時期１４１に対応する撮像画像１２２を、所定の表示枠１５１で囲って判別可能に表示してもよいし、表示枠１５０を点滅表示させることにしてもよい。これにより、術中に行われた診療行為に対応する腸内画像を特定可能にすることができる。
【００３２】
（医療支援システム２００のシステム構成例）
つぎに、実施の形態にかかる医療支援システム２００のシステム構成例について説明する。医療支援システム２００は、医療機関における医療を支援するコンピュータシステムである。医療機関は、例えば、病院や診療所などである。
【００３３】
図２は、医療支援システム２００のシステム構成例を示す説明図である。図２において、医療支援システム２００は、情報処理装置１０１と、内視鏡システム２０１と、生体情報モニタ２０２と、シリンジポンプ２０３と、電気メス２０４と、送気装置２０５と、を含む。医療支援システム２００において、情報処理装置１０１、内視鏡システム２０１、生体情報モニタ２０２、シリンジポンプ２０３、電気メス２０４および送気装置２０５は、有線又は無線のネットワーク２１０を介して接続される。ネットワーク２１０は、例えば、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、インターネットなどである。
【００３４】
ここで、情報処理装置１０１は、患者ＤＢ（Ｄａｔａｂａｓｅ）２２０、撮像画像ＤＢ２３０、バイタルサインＤＢ２４０、投与薬剤ＤＢ２５０、音声ＤＢ２６０および機器使用状況ＤＢ２７０を有する。情報処理装置１０１は、例えば、医療従事者が使用するＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、タブレットＰＣなどであってもよく、また、サーバであってもよい。医療従事者は、例えば、医師や看護師である。
【００３５】
また、情報処理装置１０１は、マイクロフォン２０６を有する。マイクロフォン２０６は、音を電気信号に変換する機器である。マイクロフォン２０６は、内視鏡検査を行う術者（例えば、執刀医）、術者をサポートする助手（例えば、介助医、麻酔医）、あるいは、看護師によって使用される。マイクロフォン２０６は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの近距離無線通信により装置本体と無線接続される。また、マイクロフォン２０６は、例えば、タイピン型のものであってもよく、また、ヘッドセット型のものであってもよい。
【００３６】
なお、各種ＤＢ２２０，２３０，２４０，２５０，２６０，２７０の記憶内容については、図４〜図９を用いて後述する。
【００３７】
内視鏡システム２０１は、内視鏡装置２８０と、制御装置２９０と、を含む。内視鏡装置２８０は、制御装置２９０と接続されており、操作部２８１と、挿入部２８２とを含む。操作部２８１には、ワイヤによって挿入部２８２の先端部とつながれたアングルノブや、シャッターボタン、送気・送水ボタン、吸引ボタン等の各種ボタンが設けられている。
【００３８】
例えば、医師は、操作部２８１のアングルノブを操作して、挿入部２８２の先端部を体内に挿入し、挿入部２８２の先端部分を上下、左右に曲げることで体腔内を３６０度観察することができる。また、医師は、操作部２８１のシャッターボタンを押下することで、腸内を撮像することができる。
【００３９】
また、挿入部２８２は、腸内に挿入される部分である。挿入部２８２の先端部には、腸内を撮像するカメラ２８３や、不図示の照明レンズ、送気・送水ノズル、鉗子口などが設けられる。送気・送水ノズルには、不図示の送気・送水チューブが接続され、送気・送水ボタンの操作に応じて、送気・送水ノズルからガスや水が噴射される。
【００４０】
また、鉗子口には、不図示の鉗子チューブが接続され、操作部２８１に設けられる鉗子挿入部２８４から鉗子チューブを介して鉗子、電気メス（例えば、電気メス２０４）等の処置具を導出することができる。図１に示した内視鏡１１０は、例えば、内視鏡装置２８０に対応する。
【００４１】
制御装置２９０は、モニタ２９１を有するコンピュータであり、挿入部２８２に光を供給したり、カメラ２８３の撮像素子が捉えた電気信号を映像信号に変換してモニタ２９１に表示したりする。また、制御装置２９０は、カメラ２８３により撮像された撮像画像を情報処理装置１０１に送信する。
【００４２】
生体情報モニタ２０２は、患者のバイタルサインをモニタリングする装置である。バイタルサインは、例えば、患者の心電図、体温、心拍、脈拍、血圧などである。シリンジポンプ２０３は、点滴静脈注射を行う際に使用される医療機器である。電気メス２０４は、高周波電流を利用して操作する外科用のメスである。送気装置２０５は、ガス（例えば、炭酸ガス）を送気する装置であり、消化器管腔内を観察する際に使用される。
【００４３】
なお、図２の例では、情報処理装置１０１と内視鏡システム２０１とを別体に設けることにしたが、これに限らない。例えば、情報処理装置１０１は、内視鏡システム２０１の制御装置２９０により実現することにしてもよい。また、図２の例では、情報処理装置１０１がマイクロフォン２０６を有することにしたが、これに限らない。例えば、情報処理装置１０１と接続される他のコンピュータがマイクロフォン２０６を有することにしてもよい。この場合、情報処理装置１０１は、マイクロフォン２０６で受音された音声データを他のコンピュータから取得する。
【００４４】
（情報処理装置１０１のハードウェア構成例）
図３は、情報処理装置１０１のハードウェア構成例を示すブロック図である。図３において、情報処理装置１０１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）３０１と、メモリ３０２と、ディスクドライブ３０３と、ディスク３０４と、Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）３０５と、ディスプレイ３０６と、入力装置３０７と、スピーカ３０８と、マイクロフォン２０６と、を有する。また、各構成部はバス３００によってそれぞれ接続される。
【００４５】
ここで、ＣＰＵ３０１は、情報処理装置１０１の全体の制御を司る。メモリ３０２は、例えば、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）およびフラッシュＲＯＭなどを有する。具体的には、例えば、フラッシュＲＯＭやＲＯＭが各種プログラムを記憶し、ＲＡＭがＣＰＵ３０１のワークエリアとして使用される。メモリ３０２に記憶されるプログラムは、ＣＰＵ３０１にロードされることで、コーディングされている処理をＣＰＵ３０１に実行させる。
【００４６】
ディスクドライブ３０３は、ＣＰＵ３０１の制御に従ってディスク３０４に対するデータのリード／ライトを制御する。ディスク３０４は、ディスクドライブ３０３の制御で書き込まれたデータを記憶する。ディスク３０４としては、例えば、磁気ディスク、光ディスクなどが挙げられる。
【００４７】
Ｉ／Ｆ３０５は、通信回線を通じてネットワーク２１０に接続され、ネットワーク２１０を介して他のコンピュータ（例えば、図２に示した内視鏡システム２０１の制御装置２９０、生体情報モニタ２０２、シリンジポンプ２０３、電気メス２０４、送気装置２０５）に接続される。そして、Ｉ／Ｆ３０５は、ネットワーク２１０と自装置内部とのインターフェースを司り、他の装置からのデータの入出力を制御する。
【００４８】
ディスプレイ３０６は、カーソル、アイコンあるいはツールボックスをはじめ、文書、画像、機能情報などのデータを表示する。ディスプレイ３０６として、例えば、液晶ディスプレイ、有機ＥＬ（ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ、ＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）などを採用することができる。図１に示したディスプレイ１２０は、例えば、ディスプレイ３０６に対応する。
【００４９】
入力装置３０７は、文字、数字、各種指示などの入力のためのキーを有し、データの入力を行う。入力装置３０７は、キーボードやマウスなどであってもよく、また、タッチパネル式の入力パッドやテンキーなどであってもよい。スピーカ３０８は、電気信号を音声に変換する装置である。マイクロフォン２０６は、上述したように、音を電気信号に変換する機器であり、例えば、タイピン型のものであってもよく、また、ヘッドセット型のものであってもよい。
【００５０】
（各種ＤＢ２２０，２３０，２４０，２５０，２６０，２７０の記憶内容）
つぎに、図４〜図９を用いて、情報処理装置１０１が有する各種ＤＢの記憶内容について説明する。各種ＤＢは、例えば、図３に示したメモリ３０２、ディスク３０４などの記憶装置により実現される。
【００５１】
図４は、患者ＤＢ２２０の記憶内容の一例を示す説明図である。図４において、患者ＤＢ２２０は、検査ＩＤ、患者名、性別、血液型、身長／体重および年齢のフィールドを有し、各フィールドに情報を設定することで、患者情報（例えば、患者情報４００−１〜４００−３）をレコードとして記憶する。
【００５２】
ここで、検査ＩＤ（ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）は、内視鏡検査を一意に識別する識別子である。患者名は、患者の氏名である。性別は、患者の性別である。血液型は、患者の血液型である。身長／体重は、患者の身長［ｃｍ］／体重［ｋｇ］である。年齢は、患者の年齢である。
【００５３】
図５は、撮像画像ＤＢ２３０の記憶内容の一例を示す説明図である。図５において、撮像画像ＤＢ２３０は、検査ＩＤ、術者ＩＤ、画像取得部位、撮像日時および撮像画像のフィールドを有し、各フィールドに情報を設定することで、撮像画像情報（例えば、撮像画像情報５００−１〜５００−５）をレコードとして記憶する。
【００５４】
ここで、検査ＩＤは、内視鏡検査を一意に識別する識別子である。術者ＩＤは、内視鏡検査の術者を一意に識別する識別子である。画像取得部位は、撮像画像に対応する腸内の部位である。撮像日時は、撮像画像が撮像された日時を示す。撮像画像は、内視鏡検査において撮像された腸内画像の画像データである。
【００５５】
図６は、バイタルサインＤＢ２４０の記憶内容の一例を示す説明図である。図６において、バイタルサインＤＢ２４０は、検査ＩＤ、取得日時、心拍数、拡張期血圧値、収縮期血圧値および酸素飽和度のフィールドを有し、各フィールドに情報を設定することで、バイタルデータ（例えば、バイタルデータ６００−１，６００−２）をレコードとして記憶する。
【００５６】
ここで、検査ＩＤは、内視鏡検査を一意に識別する識別子である。取得日時は、各種バイタルサインの情報を取得した日時である。心拍数は、患者の心拍数である。拡張期血圧値は、患者の拡張期血圧の値である。収縮期血圧値は、患者の収縮期血圧の値である。酸素飽和度は、患者の血液中の酸素飽和度である。
【００５７】
なお、図示は省略するが、バイタルサインＤＢ２４０内の各バイタルデータには、患者の体温、脈拍、中心静脈圧、出血量、血液中のｐＨ、重炭酸イオン濃度などの情報が含まれていてもよい。
【００５８】
図７は、投与薬剤ＤＢ２５０の記憶内容の一例を示す説明図である。図７において、投与薬剤ＤＢ２５０は、検査ＩＤ、ポンプ名、薬剤名、投与開始日時、投与終了日時および流量のフィールドを有し、各フィールドに情報を設定することで、薬剤情報（例えば、薬剤情報７００−１，７００−２）をレコードとして記憶する。
【００５９】
ここで、検査ＩＤは、内視鏡検査を一意に識別する識別子である。ポンプ名は、シリンジポンプ２０３の名称である。薬剤名は、シリンジポンプ２０３を使用して投与した薬剤の名称である。投与開始日時は、薬剤の投与を開始した日時である。投与終了日時は、薬剤の投与を終了した日時である。流量は、薬剤の投与量［ｍＬ／ｈ］である。
【００６０】
図８は、音声ＤＢ２６０の記憶内容の一例を示す説明図である。図８において、音声ＤＢ２６０は、検査ＩＤ、検査日、記録開始日時、記録終了日時およびデータ格納パスのフィールドを有し、各フィールドに情報を設定することで、音声情報（例えば、音声情報８００−１〜８００−３）をレコードとして記憶する。
【００６１】
ここで、検査ＩＤは、内視鏡検査を一意に識別する識別子である。検査日は、内視鏡検査が実施された日である。記録開始日時は、内視鏡検査における音声データおよび音圧レベルデータの記録を開始した日時である。記録終了日時は、内視鏡検査における音声データおよび音圧レベルデータの記録を終了した日時である。
【００６２】
データ格納パスは、音声データ、および当該音声データに対応する音圧レベルデータの格納場所を示す。音声データは、内視鏡検査において測定された発話の内容を示す情報である。音圧レベルデータは、内視鏡検査において測定された発話の音圧レベルを示す情報である。音声データおよび音圧レベルデータは、例えば、同じタイミングで測定される。
【００６３】
なお、音声データおよび音圧レベルデータには、当該音声データおよび当該音圧レベルデータを記録した対象者（例えば、術者、助手、看護師）を一意に識別する識別子（例えば、術者ＩＤ、助手ＩＤ、看護師ＩＤ）が付与される。
【００６４】
図９は、機器使用状況ＤＢ２７０の記憶内容の一例を示す説明図である。図９において、機器使用状況ＤＢ２７０は、検査ＩＤ、医療機器名、使用開始日時および使用終了日時のフィールドを有し、各フィールドに情報を設定することで、使用状況情報（例えば、使用状況情報９００−１，９００−２）をレコードとして記憶する。
【００６５】
ここで、検査ＩＤは、内視鏡検査を一意に識別する識別子である。医療機器名は、内視鏡検査において使用された医療機器（例えば、電気メス２０４、送気装置２０５）の名称である。使用開始日時は、医療機器の使用を開始した日時である。使用終了日時は、医療機器の使用が終了した日時である。
【００６６】
（情報処理装置１０１の機能的構成例）
図１０は、情報処理装置１０１の機能的構成例を示すブロック図である。図１０において、情報処理装置１０１は、取得部１００１と、表示制御部１００２と、受付部１００３と、音声制御部１００４と、を含む構成である。取得部１００１〜音声制御部１００４は制御部となる機能であり、具体的には、例えば、図３に示したメモリ３０２、ディスク３０４などの記憶装置に記憶されたプログラムをＣＰＵ３０１に実行させることにより、又は、Ｉ／Ｆ３０５により、その機能を実現する。各機能部の処理結果は、例えば、メモリ３０２、ディスク３０４などの記憶装置に記憶される。
【００６７】
取得部１００１は、腸内に挿入され、腸内画像を撮像するカメラ２８３（図２参照）により撮像された撮像画像を取得する。具体的には、例えば、取得部１００１は、カメラ２８３によって撮像画像が撮像される度に、内視鏡システム２０１の制御装置２９０から当該撮像画像を取得する。
【００６８】
取得された撮像画像は、例えば、図５に示した撮像画像ＤＢ２３０に記憶される。具体的には、例えば、取得部１００１は、取得した撮像画像にタイムスタンプを付与し、検査ＩＤ、術者ＩＤおよび画像取得部位と対応付けて撮像画像ＤＢ２３０に記憶する。このタイムスタンプは、撮像画像の撮像日時を示すものであり、例えば、取得部１００１が撮像画像を取得したときの日時（日本標準時）を示す。
【００６９】
これにより、新たな撮像画像情報が撮像画像ＤＢ２３０に登録される。なお、検査ＩＤ、術者ＩＤおよび画像取得部位は、例えば、図３に示した入力装置３０７を用いたユーザの操作入力により入力される。また、撮像画像に対応する腸内の部位を特定できない場合は、例えば、画像取得部位に「−（ｎｕｌｌ）」が設定される。
【００７０】
また、取得部１００１は、バイタルデータを取得する。ここで、バイタルデータは、患者の心拍数、拡張期血圧値、収縮期血圧値、酸素飽和度、体温、脈拍、中心静脈圧、出血量などのバイタルサインを示す情報である。具体的には、例えば、取得部１００１は、カメラ２８３の腸内への挿入中に測定されたバイタルデータを、生体情報モニタ２０２（図２参照）から定期的に取得する。
【００７１】
取得されたバイタルデータは、例えば、図６に示したバイタルサインＤＢ２４０に記憶される。具体的には、例えば、取得部１００１は、取得したバイタルデータにタイムスタンプを付与し、検査ＩＤと対応付けてバイタルサインＤＢ２４０に記憶する。このタイムスタンプは、バイタルデータの取得日時を示すものであり、例えば、取得部１００１がバイタルデータを取得したときの日時（日本標準時）を示す。これにより、新たなバイタルデータがバイタルサインＤＢ２４０に登録される。なお、検査ＩＤは、例えば、入力装置３０７を用いたユーザの操作入力により入力される。
【００７２】
また、取得部１００１は、患者に投与された薬剤に関する薬剤情報を取得する。ここで、薬剤情報は、例えば、ポンプ名、薬剤名、投与開始日時、投与終了日時および流量を含む。具体的には、例えば、取得部１００１は、カメラ２８３の腸内への挿入中に投与された薬剤に関する薬剤情報を、シリンジポンプ２０３（図２参照）から取得する。取得された薬剤情報は、例えば、図７に示した投与薬剤ＤＢ２５０に記憶される。これにより、新たな薬剤情報が投与薬剤ＤＢ２５０に登録される。
【００７３】
また、取得部１００１は、マイクロフォン２０６から入力される音声の音声データおよび音圧レベルデータを取得する。具体的には、例えば、取得部１００１は、カメラ２８３の腸内への挿入中にマイクロフォン２０６から入力された発話の音声データを取得する。また、取得部１００１は、カメラ２８３の腸内への挿入中に測定された発話の音圧レベルの時系列変化を示す音圧レベルデータを取得する。
【００７４】
取得された音声データおよび音圧レベルデータは、例えば、メモリ３０２、ディスク３０４などの記憶装置に記憶される。また、取得された音声データおよび音圧レベルデータに関する情報（検査ＩＤ、検査日、記録開始／終了日時、データ格納パス等）は、例えば、図８に示した音声ＤＢ２６０に記憶される。これにより、新たな音声情報が音声ＤＢ２６０に登録される。
【００７５】
また、取得部１００１は、医療機器の使用状況を示す使用状況情報を取得する。ここで、医療機器は、例えば、図２に示した電気メス２０４や送気装置２０５である。具体的には、例えば、取得部１００１は、医療機器の使用が開始されたことを示す情報を当該医療機器から取得すると、そのときの日時を使用開始日時として、医療機器名と対応付けて機器使用状況ＤＢ２７０に記憶する。このあと、取得部１００１は、医療機器の使用が終了したことを示す情報を当該医療機器から取得すると、そのときの日時を使用終了日時に設定する。これにより、新たな使用状況情報が機器使用状況ＤＢ２７０に登録される。
【００７６】
表示制御部１００２は、腸内に挿入され、腸内画像を撮像するカメラ２８３によって撮像された複数の撮像画像を時系列順に表示する。具体的には、例えば、表示制御部１００２は、撮像画像ＤＢ２３０を参照して、指定された検査ＩＤに対応する複数の撮像画像を時系列順にディスプレイ３０６に表示する。検査ＩＤの指定は、例えば、入力装置３０７を用いたユーザの操作入力により行われる。
【００７７】
以下の説明では、指定された検査ＩＤに対応する複数の撮像画像を、撮像日時が早い順に「撮像画像Ｐ１〜Ｐｎ」と表記する場合がある。また、撮像画像Ｐ１〜Ｐｎのうちの任意の撮像画像を「撮像画像Ｐｉ」と表記する場合がある（ｉ＝１，２，…，ｎ）。
【００７８】
また、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定されたバイタルデータを時系列順に並列表示することにしてもよい。具体的には、例えば、表示制御部１００２は、バイタルサインＤＢ２４０を参照して、指定された検査ＩＤに対応するバイタルデータを時系列順にディスプレイ３０６に並列表示する。
【００７９】
これにより、内視鏡検査等において各撮像画像Ｐ１〜Ｐｎが撮像された際の患者のバイタルサインを特定可能に表示することができる。なお、バイタルデータの表示例については、後述の図１１に示す統合ビュー画面１１００において説明する。
【００８０】
また、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、撮像画像Ｐ１〜Ｐｎに隣接する位置に並列表示することにしてもよい。
【００８１】
具体的には、例えば、表示制御部１００２は、音声ＤＢ２６０内の指定された検査ＩＤに対応するデータ格納パスを参照して、音圧レベルデータを取得する。この音圧レベルデータは、指定された検査ＩＤの内視鏡検査において測定された発話の音圧レベルの時系列変化を示す情報である。そして、表示制御部１００２は、取得した音圧レベルデータを、複数の撮像画像に隣接する位置に並列表示する。
【００８２】
これにより、内視鏡検査等において何らかの音声イベント（例えば、所見、指示、説明等）が生じたタイミングを特定可能に表示することができる。なお、音圧レベルデータの表示例については、後述の図１１に示す統合ビュー画面１１００において説明する。
【００８３】
また、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に薬剤が投与された期間（以下、「薬剤投与期間」という）を示す情報を並列表示することにしてもよい。具体的には、例えば、表示制御部１００２は、投与薬剤ＤＢ２５０を参照して、指定された検査ＩＤに対応する薬剤情報から特定される薬剤投与期間を示す情報をディスプレイ３０６に並列表示する。薬剤投与期間を示す情報は、例えば、薬剤投与期間の時間幅を表す図形である。
【００８４】
これにより、内視鏡検査等において薬剤が投与された期間を特定可能に表示することができる。なお、薬剤投与期間を示す情報の表示例については、後述の図１１に示す統合ビュー画面１１００において説明する。
【００８５】
また、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に医療機器が使用された期間（以下、「機器使用期間」という）を示す情報を並列表示することにしてもよい。具体的には、例えば、表示制御部１００２は、機器使用状況ＤＢ２７０を参照して、指定された検査ＩＤに対応する使用状況情報から特定される機器使用期間を示す情報をディスプレイ３０６に並列表示する。機器使用期間を示す情報は、例えば、機器使用期間の時間幅を表す図形である。
【００８６】
これにより、内視鏡検査等において医療機器が使用された期間を特定可能に表示することができる。なお、機器使用期間を示す情報の表示例については、後述の図１１に示す統合ビュー画面１１００において説明する。
【００８７】
また、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期Ｔに対応する撮像画像を特定可能に表示することにしてもよい。ここで、所定の基準は、任意に設定可能であり、例えば、５０〜６０［ｄＢ］程度の値に設定される。
【００８８】
具体的には、例えば、表示制御部１００２は、音声ＤＢ２６０内の指定された検査ＩＤに対応するデータ格納パスを参照して、音圧レベルデータを取得する。なお、検査ＩＤに対応する音圧レベルデータが複数存在する場合がある。この場合、表示制御部１００２は、検査ＩＤに対応する全ての音圧レベルデータを取得してもよく、また、特定のユーザ（例えば、術者）に対応する音圧レベルデータを取得してもよい。
【００８９】
そして、表示制御部１００２は、取得した音圧レベルデータを参照して、音圧レベルが所定の基準を超える時期Ｔを特定する。時期Ｔは、ある時点、又は、ある時間幅の期間である。時期Ｔに、複数の異なる期間が含まれていてもよい。つぎに、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎのうち時期Ｔに対応する撮像画像を特定する。
【００９０】
ここで、時期Ｔに対応する撮像画像は、時期Ｔに撮像日時が含まれる撮像画像であってもよく、また、時期Ｔを含む所定の期間、例えば、時期Ｔの前後数十秒を含む期間に撮像日時が含まれる撮像画像であってもよい。さらに、時期Ｔに対応する撮像画像は、時期Ｔの直前あるいは直後に撮像された撮像画像であってもよい。
【００９１】
そして、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、特定した撮像画像を特定可能に表示する。具体的には、例えば、表示制御部１００２は、特定した撮像画像を、他の撮像画像の表示態様とは異なる表示態様で表示する。より具体的には、例えば、表示制御部１００２は、特定した撮像画像を、他の撮像画像とは異なる表示枠で囲って表示することにしてもよい。
【００９２】
これにより、発話の音圧レベルが所定の基準を超える時期Ｔに対応する撮像画像を特定可能に表示することができる。
【００９３】
また、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期Ｔに対応する撮像画像を特定可能に表示することにしてもよい。ここで、所定のキーワードは、任意に設定可能であり、例えば、医学用語辞書に登録されている用語であってもよく、また、医療現場で頻繁に使用される用語をピックアップしたものであってもよい。一例を挙げると、検査実施中に使用される医療機器の名称や腸内の部位の名称などが所定のキーワードとして設定される。
【００９４】
具体的には、例えば、表示制御部１００２は、音声ＤＢ２６０内の指定された検査ＩＤに対応するデータ格納パスを参照して、音声データを取得する。なお、検査ＩＤに対応する音声データが複数存在する場合がある。この場合、表示制御部１００２は、検査ＩＤに対応する全ての音声データを取得してもよく、また、特定のユーザ（例えば、術者）に対応する音声データを取得してもよい。
【００９５】
そして、表示制御部１００２は、取得した音声データを音声認識処理することにより、所定のキーワードを検出する。音声認識技術としては、既存のいかなる技術を用いることにしてもよく、例えば、ワードスポッティングやサブワード法などにより、音声データを単語に変換する技術を用いることにしてもよい。より具体的には、例えば、表示制御部１００２は、音声データを音声認識処理して得られるいずれかの単語が、所定のキーワードを示す場合に、当該キーワードを検出する。
【００９６】
つぎに、表示制御部１００２は、検出した所定のキーワードが発せられたタイミングを時期Ｔとして特定し、撮像画像Ｐ１〜Ｐｎのうちの時期Ｔに対応する撮像画像を特定する。そして、表示制御部１００２は、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、特定した撮像画像を特定可能に表示する。
【００９７】
これにより、発話の内容に所定のキーワードが検出された時期Ｔに対応する撮像画像を特定可能に表示することができる。
【００９８】
また、表示制御部１００２は、発話の音圧レベルを示すデータを時系列順に表示する際に、発話の内容に特定のキーワードが検出された箇所にインデックス情報を表示することにしてもよい。ここで、特定のキーワードは、任意に設定可能であり、例えば、術中に頻繁に使用される用語をピックアップしたものであってもよい。
【００９９】
一例を挙げると、内視鏡検査を実施中に使用される「ポリープ」、「異常」、「切除」などが特定のキーワードとして設定される。また、インデックス情報は、特定のキーワードが検出されたことを示す情報であり、例えば、特定のキーワードを示す文字列やアイコンなどであってもよい。
【０１００】
具体的には、例えば、表示制御部１００２は、指定された検査ＩＤに対応する音声データを取得する。この際、検査ＩＤに対応する音声データが複数存在する場合には、表示制御部１００２は、検査ＩＤに対応する全ての音声データを取得してもよく、また、特定のユーザ（例えば、術者）に対応する音声データを取得してもよい。
【０１０１】
そして、表示制御部１００２は、取得した音声データを音声認識処理することにより、特定のキーワードを検出する。より具体的には、例えば、表示制御部１００２は、音声データを音声認識処理して得られるいずれかの単語が、特定のキーワードを示す場合に、当該キーワードを検出する。
【０１０２】
つぎに、表示制御部１００２は、指定された検査ＩＤに対応する音圧レベルデータのうち、特定のキーワードが検出された箇所を特定する。そして、表示制御部１００２は、音圧レベルデータを表示する際に、特定した箇所に、特定のキーワードが検出されたことを示すインデックス情報を表示する。
【０１０３】
これにより、発話の内容に特定のキーワードが検出されたタイミングを特定可能に表示することができる。なお、インデックス情報の表示例については、図１３を用いて後述する。
【０１０４】
受付部１００３は、表示されたインデックス情報の指定を受け付ける。具体的には、例えば、受付部１００３は、入力装置３０７を用いたユーザの操作入力により、インデックス情報の指定を受け付ける。
【０１０５】
音声制御部１００４は、インデックス情報の指定に応じて、カメラ２８３の腸内への挿入中に測定された発話の音声データを、特定のキーワードが検出された箇所に対応する部分から再生する。具体的には、例えば、音声制御部１００４は、指定された検査ＩＤに対応する音声データを、特定のキーワードが検出された時点、あるいは、特定のキーワードが検出される直前の時点から再生する。
【０１０６】
これにより、内視鏡検査等において術者等により特定のキーワードが発せられたタイミングを見計らって音声を再生することができる。
【０１０７】
受付部１００３は、時刻ｔの指定を受け付ける。ここで、時刻ｔは、内視鏡検査中のいずれかの時刻である。具体的には、例えば、受付部１００３は、スライド可能な時刻指定バーにより、時刻ｔの指定を受け付けることにしてもよい。なお、時刻指定バーの表示例については、後述の図１１に示す統合ビュー画面１１００において説明する。
【０１０８】
また、表示制御部１００２は、時刻ｔの指定に応じて、撮像画像Ｐ１〜Ｐｎのうち指定された時刻ｔに対応する撮像画像を表示するとともに、指定された時刻ｔに対応するバイタル値を表示する操作画面を表示する。さらに、表示制御部１００２は、時刻ｔに投与されている薬剤の情報（例えば、薬剤名、流量）や、時刻ｔに使用されている医療機器の情報（例えば、医療機器名）を操作画面内に表示することにしてもよい。
【０１０９】
この際、表示制御部１００２は、少なくとも時刻ｔに対応する撮像画像の前後の撮像画像の撮像タイミングの間に挟まれる時間帯に取得された発話音声の再生指示を受け付け可能な操作画面を表示することにしてもよい。また、表示制御部１００２は、少なくとも指定された時刻ｔを基準に特定した時間幅内に取得された発話音声の再生指示を受け付け可能な操作画面を表示することにしてもよい。
【０１１０】
ここで、時刻ｔに対応する撮像画像は、例えば、撮像画像Ｐ１〜Ｐｎのうち、撮像日時が時刻ｔに最も近い撮像画像であってもよい。また、時刻ｔに対応する撮像画像は、時刻ｔを基準に特定される時間幅内、例えば、時刻ｔの前後数十秒を含む期間内に撮像日時が含まれる撮像画像であってもよい。
【０１１１】
時刻ｔに対応するバイタル値は、例えば、バイタルサインＤＢ２４０内の指定された検査ＩＤに対応するバイタルデータのうち、取得日時が時刻ｔに最も近いバイタルデータから特定されるバイタルサインの値であってもよい。また、時刻ｔに対応するバイタル値は、時刻ｔを基準に特定される時間幅内、例えば、時刻ｔの前後数十秒を含む期間内に取得日時が含まれるバイタルデータから特定されるバイタルサインの値であってもよい。
【０１１２】
より具体的には、例えば、時刻ｔに対応するバイタル値は、取得日時が時刻ｔに最も近いバイタルデータが示す各種バイタルサインの値であってもよい。また、時刻ｔに対応するバイタル値は、時刻ｔを基準に特定される時間幅内に取得日時が含まれるバイタルデータが示す各種バイタルサインの最大値又は最小値又は平均値のいずれかの値であってもよい。
【０１１３】
また、時刻ｔに対応する撮像画像の前後の撮像画像の撮像タイミングの間に挟まれる時間帯は、例えば、撮像日時が時刻ｔに最も近い撮像画像Ｐｉの直前に撮像された撮像画像Ｐ（ｉ−１）の撮像日時から、撮像画像Ｐ（ｉ＋１）の撮像日時までの時間帯である。また、時刻ｔを基準に特定した時間幅は、例えば、時刻ｔの前後数秒あるいは前後数十秒を含む時間幅である。
【０１１４】
具体的には、例えば、表示制御部１００２は、時刻ｔの指定に応じて、図１２に示すようなスポットビュー画面１２００をディスプレイ３０６に表示することにしてもよい。
【０１１５】
（統合ビュー画面１１００の画面例）
つぎに、情報処理装置１０１のディスプレイ３０６に表示される統合ビュー画面１１００の画面例について説明する。ここでは、検査ＩＤ「Ｔ３」が指定された場合を例に挙げて、統合ビュー画面１１００の画面例について説明する。
【０１１６】
図１１は、統合ビュー画面１１００の画面例を示す説明図である。図１１において、統合ビュー画面１１００は、ＶＩＴＡＬ欄１１０１と、ＢＧ欄１１０２と、ＶＥＮＴ欄１１０３と、ＲａｄｉｏＫｎｉｆｅ欄１１０４と、Ｓｏｕｎｄ欄１１０５と、ＣＡＭ欄１１０６と、Ｓ−ＰＯＭＰ１欄１１０７と、Ｓ−ＰＯＭＰ２欄１１０８と、ＰＯＭＰ１欄１１０９と、ＰＯＭＰ２欄１１１０と、Ｂｌｏｏｄ欄１１１１と、を含む。なお、統合ビュー画面１１００では、左から右に時間が経過しているものとする。
【０１１７】
ＶＩＴＡＬ欄１１０１には、バイタルサインＤＢ２４０内の検査ＩＤ「Ｔ３」に対応するバイタルデータに基づくグラフ１１２１，１１２２が表示されている。グラフ１１２１は、収縮期血圧値の時系列変化を示す。また、グラフ１１２２は、拡張期血圧値の時系列変化を示す。
【０１１８】
ＢＧ欄１１０２には、バイタルサインＤＢ２４０内の検査ＩＤ「Ｔ３」に対応するバイタルデータに基づくグラフ１１２３が表示されている。グラフ１１２３は、血液中の酸素飽和度の時系列変化を示す。なお、ＢＧ欄１１０２には、血液中のｐＨや重炭酸イオン濃度の時系列変化を示すグラフをさらに表示することにしてもよい。
【０１１９】
ＶＥＮＴ欄１１０３およびＲａｄｉｏＫｎｉｆｅ欄１１０４には、機器使用状況ＤＢ２７０内の検査ＩＤ「Ｔ３」に対応する使用状況情報に基づくグラフ１１２４，１１２５が表示されている。グラフ１１２４は、送気装置２０５が使用されている期間（一対の使用開始日時から使用終了日時までの期間）を示す。また、グラフ１１２５は、電気メス２０４が使用されている期間を示す。
【０１２０】
Ｓｏｕｎｄ欄１１０５には、音声ＤＢ２６０内の検査ＩＤ「Ｔ３」に対応する音声情報に基づくグラフ１１２６が表示されている。グラフ１１２６は、音圧レベルの時系列変化を示す。ＣＡＭ欄１１０６には、撮像画像ＤＢ２３０内の検査ＩＤ「Ｔ３」に対応する撮像画像Ｐ１〜Ｐ１４が時系列順に表示されている。
【０１２１】
Ｓ−ＰＯＭＰ１欄１１０７、Ｓ−ＰＯＭＰ２欄１１０８、ＰＯＭＰ１欄１１０９およびＰＯＭＰ２欄１１１０には、投与薬剤ＤＢ２５０内の検査ＩＤ「Ｔ３」に対応する薬剤情報に基づくグラフ１１２７〜１１３０が表示されている。グラフ１１２７は、ポンプ名「Ｓ−ＰＯＭＰ１」のシリンジポンプを使用して薬剤が投与された期間（一対の投与開始日時から投与終了日時までの期間）を示す。グラフ１１２８は、ポンプ名「Ｓ−ＰＯＭＰ２」のシリンジポンプを使用して薬剤が投与された期間を示す。グラフ１１２９は、ポンプ名「ＰＯＭＰ１」の輸液ポンプを使用して薬剤が投与された期間を示す。グラフ１１３０は、ポンプ名「ＰＯＭＰ２」の輸液ポンプを使用して薬剤が投与された期間を示す。
【０１２２】
Ｂｌｏｏｄ欄１１１１には、グラフ１１３１が表示されている。グラフ１１３１は、出血量の時系列変化を示す。なお、患者の出血量を示す情報は、例えば、バイタルサインＤＢ２４０内の検査ＩＤ「Ｔ３」に対応するバイタルデータに含まれる。なお、統合ビュー画面１１００において、各欄１１０１〜１１１１内の情報は、時間軸を合わせて表示されている。
【０１２３】
統合ビュー画面１１００によれば、ユーザは、内視鏡検査において撮像された撮像画像Ｐ１〜Ｐ１４とともに、検査実施中のバイタル値や音圧レベルの時系列変化を一括して確認することができる。また、ユーザは、検査実施中に薬剤が投与された期間や医療機器が使用された期間についても合わせて確認することができる。
【０１２４】
なお、情報処理装置１０１は、発話の内容に特定のキーワードが検出された場合には、特定のキーワードが検出されたグラフ１１２６上の箇所に、特定のキーワードが検出されたことを示すインデックス情報を表示してもよい。
【０１２５】
また、統合ビュー画面１１００において、図３に示した入力装置３０７を用いて、スライド可能な時刻指定バーＢを移動させることにより、時刻ｔの指定を行うことができる。具体的には、例えば、時刻指定バーＢを所望の位置に移動させた後に、所定の操作（例えば、マウスを左クリック）を行うと、図１２に示すようなスポットビュー画面１２００がポップアップ表示される。
【０１２６】
（スポットビュー画面１２００の画面例）
ここで、情報処理装置１０１のディスプレイ３０６に表示されるスポットビュー画面１２００の画面例について説明する。
【０１２７】
図１２は、スポットビュー画面１２００の画面例を示す説明図である。図１２において、スポットビュー画面１２００には、患者の患者情報（患者名、血液型、年齢、身長／体重等）とともに、図１１に示した統合ビュー画面１１００において指定された時刻ｔに対応する撮像画像Ｐ７が表示されている。撮像画像Ｐ７の上部に表示された日時は、撮像画像Ｐ７の撮像日時である。
【０１２８】
また、スポットビュー画面１２００には、時刻ｔに対応するバイタル値として、ＨＲ「８０」、ＡＢＰ「１１８／７６（９１）」、ＳｐＯ２「９８」、ＣＶＰ「８」およびＴｅｍｐ「３６．５」が表示されている。なお、ＨＲは、心拍数を示す。ＡＢＰは、観血血圧（収縮期血圧値／拡張期血圧値（平均））を示す。ＳｐＯ２は、酸素飽和度を示す。ＣＶＰは、中心静脈圧を示す。Ｔｅｍｐは、体温を示す。
【０１２９】
また、スポットビュー画面１２００には、時刻ｔを基準に特定される時間幅（例えば、時刻ｔの前後数十秒を含む期間）内に取得された発話音声の音圧レベルの時系列変化を示すグラフ１２０１が表示されている。
【０１３０】
また、スポットビュー画面１２００には、ポンプ名「Ｓ−ＰＯＭＰ１」のシリンジポンプを使用して時刻ｔに投与されている薬剤の薬剤名「○○○」および流量「１０．００［ｍＬ／ｈ］」が表示されている。また、スポットビュー画面１２００には、ポンプ名「ＰＯＭＰ２」の輸液ポンプを使用して時刻ｔに投与されている薬剤の薬剤名「×××」および流量「１０［ｍＬ／ｈ］」が表示されている。
【０１３１】
スポットビュー画面１２００によれば、ユーザは、指定した時刻ｔに対応する撮像画像Ｐ７が拡大表示されるため、腸内の細かい部分の状態を確認することができる。また、ユーザは、指定した時刻ｔに対応するバイタル値の詳細や、指定した時刻ｔに投与されている薬剤の詳細を確認することができる。
【０１３２】
また、スポットビュー画面１２００には、時刻ｔを基準に特定される時間幅（例えば、時刻ｔの前後数十秒を含む期間）内に取得された発話音声の再生指示を受け付ける操作ボタンｂ１〜ｂ４が表示されている。例えば、操作ボタンｂ３をクリックすると、時刻ｔを基準に特定される時間幅内に取得された発話音声を再生することができる。
【０１３３】
具体的には、例えば、情報処理装置１０１の音声制御部１００４は、操作ボタンｂ３がクリックされると、検査ＩＤ「Ｔ３」に対応する音声データを取得し、不図示のスピーカから、時刻ｔを基準に特定される時間幅内に取得された発話音声を出力する。これにより、ユーザは、指定した時刻ｔ付近の発話音声の内容を確認することができる。また、操作ボタンｂ１をクリックすると、発話音声の再生を停止することができる。また、操作ボタンｂ２，ｂ４をクリックすると、発話音声の巻き戻し、早送りをすることができる。
【０１３４】
（インデックス情報の表示例）
つぎに、発話の内容に特定のキーワードが検出された場合に表示されるインデックス情報の表示例について説明する。
【０１３５】
図１３は、インデックス情報の表示例を示す説明図である。図１３において、グラフ１３００は、図１１に示したような統合ビュー画面１１００に表示される音圧レベルの時系列変化を示すグラフを拡大表示したものである。グラフ１３００上の特定のキーワードが検出された箇所には、操作ボタン１３０１〜１３０３およびインデックス情報１３１１〜１３１３がそれぞれ表示されている。
【０１３６】
ここで、インデックス情報１３１１は、特定のキーワード「ポリープ」が検出されたことを示す情報である。インデックス情報１３１２は、特定のキーワード「異常」が検出されたことを示す情報である。インデックス情報１３１３は、特定のキーワード「切除」が検出されたことを示す情報である。
【０１３７】
これにより、ユーザは、検査実施中に術者等が特定のキーワードを話した箇所を特定することができる。
【０１３８】
また、入力装置３０７を用いたユーザの操作入力により、操作ボタン１３０１〜１３０３のいずれかの操作ボタンをクリックすると、当該操作ボタンに対応する特定のキーワードが検出された箇所に対応する部分から音声データを再生することができる。例えば、操作ボタン１３０１をクリックすると、特定のキーワード「ポリープ」が検出された箇所に対応する部分から音声データを再生することができる。
【０１３９】
これにより、術者以外の者が検査実施後のレポート（検査記録）を作成する場合などに、レポートに記載すべきキーワードが検出された箇所の音声データをピンポイントで再生することができる。このため、例えば、レポート作成にあたり音声データを全て聞き直す場合に比べて、作成作業にかかる負荷および時間を軽減することができる。
【０１４０】
（情報処理装置１０１の表示制御処理手順）
つぎに、情報処理装置１０１の表示制御処理手順について説明する。
【０１４１】
図１４および図１５は、情報処理装置１０１の表示制御処理手順の一例を示すフローチャートである。図１４のフローチャートにおいて、まず、情報処理装置１０１は、検査ＩＤの指定を受け付けたか否かを判断する（ステップＳ１４０１）。ここで、情報処理装置１０１は、検査ＩＤの指定を受け付けるのを待つ（ステップＳ１４０１：Ｎｏ）。
【０１４２】
そして、情報処理装置１０１は、検査ＩＤの指定を受け付けた場合（ステップＳ１４０１：Ｙｅｓ）、患者ＤＢ２２０から、指定された検査ＩＤに対応する患者情報を取得する（ステップＳ１４０２）。つぎに、情報処理装置１０１は、撮像画像ＤＢ２３０から、指定された検査ＩＤに対応する撮像画像情報を取得する（ステップＳ１４０３）。
【０１４３】
つぎに、情報処理装置１０１は、バイタルサインＤＢ２４０から、指定された検査ＩＤに対応するバイタルデータを取得する（ステップＳ１４０４）。つぎに、情報処理装置１０１は、投与薬剤ＤＢ２５０から、指定された検査ＩＤに対応する薬剤情報を取得する（ステップＳ１４０５）。
【０１４４】
つぎに、情報処理装置１０１は、音声ＤＢ２６０から、指定された検査ＩＤに対応する音声情報を取得する（ステップＳ１４０６）。そして、情報処理装置１０１は、取得した音声情報のデータ格納パスを参照して、指定された検査ＩＤに対応する音声データおよび音圧レベルデータを取得する（ステップＳ１４０７）。つぎに、情報処理装置１０１は、機器使用状況ＤＢ２７０から、指定された検査ＩＤに対応する使用状況情報を取得する（ステップＳ１４０８）。
【０１４５】
そして、情報処理装置１０１は、ステップＳ１４０２〜Ｓ１４０８において取得した各種情報に基づいて、統合ビュー画面の画面情報を生成する（ステップＳ１４０９）。なお、統合ビュー画面の画面レイアウトは予め定められている。つぎに、情報処理装置１０１は、生成した画面情報に基づいて、統合ビュー画面をディスプレイ３０６に表示して（ステップＳ１４１０）、図１５に示すステップＳ１５０１に移行する。
【０１４６】
図１５のフローチャートにおいて、まず、情報処理装置１０１は、ステップＳ１４１０において表示した統合ビュー画面において、時刻ｔの指定を受け付けたか否かを判断する（ステップＳ１５０１）。ここで、情報処理装置１０１は、時刻ｔの指定を受け付けるのを待つ（ステップＳ１５０１：Ｎｏ）。
【０１４７】
そして、情報処理装置１０１は、時刻ｔの指定を受け付けた場合（ステップＳ１５０１：Ｙｅｓ）、時刻ｔに対応する撮像画像を特定する（ステップＳ１５０２）。つぎに、情報処理装置１０１は、時刻ｔに対応するバイタル値を特定する（ステップＳ１５０３）。つぎに、情報処理装置１０１は、時刻ｔに対応する薬剤情報を特定する（ステップＳ１５０４）。
【０１４８】
そして、情報処理装置１０１は、ステップＳ１５０２〜Ｓ１５０４において特定した各種情報に基づいて、スポットビュー画面の画面情報を生成する（ステップＳ１５０５）。なお、スポットビュー画面の画面レイアウトは予め定められている。つぎに、情報処理装置１０１は、生成した画面情報に基づいて、スポットビュー画面をディスプレイ３０６に表示して（ステップＳ１５０６）、本フローチャートによる一連の処理を終了する。
【０１４９】
これにより、内視鏡検査等の術中に撮像された撮像画像Ｐ１〜Ｐｎとともに、術中に測定されたバイタルデータや音圧レベルデータ、術中に投与された薬剤の情報、術中に使用された医療機器の情報を一覧表示することができる。また、指定された時刻ｔにおける詳細情報をピックアップして表示することができる。
【０１５０】
以上説明したように、情報処理装置１０１によれば、腸内に挿入され、腸内画像を撮像するカメラ２８３によって取得された撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定されたバイタルデータを時系列順に並列表示することができる。これにより、内視鏡検査等において各撮像画像Ｐ１〜Ｐｎが撮像された際の患者のバイタルサインを特定可能に表示することができる。
【０１５１】
また、情報処理装置１０１によれば、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、撮像画像Ｐ１〜Ｐｎに隣接する位置に並列表示することができる。これにより、内視鏡検査等において医師等が診療行為（例えば、外科的処置、診断、薬剤投与等）のために発話したタイミングを特定可能に表示することができる。このため、ユーザは、医師等が発話したタイミングから検査実施中に行われた診療行為に対応する腸内画像を特定することができる。
【０１５２】
また、情報処理装置１０１によれば、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期Ｔに対応する撮像画像を特定可能に表示することができる。これにより、内視鏡検査等において医師等が診療行為（例えば、外科的処置、診断、薬剤投与等）のために発話したタイミングを特定可能に表示することができる。
【０１５３】
また、情報処理装置１０１によれば、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期Ｔに対応する撮像画像を特定可能に表示することができる。これにより、内視鏡検査等において、予め登録された医学用語等を、医師等が診療行為のために発した時期Ｔに対応する撮像画像を特定可能に表示することができる。
【０１５４】
また、情報処理装置１０１によれば、時刻ｔの指定に応じて、撮像画像Ｐ１〜Ｐｎのうち指定された時刻ｔに対応する撮像画像を表示するとともに、指定された時刻ｔに対応するバイタル値を表示する操作画面を表示することができる。時刻ｔに対応するバイタル値は、例えば、時刻ｔを基準に特定される時間幅内に取得日時が含まれるバイタルデータが示す各種バイタルサインの最大値又は最小値又は平均値のいずれかの値である。
【０１５５】
これにより、ユーザは、指定した時刻ｔ、あるいは、時刻ｔの前後に撮像された撮像画像とともに、当該撮像画像が撮像された際の患者のバイタルサインの詳細を確認することができる。例えば、ユーザは、電気メス２０４によるポリープ切除が行われた際のバイタルサインの詳細を確認して、電気メス２０４の使用や使用時間等が適切であったのかといったことを判断することができる。
【０１５６】
また、情報処理装置１０１によれば、少なくとも時刻ｔに対応する撮像画像の前後の撮像画像の撮像タイミングの間に挟まれる時間帯に取得された発話音声の再生指示を受け付け可能な操作画面を表示することができる。
【０１５７】
これにより、ユーザは、指定した時刻ｔに対応する撮像画像の前後の撮像画像の撮像タイミングの間に挟まれる時間帯に取得された発話音声を再生することができる。このため、ユーザは、例えば、検査実施後のレポート作成を行う際に、外科的処置、診断、薬剤投与等の医療行為が行われたときの音声をピンポイントで再生することができる。
【０１５８】
また、情報処理装置１０１によれば、少なくとも指定された時刻ｔを基準に特定した時間幅内に取得された発話音声の再生指示を受け付け可能な操作画面を表示することができる。これにより、ユーザは、指定した時刻ｔを基準に特定した時間幅内に取得された発話音声を再生することができる。
【０１５９】
また、情報処理装置１０１によれば、スライド可能な時刻指定バーにより、時刻ｔの指定を受け付けることができる。これにより、ユーザは、時系列順に並列表示された撮像画像Ｐ１〜Ｐｎ、バイタルデータ、音圧レベルデータ等を参照しながら、時刻ｔの指定を簡単に行うことができる。
【０１６０】
また、情報処理装置１０１によれば、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に薬剤が投与された薬剤投与期間を示す情報を並列表示することができる。これにより、内視鏡検査等において薬剤が投与された期間を特定可能に表示することができる。このため、ユーザは、例えば、薬剤が投与された期間の患者のバイタルサインを確認して、薬剤の投与や投与量等が適切であったのかといったことを判断することができる。
【０１６１】
また、情報処理装置１０１によれば、撮像画像Ｐ１〜Ｐｎを時系列順に表示する際に、カメラ２８３の腸内への挿入中に医療機器が使用された機器使用期間を示す情報を並列表示することができる。これにより、内視鏡検査等において医療機器が使用された期間を特定可能に表示することができる。このため、ユーザは、例えば、医療機器が使用された期間の患者のバイタルサインを確認して、医療機器の使用や使用時間等が適切であったのかといったことを判断することができる。
【０１６２】
また、情報処理装置１０１によれば、発話の音圧レベルを示すデータを時系列順に表示する際に、発話の内容に特定のキーワードが検出された箇所にインデックス情報を表示することができる。これにより、発話の内容に特定のキーワードが検出されたタイミングを特定可能に表示することができる。このため、ユーザは、例えば、検査実施後のレポート作成を行う際に、外科的処置、診断、薬剤投与等の医療行為のために医師等が発話したタイミングを特定することができる。
【０１６３】
また、情報処理装置１０１によれば、インデックス情報の指定に応じて、カメラ２８３の腸内への挿入中に測定された発話の音声データを、指定されたインデックス情報が示す特定のキーワードが検出された箇所に対応する部分から再生することができる。これにより、内視鏡検査等において術者等により特定のキーワードが発せられたタイミングを指定して音声を再生することができる。このため、ユーザは、例えば、検査実施後のレポート作成を行う際に、外科的処置、診断、薬剤投与等の医療行為が行われたときの音声をピンポイントで再生することができる。
【０１６４】
これらのことから、実施の形態にかかる情報処理装置１０１によれば、術中に撮像された撮像画像、術中に測定されたバイタル値、術中に投与された薬剤、術中に使用された医療機器の情報等を一覧表示することができる。これにより、術者が診療行為を行った結果、患者がどうなったかという診療行為と患者の状態との間の因果関係を判断しやすくさせることができる。この結果、診療内容の評価、改善等が行いやすくなり、同じ症例についての診療方法を標準化するなどして、医療の質の向上を図ることができる。
【０１６５】
なお、本実施の形態で説明した表示制御方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーション等のコンピュータで実行することにより実現することができる。本表示制御プログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ  ｄｉｓｋ）、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）メモリ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また、本表示制御プログラムは、インターネット等のネットワークを介して配布してもよい。
【０１６６】
上述した実施の形態に関し、さらに以下の付記を開示する。
【０１６７】
（付記１）腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する、
処理をコンピュータに実行させることを特徴とする表示制御プログラム。
【０１６８】
（付記２）腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する、
処理をコンピュータに実行させることを特徴とする表示制御プログラム。
【０１６９】
（付記３）時刻の指定に応じて、前記複数の撮像画像のうち指定された前記時刻に対応する撮像画像を表示するとともに、指定された前記時刻に対応するバイタル値を表示し、少なくとも前記撮像画像の前後の撮像画像の撮像タイミングの間に挟まれる時間帯に取得された発話音声又は指定された前記時刻を基準に特定した時間幅内に取得された発話音声の再生指示を受け付け可能な操作画面を表示させる、
ことを特徴とする付記１又は２に記載の表示制御プログラム。
【０１７０】
（付記４）前記時刻の指定は、スライド可能な時刻指定バーにより受け付ける、
ことを特徴とする付記３に記載の表示制御プログラム。
【０１７１】
（付記５）前記バイタル値の表示は、指定された前記時刻に取得されたバイタル値、又は、指定された前記時刻を基準に特定した時間幅内に取得されたバイタル値の最大値又は最小値又は平均値の表示である、
ことを特徴とする付記３又は４に記載の表示制御プログラム。
【０１７２】
（付記６）前記複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に薬剤が投与された期間を示す情報を並列表示させる、
ことを特徴とする付記１又は２に記載の表示制御プログラム。
【０１７３】
（付記７）前記複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に医療機器が使用された期間を示す情報を並列表示させる、
ことを特徴とする付記１又は２に記載の表示制御プログラム。
【０１７４】
（付記８）前記発話の音圧レベルを示すデータを時系列順に表示する際に、前記発話の内容に特定のキーワードが検出された箇所に、前記特定のキーワードが検出されたことを示すインデックス情報を表示させる、
ことを特徴とする付記１に記載の表示制御プログラム。
【０１７５】
（付記９）前記インデックス情報の指定に応じて、前記撮像装置の腸内への挿入中に測定された発話の音声データを、前記特定のキーワードが検出された箇所に対応する部分から再生させる、
ことを特徴とする付記８に記載の表示制御プログラム。
【０１７６】
（付記１０）腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する、
処理をコンピュータが実行することを特徴とする表示制御方法。
【０１７７】
（付記１１）腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する、
処理をコンピュータが実行することを特徴とする表示制御方法。
【０１７８】
（付記１２）腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像と、前記撮像装置の腸内への挿入中に測定されたバイタルデータと、を時系列順に並列表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルを示すデータを時系列順であって、前記複数の撮像画像に隣接する位置に並列表示する制御部、
を有することを特徴とする情報処理装置。
【０１７９】
（付記１３）腸内に挿入され、腸内画像を撮像する撮像装置によって取得された複数の撮像画像を時系列順に表示する際に、前記撮像装置の腸内への挿入中に測定された発話の音圧レベルが所定の基準を超える時期に対応する撮像画像、又は、前記撮像装置の腸内への挿入中に測定された発話の内容に所定のキーワードが検出された時期に対応する撮像画像を特定可能に表示する制御部、
を有することを特徴とする情報処理装置。
【符号の説明】
【０１８０】
１０１  情報処理装置
１０２  撮像装置
１１０  内視鏡
１２０，３０６  ディスプレイ
１２１，１２２，１２３，１２４  Ｐ１〜Ｐｎ  撮像画像
１３０  バイタルデータ
１４０  音圧レベルデータ
２００  医療支援システム
２０１  内視鏡システム
２０２  生体情報モニタ
２０３  シリンジポンプ
２０４  電気メス
２０５  送気装置
２０６  マイクロフォン
２１０  ネットワーク
２２０  患者ＤＢ
２３０  撮像画像ＤＢ
２４０  バイタルサインＤＢ
２５０  投与薬剤ＤＢ
２６０  音声ＤＢ
２７０  機器使用状況ＤＢ
２８０  内視鏡装置
２８１  操作部
２８２  挿入部
２８３  カメラ
２８４  鉗子挿入部
２９０  制御装置
２９１  モニタ
１００１  取得部
１００２  表示制御部
１００３  受付部
１００４  音声制御部
１１００  統合ビュー画面
１２００  スポットビュー画面
【図１】
2018047068.tif 000003
【図２】
2018047068.tif 000004
【図３】
2018047068.tif 000005
【図４】
2018047068.tif 000006
【図５】
2018047068.tif 000007
【図６】
2018047068.tif 000008
【図７】
2018047068.tif 000009
【図８】
2018047068.tif 000010
【図９】
2018047068.tif 000011
【図１０】
2018047068.tif 000012
【図１１】
2018047068.tif 000013
【図１２】
2018047068.tif 000014
【図１３】
2018047068.tif 000015
【図１４】
2018047068.tif 000016
【図１５】
2018047068.tif 000017