(57)【要約】      （修正有）【課題】複数の機器によって取得されたデータのうち関連性のあるデータを用いてイベントデータを作成する技術を提供する。【解決手段】イベント作成装置である撮影装置１００は、撮影装置１００により取得された画像１２１と、撮影装置１００とは異なる装置である情報取得装置２００で取得されたデータの中で取得された画像１２１に連携する連携データとを、紐付けする紐付け部１０３と、紐付け部１０３が紐付けた画像１２１と連携データとを含むイベントデータ１３０を作成するイベント作成部１０５と、紐付け部１０３が紐付けた画像１２１と連携データとを含むイベントデータ１３０を作成するイベント作成部１０５と、を備え、紐付け部１０３は、撮影装置１００により画像が取得された時刻に応じて連携データを決定する条件である連携条件に基づき、該連携データと画像１２１とを紐付けすることを特徴とするイベント作成装置。【選択図】図１
2019187961.tif 000002
【特許請求の範囲】
【請求項１】
撮影装置により取得された画像と、前記撮影装置とは異なる装置で取得されたデータの中で前記画像に連携する連携データとを、紐付けする紐付け部と、
前記紐付け部が紐付けた画像と前記連携データとを含むイベントデータを作成するイベント作成部と、を備え、
前記紐付け部は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、該連携データと前記画像とを紐付けする
ことを特徴とするイベント作成装置。
【請求項２】
前記連携条件は、前記撮影装置とは異なる装置で取得されたデータの中で、前記画像が取得された時刻と同じ時刻に取得されたデータを前記画像と紐づける連携データとする
ことを特徴とする請求項１記載のイベント作成装置。
【請求項３】
前記イベント作成装置は、
前記撮影対象の状態を検知する状態検知部と、
前記撮影装置により前記画像が取得されたときの前記状態に基づき、前記連携条件として、第１連携条件と第２連携条件のいずれかを選択する連携条件選択部と、を含み、
前記第１連携条件は、前記画像が取得された時刻と同じ時刻に取得されたデータを前記画像と紐づける連携データとし、
前記第２連携条件は、前記画像が取得された時刻に対し所定の範囲内の時刻に取得されたデータを前記画像と紐づける連携データとする
ことを特徴とする請求項１記載のイベント作成装置。
【請求項４】
前記撮影装置とは異なる装置で取得されたデータは、音声データまたは第２の画像を含む
ことを特徴とする請求項１乃至請求項３のいずれか１項記載のイベント作成装置。
【請求項５】
前記撮影装置が前記画像を取得したことを契機として、前記紐付け部は、前記画像と前記連携データとの紐付けを行う
ことを特徴とする請求項１乃至請求項４のいずれか１項記載のイベント作成装置。
【請求項６】
撮影装置により取得された画像と、前記撮影装置とは異なる装置で取得されたデータの中で前記画像に連携する連携データとを、紐付けする機能と、
紐付けた画像と連携データとを含むイベントデータを作成する機能とを含み
前記紐付けする機能は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、前記紐づけをする
ことを特徴とするイベント作成方法。
【請求項７】
撮影対象を撮影し、画像を取得する撮影装置と、
前記画像に連携する連携データを取得する情報取得装置と、
前記画像と、前記連携データとを紐付けし、紐付けた画像と連携データとを含むイベントデータを作成するイベント作成装置と、を備え、
前記イベント作成装置は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、前記紐付けする
ことを特徴とするイベント作成システム。
【請求項８】
前記情報取得装置は、前記連携データの取得タイミングが規定された前記スケジュールを記憶し、前記スケジュールに規定された取得タイミングに応じて前記連携データを取得する
ことを特徴とする請求項７記載のイベント作成システム。
【請求項９】
撮影対象を撮影し、画像を取得する内視鏡と、
前記画像に連携する連携データを取得する手術室カメラと、
前記画像と、前記連携データとを紐付けし、紐付けた画像と連携データとを含むイベントデータを作成するイベント作成装置と、を備え、
前記イベント作成装置は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、該連携データと前記画像とを紐付けする
ことを特徴とする内視鏡システム。
【請求項１０】
前記手術室カメラで取得されたデータは、音声データまたは第２の画像を含む
ことを特徴とする請求項９記載の内視鏡システム。
【請求項１１】
前記イベント作成装置は、前記音声データ、または前記第２の画像内に含まれる情報に基づき、前記連携データを取得する
ことを特徴とする請求項１０記載の内視鏡システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像、その他の機器外部から取得したデータを用いてイベント情報を作成するイベント作成装置、イベント作成方法、イベント作成システム、内視鏡システムに関する。
【背景技術】
【０００２】
ＴＶの野球放送では、ある撮影機器でバッターボックスに立った選手が撮影されるが、その他にも、野球場のより広い範囲を俯瞰した画像、実況中継の音声、得点等の様々なデータが異なる機器によって取得される。このように、野球のような各種イベントでは、複数の機器が特定の現場における異なる種類のデータを取得するために用いられている状況がある。
【０００３】
このような状況では、各機器で取得されるデータは、それぞれが現場の情報を個別に表すものであり、それらの中で関連したデータをまとめたイベントデータを作成することで、現場の情報が互いに補完された、より多様且つ詳細な情報提供が可能となる。
【０００４】
イベントデータ作成に関する技術として、特許文献１が挙げられる。特許文献１では、予め特定内容の現場データを記憶し、レコーディングデータから特定事象の発生を検知した際に特定事象の発生を示す上記現場データを核としてレコーディングデータと、を含めたイベント情報を作成することが示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１７−４３５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
一般に、イベントデータの作成に用いられる互いに関連したデータを、人力によって各機器から収集するとなると、作業者の負担がとても大きい。そのため、イベントデータの作成を自動的に実施する技術が所望される。
【０００７】
特許文献１には、例えば1つのレコーディング機器から取得した画像のほかに、より広い範囲を俯瞰した画像や、音声、その他のデータが他の機器から取得される状況において、それらの各種データの中から関連したデータを自動的にまとめてイベントデータを作成する技術については触れられていない。
【０００８】
以上の実情を踏まえて本発明では、複数の機器によって取得されたデータのうち関連性のあるデータを用いてイベントデータを作成する技術を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の一態様におけるイベント作成装置は、撮影装置により取得された画像と、前記撮影装置とは異なる装置で取得されたデータの中で前記画像に連携する連携データとを、紐付けする紐付け部と、前記紐付け部が紐付けた画像と前記連携データとを含むイベントデータを作成するイベント作成部と、を備え、前記紐付け部は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、該連携データと前記画像とを紐付けする。
【００１０】
本発明の一態様におけるイベント作成方法は、撮影装置により取得された画像と、前記撮影装置とは異なる装置で取得されたデータの中で前記画像に連携する連携データとを、紐付けする機能と、紐付けた画像と連携データとを含むイベントデータを作成する機能とを含み前記紐付けする機能は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、前記紐づけをする。
【００１１】
本発明の一態様におけるイベント作成システムは、撮影対象を撮影し、画像を取得する撮影装置と、前記画像に連携する連携データを取得する情報取得装置と、前記画像と、前記連携データとを紐付けし、紐付けた画像と連携データとを含むイベントデータを作成するイベント作成装置と、を備え、前記イベント作成装置は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、前記紐付けする。
【００１２】
本発明の一態様における内視鏡システムは、撮影対象を撮影し、画像を取得する内視鏡と、前記画像に連携する連携データを取得する手術室カメラと、前記画像と、前記連携データとを紐付けし、紐付けた画像と連携データとを含むイベントデータを作成するイベント作成装置と、を備え、前記イベント作成装置は、前記撮影装置により前記画像が取得された時刻に応じて前記連携データを決定する条件である連携条件に基づき、該連携データと前記画像とを紐付けする。
【発明の効果】
【００１３】
本発明によれば、複数の機器によって取得されたデータのうち関連性のあるデータを用いてイベントデータを作成する技術を提供することができる。
【図面の簡単な説明】
【００１４】
【図１】第１の実施形態におけるイベント作成システムの機能構成を示す図である。
【図２】第１の実施形態におけるイベント作成システムが実施するイベント作成手順を示すシーケンスである。
【図３】情報取得装置が関連データを取得する際の手順を示すフローチャートである。
【図４】情報取得装置における関連データ取得時に参照されるスケジュールの一例を示す図である。
【図５】第２の実施形態におけるイベント作成システムの機能構成を示す図である。
【図６Ａ】第２の実施形態におけるイベント作成システムが実施するイベント作成手順を示すシーケンスである。
【図６Ｂ】第２の実施形態におけるイベント作成システムが実施するイベント作成手順を示すシーケンスである。
【図７】タブレットでイベントデータを表示している画面を示す図である。
【図８】第３の実施形態におけるイベント作成システムの構成を示す図である。
【図９】第３の実施形態におけるイベント作成システムの機能構成を示す図である。
【図１０】情報取得装置が取得した関連データの例を示す図である。
【図１１】作業スケジュールの一例を示す図である。
【図１２Ａ】イベント作成システムが実施するイベント作成手順を示すシーケンスである。
【図１２Ｂ】イベント作成システムが実施するイベント作成手順を示すシーケンスである。
【図１３】イベント作成装置が工程情報の更新判定を行う際の手順を示すフローチャートである。
【図１４】イベント作成装置がエビデンスを表示する手順を示すフローチャートである。
【図１５】各実施形態で使用される装置のハードウェア構成を示す図である。
【発明を実施するための形態】
【００１５】
以下、本発明の第１の実施形態におけるイベント作成システム１０について説明する。図１は、イベント作成システム１０の機能構成を示す図である。以下第１の実施形態として、野球場の例を説明する。
【００１６】
イベント作成システム１０は、撮影装置１００、情報取得装置２００を備えている。イベント作成システム１０は、野球場において撮影装置１００及び情報取得装置２００といった複数の機器が異なる種類のデータを取得する状況において、取得した各種類のデータを用いてイベントデータを作成するシステムである。
【００１７】
撮影装置１００は、野球場における撮影対象、例えば打席等の特定の位置にいる選手を撮影して画像を取得する撮影装置である。情報取得装置２００は、撮影装置１００とは異なる装置であって、撮影装置１００が取得した画像に関連した関連データを含むデータを取得する。関連データは、一例では、当該野球場における実況中継の音声、スコアデータである。スコアデータとは、スコア、ストライク数＆アウト数、打席に入ったバッターに関する情報、イニングを示す情報等を含むものとする。本実施形態では、関連データを取得する機器は、情報取得装置２００のみであるが、イベント作成システム１０は、それぞれ異なる関連データを取得する複数の機器を有していてもよい。
【００１８】
撮影装置１００は、通信部１０１、記憶部１０２、紐付け部１０３、連携条件選択部１０４、イベント作成部１０５、表示制御部１０６、状態検知部１０７及び撮影部１０８を含む。
【００１９】
通信部１０１は、情報取得装置２００から関連データの受信を行う。より詳しくは、撮影装置１００と情報取得装置２００で同期を行い、同期を行っている間、通信部１０１は、情報取得装置２００から定期的に関連データを受信する。
【００２０】
記憶部１０２は、各種データが記憶される記憶領域を示す。記憶部１０２には、撮影部１０８が取得した画像１２１が記憶される。また、記憶部１０２には、情報取得装置２００から受信した関連データである、スコアデータ２２１及び音声２２２が記憶される。音声２２２は、野球場における実況中継の音声である。さらに、記憶部１０２には、連携条件１２２が記憶される。連携条件とは、画像１２１が取得された時刻に応じて、紐付け部１０３が画像１２１と紐付ける関連データ（以下で連携データと呼ぶ）を決定する条件である。連携条件には、第１連携条件１２２ａ、第２連携条件１２２ｂが含まれる。
【００２１】
紐付け部１０３は、撮影部１０８が撮影対象（打席に入った野球選手）の画像１２１を取得したことを契機として、画像１２１と、画像１２１に対応する関連データである連携データを紐付けた状態として、記憶部１０２へ記憶する。通信部１０１が情報取得装置２００から受信し、記憶部１０２へ記憶された関連データの中から、画像１２１の連携データは選ばれる。紐付けされた画像１２１と連携データは、後述するイベント作成部１０５によるイベントデータの作成に用いられる。
【００２２】
紐付け部１０３が画像１２１に対して紐付ける連携データは、上述した連携条件に基づき紐付け部１０３が選択する。ここで、連携条件は、第１連携条件１２２ａと第２連携条件１２２ｂの二種類を含んでおり、紐付け部１０３がデータを紐付けるにあたり、連携条件選択部１０４により選択された連携条件が適用される。
【００２３】
第１連携条件１２２ａとは、撮影装置１００によって画像１２１が取得された時刻と同じ時刻に情報取得装置２００によって取得された関連データを紐付け部１０３が紐付ける対象とするものである。また、第２連携条件１２２ｂとは、撮影装置１００によって画像１２１が取得された時刻に対し規定の時間分前あるいは後ろである時刻に情報取得装置２００によって取得された関連データを紐付け部１０３が紐付ける対象とするものである。
【００２４】
連携条件選択部１０４は、撮影部１０８により画像１２１が取得されたときの状態検知部１０７が検知した撮影対象（打席に入った野球選手）の状態に基づき、連携条件のうち、第１連携条件１２２ａと第２連携条件１２２ｂのいずれかを選択する。例えば、状態検知部１０７が撮影対象のある状態の一定以上の変化を検知した場合には、第２連携条件を選択し、当該変化が検知されない場合には、第１連携条件１２２ａを選択する。状態検知部１０７が検知する撮影対象の状態は、撮影対象の動き、撮影対象の特定部位または全ての速度、或いは加速度である。すなわち、状態検知部１０７は、バッターの動きやバッターのバットの速度や加速度等を検知する。
【００２５】
連携条件選択部１０４が第２連携条件１２２ｂを選択する条件について具体的に説明する。状態検知部１０７が撮影対象の速度または加速度を検知する場合、第２連携条件１２２ｂが選択される条件は、一例として、ある値以上のバットの速度、加速度が検知されたときとされる。状態検知部１０７が撮影対象の動きを検知する場合、第２連携条件１２２ｂが選択される条件は、一例として、撮影対象であるバッターがバットを振る等の特定のモーションが検知されたときとされる。
【００２６】
イベント作成部１０５は、紐付け部１０３が紐付けて記憶部１０２に記憶した画像１２１及び連携データを含むイベントデータを作成する。第１の実施形態では、イベントデータには、画像１２１、スコアデータ２２１及び音声２２２が含まれる。
【００２７】
表示制御部１０６は、取得した画像１２１や、作成したイベントデータを、撮影装置１００に備わる液晶画面である不図示の表示媒体に表示する。
【００２８】
撮影部１０８は、撮影対象を撮影し、撮影対象の画像を取得する。
情報取得装置２００は、通信部２０１、記憶部２０２及び情報取得部２０３を含む。
【００２９】
通信部２０１は、撮影装置１００へ情報取得部２０３が取得した関連データを送信する。詳しくは、情報取得装置２００と撮影装置１００との間で同期を行い、同期を行っている間、通信部２０１は、撮影装置１００へ定期的に関連データを送信する。
【００３０】
記憶部２０２は、各種データを記録する記憶領域である。記憶部２０２には、関連データである、スコアデータ２２１及び音声２２２と、スケジュールデータ２２３が記憶される。スケジュールデータ２２３は、スコアデータ２２１取得のタイミングが記載されたデータである。スケジュールデータ２２３については、図４で後述する。
【００３１】
情報取得部２０３は、クラウドサービス２４０を介して外部ネットワークから当該野球場の関連データであるスコアデータ２２１、音声２２２を取得する。取得されたスコアデータ２２１及び音声２２２が、前述のように、通信部２０１から撮影装置１００に送信される。
【００３２】
次に、図２〜図４を用いて、イベント作成システム１０が実施するイベントの作成手順を説明する。図２は、イベント作成システム１０が実施するイベント作成手順を示すシーケンスである。図３は、情報取得装置２００が関連データを取得する際の手順を示すフローチャートである。図４は、情報取得装置２００における関連データ取得時に参照されるスケジュールの一例を示す図である。図２のシーケンスでは、撮影装置１００と情報取得装置２００のそれぞれが実行する処理を上から下へ時系列に沿って記載している。
【００３３】
先ず、図２のステップS１ａとステップＳ１ｂでは、撮影装置１００と情報取得装置２００が同期を行う。ここでいう複数の装置が行う同期とは、その複数の装置間でデータのやり取りを継続して実行可能な状態とすることである。撮影装置１００と情報取得装置２００が同期を行うことで、撮影装置１００が、情報取得装置２００が取得した関連データを一定時間毎に要求し、情報取得装置２００から関連データを受信可能な状態となる。
【００３４】
ステップS２では、撮影装置１００の状態検知部１０７は、撮影対象の状態の検知を開始する。状態検知部１０７は、撮影対象の状態の検知を所定の時間間隔で連続的に繰り返す。
【００３５】
ステップS３では、情報取得装置２００は、関連データを取得する。また、ステップS４では、情報取得装置２００は、取得した関連データを規定の時間毎に撮影装置１００へ送信する。情報取得装置２００が関連データを送信するタイミングは、情報取得装置２００が、クラウドサービス２４０から関連データを新たに取得したタイミングであってもよいし、撮影装置１００から要求のあったときであってもよい。ステップS３における情報取得装置２００が関連データを取得する処理は、図３で詳述する。
【００３６】
図３のステップS５１では、情報取得装置２００は、関連データの取得タイミングであるかどうかを判定する。
【００３７】
図４は、関連データの取得タイミングを記したスケジュールの一例を説明する図である。ここでは、特にスコアデータ２２１の取得タイミングを記している。野球の試合の経過は、一例として、Iイニングの進行、 IIバッターイン、 IIIストライク、アウト、ヒット等、 IVバッターアウト、 Vチェンジの順に進行する。その中で、Iにおいては現在のイニングが変更され、IIにおいては打席選手情報が変更され、IIIにおいてはスコア、アウト数、ヒット数が変更される。つまり、情報取得装置２００は、図４のような情報の変化の推移を予測したスケジュールデータ２２３を予め記憶部２０２に記憶する。スケジュールデータ２２３には、スケジュール中のスコアデータが変更されるタイミング（I、II、III）が記載されている。情報取得装置２００は、関連データを観測し、スケジュール中で上記タイミングとなったときに関連データを取得し、記憶部２０２に記憶する。
【００３８】
尚、関連データ毎に異なるスケジュールが記憶されていて、関連データ毎に取得されるタイミングが異なっていてもよい。スコアデータ２２１の取得タイミングについては図４に記したが、音声２２２についても取得タイミングが任意に設定されていてよく、スコアデータ２２１と同じ取得タイミングとされてもよい。
【００３９】
図２に戻る。ステップS５では、撮影装置１００は、撮影部１０８により、撮影対象の撮影を行ったかどうかを判定する。ステップS５の判定がYesである場合には、ステップS６へ移行する。ステップS５の判定がNoである場合には、ステップS５の判定を繰り返す。
【００４０】
ステップS６では、連携条件選択部１０４が設定する連携条件を、第１連携条件１２２ａと第２連携条件１２２ｂの間から選択する判定を実行する。詳しくは、上述したように連携条件選択部１０４が、状態検知部１０７で最新に検知された状態が撮影対象の特定の状態かどうかに基づき、第１連携条件１２２ａと第２連携条件１２２ｂのいずれを設定するかを判定する。ステップS７において第１連携条件１２２ａが設定されるか、ステップS８において第２連携条件１２２ｂが設定された後、ステップS９へ移行する。
【００４１】
ステップS９では、紐付け部１０３は、ステップS７或いはステップS８で設定された連携条件に基づき、撮影装置１００が取得した画像１２１に対応した関連データ(連携データ）を紐づける。
【００４２】
ステップS１０では、イベント作成部１０５は、ステップS９で紐付けが行われた画像１２１と、連携データとを含むイベントデータを作成する。
【００４３】
ステップS１１では、撮影装置１００は、ユーザから同期を終了する入力を受けたかを判定する。ステップS１１の判定がYesである場合、ステップS１２へ移行する。ステップS１２では、撮影装置１００は情報取得装置２００へ同期終了の旨を連絡する。そして、ステップS１４ｂに移行して、撮影装置１００は情報取得装置２００と同期を終了する。ステップS１１の判定がNoである場合、ステップS５へ戻り処理を繰り返す。
【００４４】
ステップS１３では、情報取得装置２００は、撮影装置１００から同期終了の旨を指示する信号を受信したかどうかを判定する。ステップS１３の判定がYesである場合、ステップS１４ａへ移行して、情報取得装置２００は撮影装置１００と同期を終了する。ステップS１３の判定がNoである場合、ステップS３へ戻り処理を繰り返す。
【００４５】
また、第１の実施形態の変形例として、撮影装置１００が連携条件選択部１０４を有していなくてもよい。この場合には、図２のフローチャートにおいて、ステップS６及びS８がなくなり、ステップS５とステップS９の間は、ステップS７のみとなる。すなわち、連携条件として、同時刻のデータを紐付けるデータとする第１連携条件１２２ａのみを用いたとしても、自動的にイベントデータを作成することは可能である。
【００４６】
また、第１の実施形態では、情報取得装置２００がクラウドサービス２４０を介して関連データを取得する例を示したが、情報取得装置２００はクラウドサービス２４０そのものであってもよい。例えば、クラウドサービス２４０上に情報取得装置２００が有する機能を含むアプリケーションが存在すれば、クラウドサービス２４０そのものが情報取得装置２００となり得る。
【００４７】
一般に、イベントデータを作成するために画像に連携されるべき関連データは、当該画像が取得された時刻と同時刻に取得されたものであることが、多くの場合において望ましい。なぜなら、例えば撮影対象である野球選手の画像情報に加えてさらにほしい情報は、往々にしてそのときの野球選手に関連した周囲の状況や試合の進行具合を示す情報であるためである。
【００４８】
一方で、状況によっては、画像情報に対してさらにほしい情報は、当該画像が取得された時刻と同時刻に取得された情報とは限らない。例えば、野球選手が投球した際に取得された画像に対しては、当該画像が取得された時刻よりも後に取得された関連データが、紐づけ（連携）されることが望ましい場合がある。なぜなら、投球後には得点が入る、または選手が交代するなど試合が動く可能性があり、その画像における選手の投球によって引き起こされた試合結果（スコアデータやその際の実況音声）が情報として重要となることが多いためである。
【００４９】
上述したイベント作成システム１０では、一例として第２連携条件１２０ｂを、撮影装置１００によって画像１２１が取得された時刻に対し規定時間後、例えば１０秒後の時刻に情報取得装置２００によって取得された関連データを用いることとしている。これにより、野球選手が投球を行うなど、特定の動きに対応した状態を状態検知部１０７が検知した場合には、投球後１０秒後の関連データを画像に紐づけ(連携)することができる。また、特定の動きに対応した状態を状態検知部１０７が検知しない場合には、画像が取得された時刻における関連データを画像に紐づけることができる。
【００５０】
従って、撮影部１０８により画像１２１が取得された際に、その状況によってより望ましい関連データが自動的に画像１２１に紐付けされる。即ち、イベント作成システム１０によれば、複数の機器が取得したデータのうち関連性のあるデータを用いて自動的にイベントデータを作成することができる。
【００５１】
また、上述した紐付け部１０３とイベント作成部１０５と、を含む装置をイベント作成装置とも呼ぶ。第１の実施形態では、撮影装置１００にイベント作成装置が含まれる。
【００５２】
尚、第２連携条件１２０ｂは、画像１２１が取得された時刻に対し規定時間前の時刻に情報取得装置２００によって取得された関連データを用いることとしてもよい。
【００５３】
次に、第２の実施形態におけるイベント作成システム２０について説明する。図５は、イベント作成システム２０の機能構成を示す図である。
【００５４】
イベント作成システム２０は、情報取得装置２５０、撮影装置３００、タブレット４００を備える。撮影装置３００は、イベント作成部１０５を有していない点で撮影装置１００と異なっている。そして、撮影装置３００は、通信部１０１が、連携条件を満たすデータとして関連データそのものを情報取得装置２５０から受信する代わりに、その関連データを一意に特定する固有のＩＤ１２３を受信して、記憶部１０２に格納する点において撮影装置１００と異なっている。
【００５５】
また、情報取得装置２５０は、情報取得部２０３がクラウドサービス上から取得した野球場の関連データであるスコアデータ２２１及び音声２２２を、撮影装置３００ではなく、タブレット４００に送信する。情報取得装置２５０は、取得された各関連データを特定する固有のＩＤ１２３を発行するＩＤ発行部２０４を有する。情報取得装置２５０は、発行されたＩＤ１２３を撮影装置３００へ送信する点において、情報取得装置２００と異なっている。
【００５６】
タブレット４００は、イベント作成を実施する情報処理装置である。タブレット４００の代替としてPC（Personal Computer）が用いられてもよい。タブレット４００は、通信部４０１、記憶部４０２、イベント作成部４０３、表示制御部４０４、データ取得部４０５を含む。
【００５７】
通信部４０１は、情報取得装置２００及び撮影装置３００から各種データを受信する。
記憶部４０２は、情報取得装置２００及び撮影装置３００から受信した各種データが記憶される記憶領域である。
【００５８】
イベント作成部４０３は、イベント作成部１０５と同様である。表示制御部４０４は、表示制御部１０６と同様である。
【００５９】
データ取得部４０５は、情報取得装置２００及び撮影装置３００から、ＩＤ１２３、画像１２１、スコアデータ２２１及び音声２２２を取得する。各種データの取得手順については、図６、図７により後述する。
【００６０】
また、第２の実施形態では、紐付け部１０３を含む撮影装置３００と、イベント作成部４０３を含むタブレット４００とを併せて、イベント作成装置とする。
【００６１】
図６Ａ、図６Ｂは、イベント作成システム２０が実施するイベント作成手順を示すシーケンスである。図６ＡのステップS１ａ及びステップS１ｂからステップS３、ステップS５からステップS８、ステップS１１からステップS１４ａ及びステップS１４ｂは、図２で説明したものと等しい。
【００６２】
情報取得装置２００は、ステップS３において取得された関連データを特定するＩＤ１２３を発行し、ステップS４では、撮影装置３００へ関連データを送信する代わりに、関連データを意味するＩＤ１２３を送信する。また、撮影装置３００がステップS９において画像１２１と紐付けるものは関連データではなくＩＤ１２３である。具体的には、撮影装置３００は、関連データを特定するID１２３と、画像１２１を紐づけることによって、間接的にステップS３において取得された関連データと、画像１２１を紐づけする。また、図６Ａでは、図２でのステップS１０のイベントデータを作成する処理は実行されない。
【００６３】
図６ＢのステップS１５では、タブレット４００は、ユーザからイベント作成指示を受けたかどうかを判定する。イベント作成指示とは、特定の時刻の画像１２１と連携する関連データを含むイベントを作成する指示である。例えば、試合終了後にユーザが、特定時刻の画像と、その画像に関連したデータを確認したい場合に、タブレット４００はユーザからの指示を受け、該当するイベントデータの自動生成を実行する。タブレット４００は、ユーザにイベント作成に用いる画像を選択させるために、撮影装置３００が取得した画像の時刻、またはその時刻毎に画像サムネイルを表示してもよい。
【００６４】
ステップS１５の判定がYesである場合、ステップS１６へ移行する。ステップS１５の判定がNoである場合、タブレット４００は、ステップS１５の判定を繰り返す。
【００６５】
ステップS１６では、タブレット４００は、イベント作成指示で示された画像１２１と、その画像１２１に紐付けられたＩＤ１２３を撮影装置３００に要求する。ステップS１７では、撮影装置３００は、該当する画像１２１及びＩＤ１２３をタブレット４００へ送信する。
【００６６】
ステップS１８では、タブレット４００は、ステップS１７によって受信したID１２３に合致した関連データ（スコアデータ２２１、音声２２２）を情報取得装置２００に要求する。ステップS１９では、撮影装置３００は、該当する関連データをタブレット４００へ送信する。
【００６７】
ステップS２０では、タブレット４００のイベント作成部４０３は、ステップS１７によって受信した画像及びステップS１９によって受信した関連データを含むイベントデータ１３０を作成する。
【００６８】
図６Ｂのフローチャートを実行することで作成されたイベントデータは、そのままタブレット４００上で表示することができる。図７は、タブレット４００でイベントデータを表示している画面Vを示す図である。画面Vでは、イベントデータとして、スコアデータ２２１を示す表示V１、音声２２２の再生や停止を制御とするアイコンV２、撮影した画像Ｖ３が併せて表示される。
【００６９】
以上のイベント作成システム２０のように、イベントデータの作成は、タブレットやPC等の別の装置において、画像の表示を行いたい際に実行してもよい。また、紐付け部１０３が行う紐付けは、対象のデータを直接紐付ける方法に限られず、第２の実施形態のように関連データを意味する固有のＩＤ１２３を画像と紐づけることで、間接的に画像１２１と関連データとの紐付けを行ってもよい。
【００７０】
また、第２の実施形態においても、情報取得装置２００がクラウドサービスそのものであってもよい。すなわち、撮影装置３００及びタブレット４００が情報取得装置２００の機能を有するクラウドサービスとの間で関連データの送受信を実行してもよい。
【００７１】
第２の実施形態におけるイベント作成システム２０は、イベント作成システム１０のように撮影装置が情報取得装置から定期的に関連データを受信することがなく、代わりに関連データを特定するIDを受信する。そのため、イベント作成システム１０と比較して、撮影装置と情報取得装置の間のデータの送受信量を大きく減少させることができ、イベント作成システム２０内の装置の負担を低減できる。
【００７２】
次に、第３の実施形態におけるイベント作成システム３０について説明する。図８は、イベント作成システム３０の構成を示す図である。
【００７３】
イベント作成システム３０は、内視鏡７００、手術室カメラ８００及びイベント作成装置９００を備えている。イベント作成システム３０は、手術中における情報を取得する医療支援用のシステムである。イベント作成システム３０は、複数の機器が異なる種類のデータを取得する状況において、取得した各種類のデータを用いてイベントデータを作成するシステムである点では第１、第２の実施形態と同様である。第３の実施形態では、腹腔鏡手術を例としてイベント作成システム３０を説明する。
【００７４】
内視鏡７００は、手術対象の腹腔内を撮影する撮影装置であり、図８のスコーピスト（撮影者）が内視鏡７００の位置変更や撮影等の操作を行う。内視鏡７００が撮影した画像は、第１及び第２の実施形態における撮影装置１００が撮影した画像に相当する。手術室カメラ８００は、手術室に定点配置されたカメラであり、手術室の様子を俯瞰して撮影する。また、手術室カメラ８００は、手術中の音声を検知し、記録する。
【００７５】
手術室カメラ８００が取得するデータは、術中に内視鏡７００が撮影した画像に関連した情報を含むものであり、第１〜第２の実施形態で説明した関連データに相当する。イベント作成装置９００は、内視鏡７００が取得した画像、手術室カメラ８００によって取得された関連データを用いてイベントデータを作成する。また、イベント作成装置９００自身も関連データを取得する。即ち、手術室カメラ８００及びイベント作成装置９００は、第１の実施形態における情報取得装置と同等の機能を有する。詳しくは、図９〜図１１を用いて説明する。
【００７６】
図９は、イベント作成システム３０の機能構成を示す図である。
内視鏡７００は、通信部７０１、記憶部７０２、撮影部７０３を含む。
【００７７】
通信部７０１は、イベント作成装置９００との間でデータを送受信する。詳しくは、通信部７０１は、内視鏡７００の撮影部７０３が取得した第１画像７１１をイベント作成装置９００へ送信する。また、通信部７０１は、イベント作成装置９００が作成した工程情報９１３を受信する。
【００７８】
記憶部７０２には、撮影部７０３が取得した第１画像７１１、連携条件７１２が記憶される。
【００７９】
撮影部７０３は、撮影対象である手術対象の腹腔内を撮影し、第１画像７１１を取得する。撮影部７０３は、スコーピストの指示に基づき、撮影を実行する。
【００８０】
紐付け部７０４は、第１画像７１１に対して紐付ける関連データを連携条件７１２に基づきが抽出して、紐づける。連携条件７１２は、第１の実施形態で説明した第１連携条件１２２ａと同じとする。
【００８１】
第１イベント作成部７０５は、第１画像７１１と、関連データである工程情報９１３とを含む第１イベントデータ７１３を作成する。作成された第１イベントデータ７１３は、記憶部７０２へ手術のエビデンスとして記憶される。
【００８２】
手術室カメラ８００は、通信部８０１、記憶部８０２、画像／音声取得部８０３を含む。
【００８３】
通信部８０１は、イベント作成装置９００との間でデータを送受信する。詳しくは、画像／音声取得部８０３が取得した関連データである第２画像８１１及び音声８１２をイベント作成装置９００へ送信する。
【００８４】
記憶部８０２には、画像／音声取得部８０３が取得した関連データが記憶される。画像／音声取得部８０３は、手術室の第２画像８１１及び音声８１２を取得する。
【００８５】
図１０は、手術室の第２画像８１１及び音声８１２の例を示す図である。Ｐは、第２画像８１１で、手術室を俯瞰して撮影した画像である。また、Ｓは、音声８１２の音声波形データである。
【００８６】
イベント作成装置９００は、通信部９０１、記憶部９０２、紐付け部９０３、連携条件選択部９０４、第２イベント作成部９０５、再生制御部９０６、状態検知部９０７、工程情報作成部９０８、エビデンス出力部９０９を含む。
【００８７】
通信部９０１は、内視鏡７００及び手術室カメラ８００との間でデータを送受信する。詳しくは、通信部９０１は、内視鏡７００から第１画像７１１を受信し、手術室カメラ８００から第２画像８１１及び音声８１２を受信する。また、通信部９０１は、内視鏡７００へ工程情報９１３を送信する。
【００８８】
記憶部９０２は、各種データが記憶される記憶領域である。記憶部９０２には、作業スケジュール９１１、連携条件９１２、症例データベース９１４、患者情報データベース９１５、画像データベース９１６が予め記憶されている。また、記憶部９０２には、工程情報作成部９０８が作成した工程情報９１３、内視鏡７００から受信した第１画像７１１、手術室カメラ８００から受信した第２画像８１１及び音声８１２が記憶される。
【００８９】
作業スケジュール９１１とは、事前に規定された手術予定を示すものである。作業スケジュール９１１は、一例として図１１のようなものである。作業スケジュール９１１は、作業名C１、工程C２、実行時間C３、対象物C４、音声キーワードC５の項目を有する。
【００９０】
作業名C１は手術中に実行される作業名である。工程C２は当該作業中に実行される各工程名である。実行時間C３は、各工程C２に要する時間である。対象物C４は、各工程C２において内視鏡７００が取得した第１画像７１１に写ることが予測される画像である。音声キーワードC５は、各工程C２において手術室カメラ８００が取得した音声８１２中に含まれることが予測される音声の内容である。
【００９１】
症例データベース９１４は、患者毎の症例を記録したデータベースである。患者情報データベース９１５は、患者の個人情報を記録したデータベースである。画像データベース９１６は、対象物C４に相当する画像が含まれるデータベースである。
【００９２】
紐付け部９０３は、内視鏡７００の撮影部７０３が撮影対象（腹腔内）の第１画像７１１を取得したことを契機として、第１画像７１１と対応する関連データ（連携データ）と、を紐付けして、記憶部９０２へ記憶する。対応する関連データは、通信部９０１が手術室カメラ８００から受信したもの（第２画像８１１及び音声８１２）と、工程情報作成部９０８が作成したものの中から選ばれる。紐付けた状態とされた第１画像７１１及び関連データは、イベント作成部９０５によるイベントデータの作成に用いられる。
【００９３】
紐付け部９０３は、連携条件選択部９０４が選択した連携条件９１２に基づき、第１画像７１１に対して紐付ける関連データを選択する。連携条件９１２は、第１の実施形態で説明した連携条件と同様であり、第１連携条件１２２ａと第２連携条件１２２ｂの二種類を含んでいる。
【００９４】
連携条件選択部９０４は、状態検知部９０７が撮影対象の特定の状態を検知したかどうかに基づき、第１連携条件１２２ａと第２連携条件１２２ｂのいずれかを連携条件として選択する。連携条件選択部９０４の処理は、連携条件選択部１０４と同等である。
【００９５】
第２イベント作成部９０５は、内視鏡７００が取得した第１画像７１１と、関連データである第２画像８１１、音声８１２及び工程情報９１３を含む第２イベントデータ９１７を作成する。作成された第２イベントデータ９１７は、記憶部９０２へ手術のエビデンスとして記憶される。
【００９６】
再生制御部９０６は、作成された第１画像７１１、第１イベントデータ７１３等を不図示の表示部へ表示させる。また、再生制御部９０６は、作成された第２イベントデータ９１７の表示あるいは音声再生を制御する。
【００９７】
状態検知部９０７は、撮影対象の特定の状態を検知する。ここでいう特定の状態とは、第１の実施形態の状態検知部１０７に関して説明した状態のほかに、撮影対象の一部が分離した状態等も含まれる。撮影対象の一部が分離とは、手術中において撮影領域中の特定部位の切除が行われた状況である。
【００９８】
工程情報作成部９０８は、上述した図１１、即ち作業スケジュール９１１中において、現在行われている手術工程を判定した情報である工程情報９１３を作成する。工程情報９１３は、作業スケジュール９１１のうち、現在実行中である作業名C１、工程C２を特定する情報である。例えば、図１１の作業スケジュール９１１を表示した画面上にマーカーMが付されて、該当する作業名、工程が判別可能とされる。
【００９９】
工程情報作成部９０８は、作業スケジュール９１１に記録された情報と、第１画像７１１及び音声８１２を用いて工程情報９１３を作成する。図１１に示すように、工程C２の各工程では、その工程内で第１画像７１１に写ることが予測される対象物C４、音声８１２中に含まれることが予測されるキーワードC５が設定されている。
【０１００】
状態検知部９０７が第１画像７１１中に対象物C４が写ったことを検知した場合に、工程情報作成部９０８は、工程C２を現在の工程に進行させて、工程情報９１３を更新する。また、工程情報作成部９０８は、作業スケジュールの画面上で、対応する現在の工程の位置にマーカーMを変更する。または、状態検知部９０７が音声８１２中にキーワードC５が含まれたことを検知した場合に、工程情報作成部９０８は、工程C２を現在の工程に進行させて、工程情報９１３を更新する。また、工程情報作成部９０８は、作業スケジュールの画面上で、対応する現在の工程の位置にマーカーMを変更する。
【０１０１】
具体的には、状態検知部９０７は、画像データベースに予め記憶された対象物C４のサンプル画像と第１画像７１１を照合して、第１画像７１１中に対象物C４が写ったことを判定する。また、状態検知部９０７は、音声８１２中にキーワードC５が含まれたことを判定する際も、予め記憶された音声サンプルと照合する。
【０１０２】
例えば、現在の工程C２が「トロカーポート挿入」であるが、状態検知部９０７が第１画像７１１中に気腹装置が含まれたことを検知した場合、工程情報作成部９０８は、工程C２が「気腹」に移ったものと判定する。そして、工程情報作成部９０８は、現状の工程C２が「気腹」であることを示す情報としてマーカーMが「気腹」上に位置するように配置し、工程情報９１３を作成する。
【０１０３】
または、現在の工程C２が「トロカーポート挿入」であるが、状態検知部９０７が音声８１２中に「流量」が含まれたことを検知した場合、工程情報作成部９０８は、工程C２が「気腹」に移ったものと判定する。そして、工程情報作成部９０８は、現状の工程C２が「気腹」であることを示す情報としてマーカーMが「気腹」上に位置するように配置し、工程情報９１３を作成する。
【０１０４】
このような工程情報９１３は、外部の情報を示す第１画像７１１及び音声８１２を用いて作成されるものであり、関連データに相当する。
【０１０５】
エビデンス出力部９０９は、手術のエビデンスとして記憶された作成済みの第２イベントデータを、再生制御部９０６を介して表示部への表示やスピーカからの再生を行う。
【０１０６】
ここで、第３の実施形態における第２連携条件の一例について説明する。第１の実施形態では、規定の時間後（数秒後）の関連データと画像とを紐づけることを第２連携条件とした。なぜなら、選手の投球後に試合が変化するので、変化に対応する数秒後の関連データが表示する外部情報として、望ましいからである。
【０１０７】
一方、手術に際しては、手術対象の一部の切除を行うなど特定のアクションを起こした際には、手術工程が次の工程に進むことが多い。そこで、そのような特定のアクションを起こした際に取得された画像には、次工程ではなく現手術工程を示す工程情報９１３が紐付けられることが望ましい。従って、第３の実施形態においては、第２連携条件は、規定の時間前（数秒前）の関連データと画像とを紐づけることとする。
【０１０８】
また、第３の実施形態において、イベントデータを自動的に作成可能とする、紐付け部とイベント作成部と、を構成として含むイベント作成装置には、内視鏡７００、イベント作成装置９００が該当する。
【０１０９】
以下、図１２Ａ、図１２Ｂ、図１３を用いて、イベント作成システム３０が実施するイベントの作成手順を説明する。図１２Ａ及び図１２Ｂは、イベント作成システム３０が実施するイベント作成手順を示すシーケンスである。図１３は、イベント作成装置９００が工程情報９１３の更新判定を行う際の手順を示すフローチャートである。図１２Ａ及び図１２Ｂのシーケンスでは、内視鏡７００、手術室カメラ８００及びイベント作成装置９００のそれぞれが実行する処理を上から下へ時系列に沿って記載している。
【０１１０】
図１２ＡのステップS２１ａ、ステップS２１ｂ、ステップS２１ｃ、では、内視鏡７００、手術室カメラ８００、イベント作成装置９００の間で同期を行う。
【０１１１】
ステップS２２では、イベント作成装置９００は、工程情報の更新の判定及び更新処理を実行する。ステップS２２の内容は図１３のフローチャートを用いて説明する。
【０１１２】
図１３のステップS６１では、状態検知部９０７は、作業スケジュール９１１中の対象物C４を画像中から検知したか、またはキーワードC５を音声中から検知したかを判定する。ステップS６１の判定がYesである場合、ステップS６２へ移行する。ステップS６１の判定がNoである場合、ステップS６１を繰り返す。
【０１１３】
ステップS６２では、イベント作成装置９００の工程情報作成部９０８は、工程情報９１３を更新する。また、イベント作成装置９００の通信部９０１は、ステップS２２により工程情報９１３が更新された際に、随時更新された工程情報９１３を内視鏡７００へ送信する。
【０１１４】
図１２Ａへ戻る。ステップS２３では、内視鏡７００は、撮影部７０３により、撮影対象の撮影を行ったかどうかを判定する。ステップS２３の判定がYesである場合には、ステップS２５へ移行する。ステップS２３の判定がNoである場合には、ステップS２３の判定を繰り返す。
【０１１５】
ステップS２５では、通信部７０１によってイベント作成装置９００へ第１画像７１１を送信する。
【０１１６】
ステップS２４では、手術室カメラ８００は、関連データとして、第２画像８１１及び音声８１２を取得する。手術室カメラ８００は、関連データを予め規定された時間間隔毎に取得するものとする。なお、音声８１２は、手術中連続して取得されてもよい。
【０１１７】
ステップS２４で取得された関連データは、通信部９０１によって適宜イベント作成装置９００へ送信される（ステップS２６）。
【０１１８】
ステップS２７では、イベント作成装置９００は、ステップS２２で取得した工程情報９１３を内視鏡７００へ送信する。
【０１１９】
ステップS２８では、紐付け部７０４は、ステップS２３で取得された第１画像７１１と同時刻における工程情報９１３を紐付ける。ここでは、そのままイベント作成部７０５が紐付けられた第１画像７１１と工程情報９１３を含む第１イベントデータ７１３を作成する。
【０１２０】
ステップS２９では、内視鏡７００は作成した第１イベントデータ７１３をイベント作成装置９００に出力する。すなわち、通信部７０１が第１イベントデータ７１３をイベント作成装置９００に送信し、イベント作成装置９００の再生制御部９０６が第１イベントデータを表示する。ステップS２９によれば、工程情報９１３及び撮影された第１画像７１１を、手術中において医師が確認することができる。
【０１２１】
ステップS３０では、イベント作成装置９００が内視鏡７００から第１画像７１１を受信したかどうかを判定する。ステップS３０の判定がＹｅｓである場合、ステップS３１へ移行する。ステップS３０の判定がＮｏである場合、ステップS２２へ戻り処理を繰り返す。
【０１２２】
ステップS３１からステップS３５は、図２のステップS６からステップS１０の手順と同等であるので、説明は省略する。
【０１２３】
ステップS３６では、ステップS３５においてイベント作成部９０５によって作成された第２イベントデータ９１７をエビデンスとして記憶部９０２に記録する。
【０１２４】
図１２Ｂへ移る。図１２ＢのステップS３７では、ユーザからイベント作成装置９００に対しガイド要求があったかどうかを判定する。ガイド要求とは、第２イベントデータ９１７の他に記憶部９０２に記録された症例データベース９１４、患者情報データベース９１５の中から、現在手術中の患者に関係した情報であるガイド情報を要求することである。ステップS３７の判定がＹｅｓである場合、ステップS３８へ移行する。ステップS３７の判定がＮｏである場合、ステップS４０へ移行する。
【０１２５】
ステップS３８では、再生制御部９０６は、記憶部９０２に記録された症例データベース９１４、患者情報データベース９１５の中からガイド情報を抽出して表示する制御を行う。
【０１２６】
ステップS３９では、内視鏡７００は、手術室カメラ８００、イベント作成装置９００との同期を終了する指示を受信したかどうかを判定する。ステップS３９の判定がＹｅｓである場合、ステップS４０では、内視鏡７００は、同期を終了する旨を手術室カメラ８００に送信する。ステップS４１では、内視鏡７００は、イベント作成装置９００へ送信し、ステップS４４ｂへ移行する。ステップS３９の判定がＮｏである場合には、ステップS２３へ戻り処理を繰り返す。
【０１２７】
ステップS４２では、イベント作成装置９００は、内視鏡７００から同期を終了する旨の指示を受信したかどうかを判定する。ステップS４２の判定がＹｅｓである場合、ステップS４４ａへ移行する。ステップS４２の判定がＮｏである場合には、ステップS２２へ戻り処理を繰り返す。
【０１２８】
ステップS４３では、手術室カメラ８００は、内視鏡７００から同期を終了する旨の指示を受信したかどうかを判定する。ステップS４３の判定がＹｅｓである場合、ステップS４４ｃへ移行する。ステップS４３の判定がＮｏである場合には、ステップS２４へ戻り処理を繰り返す。
【０１２９】
ステップS４４ａ〜ステップS４４ｃでは、内視鏡７００、手術室カメラ８００、イベント作成装置９００の間で同期の終了を行う。
【０１３０】
次に、図１４を用いてエビデンスの表示制御を説明する。図１４は、イベント作成装置９００がエビデンスを表示する手順を示すフローチャートである。
【０１３１】
図１４のステップS７１では、イベント作成装置９００がエビデンス（第２イベントデータ９１７）表示の要求があったかどうかを判定する。ステップS７１の判定がＮｏである場合、処理を終了する。
【０１３２】
ステップS７２では、イベント作成装置９００は工程情報９１３の選択を受け付ける。具体的には、イベント作成装置９００は、各種紐づけられて記憶された工程情報９１３、即ち手術工程の入力を受け付ける。
【０１３３】
ステップS７３では、イベント作成装置９００は、ユーザからイベント作成装置９００に対して画像要求があったかどうかを判定する。イベント作成装置９００が画像要求があったと判定すると、エビデンス出力部９０９は、ステップS７２で選択された工程情報９１３に対応する画像（第１画像７１１、第２画像８１１を含む）を工程情報９１３と併せて再生制御部９０６を介して表示出力する（ステップS７４）。ステップS７３の判定がＮｏである場合は、ステップS７５へ移行する。
【０１３４】
ステップS７５では、ユーザからイベント作成装置９００に対して音声要求があったかどうかを判定する。音声要求があった場合には、エビデンス出力部９０９は、ステップS７２で選択された工程情報９１３に対応する音声８１２を工程情報９１３と併せて再生制御部９０６を介して再生する（ステップS７６）。ステップS７５の判定がＮｏであった場合と、ステップS７６の後、図１４の処理を終了する。
【０１３５】
なお、手術室カメラ８００は、内視鏡７００以外に手術を撮影する撮影装置の一例である。内視鏡７００以外の撮影装置として、内視鏡７００とは異なる体内部位や体表面を撮影する他のカメラであってもよい。また、マイクによる音声記録も、テキスト入力装置に代わってもよい。
【０１３６】
以上の第３の実施形態におけるイベント作成システム３０のように、本発明のイベント作成システムは、医療現場において使用されるものであってもよい。イベント作成システム３０によれば、手術時において各時刻毎に関連した情報をまとめて記録、表示することができる。これにより、手術を行う医師へ情報提供が円滑にでき、また行われた手術の過程をエビデンスとして記録することもできる。エビデンスとして記録された各種データが紐付けられたイベントデータは、後に任意の時刻の工程情報に対応して、表示することができる。
【０１３７】
また、本発明のイベント作成システムは、イベント作成システム３０のように、複数の装置において別々にイベントデータを作成する機能を有する構成であってもよい。イベント作成システム３０の例では、手術時に表示される第１イベントデータと、エビデンスとして記録され、後に表示可能な第２イベントデータと、の二種類のイベントデータが作成される。このようにすることで、用途に応じて複数のイベントデータを用意することが可能となる。
【０１３８】
上述した実施形態において使用される装置のハードウェア構成について説明する。図１５は、本発明の各実施形態で使用される装置（情報取得装置２００、イベント作成装置９００）のハードウェア構成を示す図である。ハードウェア構成は、ＣＰＵ１５１、ＤＲＡＭ１５２、ＲＯＭ１５３、記憶部１５４、入出力ＩＦ１５５を備えている。
【０１３９】
ＣＰＵ１５１は、ＲＯＭ１５３に格納される各種制御プログラムを読みこんで実行する。
【０１４０】
ＤＲＡＭ１５２は、制御プログラムや各種データを一時的に格納するワーキングエリアを提供する。ＲＯＭ１５３は、各種制御プログラムを不揮発的に記憶する記憶媒体である。
【０１４１】
記憶部１５４は、各種プログラム、画像、関連データ、連携条件等を格納し、フラッシュメモリやハードディスク等により構成される。入出力ＩＦ１５５は、ハードウェア外部とデータの送受信を行うものである。尚、各構成は、バス１５６により接続される。
【０１４２】
情報取得装置２００の情報取得部２０３は、制御プログラムを読込んだＣＰＵ１５１によって実現される。また、イベント作成装置９００の紐付け部９０３、連携条件選択部９０４、第２イベント作成部９０５、状態検知部９０７、工程情報作成部９０８、エビデンス出力部９０９等も、制御プログラムを読込んだＣＰＵ１５１によって実現される。
【０１４３】
上述した実施形態は、発明の理解を容易にするために具体例を示したものであり、本発明はこれらの実施形態に限定されるものではない。上述したイベント作成装置、イベント作成システム、内視鏡システム、それらを用いたイベント作成を実行する方法は、特許請求の範囲に記載した本発明を逸脱しない範囲において、さまざまな変形、変更が可能である。
【符号の説明】
【０１４４】
１０、２０、３０                イベント作成システム
１００、３００                  撮影装置
１０１、２０１、４０１、７０１、８０１、９０１    通信部
１０２、２０２、４０２、７０２、８０２、９０２    記憶部
１０３、７０４、９０３、        紐付け部
１０４、９０４                  連携条件選択部
１０５、４０３、７０５、９０５  イベント作成部
１０６、４０４                  表示制御部
１０７、９０７                  状態検知部
１０８、７０３                  撮影部
１５１                          CPU
１５２                          DRAM
１５３                          ROM
１５４                          記憶部
１５５                          入出力IF
１５６                          バス
２００、２５０                  情報取得装置
２０３                          情報取得部
２４０                          クラウドサービス
４００                          タブレット
７００                          内視鏡
８００                          手術室カメラ
８０３                          画像／音声取得部
９００                          イベント作成装置
９０６                          再生制御部
９０８                          工程情報作成部
９０９                          エビデンス出力部
【図１】
2019187961.tif 000003
【図２】
2019187961.tif 000004
【図３】
2019187961.tif 000005
【図４】
2019187961.tif 000006
【図５】
2019187961.tif 000007
【図６Ａ】
2019187961.tif 000008
【図６Ｂ】
2019187961.tif 000009
【図７】
2019187961.tif 000010
【図８】
2019187961.tif 000011
【図９】
2019187961.tif 000012
【図１０】
2019187961.tif 000013
【図１１】
2019187961.tif 000014
【図１２Ａ】
2019187961.tif 000015
【図１２Ｂ】
2019187961.tif 000016
【図１３】
2019187961.tif 000017
【図１４】
2019187961.tif 000018
【図１５】
2019187961.tif 000019