(57)【要約】  情報記録システムは、対象物情報取得部、画像取得部、記録部、読み出し部、および表示部を有する。前記対象物情報取得部は、対象物に関する対象物情報を取得する。前記画像取得部は、前記対象物情報がどのような状況で取得されているのかを示す画像情報を取得する。前記記録部は、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する。前記読み出し部は、前記対象物情報および前記画像情報を前記記録媒体から読み出す。前記表示部は、前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示する。
2018138833.tif 000002
【特許請求の範囲】
【請求項１】
対象物に関する対象物情報を取得する対象物情報取得部と、
前記対象物情報がどのような状況で取得されているのかを示す画像情報を取得する画像取得部と、
前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する記録部と、
前記対象物情報および前記画像情報を前記記録媒体から読み出す読み出し部と、
前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示する表示部と、
を有する情報記録システム。
【請求項２】
前記画像取得部は、前記対象物と前記対象物の周辺との少なくとも１つを含む画像情報を取得する
請求項１に記載の情報記録システム。
【請求項３】
前記対象物の前記周辺は、前記対象物情報取得部が搭載された機器を含む
請求項２に記載の情報記録システム。
【請求項４】
前記対象物の前記周辺は、前記対象物を観察する観察者を含む
請求項２に記載の情報記録システム。
【請求項５】
前記画像取得部は、前記対象物を観察する観察者の視点の位置または前記視点の近傍位置に配置される
請求項１に記載の情報記録システム。
【請求項６】
前記対象物情報がどのような状況で取得されているのかを示し、かつ前記対象物の画像情報を除く情報である状況情報を取得する状況情報取得部をさらに有する
請求項１に記載の情報記録システム。
【請求項７】
前記状況情報は、時刻、場所、および前記対象物の周辺環境の少なくとも１つに関する情報である
請求項６に記載の情報記録システム。
【請求項８】
前記状況情報は、前記対象物情報取得部を含む機器に関する機器情報である
請求項６に記載の情報記録システム。
【請求項９】
前記機器情報は、前記機器の設定値である
請求項８に記載の情報記録システム。
【請求項１０】
前記記録部は、前記対象物情報、前記画像情報、および時刻情報を互いに関連付けて記録媒体に記録し、
前記読み出し部は、前記時刻情報に基づいて、互いに関連付けられた前記対象物情報および前記画像情報を前記記録媒体から読み出す
請求項１に記載の情報記録システム。
【請求項１１】
前記対象物を観察する観察者が発した音声に基づく音声情報を取得する音声取得部と、
前記音声取得部によって取得された前記音声情報をテキスト情報に変換する音声処理部と、
をさらに有し、
前記記録部は、前記対象物情報、前記画像情報、および前記テキスト情報を互いに関連付けて前記記録媒体に記録し、
前記読み出し部は、前記対象物情報、前記画像情報、および前記テキスト情報を前記記録媒体から読み出し、
前記表示部は、前記読み出し部によって読み出された前記対象物情報、前記画像情報、および前記テキスト情報を互いに関連付けて表示する
請求項１に記載の情報記録システム。
【請求項１２】
前記対象物を観察する観察者が発した音声に基づく音声情報を取得する音声取得部と、
音声出力部と、
をさらに有し、
前記記録部は、前記対象物情報、前記画像情報、および前記音声情報を互いに関連付けて前記記録媒体に記録し、
前記読み出し部は、前記対象物情報、前記画像情報、および前記音声情報を前記記録媒体から読み出し、
前記表示部は、前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示し、
前記音声出力部は、前記読み出し部によって読み出された前記音声情報に基づく音声を出力する
請求項１に記載の情報記録システム。
【請求項１３】
前記対象物を観察する観察者が発した音声に基づく音声情報を取得する音声取得部と、
音声処理部と、
をさらに有し、
前記記録部は、前記対象物情報、前記画像情報、および前記音声情報を互いに関連付けて前記記録媒体に記録し、
前記読み出し部は、前記音声情報を前記記録媒体から読み出し、
前記音声処理部は、前記読み出し部によって読み出された前記音声情報をテキスト情報に変換し、
前記記録部は、前記記録媒体に記録された前記対象物情報および前記画像情報に前記テキスト情報を関連付け、かつ前記テキスト情報を前記記録媒体に記録し、
前記読み出し部は、前記対象物情報、前記画像情報、および前記テキスト情報を前記記録媒体から読み出し、
前記表示部は、前記読み出し部によって読み出された前記対象物情報、前記画像情報、および前記テキスト情報を互いに関連付けて表示する
請求項１に記載の情報記録システム。
【請求項１４】
対象物に関する対象物情報と、前記対象物情報がどのような状況で取得されているのかを示す画像情報とが入力される入力部と、
前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する記録部と、
を有する情報記録装置。
【請求項１５】
対象物情報取得部が、対象物に関する対象物情報を取得する対象物情報取得ステップと、
画像取得部が、前記対象物情報がどのような状況で取得されているのかを示す画像情報を取得する画像取得ステップと、
記録部が、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する記録ステップと、
読み出し部が、前記対象物情報および前記画像情報を前記記録媒体から読み出す読み出しステップと、
表示部が、前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示する表示ステップと、
を有する情報記録方法。
【請求項１６】
対象物に関する対象物情報と、前記対象物情報がどのような状況で取得されているのかを示す画像情報とが入力部に入力される入力ステップと、
記録部が、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する記録ステップと、
を有する情報記録方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報記録システム、情報記録装置、および情報記録方法に関する。
【背景技術】
【０００２】
データ利用の促進および不正防止のために、観察により得られた情報の記録だけでなく、観察現場の状況の記録が重要視されている。例えば、観察現場の状況の記録に関する例として、研究者のラボノート、医師の所見、および建設現場の配筋レポートなどの例がある。また、少子高齢化および技能者不足はあらゆる現場で課題となっている。技能継承および教育のためにも現場状況の記録の重要性はますます高くなってきている。【０００３】
従来の観察機器は対象物の観察により得られた対象物の情報のみを記録する。現状では、ユーザが観察現場の状況を手書きで記録している。一方、現場ではユーザはさまざまな環境および状況で作業をしているため、現場での記録が困難であるケースがある。安全上もしくは衛生上の理由などによりユーザが手を使えないケースもある。これらのようなケースでは、ユーザが観察後にあいまいな記憶を頼りに現場状況を記録することにより、記録漏れまたは誤記録を招く可能性があった。【０００４】
一方、対象物の情報と他の情報とを関連付けて記録する技術が開示されている。例えば、特許文献１に開示された技術では、対象物の外観が撮像され、かつ撮像の際に操作者が発した音声が取得される。取得された対象物の画像と操作者の音声とが関連付けて記録される。特許文献２に開示された技術では、カメラから、画像とそれに対応付けられた音声とがサーバに送信される。サーバは、受信された音声をテキストに変換し、かつその結果に基づいて、画像に付加される情報を生成する。サーバは、受信された画像と、音声に基づいて生成された情報とを関連付けて保管する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】日本国特開２００８−１９９０７９号公報
【特許文献２】日本国特開２００８−０８５５８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
従来技術において、撮影された画像の識別、検索、および整理を効率化するために、対象物が撮影され、かつ対象物および撮影条件に関する情報が音声で入力される。また、音声に基づいて生成された情報が、撮影された画像に付加され、かつ記録される。【０００７】
しかしながら、撮影の状況を画像で記録するための手段は提供されていない。このため、対象物の画像がどのような状況で得られたかを示す記録を残すことはできない。例えば、従来技術では、観察により画像を取得し、それに音声のコメントをつけることはできる。しかし、従来技術では、その画像がどのようにして得られたかを画像で記録することはできないため、正確な手順の再現および検証を実施できない場合がある。【０００８】
本発明は、対象物情報がどのような状況で取得されているのかを示す視覚的な情報を記録することができる情報記録システム、情報記録装置、および情報記録方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の第１の態様によれば、情報記録システムは、対象物情報取得部、画像取得部、記録部、読み出し部、および表示部を有する。前記対象物情報取得部は、対象物に関する対象物情報を取得する。前記画像取得部は、前記対象物情報がどのような状況で取得されているのかを示す画像情報を取得する。前記記録部は、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する。前記読み出し部は、前記対象物情報および前記画像情報を前記記録媒体から読み出す。前記表示部は、前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示する。【００１０】
本発明の第２の態様によれば、第１の態様において、前記画像取得部は、前記対象物と前記対象物の周辺との少なくとも１つを含む画像情報を取得してもよい。【００１１】
本発明の第３の態様によれば、第２の態様において、前記対象物の前記周辺は、前記対象物情報取得部が搭載された機器を含んでもよい。【００１２】
本発明の第４の態様によれば、第２の態様において、前記対象物の前記周辺は、前記対象物を観察する観察者を含んでもよい。【００１３】
本発明の第５の態様によれば、第１の態様において、前記画像取得部は、前記対象物を観察する観察者の視点の位置または前記視点の近傍位置に配置されてもよい。【００１４】
本発明の第６の態様によれば、第１の態様において、前記情報記録システムは、前記対象物情報がどのような状況で取得されているのかを示し、かつ前記対象物の画像情報を除く情報である状況情報を取得する状況情報取得部をさらに有してもよい。【００１５】
本発明の第７の態様によれば、第６の態様において、前記状況情報は、時刻、場所、および前記対象物の周辺環境の少なくとも１つに関する情報であってもよい。【００１６】
本発明の第８の態様によれば、第６の態様において、前記状況情報は、前記対象物情報取得部を含む機器に関する機器情報であってもよい。【００１７】
本発明の第９の態様によれば、第８の態様において、前記機器情報は、前記機器の設定値であってもよい。【００１８】
本発明の第１０の態様によれば、第１の態様において、前記記録部は、前記対象物情報、前記画像情報、および時刻情報を互いに関連付けて記録媒体に記録してもよい。前記読み出し部は、前記時刻情報に基づいて、互いに関連付けられた前記対象物情報および前記画像情報を前記記録媒体から読み出してもよい。【００１９】
本発明の第１１の態様によれば、第１の態様において、前記情報記録システムは、音声取得部および音声処理部をさらに有してもよい。前記音声取得部は、前記対象物を観察する観察者が発した音声に基づく音声情報を取得する。前記音声処理部は、前記音声取得部によって取得された前記音声情報をテキスト情報に変換する。前記記録部は、前記対象物情報、前記画像情報、および前記テキスト情報を互いに関連付けて前記記録媒体に記録してもよい。前記読み出し部は、前記対象物情報、前記画像情報、および前記テキスト情報を前記記録媒体から読み出してもよい。前記表示部は、前記読み出し部によって読み出された前記対象物情報、前記画像情報、および前記テキスト情報を互いに関連付けて表示してもよい。【００２０】
本発明の第１２の態様によれば、第１の態様において、前記情報記録システムは、音声取得部および音声出力部をさらに有してもよい。前記音声取得部は、前記対象物を観察する観察者が発した音声に基づく音声情報を取得する。前記記録部は、前記対象物情報、前記画像情報、および前記音声情報を互いに関連付けて前記記録媒体に記録してもよい。前記読み出し部は、前記対象物情報、前記画像情報、および前記音声情報を前記記録媒体から読み出してもよい。前記表示部は、前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示してもよい。前記音声出力部は、前記読み出し部によって読み出された前記音声情報に基づく音声を出力してもよい。【００２１】
本発明の第１３の態様によれば、第１の態様において、前記情報記録システムは、音声取得部および音声処理部をさらに有してもよい。前記音声取得部は、前記対象物を観察する観察者が発した音声に基づく音声情報を取得する。前記記録部は、前記対象物情報、前記画像情報および前記音声情報を互いに関連付けて前記記録媒体に記録してもよい。前記読み出し部は、前記音声情報を前記記録媒体から読み出してもよい。前記音声処理部は、前記読み出し部によって読み出された前記音声情報をテキスト情報に変換してもよい。前記記録部は、前記記録媒体に記録された前記対象物情報および前記画像情報に前記テキスト情報を関連付け、かつ前記テキスト情報を前記記録媒体に記録してもよい。前記読み出し部は、前記対象物情報、前記画像情報、および前記テキスト情報を前記記録媒体から読み出してもよい。前記表示部は、前記読み出し部によって読み出された前記対象物情報、前記画像情報、および前記テキスト情報を互いに関連付けて表示してもよい。【００２２】
本発明の第１４の態様によれば、情報記録装置は、入力部および記録部を有する。対象物に関する対象物情報と、前記対象物情報がどのような状況で取得されているのかを示す画像情報とが前記入力部に入力される。前記記録部は、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する。【００２３】
本発明の第１５の態様によれば、情報記録方法は、対象物情報取得ステップ、画像取得ステップ、記録ステップ、読み出しステップ、および表示ステップを有する。前記対象物情報取得ステップにおいて、対象物情報取得部が、対象物に関する対象物情報を取得する。前記画像取得ステップにおいて、画像取得部が、前記対象物情報がどのような状況で取得されているのかを示す画像情報を取得する。前記記録ステップにおいて、記録部が、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する。前記読み出しステップにおいて、読み出し部が、前記対象物情報および前記画像情報を前記記録媒体から読み出す。前記表示ステップにおいて、表示部が、前記読み出し部によって読み出された前記対象物情報および前記画像情報を互いに関連付けて表示する。【００２４】
本発明の第１６の態様によれば、情報記録方法は、入力ステップおよび記録ステップを有する。前記入力ステップにおいて、対象物に関する対象物情報と、前記対象物情報がどのような状況で取得されているのかを示す画像情報とが入力部に入力される。前記記録ステップにおいて、記録部が、前記対象物情報および前記画像情報を互いに関連付けて記録媒体に記録する。
【発明の効果】
【００２５】
上記の各態様によれば、情報記録システム、情報記録装置、および情報記録方法は、対象物情報がどのような状況で取得されているのかを示す視覚的な情報を記録することができる。
【図面の簡単な説明】
【００２６】
【図１】本発明の第１の実施形態の情報記録システムの構成を示すブロック図である。
【図２】本発明の第１の実施形態の情報記録システムによる処理の手順を示すフローチャートである。
【図３】本発明の第１の実施形態の顕微鏡システムの概略構成を示す図である。
【図４】本発明の第１の実施形態の内視鏡システムの概略構成を示す図である。
【図５】本発明の第１の実施形態の診察システムの概略構成を示す図である。
【図６】本発明の第１の実施形態の検査システムの概略構成を示す図である。
【図７】本発明の第１の実施形態の作業記録システムの概略構成を示す図である。
【図８】本発明の第１の実施形態の情報記録システムにおける表示部の画面を示す参考図である。
【図９】本発明の第１の実施形態の情報記録システムにおける表示部の画面を示す参考図である。
【図１０】本発明の第１の実施形態の第１の変形例の情報記録システムの構成を示すブロック図である。
【図１１】本発明の第１の実施形態の第２の変形例の情報記録システムの構成を示すブロック図である。
【図１２】本発明の第１の実施形態の第３の変形例における処理および検査の流れを示す参考図である。
【図１３】本発明の第１の実施形態の第３の変形例において対象物情報および画像情報が取得されるタイミングを示すタイミングチャートである。
【図１４】本発明の第１の実施形態の第３の変形例における記録媒体に記録された対象物情報および画像情報を示す参考図である。
【図１５】本発明の第１の実施形態の第３の変形例における表示部の画面を示す参考図である。
【図１６】本発明の第２の実施形態の情報記録システムの構成を示すブロック図である。
【図１７】本発明の第２の実施形態の情報記録装置の構成を示すブロック図である。
【図１８】本発明の第２の実施形態の情報記録装置による処理の手順を示すフローチャートである。
【発明を実施するための形態】
【００２７】
図面を参照し、本発明の実施形態を説明する。
【００２８】
（第１の実施形態）
図１は、本発明の第１の実施形態の情報記録システム１０の構成を示す。図１に示すように、情報記録システム１０は、対象物情報取得部２０、画像取得部３０、音声取得部４０、音声処理部５０、記録部６０、記録媒体７０、読み出し部８０、表示部９０、および音声出力部１００を有する。
【００２９】
対象物情報取得部２０は、対象物に関する対象物情報を取得する。対象物は、観察の対象となる物体である。観察は、物体の状態を把握する行為である。観察は、診断、診察、および検査などの行為を含んでもよい。観察のために取得される対象物情報は、必ずしも、物体の外部または内部の視覚的な情報すなわち画像情報でなくてもよい。例えば、対象物情報取得部２０は、顕微鏡、内視鏡、熱線映像装置、Ｘ線装置、およびＣＴ（Ｃｏｍｐｕｔｅｄ  Ｔｏｍｏｇｒａｐｈｙ）装置などの画像機器に搭載されたカメラである。これらの画像機器は、対象物の画像情報を取得する。これらの画像機器は、センサから得られた信号に基づいて画像情報を生成するカメラを含んでもよい。これらの画像機器によって取得される画像情報は、動画情報および静止画情報のどちらであってもよい。対象物情報取得部２０は、対象物の温度、加速度、圧力、電圧、および電流などの情報を取得するセンサであってもよい。対象物が生物である場合、対象物情報取得部２０は、対象物のバイタル情報を取得するバイタルセンサであってもよい。例えば、バイタル情報は、体温、血圧、脈拍、心電、および血中酸素飽和度などの情報である。対象物情報取得部２０は、対象物が発した音に基づく音声情報を取得するマイクであってもよい。例えば、音声情報は、打音検査における音、反響音、心音、および騒音などの情報である。対象物情報取得部２０によって取得された対象物情報に対して、時刻情報のような付加情報が付加されてもよい。例えば、対象物情報取得部２０は、対象物情報が取得された時刻を示す時刻情報を対象物情報に付加し、かつ時刻情報が付加された対象物情報を出力する。対象物情報が時系列情報である場合、複数の異なる時刻を特定できる時刻情報が対象物情報に付加される。例えば、対象物情報に関連付けられる時刻情報は、対象物情報の取得が開始された時刻と、サンプリングレートとを含む。
【００３０】
画像取得部３０は、対象物情報がどのような状況で取得されているのかを示す画像情報を取得する。画像取得部３０によって取得される画像情報は、対象物情報が取得されるときの対象物と対象物の周辺との少なくとも１つの状態を示す。つまり、画像取得部３０によって取得される画像情報は、観察状況を示す。画像取得部３０は、カメラを含む画像機器である。画像取得部３０は、対象物情報取得部２０による対象物情報の取得と並行して、画像情報を取得する。画像取得部３０によって取得される画像情報は、動画情報および静止画情報のどちらであってもよい。例えば、画像取得部３０は、対象物と対象物の周辺との少なくとも１つを含む画像情報を取得する。例えば、対象物の周辺は、対象物情報取得部２０が搭載された機器を含む。この場合、対象物と、対象物情報取得部２０が搭載された機器との少なくとも１つを含む画像情報が取得される。対象物の周辺は、対象物を観察する観察者を含んでもよい。この場合、対象物および観察者の少なくとも１つを含む画像情報が取得される。画像取得部３０は、対象物と対象物の周辺との少なくとも１つを撮影範囲に含むように配置される。
【００３１】
画像取得部３０によって取得される画像情報が対象物を含む場合、その画像情報は対象物の一部または全部を含む。画像取得部３０によって取得される画像情報が、対象物情報取得部２０が搭載された機器を含む場合、その画像情報はその機器の一部または全部を含む。画像取得部３０によって取得される画像情報がユーザを含む場合、その画像情報はそのユーザの一部または全部を含む。対象物情報取得部２０が画像機器であり、かつ対象物情報が対象物の画像である場合、画像取得部３０の撮影視野は、対象物情報取得部２０の撮影視野よりも広い。例えば、対象物情報取得部２０は対象物の一部の画像情報を取得し、かつ画像取得部３０は対象物の全体の画像情報を取得する。画像取得部３０は、ユーザすなわち観察者が装着するウェアラブルカメラであってもよい。例えば、ウェアラブルカメラは、観察者の視点に応じた画像情報を取得できるように観察者の目の近傍に装着されるヘッドマウント型のカメラである。したがって、画像取得部３０は、対象物を観察する観察者の視点の位置または視点の近傍位置に配置されてもよい。画像取得部３０によって取得された画像情報に対して、時刻情報のような付加情報が付加されてもよい。例えば、画像取得部３０は、画像情報が取得された時刻を示す時刻情報を画像情報に付加し、かつ時刻情報が付加された画像情報を出力する。画像情報が時系列情報である場合、複数の異なる時刻を特定できる時刻情報が画像情報に付加される。例えば、画像情報に関連付けられる時刻情報は、画像情報の取得が開始された時刻と、サンプリングレートとを含む。
【００３２】
音声取得部４０は、対象物を観察する観察者が発した音声に基づく音声情報を取得する。例えば、音声取得部４０は、マイクである。音声取得部４０は、観察者が装着するウェアラブルマイクであってもよい。ウェアラブルマイクは、観察者の口の近傍に装着される。音声取得部４０は、観察者の音声のみを取得するために指向性を有するマイクであってもよい。この場合、音声取得部４０は観察者の口の近傍に装着されなくてもよい。これにより、音声取得部４０の配置の自由度が得られる。観察者の音声以外のノイズが排除されるため、テキスト情報の生成および検索における効率が向上する。音声取得部４０は、対象物情報取得部２０による対象物情報の取得と並行して、音声情報を取得する。音声取得部４０によって取得された音声情報に対して、時刻情報のような付加情報が付加されてもよい。例えば、音声取得部４０は、音声情報が取得された時刻を示す時刻情報を音声情報に付加し、かつ時刻情報が付加された音声情報を出力する。音声情報が時系列情報である場合、複数の異なる時刻を特定できる時刻情報が音声情報に付加される。例えば、音声情報に関連付けられる時刻情報は、音声情報の取得が開始された時刻と、サンプリングレートとを含む。
【００３３】
音声処理部５０は、音声取得部４０によって取得された音声情報をテキスト情報に変換する。例えば、音声処理部５０は、音声処理を行う音声処理回路を含む。音声処理部５０は、音声認識部５００およびテキスト生成部５１０を有する。音声認識部５００は、音声取得部４０によって取得された音声情報に基づいてユーザすなわち観察者の音声を認識する。テキスト生成部５１０は、音声認識部５００によって認識された音声をテキスト情報に変換することにより、ユーザの音声に対応するテキスト情報を生成する。テキスト生成部５１０は、連続する音声を適切なブロックに分け、かつブロックごとにテキスト情報を生成してもよい。音声処理部５０によって生成されたテキスト情報に対して、時刻情報のような付加情報が付加されてもよい。例えば、音声処理部５０（テキスト生成部５１０）は、テキスト情報が生成された時刻を示す時刻情報をテキスト情報に付加し、かつ時刻情報が付加されたテキスト情報を出力する。テキスト情報が時系列情報である場合、複数の異なる時刻に対応する時刻情報がテキスト情報に付加される。テキスト情報の時刻は、そのテキスト情報に関連付けられた音声情報の開始時刻に対応する。
【００３４】
対象物情報取得部２０によって取得された対象物情報、画像取得部３０によって取得された画像情報、音声取得部４０によって取得された音声情報、および音声処理部５０によって生成されたテキスト情報は、記録部６０に入力される。記録部６０は、対象物情報、画像情報、音声情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する。このとき、記録部６０は、対象物情報、画像情報、音声情報、およびテキスト情報を、時刻情報に基づいて互いに関連付ける。例えば、記録部６０は、情報の記録処理を行う記録処理回路を含む。対象物情報、画像情報、音声情報、およびテキスト情報の少なくとも１つは圧縮されてもよい。したがって、記録部６０は、情報を圧縮するための圧縮処理回路を含んでもよい。記録部６０は、記録処理および圧縮処理のためのバッファを含んでもよい。
【００３５】
対象物情報、画像情報、音声情報、およびテキスト情報は、共通の対象物に関する情報として互いに関連付けられる。対象物情報、画像情報、音声情報、およびテキスト情報は、互いに関連する複数の対象物に関する情報として互いに関連付けられてもよい。例えば、対象物情報、画像情報、音声情報、およびテキスト情報の各々が１つのファイルで構成され、かつ記録部６０は各ファイルを記録媒体７０に記録する。この場合、対象物情報、画像情報、音声情報、およびテキスト情報の各ファイルを関連付ける情報が記録媒体７０に記録される。記録部６０は、対象物情報、画像情報、音声情報、テキスト情報、および時刻情報を互いに関連付けて記録媒体７０に記録してもよい。時刻情報は、対象物情報、画像情報、および音声情報の各々が取得された時刻を示す。テキスト情報と関連付けられる時刻情報は、そのテキスト情報の元になった音声情報が取得された時刻を示す。例えば、対象物情報、画像情報、音声情報、およびテキスト情報の各々に対して時刻情報が付加される。対象物情報、画像情報、音声情報、およびテキスト情報は、時刻情報を介して互いに関連付けられる。
【００３６】
記録媒体７０は、不揮発性の記憶装置である。例えば、記録媒体７０は、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）、フラッシュメモリ、およびハードディスクドライブの少なくとも１つである。記録媒体７０は、観察現場に配置されなくてもよい。例えば、情報記録システム１０がネットワークインターフェースを有し、かつ情報記録システム１０が、インターネットまたはＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）などのネットワークを介して記録媒体７０と接続してもよい。情報記録システム１０が無線通信インターフェースを有し、かつ情報記録システム１０がＷｉ−Ｆｉ（登録商標）またはＢｌｕｅｔｏｏｔｈ（登録商標）などの規格に従った無線通信により記録媒体７０と接続してもよい。したがって、情報記録システム１０が記録媒体７０を直接的に含んでいなくてもよい。
【００３７】
読み出し部８０は、対象物情報、画像情報、音声情報、およびテキスト情報を記録媒体７０から読み出す。これによって、読み出し部８０は、記録媒体７０に記録された対象物情報、画像情報、音声情報、およびテキスト情報を再生する。例えば、読み出し部８０は、情報の読み出し処理を行う読み出し処理回路を含む。記録媒体７０に記録された対象物情報、画像情報、音声情報、およびテキスト情報の少なくとも１つは圧縮されてもよい。したがって、読み出し部８０は、圧縮された情報を伸張するための伸張処理回路を含んでもよい。読み出し部８０は、読み出し処理および伸張処理のためのバッファを含んでもよい。時刻情報が記録媒体７０に記録されている場合、読み出し部８０は、時刻情報に基づいて、互いに関連付けられた対象物情報、画像情報、音声情報、およびテキスト情報を記録媒体７０から読み出す。読み出し部８０は、時刻情報に基づいて対象物情報、画像情報、音声情報、およびテキスト情報の読み出しを同期させる。例えば、読み出し部８０は、同一の時刻情報に関連付けられた対象物情報、画像情報、音声情報、およびテキスト情報を読み出す。各情報に関連付けられた時刻情報が互いに同期していない場合、読み出し部８０は、基準時刻に対する各時刻情報の差を考慮して各情報を読み出してもよい。
【００３８】
表示部９０は、読み出し部８０によって読み出された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。表示部９０は、液晶ディスプレイなどの表示機器である。例えば、表示部９０は、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）のモニタである。表示部９０は、ユーザが装着するスマートグラスなどのウェアラブルディスプレイであってもよい。表示部９０は、対象物情報取得部２０が搭載された機器の表示部であってもよい。表示部９０は、情報共有用の大型モニタであってもよい。表示部９０は、タッチパネルディスプレイであってもよい。例えば、表示部９０は、対象物情報、画像情報、およびテキスト情報を同時に表示する。このとき、表示部９０は、対象物情報、画像情報、およびテキスト情報を、各情報が並べられた状態で表示する。対象物情報、画像情報、テキスト情報、および時刻情報が互いに関連付けられている場合、読み出し部８０は、対象物情報、画像情報、およびテキスト情報を互いに同期させて読み出す。このため、表示部９０は、対象物情報、画像情報、およびテキスト情報を互いに同期させて表示する。対象物情報、画像情報、およびテキスト情報のうち選択された情報が表示部９０に表示され、かつ表示部９０に表示される情報をユーザが切り替えることができてもよい。例えば、センサまたはバイタルセンサによって取得された対象物情報は時系列のセンサ信号で構成される。例えば、表示部９０は、センサ信号の波形をグラフで表示する。
【００３９】
表示部９０は、読み出し部８０によって読み出された音声情報を文字情報または図表として視覚的に表示してもよい。この場合、表示部９０は、読み出し部８０によって読み出された対象物情報、画像情報、音声情報、およびテキスト情報を互いに関連付けて表示する。例えば、音声情報は時系列の音声信号で構成される。例えば、表示部９０は、音声信号の振幅またはパワーの時間変化をグラフで表示する。
【００４０】
音声出力部１００は、読み出し部８０によって読み出された音声情報に基づく音声を出力する。例えば、音声出力部１００は、スピーカである。対象物情報、画像情報、音声情報、テキスト情報、および時刻情報が互いに関連付けられている場合、対象物情報、画像情報、音声情報、およびテキスト情報は、読み出し部８０によって互いに同期して読み出される。このため、音声出力部１００は、表示部９０による各情報の表示と同期して音声を出力する。
【００４１】
対象物情報取得部２０によって取得された対象物情報が画像情報である場合、その対象物情報は、表示部９０に出力されてもよい。表示部９０は、対象物情報取得部２０による対象物情報の取得と並行して、対象物情報を表示してもよい。画像取得部３０によって取得された画像情報は、表示部９０に出力されてもよい。表示部９０は、対象物情報取得部２０による対象物情報の取得と並行して、画像取得部３０によって取得された画像情報を表示してもよい。これによって、ユーザは、対象物の状態および観察状況をリアルタイムに把握することができる。
【００４２】
音声処理部５０、記録部６０、および読み出し部８０は、１つまたは複数のプロセッサで構成されてもよい。例えば、プロセッサは、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）、およびＧＰＵ（Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）の少なくとも１つである。音声処理部５０、記録部６０、および読み出し部８０は、特定用途向け集積回路（ＡＳＩＣ）またはＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）で構成されてもよい。
【００４３】
情報記録システム１０において、音声の取得および記録は必須ではない。したがって、情報記録システム１０は、音声取得部４０、音声処理部５０、および音声出力部１００を有していなくてもよい。この場合、記録部６０は、対象物情報および画像情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、対象物情報および画像情報を記録媒体７０から読み出す。表示部９０は、読み出し部８０によって読み出された対象物情報および画像情報を互いに関連付けて表示する。
【００４４】
情報記録システム１０は音声出力部１００を有さず、かつ記録部６０は音声情報を記録しなくてもよい。この場合、記録部６０は、対象物情報、画像情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、対象物情報、画像情報、およびテキスト情報を記録媒体７０から読み出す。表示部９０は、読み出し部８０によって読み出された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。
【００４５】
情報記録システム１０は音声処理部５０を有していなくてもよい。この場合、記録部６０は、対象物情報、画像情報、および音声情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、対象物情報、画像情報、および音声情報を記録媒体７０から読み出す。表示部９０は、読み出し部８０によって読み出された対象物情報および画像情報を互いに関連付けて表示する。音声出力部１００は、読み出し部８０によって読み出された音声情報に基づく音声を出力する。
【００４６】
情報記録システム１０は、ユーザによる操作を受け付ける操作部を有してもよい。例えば、操作部は、ボタン、スイッチ、キー、マウス、ジョイスティック、タッチパッド、トラックボール、およびタッチパネルの少なくとも１つを含んで構成される。
【００４７】
図２は、情報記録システム１０による処理の手順を示す。図２を参照し、情報記録システム１０による処理の手順を説明する。
【００４８】
対象物情報取得部２０は、対象物に関する対象物情報を取得する（ステップＳ１００（対象物情報取得ステップ））。ステップＳ１００において取得された対象物情報は、記録部６０内のバッファに蓄積される。対象物情報取得部２０による対象物情報の取得と並行して、画像取得部３０は、対象物情報がどのような状況で取得されているのかを示す画像情報を取得する（ステップＳ１０５（画像取得ステップ））。ステップＳ１０５において取得された画像情報は、記録部６０内のバッファに蓄積される。対象物情報取得部２０による対象物情報の取得と並行して、ステップＳ１１０における処理が行われる。ステップＳ１１０は、ステップＳ１１１（音声取得ステップ）およびステップＳ１１２（音声処理ステップ）を含む。ステップＳ１１１において音声取得部４０は、対象物を観察する観察者が発した音声に基づく音声情報を取得する。ステップＳ１１２において音声処理部５０は、音声取得部４０によって取得された音声情報をテキスト情報に変換する。ステップＳ１１０において、ステップＳ１１１およびステップＳ１１２における処理が繰り返される。ステップＳ１１１において取得された音声情報と、ステップＳ１１２において生成されたテキスト情報とは、記録部６０内のバッファに蓄積される。
【００４９】
ステップＳ１００、ステップＳ１０５、およびステップＳ１１０の各々における処理の開始タイミングは同一でなくてもよい。ステップＳ１００、ステップＳ１０５、およびステップＳ１１０の各々における処理の終了タイミングは同一でなくてもよい。ステップＳ１００、ステップＳ１０５、およびステップＳ１１０の各々における処理が行われる期間の少なくとも一部が互いに重なる。
【００５０】
対象物情報、画像情報、および音声情報の取得が終了した後、記録部６０は、記録部６０内のバッファに蓄積された対象物情報、画像情報、音声情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する（ステップＳ１１５（記録ステップ））。
【００５１】
ステップＳ１１５の後、読み出し部８０は、対象物情報、画像情報、音声情報、およびテキスト情報を記録媒体７０から読み出す（ステップＳ１２０（読み出しステップ））。ユーザが各情報の読み出しのタイミングを指定できてもよい。
【００５２】
ステップＳ１２０の後、表示部９０は、読み出し部８０によって読み出された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。また、音声出力部１００は、読み出し部８０によって読み出された音声情報に基づく音声を出力する（ステップＳ１２５（表示ステップおよび音声出力ステップ））。
【００５３】
情報記録システム１０が音声取得部４０、音声処理部５０、および音声出力部１００を有していない場合、ステップＳ１１０における処理は行われない。また、ステップＳ１１５において記録部６０は、対象物情報および画像情報を互いに関連付けて記録媒体７０に記録する。ステップＳ１２０において読み出し部８０は、対象物情報および画像情報を記録媒体７０から読み出す。ステップＳ１２５において表示部９０は、ステップＳ１２０において読み出し部８０によって読み出された対象物情報および画像情報を互いに関連付けて表示する。
【００５４】
情報記録システム１０が音声出力部１００を有さず、かつ記録部６０が音声情報を記録しない場合、ステップＳ１１５において記録部６０は、対象物情報、画像情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する。ステップＳ１２０において読み出し部８０は、対象物情報、画像情報、およびテキスト情報を記録媒体７０から読み出す。ステップＳ１２５において表示部９０は、ステップＳ１２０において読み出し部８０によって読み出された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。
【００５５】
情報記録システム１０が音声処理部５０を有していない場合、ステップＳ１１２における処理は行われない。また、ステップＳ１１５において記録部６０は、対象物情報、画像情報、および音声情報を互いに関連付けて記録媒体７０に記録する。ステップＳ１２０において読み出し部８０は、対象物情報、画像情報、および音声情報を記録媒体７０から読み出す。ステップＳ１２５において表示部９０は、ステップＳ１２０において読み出し部８０によって読み出された対象物情報および画像情報を互いに関連付けて表示する。また、ステップＳ１２５において音声出力部１００は、ステップＳ１２０において読み出し部８０によって読み出された音声情報に基づく音声を出力する。
【００５６】
上記のように、対象物情報が対象物情報取得部２０によって取得され、かつ対象物情報がどのような状況で取得されているのかを示す画像情報が画像取得部３０によって取得される。取得された対象物情報および画像情報は、記録部６０によって記録媒体７０に記録される。これによって、情報記録システム１０は、対象物情報がどのような状況で取得されているのかを示す視覚的な情報を記録することができる。
【００５７】
上記の方法では、対象物情報がどのような状況で取得されているのかを示す情報の記録にかかるユーザの負担は小さい。また、ユーザが手を使えないケースであっても必要な情報を記録することができ、記録漏れまたは誤記録が減る。したがって、情報記録システム１０は、対象物情報がどのような状況で取得されているのかを示す記録を正確かつ効率的に残すことができる。
【００５８】
上記の方法では、対象物情報が取得されたときのユーザコメントが音声として記録され、かつその音声に対応するテキストが対象物情報および画像情報と関連付けられて記録される。対象物情報、画像情報、および音声情報に対して、テキストによる“タグ”が付与されることにより、各情報の閲覧性および検索性が向上する。また、ユーザは、各情報が取得されたときの状況の理解を容易にすることができる。
【００５９】
以下では、情報記録システム１０の具体的な例を説明する。
【００６０】
（顕微鏡による観察）
図３は、情報記録システム１０の例である顕微鏡システム１１の概略構成を示す。図３に示すように、顕微鏡システム１１は、顕微鏡２００、カメラ３１ａ、カメラ３１ｂ、カメラ３１ｃ、マイク４１、サーバ２０１、およびＰＣ２０２を有する。
【００６１】
顕微鏡２００は、対象物ＯＢ１を拡大して観察するための機器である。顕微鏡２００に接続されたカメラ２１が対象物情報取得部２０を構成する。このカメラ２１は、顕微鏡２００により拡大された対象物ＯＢ１の画像情報を対象物情報として取得する。例えば、このカメラ２１は、動画情報を取得する。
【００６２】
カメラ３１ａ、カメラ３１ｂ、およびカメラ３１ｃは、画像取得部３０を構成する。カメラ３１ａ、カメラ３１ｂ、およびカメラ３１ｃの各々の撮影視野は、顕微鏡２００に接続されたカメラの撮影視野よりも広い。例えば、カメラ３１ａ、カメラ３１ｂ、およびカメラ３１ｃは、動画情報を取得する。
【００６３】
カメラ３１ａは、顕微鏡２００の対物レンズ先端の近傍に配置されている。カメラ３１ａは、顕微鏡２００の対物レンズ先端の近傍を撮影することにより、対象物ＯＢ１および顕微鏡２００の対物レンズ先端を含む画像情報を取得する。これにより、対象物ＯＢ１および顕微鏡２００の対物レンズ先端の位置関係が画像情報として記録される。観察者であるユーザは、対象物ＯＢ１および顕微鏡２００の対物レンズ先端に接近してそれらの状態を確認する必要はない。ユーザは、カメラ３１ａによって取得された画像情報を閲覧することにより、対象物ＯＢ１のどの部分が観察されているのか、および顕微鏡２００の対物レンズ先端が対象物ＯＢ１にどれ位接近しているのかなどの状況を容易に把握することができる。
【００６４】
カメラ３１ｂは、観察が行われる室内に配置されている。カメラ３１ｂは、対象物ＯＢ１と顕微鏡２００との全体を撮影することにより、対象物ＯＢ１と顕微鏡２００との全体を含む画像情報を取得する。これにより、観察現場の全体の状況が画像情報として記録される。ユーザは、カメラ３１ｂによって取得された画像情報を閲覧することにより、ユーザが注目している部分とは異なる部分で発生する事象などの状況を容易に把握することができる。対象物ＯＢ１が生物である場合、対象物ＯＢ１の状態が、観察により得られる対象物情報に影響を与える可能性がある。例えば、対象物ＯＢ１の死および生に関する状態が対象物情報から判別しにくい場合であっても、ユーザは、カメラ３１ｂによって取得された画像情報を閲覧することにより、対象物ＯＢ１の状態を容易に把握することができる。カメラ３１ｂは、ユーザを含む画像情報を取得してもよい。
【００６５】
カメラ３１ｃは、ウェアラブルカメラとして構成されている。カメラ３１ｃは、ユーザが頭部に装着できるアクセサリ２０３に装着されることにより、ウェアラブルカメラとして構成されている。ユーザがアクセサリ２０３を装着しているとき、カメラ３１ｃは、ユーザの視点の近傍位置に配置される。カメラ３１ｃは、対象物ＯＢ１および顕微鏡２００を撮影することにより、対象物ＯＢ１および顕微鏡２００を含む画像情報を取得する。あるいは、カメラ３１ｃは、顕微鏡２００を撮影することにより、対象物ＯＢ１を含まず、かつ顕微鏡２００を含む画像情報を取得する。これにより、観察においてユーザが注目している部分に応じた観察状況が画像情報として記録される。これにより、顕微鏡システム１１は、対象物ＯＢ１が顕微鏡ステージにセットアップされるまでの状況、顕微鏡２００の調整手順、および顕微鏡２００の調整状態などの観察の様子を記録することができる。ユーザおよび他の人などは、それを閲覧することにより、リアルタイムに、もしくは観察の終了後に観察時の状況を容易に把握することができる。
【００６６】
マイク４１は、音声取得部４０を構成する。マイク４１は、アクセサリ２０３に装着されることにより、ウェアラブルマイクとして構成されている。
【００６７】
サーバ２０１は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。カメラ２１によって取得された対象物情報と、カメラ３１ａ、カメラ３１ｂ、およびカメラ３１ｃによって取得された画像情報と、マイク４１によって取得された音声情報とがサーバ２０１に入力される。
【００６８】
ＰＣ２０２は、サーバ２０１に接続されている。ＰＣ２０２の画面９１は、表示部９０を構成する。スマートグラスが表示部９０を構成してもよい。スマートグラスは、対象物情報の取得と並行して、対象物情報である画像情報と、カメラ３１ａ、カメラ３１ｂ、およびカメラ３１ｃの各々によって取得された画像情報とを表示してもよい。ユーザは、スマートグラスを装着することにより、対象物ＯＢ１の状態および観察状況をリアルタイムに把握することができる。
【００６９】
情報記録システム１０は、多光子励起顕微鏡（Ｍｕｌｔｉｐｈｏｔｏｎ  ｅｘｃｉｔａｔｉｏｎ  ｆｌｕｏｒｅｓｃｅｎｃｅ  ｍｉｃｒｏｓｃｏｐｅ）を使用する顕微鏡システムに適用されてもよい。多光子励起顕微鏡は、暗室内で使用される。多光子励起顕微鏡に接続されたカメラが対象物情報取得部２０を構成する。例えば、カメラ３１ａ、カメラ３１ｂ、およびカメラ３１ｃが赤外線カメラとして画像取得部３０を構成する。赤外線カメラは、対象物と多光子励起顕微鏡との全体を撮影することにより、対象物と多光子励起顕微鏡との全体を含む画像情報を取得する。例えば、観察者であるユーザは、音声取得部４０を構成するウェアラブルマイクを装着する。ＰＣなどの機器は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。多光子励起顕微鏡に接続されたカメラによって取得された対象物情報と、赤外線カメラによって取得された画像情報と、ウェアラブルマイクによって取得された音声情報とが機器に入力される。機器の画面は、表示部９０を構成する。
【００７０】
暗い環境では、ユーザが顕微鏡の状態および実験の状況を把握すること、および把握された状態および状況をユーザが手で紙に書くことが困難である。情報記録システム１０が適用されたシステムでは、ユーザは、顕微鏡の状態および実験の状況を知るために、実験を中断して照明をつける必要はない。また、ユーザは、そのために顕微鏡を一旦停止させる必要および暗室内を覗く必要はない。また、ユーザは、顕微鏡の状態および実験の状況を手で紙に書く必要はない。
【００７１】
（内視鏡による検査）
図４は、情報記録システム１０の例である内視鏡システム１２の概略構成を示す。図４に示すように、内視鏡システム１２は、内視鏡２１０、カメラ３２、マイク４２、およびＰＣ２１１を有する。
【００７２】
内視鏡２１０は、対象物ＯＢ２の内部に挿入される。対象物ＯＢ２は、内視鏡検査を受ける人物すなわち患者である。内視鏡２１０は、対象物ＯＢ２の体内を観察するための機器である。内視鏡２１０の先端に配置されたカメラが対象物情報取得部２０を構成する。このカメラは、対象物ＯＢ２の体内の画像情報を対象物情報として取得する。例えば、このカメラは、動画情報および静止画情報を取得する。
【００７３】
カメラ３２は、画像取得部３０を構成する。カメラ３２は、検査が行われる室内に配置されている。例えば、カメラ３２は、対象物ＯＢ２および内視鏡２１０を撮影することにより、対象物ＯＢ２および内視鏡２１０を含む動画情報を画像情報として取得する。これにより、検査の状況が画像情報として記録される。カメラ３２は、ユーザＵ１を含む画像情報を取得してもよい。例えば、ユーザＵ１は、医師である。これにより、内視鏡システム１２は、内視鏡２１０を挿入する手順および方法、対象物ＯＢ２の動き、およびユーザＵ１の動きなどの検査の様子を記録することができる。ユーザＵ１、他の医師、およびアシスタントなどは、それを閲覧することにより、リアルタイムに、もしくは検査の終了後に検査時の状況を容易に把握することができる。
【００７４】
マイク４２は、音声取得部４０を構成する。マイク４２は、ウェアラブルマイクとしてユーザＵ１に装着されている。ユーザＵ１は、内視鏡２１０による検査と同時にコメントを発する。ユーザＵ１が発したコメントは、対象物情報および画像情報と関連付けられて記録される。このため、ユーザＵ１は、所見、学会発表用の資料、および経験が少ない医師向けの教育用コンテンツの作成などの目的で使用される正確な検査記録を効率よく作成することができる。
【００７５】
ＰＣ２１１は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。内視鏡２１０の先端に配置されたカメラによって取得された対象物情報と、カメラ３２によって取得された画像情報と、マイク４２によって取得された音声情報とがＰＣ２１１に入力される。ＰＣ２１１の画面９２は、表示部９０を構成する。
【００７６】
（救急現場における診察）
図５は、情報記録システム１０の例である診察システム１３の概略構成を示す。図５に示すように、診察システム１３は、バイタルセンサ２３、カメラ３３、マイク４３、および機器２２０を有する。
【００７７】
バイタルセンサ２３は、対象物ＯＢ３に装着される。対象物ＯＢ３は、診察を受ける人物すなわち患者である。バイタルセンサ２３は、対象物情報取得部２０を構成する。バイタルセンサ２３は、対象物ＯＢ３の体温、血圧、および脈拍などの生体情報を対象物情報として取得する。
【００７８】
カメラ３３は、画像取得部３０を構成する。カメラ３３は、ウェアラブルカメラとしてユーザＵ２に装着されている。例えば、カメラ３３は、動画情報を取得する。カメラ３３は、対象物ＯＢ３およびユーザＵ２の手などの現場の状況を撮影することにより、対象物ＯＢ３およびユーザＵ２の手などの現場の状況を含む画像情報を取得する。これにより、現場、患者の容態、および診察状況などが画像情報として記録される。例えば、ユーザＵ２は、医師または救急隊員である。これにより、診察システム１３は、診察の手順、対象物ＯＢ３に対する処置の内容、および対象物ＯＢ３の状態などの状況を記録することができる。ユーザＵ２および他の医師などは、それを閲覧することにより、リアルタイムに、もしくは診察の終了後に現場、患者の容態、および診察状況などを容易に把握することができる。
【００７９】
マイク４３は、音声取得部４０を構成する。マイク４３は、ウェアラブルマイクとしてユーザＵ２に装着されている。ユーザＵ２は、バイタルセンサ２３による対象情報の取得と同時にコメントを発する。ユーザＵ２が発したコメントは、対象物情報および画像情報と関連付けられて記録される。このため、ユーザＵ２は、対象物ＯＢ３に対する現場での所見を正確に他の医師などの人物に効率よく伝達することができる。
【００８０】
機器２２０は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。バイタルセンサ２３によって取得された対象物情報と、カメラ３３によって取得された画像情報と、マイク４３によって取得された音声情報とが機器２２０に入力される。各情報は、無線で機器２２０に送信される。機器２２０は、各情報を無線で受信する。機器２２０の画面は、表示部９０を構成する。機器２２０は、入力された各情報を無線でサーバに送信してもよい。例えば、そのサーバは、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。病院にいる医師は、サーバによって受信された各情報を閲覧することにより、患者の様子を容易に把握することができる。
【００８１】
（非破壊検査）
図６は、情報記録システム１０の例である検査システム１４の概略構成を示す。図６に示すように、検査システム１４は、プローブ２３０、カメラ３４、マイク４４、および機器２３１を有する。
【００８２】
プローブ２３０は、対象物情報取得部２０を構成する。プローブ２３０は、対象物ＯＢ４の表面の欠陥に応じた電流などの信号を対象物情報として取得する。対象物ＯＢ４は、検査対象の工業製品である。例えば、対象物ＯＢ４は、プラントのパイプまたは航空機の機体である。
【００８３】
カメラ３４は、画像取得部３０を構成する。カメラ３４は、ウェアラブルカメラとしてユーザＵ３に装着されている。例えば、カメラ３４は、動画情報を取得する。カメラ３４は、対象物ＯＢ４およびプローブ２３０を撮影することにより、対象物ＯＢ３およびプローブ２３０を含む画像情報を取得する。これにより、非破壊検査の状況が画像情報として記録される。例えば、ユーザＵ３は、検査者である。これにより、検査システム１４は、対象物ＯＢ３における検査位置および検査手順などの検査状況を記録することができる。ユーザＵ３および他の技術者などは、それを閲覧することにより、リアルタイムに、もしくは検査の終了後に検査時の状況を容易に把握することができる。
【００８４】
マイク４４は、音声取得部４０を構成する。マイク４４は、ウェアラブルマイクとしてユーザＵ３に装着されている。ユーザＵ３は、プローブ２３０による対象情報の取得と同時にコメントを発する。ユーザＵ３が発したコメントは、対象物情報および画像情報と関連付けられて記録される。このため、ユーザＵ３は、対象物ＯＢ４の検査に関する作業報告書を正確に、かつ効率よく作成することができる。
【００８５】
機器２３１は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。プローブ２３０によって取得された対象物情報と、カメラ３４によって取得された画像情報と、マイク４４によって取得された音声情報とが機器２３１に入力される。機器２３１の画面９４は、表示部９０を構成する。機器２３１は、各情報を無線でサーバに送信してもよい。例えば、そのサーバは、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。現場から離れた場所にいる技能者は、サーバによって受信された各情報を閲覧することにより、検査の様子を容易に把握することができる。また、ユーザＵ３は、機器２３１またはその他の受信機器によって、技能者から送信された情報を受信することにより、遠隔地にいる技能者から指示を仰ぐことができる。
【００８６】
情報記録システム１０は、工業用内視鏡を使用する検査システムに適用されてもよい。工業用内視鏡は、ボイラ、タービン、エンジン、および化学プラントなどの物体の内部における傷および腐食などの対象物の画像情報を取得する。スコープが対象物情報取得部２０を構成する。例えば、検査者であるユーザは、画像取得部３０を構成するウェアラブルカメラと、音声取得部４０を構成するウェアラブルマイクとを装着する。内視鏡の本体は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。スコープによって取得された対象物情報と、ウェアラブルカメラによって取得された画像情報と、ウェアラブルマイクによって取得された音声情報とが本体に入力される。本体の画面は、表示部９０を構成する。
【００８７】
（作業記録システム）
図７は、情報記録システム１０の例である作業記録システム１５の概略構成を示す。図７に示すように、作業記録システム１５は、カメラ２５、カメラ３５、マイク４５、およびＰＣ２４０を有する。
【００８８】
カメラ２５は、対象物情報取得部２０を構成する。カメラ２５は、ウェアラブルカメラとしてユーザＵ４に装着されている。カメラ２５は、対象物ＯＢ５の画像情報を対象物情報として取得する。例えば、カメラ２５は、動画情報を取得する。例えば、ユーザＵ４は、作業者である。例えば、対象物ＯＢ５は、回路基板である。
【００８９】
カメラ３５は、画像取得部３０を構成する。カメラ３５は、対象物ＯＢ５の修理または組立などの作業が行われる室内に配置されている。カメラ３５の撮影視野は、カメラ２５の撮影視野よりも広い。例えば、カメラ３５は、動画情報を取得する。カメラ３５は、対象物ＯＢ５と、ユーザＵ４が使用する道具２４１とを撮影することにより、対象物ＯＢ５および道具２４１を含む画像情報を取得する。これにより、作業の状況が画像情報として記録される。これにより、作業記録システム１５は、対象物ＯＢ５における作業位置および作業手順などの状況を記録することができる。ユーザＵ４および他の技術者などは、それを閲覧することにより、リアルタイムに、もしくは作業の終了後に作業時の状況を容易に把握することができる。
【００９０】
マイク４５は、音声取得部４０を構成する。マイク４５は、ウェアラブルマイクとしてユーザＵ４に装着されている。ユーザＵ４は、カメラ２５による対象情報の取得と同時にコメントを発する。ユーザＵ４が発したコメントは、対象物情報および画像情報と関連付けられて記録される。このため、ユーザＵ４は、対象物ＯＢ５に対する作業に関する作業報告書および経験が少ない作業者向けの教育用コンテンツの作成などの目的で使用される正確な作業記録を効率よく作成することができる。また、ユーザＵ４は、作業記録を対象物に対する作業履歴として保管することにより、問題が発生したときなどに、作業履歴に基づいて作業を容易にトレースすることができる。
【００９１】
ＰＣ２４０は、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０を有する。カメラ２５によって取得された対象物情報と、カメラ３５によって取得された画像情報と、マイク４５によって取得された音声情報とがＰＣ２４０に無線で、もしくは図示していない有線で入力される。ＰＣ２４０の画面９５は、表示部９０を構成する。
【００９２】
以下では、表示部９０による各情報の表示の具体例を説明する。図８および図９は、表示部９０の画面９６を示す。
【００９３】
同一の対象物に関連付けられた対象物情報、画像情報、テキスト情報３１０、および時刻情報３２０が画面９６に表示される。対象物情報は画面９６の領域３００に表示され、かつ画像情報は画面９６の領域３０１に表示される。この例では、配管検査における各情報が表示される。この例では、対象物情報は、スコープによって取得された対象物の画像情報である。また、この例では、画像情報は、検査者であるユーザが装着したウェアラブルカメラによって取得された、対象物およびその周辺の画像情報である。対象物情報および画像情報は、動画情報である。図８および図９に示す情報に加えて検査名、検査者、検査対象物、および日付を特定するための情報などが表示されてもよい。例えば、これらの情報が記載された検査看板を含む画像情報が表示されてもよい。図８において、配管検査が開始される直前における各情報が表示されている。配管検査が開始される前、対象物情報は取得されていない。このため、対象物情報は領域３００に表示されない。各情報の表示と同期して音声情報に基づく音声が音声出力部１００によって出力される。テキスト情報３１０は、その音声に対応する。
【００９４】
図９において、配管検査が開始された後における各情報が表示されている。配管検査が開始された後、画像情報、テキスト情報３１０、および時刻情報３２０に加えて対象物情報が領域３００に表示される。各情報は、時刻情報に基づいて同期して更新される。各情報の表示は、スキップ、早送り、およびコマ送りのいずれであってもよい。
【００９５】
（第１の実施形態の第１の変形例）
図１０は、本発明の第１の実施形態の第１の変形例の情報記録システム１０ａの構成を示す。図１０に示す構成について、図１に示す構成と異なる点を説明する。
【００９６】
情報記録システム１０ａは、図１に示す情報記録システム１０の構成に加えて状況情報取得部１１０を有する。状況情報取得部１１０は、対象物情報がどのような状況で取得されているのかを示し、かつ対象物の画像情報を除く情報である状況情報を取得する。例えば、状況情報は、時刻、場所、および対象物の周辺環境の少なくとも１つに関する情報である。例えば、対象物の周辺環境は、温度、湿度、気圧、および照度などの条件を示す。状況情報が時刻情報である場合、状況情報取得部１１０は、時刻情報を生成する機器から時刻情報を取得する。例えば、状況情報取得部１１０は、スマートフォンおよびＰＣなどの端末から時刻情報を取得する。状況情報が場所情報である場合、状況情報取得部１１０は、場所情報を生成する機器から場所情報を取得する。例えば、状況情報取得部１１０は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）機能が搭載されたスマートフォンなどの端末から場所情報を取得する。状況情報が周辺環境情報である場合、状況情報取得部１１０は、周辺環境値を測定する機器から周辺環境情報を取得する。例えば、状況情報取得部１１０は、温度計、湿度計、気圧計、および照度計などのセンサから周辺環境情報を取得する。
【００９７】
状況情報は、対象物情報取得部２０を含む機器に関する機器情報であってもよい。機器情報は、機器の設定値であってもよい。例えば、多光子励起顕微鏡において、機器の設定値は、レンズ倍率、観察光量、レーザーパワー、およびステージ位置などの値である。状況情報取得部１１０によって取得された、時刻情報以外の状況情報に対して、時刻情報のような付加情報が付加されてもよい。例えば、状況情報取得部１１０は、状況情報が取得された時刻を示す時刻情報を状況情報に付加し、かつ時刻情報が付加された状況情報を出力する。状況情報が時系列情報である場合、複数の異なる時刻を特定できる時刻情報が状況情報に付加される。例えば、状況情報に関連付けられる時刻情報は、状況情報の取得が開始された時刻と、サンプリングレートとを含む。
【００９８】
記録部６０は、対象物情報、画像情報、音声情報、テキスト情報、および状況情報を互いに関連付けて記録媒体７０に記録する。記録部６０は、対象物情報、画像情報、音声情報、テキスト情報、状況情報、および時刻情報を互いに関連付けて記録媒体７０に記録してもよい。時刻情報は、対象物情報、画像情報、音声情報、テキスト情報、および状況情報の各々が取得された時刻を示す。対象物情報、画像情報、音声情報、テキスト情報、および状況情報は、時刻情報を介して互いに関連付けられる。状況情報は圧縮されてもよい。
【００９９】
読み出し部８０は、対象物情報、画像情報、音声情報、テキスト情報、および状況情報を記録媒体７０から読み出す。表示部９０は、読み出し部８０によって読み出された対象物情報、画像情報、テキスト情報、および状況情報を互いに関連付けて表示する。例えば、表示部９０は、対象物情報、画像情報、テキスト情報、および状況情報を同時に表示する。このとき、表示部９０は、対象物情報、画像情報、テキスト情報、および状況情報を、各情報が並べられた状態で表示する。対象物情報、画像情報、テキスト情報、および状況情報のうち選択された情報が表示部９０に表示され、かつ表示部９０に表示される情報をユーザが切り替えることができてもよい。
【０１００】
上記以外の点について、図１０に示す構成は、図１に示す構成と同様である。
【０１０１】
状況情報が記録されることにより、情報記録システム１０ａは、対象物情報がどのような状況で取得されているのかを示す情報として、視覚的な情報に加えて、それ以外の情報も記録することができる。これにより、情報記録システム１０ａは、観察状況をより正確に記録することができる。したがって、ユーザは、正確な手順の再現および検証をより確実に行うことができる。
【０１０２】
（第１の実施形態の第２の変形例）
図１１は、本発明の第１の実施形態の第２の変形例の情報記録システム１０ｂの構成を示す。図１１に示す構成について、図１に示す構成と異なる点を説明する。
【０１０３】
記録部６０は、対象物情報、画像情報、および音声情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、音声情報を記録媒体７０から読み出す。音声処理部５０は、読み出し部８０によって読み出された音声情報をテキスト情報に変換する。記録部６０は、記録媒体７０に記録された対象物情報、画像情報、および音声情報にテキスト情報を関連付け、かつテキスト情報を記録媒体７０に記録する。
【０１０４】
上記以外の点について、図１１に示す構成は、図１に示す構成と同様である。
【０１０５】
情報記録システム１０ｂにおいて、音声情報の全体が記録媒体７０に記録された後、音声処理が音声処理部５０によって行われる。一般的に、音声処理の負荷は高い。音声処理速度が音声情報の取得レートよりも遅い場合でも、情報記録システム１０ｂはテキスト情報を記録することができる。
【０１０６】
（第１の実施形態の第３の変形例）
本発明の第１の実施形態の第３の変形例において、同一種類の複数の情報が取得される。図１２は、対象物に対する処理および検査の流れを示す。
【０１０７】
対象物Ａが処理室１に搬入され、かつ処理室１において処理１が対象物Ａに実施される。このとき、対象物情報１および画像情報１が取得される。対象物情報１は、処理１が実施されているときの対象物Ａの情報である。画像情報１は、処理室１に配置されたカメラによって取得される。処理１が終了した後、対象物Ａの処理によって得られた対象物Ａ１が検査室１に搬入され、かつ対象物Ａの処理によって得られた対象物Ａ２が検査室２に搬入される。検査室１において検査１が対象物Ａ１に実施される。このとき、対象物情報２および画像情報２が取得される。対象物情報２は、検査１が実施されているときの対象物Ａ１の情報である。画像情報２は、検査室１に配置されたカメラによって取得される。検査室２において検査２が対象物Ａ２に実施される。このとき、対象物情報３および画像情報３が取得される。対象物情報３は、検査２が実施されているときの対象物Ａ２の情報である。画像情報３は、検査室２に配置されたカメラによって取得される。検査２が終了した後、検査室２において検査３が対象物Ａ２に実施される。このとき、対象物情報４および画像情報３が取得される。対象物情報４は、検査３が実施されているときの対象物Ａ２の情報である。画像情報３は、検査２および検査３の両方において連続的に取得される。対象物Ａ１に対する検査１と対象物Ａ２に対する検査２とは、並行して行われる。
【０１０８】
図１３は、対象物情報および画像情報が取得されるタイミングを示す。図１３における横軸は、時間を示す。図１３に示す各情報は、図１２に示す各情報に対応する。図１３において、各情報が取得されるタイミングが示されている。
【０１０９】
処理１において、対象物情報１および画像情報１が取得される。対象物情報１および画像情報１の各々の取得開始タイミングは同一でなくてもよい。対象物情報１および画像情報１の各々の取得終了タイミングは同一でなくてもよい。対象物情報１が取得される期間は、画像情報１が取得される期間に含まれる。検査１において、対象物情報２および画像情報２が取得される。対象物情報２および画像情報２の各々の取得開始タイミングは同一でなくてもよい。対象物情報２および画像情報２の各々の取得終了タイミングは同一でなくてもよい。対象物情報２が取得される期間は、画像情報２が取得される期間に含まれる。
【０１１０】
検査２および検査３において、対象物情報３、対象物情報４、および画像情報３が取得される。対象物情報３、対象物情報４、および画像情報３の各々の取得開始タイミングは同一でなくてもよい。対象物情報３、対象物情報４、および画像情報３の各々の取得終了タイミングは同一でなくてもよい。検査２における対象物情報３が取得された後、検査３に対応する対象物情報４が取得される。対象物情報３および対象物情報４が取得される期間は、画像情報３が取得される期間に含まれる。
【０１１１】
時刻Ａにおいて、対象物情報１および画像情報１が取得される。このため、時刻Ａにおける対象物情報１および画像情報１は、同時に再生かつ表示することができる。時刻Ｂにおいて、対象物情報２および画像情報２が取得される。また、時刻Ｂにおいて、対象物情報３および画像情報３が取得される。このため、時刻Ｂにおける対象物情報２、対象物情報３、画像情報２、および画像情報３は、同時に再生かつ表示することができる。
【０１１２】
図１４は、記録媒体７０に記録された対象物情報および画像情報を示す。図１４に示す各情報は、図１２に示す各情報に対応する。
【０１１３】
対象物情報１、対象物情報２、対象物情報３、対象物情報４、画像情報１、画像情報２、および画像情報３は、記録媒体７０に記録されている。これらの情報は、互いに関連する対象物Ａ、対象物Ａ１、および対象物Ａ２によって関連付けられる。観察者であるユーザによって各情報の関連付けが指定されてもよい。例えば、対象物情報２および画像情報２を対象物情報１および画像情報１と関連付ける操作をユーザが行った場合、これらの情報が互いに関連付けられてもよい。あるいは、対象物情報３、対象物情報４、および画像情報３を対象物情報１および画像情報１と関連付ける操作をユーザが行った場合、これらの情報が互いに関連付けられてもよい。各情報を関連付けるための操作は、上記の例に限らない。
【０１１４】
読み出し部８０は任意の情報を記録媒体７０から読み出し、かつ表示部９０は、読み出し部８０によって読み出された情報を表示することができる。例えば、図１４に示すように、読み出し部８０は、対象物情報２、対象物情報３、および画像情報２を読み出す。閲覧者であるユーザは、読み出される情報を指定する操作を行ってもよい。読み出される情報を指定する操作がユーザによって行われた場合、読み出し部８０は、ユーザによって指定された情報を読み出す。
【０１１５】
図１５は、表示部９０の画面９６を示す。図１４に示すように対象物情報２、対象物情報３、および画像情報２が記録媒体７０から読み出された場合、各情報は図１５に示す形態で表示される。対象物情報２は画面９６の領域３３０に表示され、かつ対象物情報３は画面９６の領域３３１に表示される。画像情報２は画面９６の領域３３２に表示される。時刻情報３４０は、画像情報２に重畳される。対象物情報２、対象物情報３、および画像情報２は、互いに同期して表示される。各情報の表示タイミングは、時刻情報３４０に基づいて制御される。
【０１１６】
各情報の表示タイミングを制御するためのユーザインターフェース３５０およびユーザインターフェース３５１が画面９６に表示される。ユーザインターフェース３５０は、スライダーバーとして構成されている。ユーザは、ユーザインターフェース３５０を操作することにより、任意の表示タイミングを指定することができる。ユーザインターフェース３５１は、様々なボタンを含む。ユーザは、ユーザインターフェース３５１を操作することにより、表示開始、表示停止、スキップ、早送り、およびコマ送りなどの表示方法を指定することができる。
【０１１７】
図１２から図１５は、複数の情報の取得および表示の例に関する。取得され、かつ表示される情報の種類および情報の表示方法は上記の例に限らない。図１５において、図１５に示す各情報に加えてテキスト情報、音声情報、および状況情報の少なくとも１つが表示されてもよい。図１５に示す各情報の表示と同期して音声出力部１００によって音声が出力されてもよい。
【０１１８】
上記のように、時刻情報に基づいて、互いに関連付けられた対象物情報および画像情報が同期して表示される。これによって、表示部９０は、複数の対象物情報または複数の画像情報を同期して表示することができる。このため、ユーザは、関連する複数の情報の内容を時系列的に容易に把握することができる。
【０１１９】
（第２の実施形態）
図１６は、本発明の第２の実施形態の情報記録システム１０ｃの構成を示す。図１６に示す構成について、図１に示す構成と異なる点を説明する。
【０１２０】
図１６に示すように、情報記録システム１０ｃは、対象物情報取得部２０、画像取得部３０、音声取得部４０、情報記録装置１２０、表示部９０、および音声出力部１００を有する。対象物情報取得部２０、画像取得部３０、音声取得部４０、表示部９０、および音声出力部１００は、図１に示す、各構成に対応する構成と同様である。図１６に示す情報記録システム１０ｃにおいて、図１に示す情報記録システム１０における音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０が情報記録装置１２０に変更される。
【０１２１】
上記以外の点について、図１６に示す構成は、図１に示す構成と同様である。
【０１２２】
図１７は、情報記録装置１２０の構成を示す。図１７に示すように、情報記録装置１２０は、音声処理部５０、記録部６０、記録媒体７０、読み出し部８０、入力部１３０、および出力部１４０を有する。
【０１２３】
音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０は、図１に示す、各構成に対応する構成と同様である。対象物情報取得部２０からの対象物情報、画像取得部３０からの画像情報、および音声取得部４０からの音声情報が入力部１３０に入力される。例えば、対象物情報取得部２０、画像取得部３０、および音声取得部４０の少なくとも１つと情報記録装置１２０とは、ケーブルにより接続される。この場合、入力部１３０は、ケーブルが接続される入力端子である。対象物情報取得部２０、画像取得部３０、および音声取得部４０の少なくとも１つと情報記録装置１２０とは、無線により接続されてもよい。この場合、入力部１３０は、対象物情報取得部２０、画像取得部３０、および音声取得部４０の少なくとも１つと無線通信を行う無線通信回路である。
【０１２４】
出力部１４０は、読み出し部８０によって読み出された対象物情報、画像情報、音声情報、およびテキスト情報を出力する。つまり、出力部１４０は、対象物情報、画像情報、およびテキスト情報を表示部９０に出力し、かつ音声情報を音声出力部１００に出力する。例えば、表示部９０および音声出力部１００の少なくとも１つと情報記録装置１２０とは、ケーブルにより接続される。この場合、出力部１４０は、ケーブルが接続される出力端子である。表示部９０および音声出力部１００の少なくとも１つと情報記録装置１２０とは、無線により接続されてもよい。この場合、出力部１４０は、表示部９０および音声出力部１００の少なくとも１つと無線通信を行う無線通信回路である。
【０１２５】
情報記録装置１２０が、プログラムを読み込み、かつ読み込まれたプログラムを実行してもよい。つまり、情報記録装置１２０の機能はソフトウェアにより実現されてもよい。このプログラムは、音声処理部５０、記録部６０、および読み出し部８０の動作を規定する命令を含む。このプログラムは、例えばフラッシュメモリのような「コンピュータ読み取り可能な記録媒体」により提供されてもよい。また、上述したプログラムは、このプログラムが保存された記憶装置等を有するコンピュータから、伝送媒体を介して、あるいは伝送媒体中の伝送波により情報記録装置１２０に伝送されてもよい。プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように、情報を伝送する機能を有する媒体である。また、上述したプログラムは、前述した機能の一部を実現してもよい。さらに、上述したプログラムは、前述した機能をコンピュータに既に記録されているプログラムとの組合せで実現できる差分ファイル（差分プログラム）であってもよい。
【０１２６】
図１に示す情報記録システム１０に適用される様々な変形は、図１６に示す情報記録システム１０ｃにも同様に適用されてよい。例えば、情報記録システム１０ｃは、音声取得部４０、音声処理部５０、および音声出力部１００を有していなくてもよい。この場合、対象物情報および画像情報が入力部１３０に入力される。記録部６０は、対象物情報および画像情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、対象物情報および画像情報を記録媒体７０から読み出す。出力部１４０は、読み出し部８０によって読み出された対象物情報および画像情報を出力する。表示部９０は、出力部１４０によって出力された対象物情報および画像情報を互いに関連付けて表示する。
【０１２７】
情報記録システム１０ｃは音声出力部１００を有さず、かつ記録部６０は音声情報を記録しなくてもよい。この場合、対象物情報、画像情報、および音声情報が入力部１３０に入力される。記録部６０は、対象物情報、画像情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、対象物情報、画像情報、およびテキスト情報を記録媒体７０から読み出す。出力部１４０は、読み出し部８０によって読み出された対象物情報、画像情報、およびテキスト情報を出力する。表示部９０は、出力部１４０によって出力された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。
【０１２８】
情報記録システム１０ｃは音声処理部５０を有していなくてもよい。この場合、対象物情報、画像情報、および音声情報が入力部１３０に入力される。記録部６０は、対象物情報、画像情報、および音声情報を互いに関連付けて記録媒体７０に記録する。読み出し部８０は、対象物情報、画像情報、および音声情報を記録媒体７０から読み出す。出力部１４０は、読み出し部８０によって読み出された対象物情報、画像情報、および音声情報を出力する。表示部９０は、出力部１４０によって出力された対象物情報および画像情報を互いに関連付けて表示する。音声出力部１００は、出力部１４０によって出力された音声情報に基づく音声を出力する。
【０１２９】
図１８は、情報記録装置１２０による処理の手順を示す。図１８を参照し、情報記録装置１２０による処理の手順を説明する。
【０１３０】
対象物に関する対象物情報が入力部１３０に入力される（ステップＳ２００（入力ステップ））。ステップＳ２００において入力された対象物情報は、記録部６０内のバッファに蓄積される。入力部１３０への対象物情報の入力と並行して、対象物情報がどのような状況で取得されているのかを示す画像情報が入力部１３０に入力される（ステップＳ２０５（入力ステップ））。ステップＳ２０５において入力された画像情報は、記録部６０内のバッファに蓄積される。入力部１３０への対象物情報の入力と並行して、ステップＳ２１０における処理が行われる。ステップＳ２１０は、ステップＳ２１１（音声入力ステップ）およびステップＳ２１２（音声処理ステップ）を含む。ステップＳ２１１において、対象物を観察する観察者が発した音声に基づく音声情報が入力部１３０に入力される。ステップＳ２１２において音声処理部５０は、入力部１３０に入力された音声情報をテキスト情報に変換する。ステップＳ２１０において、ステップＳ２１１およびステップＳ２１２における処理が繰り返される。ステップＳ２１１において入力された音声情報と、ステップＳ２１２において生成されたテキスト情報とは、記録部６０内のバッファに蓄積される。
【０１３１】
ステップＳ２００、ステップＳ２０５、およびステップＳ２１０の各々における処理の開始タイミングは同一でなくてもよい。ステップＳ２００、ステップＳ２０５、およびステップＳ２１０の各々における処理の終了タイミングは同一でなくてもよい。ステップＳ２００、ステップＳ２０５、およびステップＳ２１０の各々における処理が行われる期間の少なくとも一部が互いに重なる。
【０１３２】
対象物情報、画像情報、および音声情報の入力が終了した後、記録部６０は、記録部６０内のバッファに蓄積された対象物情報、画像情報、音声情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する（ステップＳ２１５（記録ステップ））。
【０１３３】
ステップＳ２１５の後、読み出し部８０は、対象物情報、画像情報、音声情報、およびテキスト情報を記録媒体７０から読み出す（ステップＳ２２０（読み出しステップ））。ユーザが各情報の読み出しのタイミングを指定できてもよい。
【０１３４】
ステップＳ２２０の後、出力部１４０は、読み出し部８０によって読み出された対象物情報、画像情報、音声情報、およびテキスト情報を出力する。表示部９０は、出力部１４０によって出力された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。また、音声出力部１００は、出力部１４０によって出力された音声情報に基づく音声を出力する（ステップＳ２２５（出力ステップ、表示ステップ、および音声出力ステップ））。
【０１３５】
情報記録システム１０ｃが音声取得部４０および音声処理部５０を有していない場合、ステップＳ２１０における処理は行われない。また、ステップＳ２１５において記録部６０は、対象物情報および画像情報を互いに関連付けて記録媒体７０に記録する。ステップＳ２２０において読み出し部８０は、対象物情報および画像情報を記録媒体７０から読み出す。ステップＳ２２５において出力部１４０は、読み出し部８０によって読み出された対象物情報および画像情報を出力する。また、ステップＳ２２５において表示部９０は、出力部１４０によって出力された対象物情報および画像情報を互いに関連付けて表示する。
【０１３６】
情報記録システム１０ｃが音声出力部１００を有さず、かつ記録部６０が音声情報を記録しない場合、ステップＳ２１５において記録部６０は、対象物情報、画像情報、およびテキスト情報を互いに関連付けて記録媒体７０に記録する。ステップＳ２２０において読み出し部８０は、対象物情報、画像情報、およびテキスト情報を記録媒体７０から読み出す。ステップＳ２２５において出力部１４０は、ステップＳ２２０において読み出し部８０によって読み出された対象物情報、画像情報、およびテキスト情報を出力する。また、ステップＳ２２５において表示部９０は、出力部１４０によって出力された対象物情報、画像情報、およびテキスト情報を互いに関連付けて表示する。
【０１３７】
情報記録システム１０ｃが音声処理部５０を有していない場合、ステップＳ２１２における処理は行われない。また、ステップＳ２１５において記録部６０は、対象物情報、画像情報、および音声情報を互いに関連付けて記録媒体７０に記録する。ステップＳ２２０において読み出し部８０は、対象物情報、画像情報、および音声情報を記録媒体７０から読み出す。ステップＳ２２５において出力部１４０は、ステップＳ２２０において読み出し部８０によって読み出された対象物情報、画像情報、および音声情報を出力する。また、ステップＳ２２５において表示部９０は、出力部１４０によって出力された対象物情報および画像情報を互いに関連付けて表示する。また、ステップＳ２２５において音声出力部１００は、出力部１４０によって出力された音声情報に基づく音声を出力する。
【０１３８】
音声処理部５０および記録媒体７０の少なくとも１つは、情報記録装置１２０の外部に配置されてもよい。音声処理部５０が情報記録装置１２０の外部に配置された場合、音声処理部５０からのテキスト情報が入力部１３０に入力される。記録媒体７０は、情報記録装置１２０への装着および情報記録装置１２０からの取り外しができてもよい。情報記録装置１２０がネットワークインターフェースを有し、かつ情報記録装置１２０が、ネットワークを介して記録媒体７０と接続してもよい。情報記録装置１２０が無線通信インターフェースを有し、かつ情報記録装置１２０が無線通信により記録媒体７０と接続してもよい。
【０１３９】
情報記録装置１２０は、読み出し部８０および出力部１４０を有していなくてもよい。例えば、記録媒体７０は、情報記録装置１２０への装着および情報記録装置１２０からの取り外しができるように構成される。記録媒体７０が情報記録装置１２０から取り外され、かつ情報記録装置１２０の外部の装置に装着されることにより、その装置は、記録媒体７０に記録された情報を利用することができる。情報記録装置１２０が読み出し部８０および出力部１４０を有していない場合、情報記録装置１２０はステップＳ２２０およびステップＳ２２５における処理を行わない。
【０１４０】
上記のように、対象物情報が入力部１３０に入力され、かつ対象物情報がどのような状況で取得されているのかを示す画像情報が入力部１３０に入力される。入力された対象物情報および画像情報は、記録部６０によって記録媒体７０に記録される。これによって、情報記録装置１２０は、対象物情報がどのような状況で取得されているのかを示す視覚的な情報を記録することができる。第１の実施形態の情報記録システム１０において得られる効果は、第２の実施形態の情報記録装置１２０においても同様に得られる。
【０１４１】
図３から図７に示す各システムにおいて、音声処理部５０、記録部６０、記録媒体７０、および読み出し部８０に対応する部分が、情報記録装置１２０に対応する構成に変更されてもよい。第１の実施形態の第１から第３の変形例に開示された事項は、第２の実施形態の情報記録装置１２０に同様に適用されてもよい。したがって、情報記録システム１０ｃが状況情報取得部１１０を有し、かつ状況情報取得部１１０によって取得された状況情報が入力部１３０に入力されてもよい。
【０１４２】
以上、本発明の好ましい実施形態を説明したが、本発明はこれら実施形態およびその変形例に限定されることはない。本発明の趣旨を逸脱しない範囲で、構成の付加、省略、置換、およびその他の変更が可能である。また、本発明は前述した説明によって限定されることはなく、添付のクレームの範囲によってのみ限定される。
【産業上の利用可能性】
【０１４３】
本発明の各実施形態によれば、情報記録システム、情報記録装置、および情報記録方法は、対象物情報がどのような状況で取得されているのかを示す視覚的な情報を記録することができる。
【符号の説明】
【０１４４】
１０，１０ａ，１０ｂ，１０ｃ  情報記録システム
１１  顕微鏡システム
１２  内視鏡システム
１３  診察システム
１４  検査システム
１５  作業記録システム
２０  対象物情報取得部
２３  バイタルセンサ
３０  画像取得部
２１，２５，３１ａ，３１ｂ，３１ｃ，３２，３３，３４，３５  カメラ
４０  音声取得部
４１，４２，４３，４４，４５  マイク
５０  音声処理部
６０  記録部
７０  記録媒体
８０  読み出し部
９０  表示部
９１，９２，９４，９５，９６  画面
１００  音声出力部
１１０  状況情報取得部
１２０  情報記録装置
１３０  入力部
１４０  出力部
２００  顕微鏡
２０１  サーバ
２０２，２１１，２４０  ＰＣ
２０３  アクセサリ
２１０  内視鏡
２２０，２３１  機器
２３０  プローブ
２４１  道具
５００  音声認識部
５１０  テキスト生成部
【図１】
2018138833.tif 000003
【図２】
2018138833.tif 000004
【図３】
2018138833.tif 000005
【図４】
2018138833.tif 000006
【図５】
2018138833.tif 000007
【図６】
2018138833.tif 000008
【図７】
2018138833.tif 000009
【図８】
2018138833.tif 000010
【図９】
2018138833.tif 000011
【図１０】
2018138833.tif 000012
【図１１】
2018138833.tif 000013
【図１２】
2018138833.tif 000014
【図１３】
2018138833.tif 000015
【図１４】
2018138833.tif 000016
【図１５】
2018138833.tif 000017
【図１６】
2018138833.tif 000018
【図１７】
2018138833.tif 000019
【図１８】
2018138833.tif 000020
【国際調査報告】
2018138833.tif 000021
2018138833.tif 000022
2018138833.tif 000023
2018138833.tif 000024