(57)【要約】      （修正有）【課題】ユーザに対して最適な手術動画を閲覧させることができる動画閲覧装置、動画閲覧装置の制御方法及びプログラムを提供する。【解決手段】手術動画閲覧装置１は、動画を入力してデータベース２００に登録する動画入力部１０と、登録された動画におけるシーンの特徴量を抽出するシーン解析部２０と、シーンごとにシーン名を付与してシーン名をシーンごとに紐付けるシーン名付与部３０と、記動画について記述された記述情報を動画に紐付ける記述情報登録部４０と、データベース２００から、少なくともシーン名および記述情報に基づいて、動画に関連する関連動画を抽出する抽出部５０とを備える。【選択図】図１
2019185726.tif 000002
【特許請求の範囲】
【請求項１】
動画を入力してデータベースに登録する動画入力部と、
登録された前記動画におけるシーンの特徴量を抽出するシーン解析部と、
前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるシーン名付与部と、
前記動画について記述された記述情報を前記動画に紐付ける記述情報登録部と、
前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記動画に関連する関連動画を抽出する抽出部と、を備える、
ことを特徴とする動画閲覧装置。
【請求項２】
手術動画を入力してデータベースに登録する動画入力部と、
登録された前記手術動画におけるシーンの特徴量を抽出するシーン解析部と、
前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるシーン名付与部と、
前記手術動画について記述された記述情報を前記手術動画に紐付ける記述情報登録部と、
前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記手術動画に関連する関連動画を抽出する抽出部と、を備える、
ことを特徴とする動画閲覧装置。
【請求項３】
前記シーン名付与部は、前記シーンの順序にしたがって予め定められた名称に基づいて前記シーン名を付与する、
ことを特徴とする請求項２に記載の動画閲覧装置。
【請求項４】
前記シーン名と、前記シーンの再生時間とに基づいて、前記シーンの再生時間をグラフ表示するグラフ表示部を備え、
前記抽出部は、前記グラフ表示されたシーン名が選択された場合に、選択された前記シーン名の前記シーンと関連するシーンを含む前記関連動画を抽出する、
ことを特徴とする請求項２または請求項３に記載の動画閲覧装置。
【請求項５】
前記手術動画の所定の位置をマーキングするマーキング部を備え、
前記シーン解析部は、前記マーキングされた位置に基づいて前記シーンを画定する、
ことを特徴とする請求項２ないし請求項４のいずれか１項に記載の動画閲覧装置。
【請求項６】
前記手術動画ごと、または前記シーンごとの閲覧履歴を記録する閲覧履歴記録部を備え、
前記抽出部は、少なくとも前記シーン名、前記記述情報、前記閲覧履歴、および前記手術動画の再生時間のいずれか、またはこれらの組み合わせに基づいて、前記手術動画に関連する関連動画を抽出する、
ことを特徴とする請求項２ないし請求項５のいずれか１項に記載の動画閲覧装置。
【請求項７】
動画入力部により、手術動画を入力してデータベースに登録するステップと、
シーン解析部により、登録された前記手術動画におけるシーンの特徴量を抽出するステップ、
シーン名付与部により、前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるステップと、
記述情報登録部により、前記手術動画について記述された記述情報を前記手術動画に紐付けるステップと、
抽出部により、前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記手術動画に関連する関連動画を抽出するステップと、を備える、
ことを特徴とする動画閲覧装置の制御方法。
【請求項８】
動画閲覧装置におけるプログラムであって、前記プログラムは、コンピュータに、
手術動画を入力してデータベースに登録するステップと、
登録された前記手術動画におけるシーンの特徴量を抽出するステップ、
前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるステップと、
前記手術動画について記述された記述情報を前記手術動画に紐付けるステップと、
前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記手術動画に関連する関連動画を抽出するステップと、を実行させる、
ことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、動画閲覧装置、動画閲覧装置の制御方法、およびプログラムに関する。
【背景技術】
【０００２】
手術動画を閲覧する技術分野において、特許文献１には、手術動画から各手技の最適な手技動画を分割してデータベースに登録し、登録されている手技動画を組み合わせて手術用のシミュレーション動画を作成する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−３０１４５３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１のシミュレーション動画は、シミュレーション動画を作成した者の主観により各手技の最適な手技動画が選択されているため、シミュレーション動画を視聴する者にとっては必ずしも最適な手技動画を含んでいるとは限らない。
【０００５】
また、特許文献１のシミュレーション動画は、手技動画が編集されているため、シミュレーション動画を視聴する者が見たい部分がカットされている場合があり、無編集の動画が見たいというユーザの要望に応えることができなかった。
【０００６】
そこで、この発明の課題は、ユーザに対して最適な手術動画を閲覧させることができる動画閲覧装置、動画閲覧装置の制御方法、およびプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
本発明の動画閲覧装置の一態様は、前記課題を解決するために、
動画を入力してデータベースに登録する動画入力部と、
登録された前記動画におけるシーンの特徴量を抽出するシーン解析部と、
前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるシーン名付与部と、
前記動画について記述された記述情報を前記動画に紐付ける記述情報登録部と、
前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記動画に関連する関連動画を抽出する抽出部と、を備える、
ことを特徴とする。
【０００８】
本態様において、「記述情報」とは、例えば、動画のタイトル、動画の説明、タグ、カテゴリー等を含む概念である。
【０００９】
本態様によれば、入力された動画に対して、少なくともシーン名、および記述情報に基づいて、関連動画が抽出されるので、ユーザに対して最適な手術動画を閲覧させる。
【００１０】
本発明の動画閲覧装置の別の態様は、上記課題を解決するために、
手術動画を入力してデータベースに登録する動画入力部と、
登録された前記手術動画におけるシーンの特徴量を抽出するシーン解析部と、
前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるシーン名付与部と、
前記手術動画について記述された記述情報を前記手術動画に紐付ける記述情報登録部と、
前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記手術動画に関連する関連動画を抽出する抽出部と、を備える、
ことを特徴とする。
【００１１】
前記別の態様において、「シーン」とは、例えば手技を含む概念であり、「シーン名」は手技名を含む概念である。また、「記述情報」とは、例えば、手術動画のタイトル、術式、手術動画の説明、タグ、カテゴリー等を含む概念である。
【００１２】
前記別の態様によれば、入力された手術動画に対して、少なくともシーンとしての手技動画の再生時間、閲覧履歴、およびタグに基づいて、関連動画または関連手技動画が抽出されるので、ユーザに対して最適な手術動画または手技動画を閲覧させる。
【００１３】
一実施形態の動画閲覧装置は、
前記シーン名付与部は、前記シーンの順序にしたがって予め定められた名称に基づいて前記シーン名を付与する、
ことを特徴とする。
【００１４】
この実施形態の動画閲覧装置によれば、ユーザが手動でシーン名を付与しなくても、シーン名が付与されるので、ユーザにとって利便性の良い動画閲覧装置を提供する。
【００１５】
一実施形態の動画閲覧装置は、
前記シーン名と、前記シーンの再生時間とに基づいて、前記シーンの再生時間をグラフ表示するグラフ表示部を備え、
前記抽出部は、前記グラフ表示されたシーン名が選択された場合に、選択された前記シーン名の前記シーンと関連するシーンを含む前記関連動画を抽出する、
ことを特徴とする。
【００１６】
この実施形態の動画閲覧装置によれば、グラフ表示されたシーンを選択することにより、手術動画に含まれるシーンと関連の高いシーンを含む他の手術動画を表示することができる。その結果、注目している手術動画のシーンに多くの時間がかかっている場合には、他の手術動画と見比べることにより、改善に繋がるヒントを得ることができる。
【００１７】
一実施形態の動画閲覧装置は、
前記手術動画の所定の位置をマーキングするマーキング部を備え、
前記シーン解析部は、前記マーキングされた位置に基づいて前記シーンを画定する、
ことを特徴とする。
【００１８】
この実施形態の動画閲覧装置によれば、ユーザによりシーンの画定を行うことができるので、ユーザのニーズに応じた手術動画の閲覧を可能とする。
【００１９】
一実施形態の動画閲覧装置は、
前記手術動画ごと、または前記シーンごとの閲覧履歴を記録する閲覧履歴記録部を備え、
前記抽出部は、少なくとも前記シーン名、前記記述情報、前記閲覧履歴、および前記手術動画の再生時間のいずれか、またはこれらの組み合わせに基づいて、前記手術動画に関連する関連動画を抽出する、ことを特徴とする。
【００２０】
この実施形態の動画閲覧装置によれば、ユーザにとって最適な、ユーザが見るべき手術動画を閲覧させる。
【００２１】
本発明の動画閲覧装置の制御方法の一態様は、上記課題を解決するため、
動画入力部により、手術動画を入力してデータベースに登録するステップと、
シーン解析部により、登録された前記手術動画におけるシーンの特徴量を抽出するステップ、
シーン名付与部により、前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるステップと、
記述情報登録部により、前記手術動画について記述された記述情報を前記手術動画に紐付けるステップと、
抽出部により、前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記手術動画に関連する関連動画を抽出するステップと、を備える、
ことを特徴とする。
【００２２】
本態様によれば、入力された動画に対して、少なくともシーン名、および記述情報に基づいて、関連動画が抽出されるので、ユーザに対して最適な手術動画を閲覧させる。
【００２３】
本発明のプログラムの一態様は、上記課題を解決するため、
動画閲覧装置におけるプログラムであって、前記プログラムは、コンピュータに、
手術動画を入力してデータベースに登録するステップと、
登録された前記手術動画におけるシーンの特徴量を抽出するステップ、
前記シーンごとにシーン名を付与して前記シーン名を前記シーンごとに紐付けるステップと、
前記手術動画について記述された記述情報を前記手術動画に紐付けるステップと、
前記データベースから、少なくとも前記シーン名および前記記述情報に基づいて、前記手術動画に関連する関連動画を抽出するステップと、を実行させる、
ことを特徴とする。
【００２４】
本態様によれば、入力された動画に対して、少なくともシーン名、および記述情報に基づいて、関連動画が抽出されるので、ユーザに対して最適な手術動画を閲覧させる。
【発明の効果】
【００２５】
以上より明らかなように、本発明の動画閲覧装置、動画閲覧装置の制御方法、およびプログラムによれば、ユーザに対して最適な手術動画を閲覧させることができる。また、死蔵されていた動画があった場合でも、本発明の動画閲覧装置、動画閲覧装置の制御方法、およびプログラムにおいて、これらの動画をデータベースに登録することにより、これらの動画を有効に活用することができる。
【図面の簡単な説明】
【００２６】
【図１】本発明の第１実施形態における手術動画閲覧装置の構成を示すブロック図である。
【図２】手術動画等を管理するためのデータ構造の一例を示す図である。
【図３】手術動画閲覧画面の一例を示す図である。
【図４】グラフ表示モードで表示されたグラフの表示例を説明するための図である。
【図５】関連動画選択画面の表示例を示す図である。
【図６】比較再生の際における手術動画閲覧画面の表示例を示す図である。
【図７】手術動画閲覧装置の処理手順を示すフローチャートである。
【図８】手術動画閲覧装置の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００２７】
以下、この発明の実施の形態を、図面を参照しながら詳細に説明する。
【００２８】
（第１実施形態）
本発明の第１実施形態の手術動画閲覧装置１について、図１を参照しつつ説明する。
【００２９】
（手術動画閲覧装置の概要）
図１は、本実施形態における手術動画閲覧装置の構成を示すブロック図である。図１に示すように、手術動画閲覧装置１は、動画入力部１０と、手技解析部２０と、手技名付与部３０と、記述情報登録部４０と、抽出部５０と、閲覧履歴記録部６０と、表示制御部７０と、データ格納部８０と、表示部９０と、操作部１００と、記憶部１１０とを備える。また、手術動画閲覧装置１は、外部のデータベース２００と、例えばインターネットを介して通信可能になっている。
【００３０】
動画入力部１０は、手術動画を入力する。ユーザが所定のフォルダに手術動画を格納するか、動画登録画面の所定の領域に手術動画をドラッグ・アンド・ドロップすることにより、動画入力部１０は、この手術動画を入力し、データベース２００に登録する。また、動画入力部１０は、動画登録画面において、登録ボタンがクリックされた際にファイルダイアログを表示させ、ファイルダイアログにおいて手術動画のファイルが選択された際に、選択された手術動画のファイルを入力し、データベース２００に登録してもよい。
【００３１】
シーン解析部としての手技解析部２０は、登録された手術動画におけるシーンである手技の解析を行う。手技解析部２０は、ヒストグラム解析回路と、エッジ抽出回路とを備える。ヒストグラム解析回路は、手術動画におけるＲ，Ｇ，Ｂ色成分画像の画素ヒストグラムを算出することにより画像の特徴量を抽出する。エッジ抽出回路は、画像のエッジを抽出することにより画像の特徴量を抽出する。手技解析部２０は、抽出した特徴量に応じて、手術動画をいくつかの手技ごとに画定する。また、手技を画定することにより、各手技による処置時間も判明するので、手技解析部２０は、手技と処置時間とを紐付けてデータベース２００に記憶させる。
【００３２】
シーン名付与部としての手技名付与部３０は、画定された手技のそれぞれに手技名を付与する。手技は、術前準備、切開、剥離、摘除、術後処理のように、手術の種類、術式によってその順序がある程度決まっているため、各手技に対応する手技名を予め定めておく。手技名付与部３０によって付与された手技名は、ユーザが操作部１００により修正するようにしてもよい。動画登録画面において、登録した手術動画を見ながら、各手技に手技名を選択または入力するようにしてもよい。
【００３３】
手技名付与部３０は、手術動画の画像におけるエッジ部分や、処置具の先端部分を抽出した画像部分が、予め登録された画像の特徴的な動きのパターンに該当するか否かにより、各手技にどの手技名を付けるかを機械学習により学習するようにしてもよい。この場合、比較の対象となる画像は、データベース２００に格納された手術動画の画像を用いればよい。
【００３４】
記述情報登録部４０は、手術動画について記述された記述情報を前記手術動画に紐付け、データベース２００に登録する。記述情報には、例えば、動画のタイトル、手術のカテゴリー、診断名や術式名等の手術情報、患者情報、手術の説明、およびタグ等が含まれる。本実施形態においては、図示を省略するが、動画登録画面に記述情報の入力が表示されるようになっており、ユーザが記述情報の入力を行う。
【００３５】
閲覧履歴記録部６０は、手術動画の閲覧履歴、および手術動画における手技ごとの閲覧履歴を記録する。手術動画は、データベース２００に格納された後は、ユーザによって閲覧が可能となるが、閲覧履歴記録部６０は、手術動画および手技ごとに閲覧履歴を手術動画および手技と紐付けてデータベース２００に記録する。
【００３６】
抽出部５０は、シーン名、記述情報、閲覧履歴、および手術動画の再生時間のいずれか、またはこれらの組み合わせに基づいて、データベース２００から、登録された手術動画に関連する手術動画を関連動画として抽出する。また、抽出部５０は、ユーザにより手技が指定された場合には、タグ、および閲覧履歴等に基づいて、データベース２００から、指定された手技に関連する手技を含む手術動画を関連動画として抽出する。
【００３７】
表示制御部７０は、登録された手術動画、記述情報、手技に対応するグラフも関連動画等を表示部９０の画面上に表示させる。グラフは、例えば後述するように、表示部９０に表示された手術動画に含まれる手技ごとに、処置時間を示したグラフであり、手術動画の下に表示される表示モードと、手術動画の右側に表示される表示モードとがある。表示制御部７０は、グラフ表示部として機能する。
【００３８】
データ格納部８０は、登録された手術動画、記述情報、画定された手技の手技名、各手技の処置時間、および閲覧履歴等を、手術動画に紐付けてデータベース２００に格納する。
【００３９】
表示部９０は、例えば、液晶ディスプレイまたは有機ＥＬディスプレイ等のディスプレイである。操作部１００は、例えば、キーボード、マウス等のデバイスである。記憶部１１０は、例えば、ハードディスクドライブまたは半導体素子メモリを使用したソリッドステートドライブである。記憶部１１０には、本発明のプログラムが格納される。
【００４０】
（データ構造）
次に、本実施形態で用いられる手術動画等を管理するためにデータ構造について、図２を参照しつつ説明する。図２は、本実施形態で用いられる手術動画等を管理するためのデータ構造の一例を示す図である。
【００４１】
図２に示すように、手術動画管理テーブルＴＢＬ１は、手術動画ＩＤ欄３００、日付欄３０１、タイトル欄３０２、執刀者ＩＤ欄３０３、手術動画の閲覧履歴欄３０４、手技動画ＩＤ欄３０５、区切り欄３０６、手技名欄３０７、処置時間欄３０８、手技の閲覧履歴欄３０９、およびその他欄３１０を備えている。
【００４２】
手術動画ＩＤ欄３００には、データベース２００に格納される手術動画に対して一意に定められる手術動画ＩＤが格納される。図示を省略するが、手術動画データは、手術動画ＩＤと紐付けられて、データベース２００に格納される。したがって、手術動画管理テーブルＴＢＬ１の手術動画ＩＤ欄３００から、手術動画ＩＤを読み出すことにより、手術動画ＩＤに対応した手術動画データにアクセスすることができる。
【００４３】
日付欄３０１には、手術動画をデータベース２００に格納した日付が格納される。タイトル欄３０２には、ユーザが付けた手術動画のタイトルが格納される。執刀者ＩＤ欄３０３には、手術動画に係る手術を執刀した執刀者ＩＤが格納される。執刀者ＩＤは、予め定められており、例えば、本実施形態の手術動画閲覧装置１にログインする際に入力された執刀者ＩＤをこの欄に格納すればよい。手術動画の閲覧履歴欄３０４には、手術動画の閲覧履歴が格納される。閲覧履歴には、例えば、アクセスログがユーザごとに格納される。
【００４４】
手技動画ＩＤ欄３０５には、手術動画に対して一意に定められる手術動画ＩＤが格納される。１つの手術動画には、複数の手術動画が含まれるため、手技動画ＩＤ欄３０５は、１つの手術動画に対して複数設けられている。
【００４５】
区切り欄３０６には、１つの手技として画定された区切り、例えば、時間的な区切りが格納される。時間的な区切りとしては、手術動画を先頭から再生した場合の経過時間が、手技の開始と終わりについて格納される。手術動画ＩＤに基づいて手術動画データにアクセスし、区切り欄３０６に格納された手技の開始と終わりの時間に基づいて該当期間の手術動画データにアクセスすることにより、ユーザにより選択された手技の再生位置をシークすることができる。
【００４６】
手技名欄３０７には、それぞれの手技について付与された手技名がテキストデータで格納される。処置時間欄３０８には、それぞれの手技の処置時間が格納される。手技動画の閲覧履歴欄３０９には、手技動画ごとの閲覧履歴、例えば閲覧回数が格納される。その他欄３１０には、例えば、ユーザによって入力されたタグ、手術動画のカテゴリー、手術動画の撮影アングル、使用器具等の情報が格納される。
【００４７】
以上のような手術動画管理テーブルＴＢＬ１は、データベース２００に格納してもよいし、手術動画閲覧装置１の記憶部１１０に格納してもよい。データベース２００は手術動画閲覧装置１内に設けてもよい。
【００４８】
（表示例）
次に、本実施形態の手術動画閲覧装置１の表示部９０における手術動画閲覧画面の一例について図３を参照しつつ説明する。図３は、手術動画閲覧画面の一例を示す図である。
【００４９】
図３に示すように、手術動画閲覧画面４００は、手術動画表示部４０１と、グラフ表示部４０３と、表示モード切替ボタン４０４と、動画タイトル表示部４０５と、基本設定ボタン４０６と、手技設定ボタン４０７と、カテゴリーおよびタグ表示部４０８とを備えている。また、手術動画閲覧画面４００は、ユーザ名およびグループ表示部４０９と、投稿日表示両部４１０と、閲覧回数表示部４１１と、診断名表示部４１２と、術式名表示部４１３と、患者情報表示部４１４と、手術説明表示部４１５と、関連動画リスト表示部４１６とを備えている。
【００５０】
手術動画表示部４０１には、登録した手術動画が表示される。図３に示す状態では表示されていないが、手術動画を再生すると、手術動画の下方には操作表示部が表示される。操作表示部には、再生ボタン、停止ボタン、音量調整バー、スライダーバーなどの動画を操作するための操作ボタンが表示される。
【００５１】
グラフ表示部４０３は、所謂、積み上げ横棒グラフが表示される。グラフは、手技ごとに区切られており、各横棒には、手技名が表示される。また、グラフ表示部４０３には、各手技の開始時間が表示される。最後の手技には終了時間が表示される。
【００５２】
グラフ表示部４０３に表示された積み上げ横棒グラフの各横棒を選択することにより、図３に示すように吹き出し４１７がポップアップ表示され、選択した手技へのシークと、選択した手技に関連する手技を含む関連動画リストの表示が可能となっている。図３に示す例では、「手技にシーク」を選択すると選択した手技へのシークが行われ、「関連手術」を選択すると関連動画リストが表示される。
【００５３】
グラフ表示部４０３の右下には、表示モード切替ボタン４０４が設けられており、表示モード切替ボタン４０４を選択することにより、タイムライン表示モードと、グラフ表示モードとに切り替えられる。図３に示す手術動画閲覧画面４００は、タイムライン表示モードにおける表示例を示している。グラフ表示モードを選択した場合には、図４に示すように、手術動画閲覧画面４００は、グラフ表示モードで表示され、グラフ表示部４０３は、縦棒グラフが表示される。縦棒グラフは、積み上げ横棒グラフの各手技を縦棒で表したものである。縦棒グラフの場合、縦軸には各手技の処置時間が表示され、横軸には各手技名が表示される。縦棒グラフの場合も、横棒グラフの各縦棒を選択することにより、図４に示すように吹き出し４１７がポップアップ表示され、選択した手技へのシークと、選択した手技に関連する手技を含む関連動画リストの表示が可能となっている。
【００５４】
ユーザは、グラフ表示部４０３に表示されるグラフにより、各手技の処置時間を一目で把握することができ、時間がかかっている手技が適正であるかどうかの見直しを行うことができる。
【００５５】
動画タイトル表示部４０５には、ユーザが入力した動画タイトルが表示される。動画タイトル表示部４０５の右側には、基本設定ボタン４０６と、手技設定ボタン４０７とが表示される。基本設定ボタン４０６を選択すると、動画タイトルを含む記述情報の入力画面が表示され、記述情報の修正、追加等を行うことができる。手技設定ボタン４０７を選択すると、手技設定が表示され、ユーザが、各手技の区切りの位置を入力し、また、各手技名を選択または入力を行うことができる。
【００５６】
図３に示す手術動画閲覧画面４００は、手術動画を登録したユーザが閲覧する手術動画閲覧画面であり、ユーザによる記述情報および手技名等の修正を可能とするために、基本設定ボタン４０６と、手技設定ボタン４０７とが表示される。手術動画閲覧画面４００は、手術動画を登録したユーザ以外の他のユーザも閲覧可能であり、他のユーザが閲覧する手術動画閲覧画面４００には、基本設定ボタン４０６および手技設定ボタン４０７は表示されない。但し、他のユーザであっても、アクセス権限のあるユーザが閲覧する手術動画閲覧画面４００には、基本設定ボタン４０６および手技設定ボタン４０７を表示するようにしてもよい。
【００５７】
カテゴリーおよびタグ表示部４０８には、ユーザが入力したカテゴリー、およびタグが表示される。ユーザ名およびグループ表示部４０９には、ユーザ名と、ユーザが所属するグループ名が表示される。ユーザ名は、例えば、本実施形態の手術動画閲覧装置１にログインする際に入力されたユーザ名、またはログイン情報として予め記憶されているユーザ名を用いればよい。グループ名は、動画登録画面、または、基本設定ボタン４０６を選択した際に表示される記述情報の入力画面において選択される。投稿日表示両部４１０には、手術動画が投稿された投稿日が表示される。閲覧回数表示部４１１には、手術動画の閲覧回数が表示される。
【００５８】
診断名表示部４１２には、ユーザが入力した診断名が表示される。術式名表示部４１３には、ユーザが入力した術式名が表示される。患者情報表示部４１４には、ユーザが入力した手術日、性別、術者、年齢、患者ＩＤ等の患者情報が表示される。手術説明表示部４１５には、ユーザが入力した手術についての説明が入力される。これらの診断名、術式名、患者情報、および手術説明を含む記述情報は、動画登録画面、または、基本設定ボタン４０６を選択した際に表示される記述情報の入力画面において、ユーザによる入力が可能となっている。
【００５９】
関連動画リスト表示部４１６には、手術動画表示部４０１に表示される手術動画に関連する関連動画がリスト表示される。関連動画の抽出は、動画タイトル、術式名、カテゴリー、手術の説明等の記述情報、閲覧回数、およびシーン名等の情報を適宜利用して行われる。抽出部５０による関連動画の抽出は、機械学習によって学習され最適化が図られる。
【００６０】
関連動画リスト表示部４１６に表示された関連動画は選択可能となっており、いずれかの関連動画が選択されると、選択された関連動画が手術動画表示部４０１に表示される。
【００６１】
関連動画リスト表示部４１６に表示される関連動画は、例えば、閲覧回数が多い順に並べて表示してもよいし、総再生時間が短い順に並べて表示してもよいが、これには限定されない。
【００６２】
次に、比較再生の際における手術動画閲覧画面４００の表示例について説明する。図３に示すグラフ表示部４０３に表示された積み上げ横棒グラフの手技、または、図４に示すグラフ表示部４０３に表示された縦棒グラフの手技を選択し、吹き出し４１７を表示させた状態で、「関連手術」を選択すると、図５に示すように、関連動画選択画面４２０が表示される。
【００６３】
関連動画選択画面４２０に表示される関連動画は、ユーザがグラフにおいて選択した手技に関連する手技を含む手術動画が、抽出部５０によって抽出される。関連する手技の抽出には、手技名、手術動画のカテゴリー、手技の処置時間等が参照される。図５に示すように、関連動画選択画面４２０に表示される関連動画のサムネイルの右側には、動画ページボタン４２１と、比較再生ボタン４２２とが表示される。動画ページボタン４２１を選択した場合には、関連動画が手術動画表示部４０１に表示される。一方、比較再生ボタン４２２が選択された場合には、図６に示すように、手術動画表示部４０１の右側に関連動画が表示される。図６は、手術動画４２３と関連動画４２４を並べて表示する比較再生時の表示例を示す図である。
【００６４】
図６に示す比較再生時における手術動画４２３と関連動画４２４は、選択された手技の位置までシークが行われ、選択された手技の位置から比較再生が可能となっている。
【００６５】
この比較再生により、ユーザは、注目している手術動画の手技と、他の手術動画の手技のうち、関連性の深い手技を含む関連動画を比較することができる。その結果、注目している手術動画の手技に多くの時間がかかっている場合には、他の手技動画と見比べることにより、改善に繋がるヒントを得ることができる。
【００６６】
また、関連動画選択画面４２０に表示する関連動画の抽出の際には、ユーザの手技の処置時間よりも短い処置時間の手技を含む関連動画を抽出することもできる。このような抽出を行うことにより、ユーザは、自分の手技よりも優れた手技を映像中に含む関連動画を閲覧することができる。したがって、ユーザは、自分の手技の欠点や改善点に気付き易くなり、優れた手技を学ぼうとする動機付けにもなり、学習効果も向上する。
【００６７】
（処理手順）
次に、本実施形態の手術動画閲覧装置１における処理手順について、図７および図８のフローチャートを参照しつつ説明する。図７および図８は、本実施形態に係る手術動画閲覧装置１の処理手順を示すフローチャートである。
【００６８】
まず、ユーザが手術動画を登録すると、動画入力部１０は、登録された手術動画を入力してデータベース２００に格納する（Ｓ１０）。ユーザが、手術動画を登録する際に、動画登録画面において、動画のタイトル、術式名、または手術についての説明等の記述情報を操作部１００により入力すると、記述情報登録部４０は、手術動画と記述情報とを紐付けて、データベース２００に格納する。
【００６９】
次に、手技解析部２０は、登録された手術動画の特徴量を抽出し、手術動画から手技を画定する（Ｓ２０）。また、手技解析部２０は、画定した手技について処置時間を算出し（Ｓ３０）、手技と処置時間とを紐付けてデータベース２００に格納する。
【００７０】
手技名付与部３０は、画定された手技の手技名を付与し、手技名を手技と紐付けてデータベース２００に格納する（Ｓ４０）。
【００７１】
表示制御部７０は、入力された手術動画、記述情報、関連動画、およびグラフを図３のように表示部９０の手術動画閲覧画面４００に表示させる（Ｓ５０）。
【００７２】
以上のように手術動画閲覧画面４００に手術動画およびグラフが表示された状態で、ユーザにより所定の操作が行われると、操作に応じた処理が行われる。図８は、手技、術式名、または関連動画の選択が行われた場合の処理を示すフローチャートである。図８に示す処理は、所定時間ごとに行われる。
【００７３】
ユーザが、グラフ表示部４０３に表示されるグラフにおいて手技をクリック等により選択すると（Ｓ１００：ＹＥＳ）、抽出部５０は、手技名、カテゴリー、手技の処置時間等に基づいて、データベース２００から、指定された手技に関連する手技を含む関連動画を抽出する（Ｓ１１０）。表示制御部７０は、抽出された関連動画を、図５のように関連動画選択画面４２０に表示させる（Ｓ１２０）。
【００７４】
また、ユーザが、関連動画選択画面４２０から関連動画を選択し、動画ページボタン４２１を選択すると（Ｓ１３０：ＹＥＳ）、表示制御部７０は、選択された関連動画を手術動画表示部４０１に表示させる（Ｓ１４０）。
【００７５】
さらに、ユーザが、関連動画選択画面４２０から関連動画を選択し、比較再生ボタン４２２を選択すると（Ｓ１５０：ＹＥＳ）、図６に示すように、手術動画の右側に関連動画を表示させ、比較再生を可能とする（Ｓ１６０）。
【００７６】
以上のように、 本実施形態によれば、手術動画を登録することで、手術動画における手技を自動的に画定し、各手技の処置時間をグラフ表示するので、ユーザは、手術における各手技の処置時間を容易に把握することが可能となる。
【００７７】
また、本実施形態によれば、グラフ表示された手技を選択することにより、選択された手技と関連する手技を含む関連動画を抽出することができる。その結果、注目している手術動画の手技に多くの時間がかかっている場合には、他の手術動画と見比べることにより、改善に繋がるヒントを得ることができる。このように、本実施形態によれば、ユーザに対して、ユーザが見るべき手技を含む手術動画を見せることができる。
【００７８】
また、本実施形態によれば、手術動画と関連動画を比較再生することができるので、ユーザは、自分の手技を映した手術動画と、他者の手術動画とを比較しながら視聴することができる。また、関連動画として、ユーザの手技の処置時間よりも短い処置時間の手技を含む手術動画を表示すれば、ユーザは、自分の手技よりも優れた手技を映像中に含む関連動画を視聴することができる。したがって、ユーザは、自分の手技の欠点や改善点に気付き易くなり、優れた手技を学ぼうとする動機付けにもなり、学習効果も向上する。
【００７９】
さらに、本実施形態の手術動画閲覧装置１は、ＤＶＤ等に記録され、死蔵されていた手術動画を登録することにより、動画資源としてこれらの動画を有効に活用することができる。
【００８０】
（第２実施形態）
次に、本発明の第２実施形態について説明する。第１実施形態においは、手技の画定を手技解析部２０により行う態様について説明した。本実施形態は、第１実施形態の態様に加えて、あるは第１実施形態の態様に代えて、ユーザがマーキングを行うことにより、手技の画定を行う態様について説明する。
【００８１】
本実施形態においては、ユーザが、手術動画表示部４０１に表示された手術動画上、あるいは操作表示部のスライダーバー上でクリック等を行うと、マーキングを行うことができる。この場合、操作部１００がマーキング部として機能する。マーキングされた位置は、手技の開始位置または終了位置であり、ユーザは、手術動画を再生しながら、所望の位置で手技を画定させることができる。この場合には、手技解析部２０は、ユーザによりマーキングされた位置にしたがって手技の画定を行う。
【００８２】
第１実施形態のように手技解析部２０により自動的に手技が画定されていた場合には、このマーキングを行うことにより、画定された手技の位置をユーザが修正することができる。
【００８３】
第１実施形態のように手技解析部２０により自動的に手技の画定を行わない場合には、手術動画を手術動画表示部４０１に表示させた直後にはグラフを表示させず、ユーザによるマーキングが行われた後にグラフを表示させるようにしてもよい。
【００８４】
以上のように、本実施形態によれば、第１実施形態の効果に加えて、ユーザにより手技の画定を行うことができるので、ユーザのニーズに応じた手術動画または手技動画の閲覧を可能とする。
【００８５】
（変形例）
【００８６】
グラフ表示においては、ユーザの手技の処置時間と、基準となる所定の処置時間とを比較可能にグラフ化して表示してもよい。例えば、ユーザの処置時間を表すハッチングされた棒グラフの隣に、例えば、その手技の平均処置時間を表す白抜きのグラフを並べて表示すれば、ユーザは、自らの手技の処置時間が平均を上回っているのか否かを知ることができる。このような場合に、ユーザが、剥離の部分の手技動画を視聴すれば、例えば、自身の手技レベルが低いためなのか、あるいは、癒着がひどく剥離に時間を要したのかなども知ることができる。これとは反対に、切開や摘除については、平均よりも処置時間が短いことが分かる。この場合も、ユーザが、当該部分の手技動画を視聴すれば、自身の手技のよい所をさらに伸ばすことができる。
【００８７】
上述した実施形態では、画像の特徴量を抽出することにより、手技を画定する態様について説明した。しかしながら、本発明はこのような態様に限定される訳ではなく、例えば、手術動画を構成する複数のフレームの画像におけるエッジ部分や、処置具の先端部分を抽出した画像部分が、予め登録された画像の特徴的な動きパターンに該当するか否かにより、吻合等の手技であるか否かを判別するようにしても良い。
【００８８】
上述した実施形態においては、手術動画を閲覧する装置に本発明を適用した態様について説明した。しかしながら、本発明はこのような態様に限定される訳ではなく、あらゆる種類の動画に適用可能である。例えば、野球の動画において、手技の代わりにホームランのシーンを特定のシーンとして画定し、関連するシーンを含む動画を他の野球の動画から関連動画として抽出するようにしてもよい。
【００８９】
この場合、手技解析部２０は、入力された動画におけるシーンの特徴量を抽出するシーン解析部として機能し、閲覧履歴記録部６０は、動画ごとの、またはシーンごとの閲覧履歴を記録する閲覧履歴記録部として機能する。また、抽出部５０は、データベースから、少なくともシー名、および記述情報に基づいて、関連動画を抽出するシーン抽出部として機能する。
【００９０】
上述した実施形態においては、登録された手術動画と関連する書籍、関連する器具、関連する薬剤等の関連情報を、例えば、データベース２００あるいは他のデータベースから取得するようにしてもよい。関連情報は書籍等の情報に限定されず、例えば、手術動画の執刀者の情報や、執刀日時の情報、患者の情報、疾病情報などの様々な情報を含んでもよい。
【００９１】
以上の実施形態は例示であり、この発明の範囲から離れることなく様々な変形が可能である。上述した複数の実施の形態は、それぞれ単独で成立し得るものであるが、実施の形態同士の組みあわせも可能である。また、異なる実施の形態の中の種々の特徴も、それぞれ単独で成立し得るものであるが、異なる実施の形態の中の特徴同士の組みあわせも可能である。
【符号の説明】
【００９２】
１      手術動画閲覧装置
１０    動画入力部
２０    手技解析部
３０    シーン名付与部
４０    記述情報登録部
５０    抽出部
６０    閲覧履歴記録部
７０    表示制御部
８０    データ格納部
９０    表示部
１００  操作部
１１０  記憶部
２００  データベース
【図１】
2019185726.tif 000003
【図２】
2019185726.tif 000004
【図３】
2019185726.tif 000005
【図４】
2019185726.tif 000006
【図５】
2019185726.tif 000007
【図６】
2019185726.tif 000008
【図７】
2019185726.tif 000009
【図８】
2019185726.tif 000010