(57)【要約】【課題】  機器及び機器内オブジェクトを再生映像中から特定することで、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定できるようにする。【解決手段】  機器で行われたオブジェクトの所定の動作を撮影装置で撮影し、映像データとして記録する。そして、映像データを再生中に所望のオブジェクトが指定された場合に、該オブジェクトの機器内の位置及び動作時刻に関する情報に基づいてオブジェクトを特定し、特定したオブジェクトに対して所定の操作を実行可能とする。【選択図】      図３
2007060026.tif 000002
【特許請求の範囲】
【請求項１】
機器で行われたオブジェクトの所定の動作を撮影装置で撮影し、映像データとして記録した後、該映像データを再生する映像処理装置であって、
前記映像データを再生中に所望のオブジェクトが指定された場合に、該オブジェクトの機器内の位置及び動作時刻に関する情報に基づいて前記オブジェクトを特定する特定手段と、
前記特定されたオブジェクトに対して所定の操作を実行可能とする操作手段とを有することを特徴とする映像処理装置。
【請求項２】
前記機器はディスプレイであり、前記オブジェクトの所定の動作は該ディスプレイへのオブジェクトの表示であることを特徴とする請求項１記載の映像処理装置。
【請求項３】
前記機器はプリンタであり、前記オブジェクトの所定の動作は該プリンタでのオブジェクトの印刷であることを特徴とする請求項１記載の映像処理装置。
【請求項４】
前記操作手段は、前記指定されたオブジェクトに対して所定の操作を一覧表示させ、該一覧表示の中からユーザが選択した操作を実行可能とすることを特徴とする請求項１記載の映像処理装置。
【請求項５】
前記特定手段は、前記所望のオブジェクトを含む機器の位置形状に関する情報と、前記オブジェクトの機器内の位置及び動作時刻に関する情報とに基づいて前記オブジェクトを特定することを特徴とする請求項１記載の映像処理装置。
【請求項６】
前記機器の位置形状に関する情報は、ユーザによって決定された情報、或いはディスプレイに表示された特定パターンを撮影し、撮影された特定パターンの変化に基づいて決定した情報であることを特徴とする請求項５記載の映像処理装置。
【請求項７】
前記機器の位置形状に関する情報は、ユーザによって決定された情報、或いはプリンタで印刷が行われる際の印刷トレイを撮影し、撮影された印刷トレイの変化に基づいて決定することを特徴とする請求項５記載の映像処理装置。
【請求項８】
前記映像データを会議議事録として再生し、所望のオブジェクトを特定し、特定されたオブジェクトに対して所定の操作を実行可能とすることを特徴とする請求項１記載の映像処理装置。
【請求項９】
仮想映像を前記映像データに追加する仮想映像追加手段を更に有することを特徴とする請求項１記載の映像生成装置。
【請求項１０】
前記オブジェクトが変化したタイミングを特定するオブジェクト変化特定手段と、
前記特定されたタイミングの映像データを再生する再生手段とを更に有することを特徴とする請求項１記載の映像処理装置。
【請求項１１】
機器で行われたオブジェクトの所定の動作を撮影装置で撮影し、映像データとして記録した後、該映像データを再生する映像処理装置のオブジェクト特定方法であって、
前記映像データを再生中に所望のオブジェクトが指定された場合に、該オブジェクトの機器内の位置及び動作時刻に関する情報に基づいて前記オブジェクトを特定する特定工程と、
前記特定されたオブジェクトに対して所定の操作を実行可能とする操作工程とを有することを特徴とするオブジェクト特定方法。
【請求項１２】
請求項１１記載のオブジェクト特定方法をコンピュータに実行させるためのプログラム。
【請求項１３】
請求項１２記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、機器で行われたオブジェクトの所定の動作を撮影装置で撮影し、映像データとして記録した後、該映像データを再生する技術に関する。
【背景技術】
【０００２】
近年、職場や会議室等で、ディスプレイやプリンタ等のオフィス機器を用いて行われた作業内容や会議内容をカメラで撮影し、撮影された映像を作業記録や会議記録として利用する必要性が高まってきている。その場合、特に撮影された映像から対象オブジェクトを特定することで、長時間の映像中からの検索や利用等の利便性を向上させることが求められており、そのための技術が各種提案されている（例えば、特許文献１〜５）。
【０００３】
例えば、特許文献１は、撮影された会議映像中から特定の参加者の発言を検索することを目的としたものであり、参加者映像の特定を参加者自身が行うようにしたことで、自動認識による誤認識や担当者による手動設定の煩雑さを回避できるものである。
【０００４】
また、特許文献２は、通常のホワイトボードから再利用可能な描画オブジェクトを抽出することを目的としたものであり、撮影映像中のホワイトボードのキャプチャデータから描かれた描画オブジェクトを抽出している。これにより、時間軸で連携される音声データと関連付けることができるものである。
【０００５】
また、特許文献３は、多地点で行われるテレビ会議の議事録を、情報の発信元を判別可能な形式で作成することを目的としたものであり、情報の発信場所と発信順序を示すことができるものである。
【０００６】
また、特許文献４は、複数台のカメラで撮影されたライブ映像と撮影しているカメラを対応付けることで、指定された領域の映像の拡大操作を撮影されたカメラを意識することなく、行えるようにしたものである。
【０００７】
また、特許文献５は、機器を認識するカメラを用いて、ライブ映像中の機器にデータを転送したり、逆に機器からデータを転送したりできるようにしたものである。
【特許文献１】特開2004-208188号公報
【特許文献２】特開2004-080750号公報
【特許文献３】特開平11-175517号公報
【特許文献４】特開2001-128057号公報
【特許文献５】特開2005-051778号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、特許文献１では、参加者映像の特定方法だけが開示されており、機器及び機器内オブジェクトの特定方法については着目されていない。そのため、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定することはできない。
【０００９】
また、特許文献２では、通常のホワイトボードだけを対象としており、機器及び機器内オブジェクトの特定方法については着目されていない。そのため、特許文献２も、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定することはできない。
【００１０】
更に、特許文献３では、生成された議事録中のオブジェクトを特定する方法については開示されていない。そのため、特許文献３も、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定することはできない。
【００１１】
更に、特許文献４では、ライブ映像と撮影しているカメラを対応付けているだけで、映像中の機器及び機器内オブジェクトの特定方法については着目されていない。そのため、特許文献４も、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定することはできない。
【００１２】
そして、特許文献５では、カメラが認識するのは映像中の機器だけであり、機器内オブジェクトの特定方法については着目されていない。更に、映像中の機器の認識に関しても具体的な実現方法があいまいである。そのため、特許文献５も、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定することはできない。
【００１３】
本発明は上記課題を解決するためになされたものであり、機器及び機器内オブジェクトを再生映像中から特定することで、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定できるようにすることを目的とする。
【００１４】
また、特定されたオブジェクトに対する拡大表示や印刷などの所定の操作を可能とすることを目的とする。
【課題を解決するための手段】
【００１５】
本発明は、機器で行われたオブジェクトの所定の動作を撮影装置で撮影し、映像データとして記録した後、該映像データを再生する映像処理装置であって、前記映像データを再生中に所望のオブジェクトが指定された場合に、該オブジェクトの機器内の位置及び動作時刻に関する情報に基づいて前記オブジェクトを特定する特定手段と、前記特定されたオブジェクトに対して所定の操作を実行可能とする操作手段とを有することを特徴とする。
【００１６】
また、本発明は、機器で行われたオブジェクトの所定の動作を撮影装置で撮影し、映像データとして記録した後、該映像データを再生する映像処理装置のオブジェクト特定方法であって、前記映像データを再生中に所望のオブジェクトが指定された場合に、該オブジェクトの機器内の位置及び動作時刻に関する情報に基づいて前記オブジェクトを特定する特定工程と、前記特定されたオブジェクトに対して所定の操作を実行可能とする操作工程とを有することを特徴とする。
【発明の効果】
【００１７】
本発明によれば、機器及び機器内オブジェクトを再生映像中から特定することで、例えばディスプレイ上の表示オブジェクトやプリンタ出力トレイ上の印刷オブジェクトを特定することができる。
【００１８】
また、特定されたオブジェクトに対する拡大表示や印刷などの操作が可能となる。
【発明を実施するための最良の形態】
【００１９】
以下、図面を参照しながら発明を実施するための最良の形態について詳細に説明する。
【００２０】
図１は、実施形態における情報処理装置のハードウェア構成を示すブロック図である。図１において、１０１は情報（データ）を入力するための入力部であり、例えば後述する撮影装置等が接続される。１０２はＣＰＵであり、各種処理のための演算や論理判断等を行い、後述するバスに接続された各構成要素を制御する。１０３は情報（データ）を出力する出力部であり、例えば後述するＬＣＤやＣＲＴ等のディスプレイやプリンタ等の画像形成装置が接続される。
【００２１】
１０４はプログラムメモリであり、後述するフローチャートで示される処理手順を含み、ＣＰＵ１０２による制御のためのプログラムを格納するメモリである。このプログラムメモリ１０４は、ＲＯＭであっても良いし、また外部記憶装置等からプログラムがロードされるＲＡＭであっても良い。１０５はデータメモリであり、各種処理で生じたデータを格納する。このデータメモリ１０５は、例えばＲＡＭとするが、不揮発性の外部記憶媒体から、処理に先立ってロードしておくか、或いは必要がある毎に参照するものとする。
【００２２】
そして、１０６はＣＰＵ１０２の制御の対象とする各構成要素を指示するアドレス信号、各構成要素を制御するためのコントロール信号、及び各構成要素間で相互に授受されるデータの転送を行うためのバスである。
【００２３】
［第１の実施形態］
ここで、図２〜図１８を用いて、再生映像中から指示された時間的位置及び空間的位置に対応する機器及び機器内オブジェクトを特定し、拡大表示や印刷等の操作を行う場合について説明する。第１の実施形態では、特に対象機器がディスプレイであり、その映像がカメラの配置やレンズの特性による歪で、実際のディスプレイの形状（アスペクト比等）が維持されない場合を例に挙げて説明する。
【００２４】
図２は、第１の実施形態におけるシステムイメージの一例を示す図である。図２に示すシステムは会議室をイメージしており、通常の会議室に存在する会議机の他に、大画面のディスプレイ２０２が３台と、会議の様子を広角で撮影する会議映像撮影カメラ（以下、単にカメラと称す）２０１とを含む。また、各ディスプレイ２０２画面上には複数の表示オブジェクト２０３が表示されている様子が示されている。
【００２５】
図３は、図２に示すシステムイメージを実現する場合の構成を示すシステムブロック図である。図３に示すように、表示装置３０１〜３０３に表示された各表示オブジェクトに関する情報は会議記録装置３０５によってオブジェクト動作記録データ３０６として記録される。また、撮影装置３０４によって撮影された映像も、各表示オブジェクトに関する情報と同様に、撮影映像データ３０７として記録される。
【００２６】
このようにして記録されたオブジェクト動作記録データ３０６、撮影映像データ３０７は、各機器の撮影映像中での位置や形状を記録した機器位置形状データ３０８を参照して会議記録再生装置３０９によって再生される。
【００２７】
尚、第１の実施形態では、図１に示した情報処理装置が図３に示す会議記録装置３０５及び会議記録再生装置３０９として機能し、詳細は後述する機器位置形状自動設定や機器位置形状指示を行う機能を有するものである。
【００２８】
図４は、図３に示す会議記録装置３０５及び会議記録再生装置３０９の機能を示す機能ブロック図である。図４に示すように、会議記録４００（会議記録装置３０５に相当）、会議記録再生４１０（会議記録再生部３０９に相当）、機器位置形状自動設定４３０、及び機器位置形状指示４４０の各機能で構成される。会議記録４００は、会議の内容を記録する機能を提供する。会議記録再生４１０は、記録された会議記録を再生する機能を提供する。機器位置形状自動設定４３０は、映像変化を伴う動作を機器に実行させて機器位置形状を推測する機能を提供する。そして、機器位置形状指示４４０は、再生映像中から機器内のオブジェクトを特定するために必要な機器位置形状を指示する機能を提供する。
【００２９】
会議記録４００は、映像撮影部４０１と、会議操作部４０２と、オブジェクト表示部４０３と、オブジェクト動作記録部４０４とから構成されている。映像撮影部４０１は、撮影装置３０４で撮影した会議の様子を撮影映像データ３０７として記録する。会議操作部４０２は、会議資料の表示指示や電子ホワイトボードへの書き込み指示を行う。オブジェクト表示部４０３は、指示に従って表示オブジェクトを表示する。オブジェクト動作記録部４０４は、表示オブジェクトに対して行われた動作をオブジェクト動作記録データ３０８として記録する。
【００３０】
次に、会議記録再生４１０の構成について説明する。尚、詳細については、更に後述する。会議映像再生部４１１は、上述の撮影映像データ３０７として記録された会議映像を再生する。会議映像操作部４１２は、再生中の映像を操作する。映像位置指定部４１３は、映像中の任意の位置を指定する。機器位置形状取得部４１４は、予め定義されている機器位置形状データ３０８を用いて機器位置形状を取得する。指定機器特定部４１５は、指定位置の機器を特定する。指定機器内オブジェクト特定部４１６は、指定位置の機器内オブジェクトを特定する。オブジェクト位置形状取得部４１７は、特定されたオブジェクトの位置形状を取得する。ディスプレイ内相対位置特定部４１８は、指定位置に対応するディスプレイ内の相対位置を特定する。オブジェクト動作検索部４１９は、指定位置に対応するオブジェクト動作を検索する。オブジェクト操作部４２０は、特定されたオブジェクトを操作する。
【００３１】
機器位置形状自動設定４３０は、映像変化を伴う動作を機器に実行させる機器位置形状取得可能動作実行部４３１と、映像変化を解析して機器位置形状を推測して機器位置形状データ３０８の定義を自動設定する機器位置形状推測部４３２とから構成されている。機器位置形状指示部４４１は、機器位置形状データ３０８の定義を指示する。
【００３２】
図５は、第１の実施形態における会議記録処理を示すフローチャートである。会議記録４００に撮影開始が指示されると、ステップＳ５０１において、撮影映像データ３０７の記録を開始する（映像撮影開始処理）。そして、ステップＳ５０２において、ユーザによる操作を受け付け（会議操作処理）、次のステップＳ５０３で、オブジェクト操作指示と判定した場合はステップＳ５０４へ進み、対応するオブジェクトを表示更新する（オブジェクト表示更新処理）。そして、ステップＳ５０５において、その表示更新動作をオブジェクト動作記録データ３０６として記録し（オブジェクト動作記録処理）、ステップＳ５０２に戻り、上述した処理を繰り返す。また、ステップＳ５０３において、終了指示と判定した場合はステップＳ５０６へ進み、撮影を終了し（映像撮影終了処理）、この会議記録処理を終了する。
【００３３】
図６は、オブジェクト動作記録データ３０６の一例を示す図である。図６に示すように、オブジェクト動作記録データ３０６には、機器、機器内のオブジェクト、オブジェクトが動作した時刻、動作種別（アクション）、表示領域（Ｘ１，Ｙ１，Ｘ２，Ｙ２）を特定するための情報が記録されている。
【００３４】
例えば、表示装置３０１で静止画１ａが時刻（2005/05/09 10:35:12）に表示領域((20,50),(450,100))に表示されたことがオブジェクト動作記録データ６０１として記録されている。その後、静止画１ａが非表示にされたことがオブジェクト動作記録データ６０４として記録されている。
【００３５】
図７は、第１の実施形態におけるオブジェクト動作記録処理を示すフローチャートである。まず、ステップＳ７０１において、オブジェクト動作記録データ３０６からオブジェクトの動作種別を取得する（アクション取得処理）。そして、ステップＳ７０２において、動作種別を判定し、動作種別が「表示」又は「移動完了」の場合はステップＳ７０３へ進み、ディスプレイ内におけるオブジェクトの表示領域を取得する（ディスプレイ内座標取得処理）。
【００３６】
また、ステップＳ７０２において、動作種別が「非表示」の場合はステップＳ７０４へ進み、各表示装置上での操作時刻からシステムの絶対時刻を取得する（絶対時刻取得処理）。次に、ステップＳ７０５において、この処理で取得した情報をオブジェクト動作記録データ３０６として記録し（記録処理）、この処理を終了する。一方、ステップＳ７０２において、動作種別が上記以外の場合には、ステップＳ７０３以降の処理を行わずに、この処理を終了する。
【００３７】
図８は、第１の実施形態における会議記録再生処理を示すフローチャートである。まず、ステップＳ８０１において、会議記録再生４１０に操作対象となる会議記録が指定されると（再生映像指定処理）、続くステップＳ８０２で、操作が行われるのを待つ（会議映像操作処理）。ここで、操作が行われると、ステップＳ８０３において、その操作が、「再生」、「一時停止からの再開」、「逆再生」指示の何れかの場合はステップＳ８０４へ進む。このステップＳ８０４では、指定位置からの再生又は逆再生を行い（再生処理）、ステップＳ８０２に戻り、上述の処理を繰り返す。
【００３８】
また、ステップＳ８０３において、その操作が「再生位置変更」指示の場合はステップＳ８０５へ進み、指定された位置に再生位置を変更し（再生位置変更処理）、ステップＳ８０２に戻り、上述の処理を繰り返す。
【００３９】
また、ステップＳ８０３において、その操作が「映像位置指定」指示の場合はステップＳ８０６へ進み、再生位置に対応する時刻の機器位置形状データを取得する（機器位置形状取得処理）。そして、ステップＳ８０７において、指定位置に対応する機器を特定する（指定機器特定処理）。次に、ステップＳ８０８において、オブジェクト動作記録データ３０６を参照することで指定位置に対応する機器内オブジェクトを特定する（指定機器内オブジェクト特定処理）。そして、ステップＳ８０２に戻り、上述の処理を繰り返す。
【００４０】
また、ステップＳ８０３において、その操作が「オブジェクト操作」指示の場合はステップＳ８０９へ進み、上記手順で特定されたオブジェクトに対する指定された操作を実行する（オブジェクト操作処理）。そして、ステップＳ８０２に戻り、上述の処理を繰り返す。また、ステップＳ８０３において、その操作が「終了」の場合はステップＳ８１０へ進み、再生を終了し（再生終了処理）、この処理を終了する。
【００４１】
図９は、会議映像の再生操作、再生映像中の指定位置に表示されているオブジェクトを操作可能な会議映像操作画面の一例を示す図である。この例では、再生位置がスクロールバー９０２上で位置９０３として示され、対応する時刻の映像９０１が表示されている。また、再生映像に対する先頭移動９０４、逆再生９０５、再生９０６、末尾移動９０７、停止９０８、一時停止９０９等の指示ボタンが示されている。
【００４２】
一方、再生映像のオブジェクトに対する操作は、まず再生映像９０１中の任意の位置が指定９１１され、その指定位置に対応するオブジェクト操作メニュー９１２を表示させることにより操作が行われる。
【００４３】
図１０は、第１の実施形態における会議映像操作処理を示すフローチャートである。まず、ステップＳ１００１において、行われた操作を判定する。その結果、行われた操作がスクロールバー９０２上での位置９０３の変更や先頭移動９０４、末尾移動９０７等の「再生位置変更」を伴う指示の場合はステップＳ１００２へ進み、再生位置を変更し（再生位置変更処理）、この処理を終了する。
【００４４】
また、ステップＳ１００１で行われた操作が停止９０８、一時停止９０９等の「停止」「一時停止」を伴う指示の場合はステップＳ１００３へ進み、再生を停止し（一時停止処理）、この処理を終了する。また、ステップＳ１００１で行われた操作が再生映像９０１中の任意位置の指定９１１等による「映像位置指定」操作の場合はステップＳ１００４へ進み、指定された位置情報を取得し（映像内位置取得処理）、この処理を終了する。
【００４５】
また、ステップＳ１００１で行われた操作が「オブジェクト操作選択」指示の場合はステップＳ１００５へ進み、指定操作を選択し（オブジェクト操作選択処理）、この処理を終了する。更に、ステップＳ１００１で上記以外の操作の場合は、上述の処理を行わずに、この処理を終了する。
【００４６】
図１１は、機器位置形状データ３０８の一例を示す図である。図１１に示すように、機器位置形状データ３０８には、機器、機器に対する動作時刻、動作種別（アクション）、機器の実際の大きさを示す物理サイズ、映像上での位置形状（左上、左下、右上、右下）を特定するための情報が記録されている。
【００４７】
例えば、機器位置形状データ１１０１として以下のことが記録されている。また、機器位置形状データ１１０４として表示装置３０１が撤去されたことが記録されている。
【００４８】
物理サイズ（640,480）で映像上での位置形状（(115,8),(115,42),(160,8),(160,42)）である表示装置３０２が時刻（2005/01/01 00:00:00）に設置。
【００４９】
図１２は、第１の実施形態における、再生位置に対応する時刻の機器位置形状データを取得する機器位置形状取得処理を示すフローチャートである。まず、ステップＳ１２０１において、機器位置形状リストを初期化し、続くステップＳ１２０２で、対象を機器位置形状データ先頭に初期化する。そして、ステップＳ１２０３において、対象が有効か否かを判定し、有効の場合はステップＳ１２０４へ進み、対象の機器位置形状データ３０８が示す時刻が指定再生位置に対応する時刻以前か否かを判定する。その結果、指定時刻以前と判定した場合はステップＳ１２０５へ進み、機器位置形状リストを更新し、ステップＳ１２０６において、対象を進めた後、ステップＳ１２０３に戻り、上述の処理を繰り返す。
【００５０】
一方、ステップＳ１２０３において、対象が有効でない、即ち終了の場合やステップＳ１２０４において、対象の機器位置形状データが示す時刻が指定再生位置に対応する時刻より後と判定した場合には、この処理を終了する。
【００５１】
図１３は、第１の実施形態における指定機器特定処理を示すフローチャートである。まず、ステップＳ１３０１において、対象を上述の機器位置形状リストの先頭に初期化し、ステップＳ１３０２以降の処理を繰り返す。ステップＳ１３０２では、対象が有効か否かを判定し、有効の場合はステップＳ１３０３へ進み、対象の機器位置形状データ３０８における映像上の位置形状で示される表示領域内に指定位置が含まれるか否かを判定する。その結果、指定位置がその表示領域内に含まれる場合、対象の機器位置形状データを戻り値として処理を終了する。
【００５２】
また、ステップＳ１３０３において、指定位置がその表示領域内に含まれない場合にはステップＳ１３０４へ進み、対象を進め、ステップＳ１３０２に戻り、上述の処理を繰り返す。一方、ステップＳ１３０２において、対象が有効でない、即ち指定位置に対応する機器が無かった場合には、この処理を終了する。
【００５３】
図１４は、第１の実施形態における指定機器内オブジェクト特定処理を示すフローチャートである。まず、ステップＳ１４０１において、再生位置に対応する時刻の機器位置形状データを取得する（オブジェクト位置形状取得処理）。次に、ステップＳ１４０２において、指定機器の映像上の歪みを考慮したディスプレイデバイス内での相対位置を求める（ディスプレイ内相対位置特定処理）。そして、ステップＳ１４０３において、指定位置に対応するオブジェクト動作記録データを検索し（オブジェクト動作検索処理）、この処理を終了する。
【００５４】
図１５は、図１４に示すオブジェクト位置形状取得処理を示すフローチャートである。まず、ステップＳ１５０１において、戻り値となるオブジェクト位置形状リストを初期化し、続くステップＳ１５０２で、対象をオブジェクト動作記録データ先頭で初期化する。そして、ステップＳ１５０３以降の処理を繰り返す。
【００５５】
ステップＳ１５０３では、対象が有効の場合はステップＳ１５０４へ進み、対象のオブジェクト動作記録データが示す時刻が指定時刻以前か否かを判定する。ここで、指定時刻以前と判定した場合はステップＳ１５０５へ進み、指定機器と一致しているか否かを判定する。その結果、指定機器と一致していると判定した場合はステップＳ１３０６へ進み、オブジェクト位置形状リスト中のオブジェクト位置形状データを更新する。そして、ステップＳ１５０７において、対象を進めた後、ステップＳ１５０３に戻り、上述の処理を繰り返す。
【００５６】
一方、ステップＳ１５０３で対象が終了と判定した場合や、ステップＳ１５０４で対象のオブジェクト動作記録データが示す時刻が指定時刻以後と判定した場合には、これまで設定されたオブジェクト位置形状リストを戻り値として、この処理を終了する。
【００５７】
図１６は、図１４に示すディスプレイ内相対位置特定処理を示すフローチャートである。まず、ステップＳ１６０１において、相対位置が映像上の指定機器の左上座標を起点に設定され、続くステップＳ１６０２で、指定機器の映像上での拡大縮小率を取得する（拡大縮小率取得処理）。そして、ステップＳ１６０３において、該拡大縮小率を用いて指定位置に対するディスプレイデバイス内相対位置が補正され、処理を終了する。
【００５８】
図１７は、第１の実施形態におけるオブジェクト動作検索処理を示すフローチャートである。まず、ステップＳ１７０１において、対象をオブジェクト位置形状リストの先頭に初期化し、続くステップＳ１７０２以降の処理を繰り返す。
【００５９】
ステップＳ１７０２で、対象が有効か否かを判定し、有効の場合はステップＳ１７０３へ進み、指定位置が示すディスプレイデバイス内相対位置が対象のオブジェクト位置形状データの表示領域内に含まれるか否かを判定する。その結果、表示領域内に含まれる場合は、対象のオブジェクト動作記録データを戻り値として、この処理を終了する。
【００６０】
また、ステップＳ１７０３において、表示領域内に含まれない場合にはステップＳ１７０４へ進み、対象を進めて、ステップＳ１７０２に戻り、上述の処理を繰り返す。一方、ステップＳ１７０２において、対象が有効でない場合、検索に失敗したものとして、この処理を終了する。
【００６１】
図１８は、第１の実施形態におけるオブジェクト操作処理を示すフローチャートである。まず、ステップＳ１８０１において、上述の処理で特定された指定位置に対応するオブジェクトを取得し（オブジェクト取得処理）、ステップＳ１８０２で分岐する。ここで、指定操作が表示指示の場合はステップＳ１８０３へ進み、特定されたオブジェクトの再生処理を実行し（オブジェクト再生処理）、この処理を終了する。
【００６２】
また、ステップＳ１８０２において、指定操作が印刷指示の場合はステップＳ１８０４へ進み、特定されたオブジェクトの印刷処理を実行し（オブジェクト印刷処理）、この処理を終了する。また、指定操作が検索指示の場合はステップＳ１８０５へ進み、特定されたオブジェクトが変化するタイミングを検索し、その位置からの映像を再生し（オブジェクト検索再生処理）、この処理を終了する。
【００６３】
このように、第１の実施形態によれば、機器及び機器内オブジェクトを再生映像中から特定することができる。また、特定されたオブジェクトに対する拡大表示や印刷等の操作が可能となる。特に、ディスプレイ上の表示オブジェクトを特定することができる。
【００６４】
［第２の実施形態］
次に、図１９〜図２３を用いて、本発明に係る第２の実施形態を詳細に説明する。第２の実施形態では、特に対象機器がプリンタであり、再生映像中から指示された時間的位置と空間的位置に対応する機器及び機器内オブジェクトを特定し、拡大表示や印刷等の操作を行う場合を例に挙げて説明する。
【００６５】
図１９は、第２の実施形態におけるプリンタを含むシステムイメージの一例を示す図である。図１９に示すシステムは会議室をイメージしており、通常の会議室に存在する会議机の他に、大画面のディスプレイ１９０２が２台と、プリンタ１９０４が２台と、会議の様子を広角で撮影するカメラ１９０１とで構成されている。また、各ディスプレイ画面上には複数の表示オブジェクト１９０３が表示されており、各プリンタの出力トレイ上には複数の印刷オブジェクト１９０５が置かれている様子が示されている。
【００６６】
図２０は、プリンタを対象としたオブジェクト動作記録データの一例を示す図である。図２０に示すように、オブジェクト動作記録データには、機器及び機器内オブジェクトを特定するための情報、そのオブジェクトが動作した時刻及び動作種別、印刷トレイが記録されている。
【００６７】
例えば、印刷装置１９０４で静止画４ａが時刻2005/05/09 10:37:22に印刷トレイａ上に印刷されたことがオブジェクト動作記録データ２００１として記録されている。また、そのオブジェクトが受け取られたことがオブジェクト動作記録データ２００４として記録されている。
【００６８】
図２１は、第２の実施形態におけるオブジェクト動作記録処理を示すフローチャートである。まず、ステップＳ２１０１において、記録対象機器を判定し、ディスプレイの場合はステップＳ２１０２へ進み、オブジェクト動作記録データからオブジェクトの動作種別を取得する（アクション取得処理）。そして、ステップＳ２１０３において、動作種別を判定し、動作種別が「表示」又は「移動完了」の場合はステップＳ２１０４へ進み、ディスプレイ内におけるオブジェクトの表示領域を取得する（ディスプレイ内座標取得処理）。
【００６９】
また、ステップＳ２１０３において、動作種別が「非表示」の場合はステップＳ２１０５へ進み、各表示装置上での操作時刻からシステムの絶対時刻を取得する（絶対時刻取得処理）。次に、ステップＳ２１０６において、この処理で取得した情報をオブジェクト動作記録データとして記録し（記録処理）、この処理を終了する。また、ステップＳ２１０３において、動作種別が上記以外の場合には、この処理を終了する。
【００７０】
また、ステップＳ２１０１において、記録対象機器がプリンタの場合はステップＳ２１０７へ進み、オブジェクト動作記録データからオブジェクトの動作種別を取得する（アクション取得処理）。そして、ステップＳ２１０８において、動作種別を判定し、動作種別が「印刷」の場合はステップＳ２１０９へ進み、オブジェクトの出力トレイを取得する（プリンタ出力トレイ取得処理）。
【００７１】
また、ステップＳ２１０８において、動作種別が「受取」の場合はステップＳ２１１０へ進み、各印刷装置上での操作時刻からシステムの絶対時刻を取得する（絶対時刻取得処理）。次に、ステップＳ２１１１において、この処理で取得した情報をオブジェクト動作記録データとして記録し（記録処理）、この処理を終了する。また、ステップＳ２１０８において、動作種別が上記以外の場合には、この処理を終了する。
【００７２】
図２２は、プリンタの機器位置形状データの一例を示す図である。図２２に示すように、機器位置形状データには、機器、出力トレイ、機器に対する動作時刻、動作種別（アクション）、映像上での位置形状（左上、左下、右上、右下）を特定するための情報が記録されている。
【００７３】
例えば、印刷装置１４０４の出力トレイｂが時刻2005/02/01 00:00:00に設置されたことが機器位置形状データ２２０４として記録されている。また、その出力トレイｂが撤去されたことが機器位置形状データ２２０５として記録されている。
【００７４】
図２３は、第２の実施形態における指定機器内オブジェクト特定処理を示すフローチャートである。まず、ステップＳ２３０１において、再生位置に対応する時刻の機器位置形状データを取得する（オブジェクト位置形状取得処理）。次に、ステップＳ２３０２において、機器位置形状データから指定位置に対応する出力トレイを求める（プリンタ出力トレイ特定処理）。そして、ステップＳ２３０３において、指定位置に対応するオブジェクト動作記録データを検索し（オブジェクト動作検索処理）、この処理を終了する。
【００７５】
このように、第２の実施形態によれば、特にプリンタ出力トレイ上の印刷オブジェクトを特定することができる。
【００７６】
［第３の実施形態］
次に、図２４〜図２５を用いて、本発明に係る第３の実施形態を詳細に説明する。第３の実施形態では、再生映像中に表示されている機器の位置形状をユーザが指定する場合を例に挙げて説明する。
【００７７】
図２４は、会議映像中に表示されている機器の表示領域を指示可能な機器位置形状指示画面の一例を示す図である。図２４に示す機器位置形状指示画面を用いることで再生中の会議映像２４０７の任意表示領域２４０８を任意機器２４０６の位置形状として指示することができる。
【００７８】
また、図２４に示す機器位置形状指示画面には、指示対象となる機器一覧が表示され、その一覧に対する追加２４０３、変更２４０４、削除２４０５の指示ボタンが配置されており、更に確定２４０１、取消２４０２の指示ボタンが配置されている。
【００７９】
図２５は、第３の実施形態における機器位置形状指示処理を示すフローチャートである。まず、ステップＳ２５０１において、行われた操作を判別し、操作が「追加」の指示の場合はステップＳ２５０２へ進み、システムを構成する機器を追加する（機器追加処理）。そして、ステップＳ２５０３において、その機器に対する再生映像中での位置形状を指示し（位置形状変更処理）、ステップＳ２５０１に戻り、上述の処理を繰り返す。
【００８０】
また、ステップＳ２５０１において、操作が「変更」の指示の場合にはステップＳ２５０３へ進み、位置形状変更処理を行う。また、操作が「削除」の指示の場合はステップＳ２５０４へ進み、選択中の機器を削除し（機器削除処理）、ステップＳ２５０１に戻り、上述の処理を繰り返す。
【００８１】
また、ステップＳ２５０１において、操作が「取消」の指示の場合は、この処理を終了する。また、操作が「確定」の指示の場合はステップＳ２５０５へ進み、これまでに変更された内容を確定し（変更確定処理）、この処理を終了する。
【００８２】
このように、第３の実施形態によれば、明示的に再生映像中の機器の位置と形状を指定することができる。
【００８３】
［第４の実施形態］
次に、図２６〜図２８を用いて、本発明に係る第４の実施形態を詳細に説明する。第４の実施形態では、特に対象機器がディスプレイであり、機器に特定の動作を促すことで、撮影映像中に表示されている機器の位置形状をユーザが指定しなくても、自動設定可能とする場合を例に挙げて説明する。
【００８４】
図２６は、撮影映像中に表示されている機器の表示領域を自動設定可能な機器位置形状指示画面の一例を示す図である。図２６に示す機器位置形状指示画面により撮影映像中の会議映像２６０７に表示中の任意機器２６０６の表示領域２６０８に映像変化を促すことで、位置形状を自動設定することができる。
【００８５】
また、図２６に示す機器位置形状指示画面には、指示対象となる機器一覧が表示され、その一覧に対する追加２６０３、自動設定２６０４、削除２６０５の指示ボタンが配置されており、更に確定２６０１、取消２６０２の指示ボタンが配置されている。
【００８６】
図２７は、第４の実施形態における機器位置形状指示処理を示すフローチャートである。まず、ステップＳ２７０１において、行われた操作を判別し、操作が「追加」の指示の場合はステップＳ２７０２へ進み、システムを構成する機器を追加する（機器追加処理）。そして、ステップＳ２７０３において、その機器に対する再生映像中での位置形状を自動設定し（位置形状自動設定処理）、ステップＳ２７０１に戻り、上述の処理を繰り返す。
【００８７】
また、ステップＳ２７０１において、操作が「自動設定」の指示の場合はステップＳ２７０３へ進み、位置形状自動設定処理を行う。また、操作が「削除」の指示の場合はステップＳ２７０４へ進み、選択中の機器を削除し（機器削除処理）、ステップＳ２７０１に戻り、上述の処理を繰り返す。
【００８８】
また、ステップＳ２７０１において、操作が「取消」の指示の場合は、この処理を終了する。また、操作が「確定」の指示の場合はステップＳ２７０５へ進み、これまでに変更された内容を確定し（変更確定処理）、この処理を終了する。
【００８９】
図２８は、第４の実施形態における位置形状自動設定処理を示すフローチャートである。まず、ステップＳ２８０１において、後述する処理による映像変化が現れる前の映像を撮影する（撮影処理）。そして、ステップＳ２８０２において、自動設定対象となるディスプレイ上に特定のパターンの映像を表示させる（特定パターン表示処理）。その結果、ステップＳ２８０３において、変化後の映像を撮影し（撮影処理）、ステップＳ２８０４で変化前後の映像の差分を抽出する（映像差分抽出処理）。そして、ステップＳ２８０５において、その差分に基づいて位置形状を推測・設定し（機器位置形状確定処理）、この処理を終了する。
【００９０】
このように、第４の実施形態によれば、明示的に再生映像中の機器の位置と形状を指定しなくても、再生映像中の機器の位置と形状を推測することができる。特に、再生映像中のディスプレイの位置と形状を推測することができる。
【００９１】
［第５の実施形態］
次に、図２９〜図３０を用いて、本発明に係る第５の実施形態を詳細に説明する。第５の実施形態では、特に対象機器がプリンタであり、機器に特定の動作を促すことで、撮影映像中に表示されている機器の位置形状をユーザが指定しなくても、自動設定可能とする場合を例に挙げて説明する。
【００９２】
図２９は、撮影映像中に表示されているプリンタの表示領域を自動設定可能な機器位置形状指示画面の一例を示す図である。図２９に示す機器位置形状指示画面により撮影映像中の会議映像２９０７に表示中の印刷装置２９０６の出力トレイ表示領域２９０８に映像変化を促すことで、位置形状を自動設定することができる。
【００９３】
また、図２９に示す機器位置形状指示画面には、指示対象となる機器一覧が表示され、その一覧に対する追加２９０３、自動設定２９０４、削除２９０５の指示ボタンが配置されており、更に確定２９０１、取消２９０２の指示ボタンが配置されている。
【００９４】
図３０は、第５の実施形態におけるプリンタ出力トレイの位置形状自動設定処理を示すフローチャートである。まず、ステップＳ３００１において、対象を自動設定対象機器に対応する出力トレイリストの先頭に初期化し、ステップＳ３００２以降の処理を繰り返す。ステップＳ３００２において、対象を判定し、対象が有効の場合はステップＳ３００３へ進み、後述する処理による映像変化が現れる前の映像を撮影する（撮影処理）。そして、ステップＳ３００４において、自動設定対象となるプリンタの出力トレイに特定のパターンの映像を印刷させる（特定パターン印刷処理）。その結果、ステップＳ３００５において、変化後の映像を撮影し（撮影処理）、ステップＳ３００６において、変化前後の映像の差分を抽出する（映像差分抽出処理）。そして、ステップＳ３００７において、その差分に基づいて位置形状を推測・設定し（出力トレイ位置形状確定処理）、ステップＳ３００８において、対象を進め、ステップＳ３００２に戻り、上述の処理を繰り返す。一方、ステップＳ３００２において、対象が有効でない場合は、この処理を終了する。
【００９５】
このように、第５の実施形態によれば、特に再生映像中のプリンタ出力トレイの位置と形状を推測することができる。
【００９６】
［第６の実施形態］
次に、図３１〜図３３を用いて、本発明に係る第６の実施形態を詳細に説明する。第６の実施形態では、議事録内の会議映像スナップショットを用いて、指示された時間的位置と空間的位置に対応する機器及び機器内オブジェクトを特定し、拡大表示や印刷等の操作を行う場合を例に挙げて説明する。
【００９７】
図３１は、第６の実施形態における会議記録処理を示すフローチャートである。まず、ステップＳ３１０１において、上述の撮影映像データへの記録を開始する（映像撮影開始処理）。そして、ステップＳ３１０２において、ユーザによる操作を受け付け（会議操作処理）、次のステップＳ３１０３で操作を判定する。ここで、操作がオブジェクト操作の指示の場合はステップＳ３１０４へ進み、対応するオブジェクトの表示を更新する（オブジェクト表示更新処理）。そして、ステップＳ３１０５において、その表示更新動作を上述のオブジェクト動作記録データに記録し（オブジェクト動作記録処理）、ステップＳ３１０２に戻り、上述の処理を繰り返す。
【００９８】
また、ステップＳ３１０３において、操作が議事録追加操作の指示の場合はステップＳ３１０６へ進み、指示時点での会議映像を撮影する（静止画撮影処理）。そして、ステップＳ３１０７において、その会議映像を含む議事録データを追加し（議事録追加処理）、ステップＳ３１０２に戻り、上述の処理を繰り返す。また、ステップＳ３１０３において、操作が終了指示の場合はステップＳ３１０８へ進み、撮影を終了し（映像撮影終了処理）、この処理を終了する。
【００９９】
図３２は、第６の実施形態における議事録操作画面の一例を示す図である。図３２に示す議事録画面には、上述の議事録追加操作時の時刻、表示オブジェクト、静止画会議映像３２０２、３２０３、３２０４が表示されており、スクロールバー３２０１で操作可能に構成されている。また、任意の時刻の静止画会議映像上で、位置指定操作３２０５で表示オブジェクトに対する操作指示が行われると、操作可能なオブジェクト操作指示３２０６が表示されるように構成されている。
【０１００】
図３３は、第６の実施形態における議事録操作処理を示すフローチャートである。まず、ステップＳ３３０１において、操作対象となる議事録が指定され（議事録指定処理）、ステップＳ３３０２において、操作指示が行われる（議事録操作処理）。そして、ステップＳ３３０３において、操作指示を判定し、操作指示がスクロールバー３２０１を用いた「議事録位置変更」指示の場合はステップＳ３３０４へ進み、議事録の表示位置を変更する（議事録位置変更処理）。そして、ステップＳ３３０２に戻り、上述の処理を繰り返す。
【０１０１】
また、ステップＳ３３０３において、操作指示が「映像位置指定」指示の場合はステップＳ３３０５へ進み、議事録位置に対応する時刻の機器位置形状データを取得する（機器位置形状取得処理）。そして、ステップＳ３３０６において、指定位置に対応する機器を特定する（指定機器特定処理）。次に、ステップＳ３３０７において、オブジェクト動作記録データを参照することで指定位置に対応する機器内オブジェクトを特定し（指定機器内オブジェクト特定処理）、ステップＳ３３０２に戻り、上述の処理を繰り返す。
【０１０２】
また、ステップＳ３３０３において、操作指示が「オブジェクト操作」の指示の場合はステップＳ３３０８へ進み、上述した手順で特定されたオブジェクトに対する指定された操作を実行する（オブジェクト操作処理）。そして、ステップＳ３３０２に戻り、上述の処理を繰り返す。また、ステップＳ３３０３において、操作指示が「終了」指示の場合は、この処理を終了する。
【０１０３】
このように、第６の実施形態によれば、機器及び機器内オブジェクトを議事録に含まれる会議映像のスナップショットから特定することができる。
【０１０４】
［第７の実施形態］
次に、図３４〜図３５を用いて、本発明に係る第７の実施形態を詳細に説明する。第７の実施形態では、生成される会議映像中の機器の位置や形状の情報から会議中に行われた動作に対応する会議映像を生成する場合を例に挙げて説明する。
【０１０５】
図３４は、第７の実施形態で生成された仮想映像の一例を示す図である。図３４に示すように、会議映像画面３４０１上には上述の機器位置形状データに基づいてディスプレイ３４０２が配置され、上述のオブジェクト動作記録データに基づいて対応する時刻の表示オブジェクト３４０３が表示される。
【０１０６】
図３５は、第７の実施形態における仮想映像生成処理を示すフローチャートである。まず、ステップＳ３５０１において、仮想映像を初期化し、ステップＳ３５０２で、対象をオブジェクト動作記録データの先頭に初期化し、ステップＳ３５０３以降の処理を繰り返す。
【０１０７】
ステップＳ３５０３では、対象が有効か否かを判定し、有効の場合はステップＳ３５０４へ進み、対象のオブジェクト動作記録データから対応する時刻の仮想映像を追加する（仮想映像追加処理）。そして、ステップＳ３５０５において、対象を進め、ステップＳ３５０２に戻り、上述の処理を繰り返す。一方、ステップＳ３５０３において、対象が有効でない、即ち終了の場合は、この処理を終了する。
【０１０８】
このように、第７の実施形態によれば、仮想的な会議映像を生成することができる。
【０１０９】
［第８の実施形態］
次に、図３６〜図３７を用いて、本発明に係る第８の実施形態を詳細に説明する。第８の実施形態では、再生映像中から指示された時間的位置と空間的位置に対応する機器及び機器内オブジェクトを特定し、そのオブジェクトが変化したタイミングの映像を検索して再生する場合を例に挙げて説明する。
【０１１０】
図３６は、第８の実施形態におけるオブジェクト検索再生処理を示すフローチャートである。まず、ステップＳ３６０１において、指定位置で特定されたオブジェクトが変化したタイミングを特定する（オブジェクト変化特定処理）。そして、ステップＳ３６０２において、そのタイミングから映像を再生する（映像再生処理）。
【０１１１】
図３７は、第８の実施形態におけるオブジェクト変化特定処理を示すフローチャートである。まず、ステップＳ３７０１において、対象が指定位置で特定されたオブジェクトに対応するオブジェクト動作記録データの位置に初期化し、ステップＳ３７０２以降の処理を繰り返す。
【０１１２】
ステップＳ３７０２では、対象が有効か否かを判定し、有効の場合はステップＳ３７０３へ進み、そのオブジェクトと同一か否かを判定する。その結果、同一と判定した場合には対象のオブジェクト動作記録データを戻り値として、この処理を終了する。また、同一と判定しなかった場合にはステップＳ３７０４へ進み、対象を進め、ステップＳ３７０２に戻り、上述の処理を繰り返す。一方、ステップＳ３７０２において、対象が有効でない、即ち終了の場合には、特定失敗として、この処理を終了する。
【０１１３】
尚、上述した実施形態の他にも、再生映像中から指示された位置の映像的変化があったタイミングを検索した後、そのタイミングで機器及び機器内オブジェクトを特定し、再生する例も想定される。
【０１１４】
以上説明したように、本実施形態によれば、再生映像中から特定された機器及び機器内オブジェクトが変化したタイミングの映像を再生することができる。
【０１１５】
尚、本発明は複数の機器（例えば、ホストコンピュータ，インターフェース機器，リーダ，プリンタなど）から構成されるシステムに適用しても、１つの機器からなる装置（例えば、複写機，ファクシミリ装置など）に適用しても良い。
【０１１６】
また、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（ＣＰＵ若しくはＭＰＵ）が記録媒体に格納されたプログラムコードを読出し実行する。これによっても、本発明の目的が達成されることは言うまでもない。
【０１１７】
この場合、記録媒体から読出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記録媒体は本発明を構成することになる。
【０１１８】
このプログラムコードを供給するための記録媒体としては、例えばフロッピー（登録商標）ディスク，ハードディスク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ−Ｒ，磁気テープ，不揮発性のメモリカード，ＲＯＭなどを用いることができる。
【０１１９】
また、コンピュータが読出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、次の場合も含まれることは言うまでもない。即ち、プログラムコードの指示に基づき、コンピュータ上で稼働しているＯＳ（オペレーティングシステム）などが実際の処理の一部又は全部を行い、その処理により前述した実施形態の機能が実現される場合。
【０１２０】
更に、記録媒体から読出されたプログラムコードがコンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込む。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行い、その処理により前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【図面の簡単な説明】
【０１２１】
【図１】実施形態における情報処理装置のハードウェア構成を示すブロック図である。
【図２】第１の実施形態におけるシステムイメージの一例を示す図である。
【図３】図２に示すシステムイメージを実現する場合の構成を示すシステムブロック図である。
【図４】図３に示す会議記録装置３０５及び会議記録再生装置３０９の機能を示す機能ブロック図である。
【図５】第１の実施形態における会議記録処理を示すフローチャートである。
【図６】オブジェクト動作記録データ３０６の一例を示す図である。
【図７】第１の実施形態におけるオブジェクト動作記録処理を示すフローチャートである。
【図８】第１の実施形態における会議記録再生処理を示すフローチャートである。
【図９】会議映像の再生操作、再生映像中の指定位置に表示されているオブジェクトを操作可能な会議映像操作画面の一例を示す図である。
【図１０】第１の実施形態における会議映像操作処理を示すフローチャートである。
【図１１】機器位置形状データ３０８の一例を示す図である。
【図１２】第１の実施形態における、再生位置に対応する時刻の機器位置形状データを取得する機器位置形状取得処理を示すフローチャートである。
【図１３】第１の実施形態における指定機器特定処理を示すフローチャートである。
【図１４】第１の実施形態における指定機器内オブジェクト特定処理を示すフローチャートである。
【図１５】図１４に示すオブジェクト位置形状取得処理を示すフローチャートである。
【図１６】図１４に示すディスプレイ内相対位置特定処理を示すフローチャートである。
【図１７】第１の実施形態におけるオブジェクト動作検索処理を示すフローチャートである。
【図１８】第１の実施形態におけるオブジェクト操作処理を示すフローチャートである。
【図１９】第２の実施形態におけるプリンタを含むシステムイメージの一例を示す図である。
【図２０】プリンタを対象としたオブジェクト動作記録データの一例を示す図である。
【図２１】第２の実施形態におけるオブジェクト動作記録処理を示すフローチャートである。
【図２２】プリンタの機器位置形状データの一例を示す図である。
【図２３】第２の実施形態における指定機器内オブジェクト特定処理を示すフローチャートである。
【図２４】会議映像中に表示されている機器の表示領域を指示可能な機器位置形状指示画面の一例を示す図である。
【図２５】第３の実施形態における機器位置形状指示処理を示すフローチャートである。
【図２６】撮影映像中に表示されている機器の表示領域を自動設定可能な機器位置形状指示画面の一例を示す図である。
【図２７】第４の実施形態における機器位置形状指示処理を示すフローチャートである。
【図２８】第４の実施形態における位置形状自動設定処理を示すフローチャートである。
【図２９】撮影映像中に表示されているプリンタの表示領域を自動設定可能な機器位置形状指示画面の一例を示す図である。
【図３０】第５の実施形態におけるプリンタ出力トレイの位置形状自動設定処理を示すフローチャートである。
【図３１】第６の実施形態における会議記録処理を示すフローチャートである。
【図３２】第６の実施形態における議事録操作画面の一例を示す図である。
【図３３】第６の実施形態における議事録操作処理を示すフローチャートである。
【図３４】第７の実施形態で生成された仮想映像の一例を示す図である。
【図３５】第７の実施形態における仮想映像生成処理を示すフローチャートである。
【図３６】第８の実施形態におけるオブジェクト検索再生処理を示すフローチャートである。
【図３７】第８の実施形態におけるオブジェクト変化特定処理を示すフローチャートである。
【符号の説明】
【０１２２】
１０１  入力部
１０２  ＣＰＵ
１０３  出力部
１０４  プログラムメモリ
１０５  データメモリ
１０６  バス
２０１  会議映像撮影カメラ
２０２  ディスプレイ
２０３  表示オブジェクト
３０１  表示装置
３０２  表示装置
３０３  表示装置
３０４  撮影装置
３０５  会議記録装置
３０６  オブジェクト動作記録データ
３０７  撮影映像データ
３０８  機器位置形状データ
３０９  会議記録再生装置
【図１】
2007060026.tif 000003
【図２】
2007060026.tif 000004
【図３】
2007060026.tif 000005
【図４】
2007060026.tif 000006
【図５】
2007060026.tif 000007
【図６】
2007060026.tif 000008
【図７】
2007060026.tif 000009
【図８】
2007060026.tif 000010
【図９】
2007060026.tif 000011
【図１０】
2007060026.tif 000012
【図１１】
2007060026.tif 000013
【図１２】
2007060026.tif 000014
【図１３】
2007060026.tif 000015
【図１４】
2007060026.tif 000016
【図１５】
2007060026.tif 000017
【図１６】
2007060026.tif 000018
【図１７】
2007060026.tif 000019
【図１８】
2007060026.tif 000020
【図１９】
2007060026.tif 000021
【図２０】
2007060026.tif 000022
【図２１】
2007060026.tif 000023
【図２２】
2007060026.tif 000024
【図２３】
2007060026.tif 000025
【図２４】
2007060026.tif 000026
【図２５】
2007060026.tif 000027
【図２６】
2007060026.tif 000028
【図２７】
2007060026.tif 000029
【図２８】
2007060026.tif 000030
【図２９】
2007060026.tif 000031
【図３０】
2007060026.tif 000032
【図３１】
2007060026.tif 000033
【図３２】
2007060026.tif 000034
【図３３】
2007060026.tif 000035
【図３４】
2007060026.tif 000036
【図３５】
2007060026.tif 000037
【図３６】
2007060026.tif 000038
【図３７】
2007060026.tif 000039