(57)【要約】【課題】拡張性に富んだ画像処理を可能とし、かつ、遅延の少ない安定した動作の画像処理を維持する。【解決手段】ＧＰＵを備える。ＧＰＵは、第１のコンピュータにより制御される。ＧＰＵで生成された画像データを、中間画像記憶部に記憶する。画像切換部は、画像入力部により入力される複数の画像データのうち任意の複数の画像データを出力する。画像合成部は、画像切換部から出力される画像データおよび中間画像記憶部に記憶されている画像データを用いて画像データを合成する。画像出力部は、画像合成部で合成される画像データを出力する。画像切換部および画像合成部は、第２のコンピュータにより制御される。第１、第２のコンピュータは、互いに接続され、連携した制御を行う。【選択図】図１
2014106276.tif 000002
【特許請求の範囲】
【請求項１】
グラフィクスプロセッシングユニットと、
上記グラフィクスプロセッシングユニットを制御する第１のコンピュータと、
上記グラフィクスプロセッシングユニットで生成された画像データを記憶する中間画像記憶部と、
複数の画像データを入力する画像入力部と、
上記画像入力部に入力される複数の画像データのうち任意の複数の画像データを出力する画像切換部と、
上記画像切換部から出力される画像データおよび上記中間画像記憶部に記憶されている画像データを用いて画像データを合成する画像合成部と、
上記画像合成部で合成される画像データを出力する画像出力部と、
上記画像切換部および上記画像合成部を制御する第２のコンピュータと、
上記第１のコンピュータと上記第２のコンピュータとを接続する接続部とを備える
画像処理装置。
【請求項２】
所定の画像処理状態に対応した各部の制御データを記憶する画像処理状態記憶部をさらに備え、
画像処理状態を復元する指示がされるとき、
上記第１のコンピュータは、上記画像処理状態記憶部に記憶されている該当制御データに基づき、上記グラフィクスプロセッシングユニットの画像処理状態を変更する制御を施し、
上記第２のコンピュータは、上記グラフィクスプロセッシングユニットの画像処理状態の変更に同期させて、上記画像処理状態記憶に記憶されている該当制御データに基づき、上記画像切換部および上記画像合成部の画像処理状態を変更する制御を施す
請求項１に記載の画像処理装置。
【請求項３】
上記画像処理状態記憶部として、上記第１のコンピュータに付属するメモリに設けられている第１の画像処理状態記憶部と、上記第２のコンピュータに付属するメモリに設けられている第２の画像処理状態記憶部とを有し、
上記第１のコンピュータが管理する部分に関する制御データは、上記第１の画像処理状態記憶部に記憶され、上記第２のコンピュータが管理する部分に関する制御データは、上記第２の画像処理状態記憶部に記憶されている
請求項２に記載の画像処理装置。
【請求項４】
上記画像処理状態記憶部は、上記第１のコンピュータに付属するメモリに設けられており、
上記第２のコンピュータは、上記制御データを、上記第１のコンピュータから上記接続部を通じて受け取る
請求項２に記載の画像処理装置。
【請求項５】
上記画像処理状態記憶部に記憶されている上記制御データを書き込んで保存しておく不揮発性ストレージをさらに備える
請求項２に記載の画像処理装置。
【請求項６】
画像処理状態を記憶する指示がされるとき、
上記画像処理状態記憶部に、上記第１のコンピュータによる上記グラフィクスプロセッシングユニットの制御データが記憶されると共に、上記第２のコンピュータによる上記画像切換部および上記画像合成部の制御データが記憶される
請求項２に記載の画像処理装置。
【請求項７】
上記画像処理状態記憶部として、上記第１のコンピュータに付属するメモリに設けられている第１の画像処理状態記憶部と、上記第２のコンピュータに付属するメモリに設けられている第２の画像処理状態記憶部とを有し、
第１のコンピュータは、上記第１の画像処理状態記憶部に、上記第１のコンピュータが管理する部分に関する制御データを書き込み、
上記第２のコンピュータは、上記第２の画像処理状態記憶部に、上記第２のコンピュータが管理する部分に関する制御データを書き込む
請求項６に記載の画像処理装置。
【請求項８】
上記第１のコンピュータに接続されるユーザ操作部をさらに備え、
上記ユーザ操作部は、上記画像処理状態を復元する指示を入力する機能を有し、
上記第１のコンピュータは、上記ユーザ操作部により上記画像処理状態を復元する指示がされるとき、該指示を、上記接続部を介して、上記第２のコンピュータに送る
請求項２に記載の画像処理装置。
【請求項９】
上記画像入力部に入力される画像データを記憶する入力画像記憶部をさらに備え、
上記グラフィクスプロセッシングユニットは、上記入力画像記憶部から読み取る画像データを参照して動作する
請求項１に記載の画像処理装置。
【請求項１０】
上記入力画像記憶部は、
上記画像切換部から出力される画像データを記憶する
請求項９に記載の画像処理装置。
【請求項１１】
上記グラフィクスプロセッシングユニットは、重畳する前景画像の画像データとそのキー信号を生成し、
上記画像合成部は、上記前景画像の画像データとそのキー信号を上記中間画像記憶部から読み取り、上記キー信号に基づいて、上記前景画像の画像データを、上記画像切換部からの背景画像の画像データに重畳する
請求項１に記載の画像処理装置。
【請求項１２】
上記画像入力部に入力される画像データを記憶する入力画像記憶部をさらに備え、
上記第１のコンピュータは、
上記入力画像記憶部から内部記憶部に画像データの転送を行い、表示部に該転送された画像データによる画像を表示する
請求項１に記載の画像処理装置。
【請求項１３】
上記第１のコンピュータは、
上記中間画像記憶部から内部記憶部に画像データの転送を行い、表示部に該転送された画像データによる画像を表示する
請求項１に記載の画像処理装置。
【請求項１４】
上記グラフィクスプロセッシングユニットは、上記中間画像記憶部に書き込む画像データと同じ画像データを上記第１のコンピュータの内部記憶部に書き込み、
上記第１のコンピュータは、表示部に上記内部記憶部から読み出した画像データによる画像を表示する
請求項１に記載の画像処理装置。
【請求項１５】
上記画像合成部で合成される画像データを取り込んで上記第１のコンピュータに供給する出力キャプチャ部をさらに備える
請求項１に記載の画像処理装置。
【請求項１６】
上記第１のコンピュータは、上記出力キャプチャ部から取得した画像データによる画像を表示部に表示する
請求項１５に記載の画像処理装置。
【請求項１７】
上記出力キャプチャ部は、エンコーダを有し、
上記出力キャプチャ部は、上記取り込まれた画像データを上記エンコーダで符号化して上記第１のコンピュータに供給する
請求項１５に記載の画像処理装置。
【請求項１８】
ネットワークインタフェース部をさらに備え、
上記第１のコンピュータは、上記出力キャプチャ部から供給される画像データを、上記ネットワークインタフェースを介してストリーミング送信する
請求項１５に記載の画像処理装置。
【請求項１９】
複数の音声データを入力する音声入力部と、
上記音声入力部に入力される音声データを用いて音声データを合成する音声合成部と、
上記音声合成部で合成された音声データを出力する音声出力部とをさらに備え、
上記第２のコンピュータは、さらに、上記音声合成部を制御する
請求項１に記載の画像処理装置。
【請求項２０】
グラフィクスプロセッシングユニットと、
上記グラフィクスプロセッシングユニットで生成された画像データを記憶する中間画像記憶部と、
複数の画像データを入力する画像入力部と、
上記画像入力部に入力される複数の画像データのうち任意の複数の画像データを出力する画像切換部と、
上記画像切換部から出力される画像データおよび上記中間画像記憶部に記憶されている画像データを用いて画像データを合成する画像合成部と、
上記画像合成部で合成される画像データを出力する画像出力部とを備える画像処理装置の制御方法であって、
上記グラフィクスプロセッシングユニットを第１のコンピュータにより制御し、上記画像切換部および上記画像合成部を、上記第１のコンピュータと接続される第２のコンピュータにより制御する
画像処理装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像処理装置および画像処理装置の制御方法に関し、特に、グラフィクスプロセッシングユニット（ＧＰＵ：Graphics Processing Unit）を利用する画像処理装置等に関する。
【背景技術】
【０００２】
従来、ＧＰＵによる画像処理の構成が知られている。この画像処理では、ソフトウェアの制御により様々な特殊効果が可能であり、ソフトウェアの追加により、新しく作成される特殊効果やＣＧ（computer graphics）を同一ハードウェアに新規追加していくことができ、拡張性に富んだ経済的な構成が可能である。
【０００３】
ＧＰＵ単独ではなく、処理を分担する構成が知られている。例えば、特許文献１には、メインプロセッサ（ＣＰＵ）と、入出力インタフェースを介してＣＰＵに接続された第１のＧＰＵと、外部接続用インタフェースを介して第１のＧＰＵに接続された第２のＧＰＵとを含み、第１のＧＰＵ内に、ＣＰＵが外部接続用インタフェースを経由して第２のＧＰＵと通信するための中継インタフェースが設けられた、情報処理装置が記載されている。
【０００４】
また、例えば、特許文献２には、処理する画像を第１の領域と第２の領域とに分割し、分割された第１の領域および第２の領域それぞれの画像に対する処理を、それぞれ、ＣＰＵおよびＧＰＵに分担して実行させる、情報処理装置が記載されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−３１６８５９号公報
【特許文献２】特開２０１２−００３６１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
これらのＧＰＵを含む構成では、ＧＰＵを活用しつつ、ビデオ信号として入力されてくる画像（同期信号に同期したフレームの順列）を処理することが可能であった。しかし、ＧＰＵは入力画像を一旦メモリに取り込んでから処理し、出力する構成であるため、必ずフレーム単位の処理遅延が生じる欠点がある。例えば、入出力で最低２フレーム、さらに処理を加えるために３フレーム以上の遅延となる。
【０００７】
ライブ運用で、例えば、講演会、ショーにおいて、撮影している講演者をプロジェクタに拡大投影するシステムなどでは、音を同期させてスピーカーから出すことも合わせて、僅かな遅延でも視聴者が気になるため、フレーム単位の大きな遅延は好ましくない。また、放送番組の場合でも、遅延が大きくなることは好ましくない。
【０００８】
一方、ＧＰＵを利用してソフトウェアにより自在な拡張性のある画像処理を行うことは、画像の付加価値を上げるために、望まれている。また、自在な画像処理をソフトウェアで制御する場合、操作によるパラメタ変更後の演算により特異値を生じて、許容できない歪んだ出力画像となってしまう場合がある。そのような場合でも、パラメタを修正する操作では直ちに正常な画像に戻すことが、難しい場合がある。
【０００９】
本技術の目的は、拡張性に富んだ画像処理を可能とし、かつ、遅延の少ない安定した動作の画像処理を維持することにある。
【課題を解決するための手段】
【００１０】
本技術の概念は、
グラフィクスプロセッシングユニットと、
上記グラフィクスプロセッシングユニットを制御する第１のコンピュータと、
上記グラフィクスプロセッシングユニットで生成された画像データを記憶する中間画像記憶部と、
複数の画像データを入力する画像入力部と、
上記画像入力部に入力される複数の画像データのうち任意の複数の画像データを出力する画像切換部と、
上記画像切換部から出力される画像データおよび上記中間画像記憶部に記憶されている画像データを用いて画像データを合成する画像合成部と、
上記画像合成部で合成される画像データを出力する画像出力部と、
上記画像切換部および上記画像合成部を制御する第２のコンピュータと、
上記第１のコンピュータと上記第２のコンピュータとを接続する接続部とを備える
画像処理装置にある。
【００１１】
本技術において、ＧＰＵ（グラフィクスプロセッシングユニット）が備えられる。ＧＰＵは、第１のコンピュータにより制御される。ＧＰＵで生成された画像データは、中間画像記憶部に記憶される。
【００１２】
画像切換部により、画像入力部により入力される複数の画像データのうち任意の複数の画像データが出力される。画像合成部により、画像切換部から出力される画像データおよび中間画像記憶部に記憶されている画像データが用いられて画像データが合成される。そして、画像出力部により、画像合成部で合成される画像データが出力される。
【００１３】
画像切換部および画像合成部は、第２のコンピュータにより制御される。この場合、第２のコンピュータは、同期信号、例えば垂直同期信号に同期して、画像切換部および画像合成部を制御する。第２のコンピュータは、上述の第１のコンピュータと接続されている。これにより、第１、第２のコンピュータは、互いに連携した制御を行うことが可能となる。
【００１４】
このように本技術によれば、ＧＰＵ系と、画像切換部や画像合成部などの本線系は、それぞれ別個のコンピュータにより互いに独立して制御される。そして、画像合成部では、入力画像データだけでなく、ＧＰＵで生成される画像データも中間画像記憶部を介して利用可能とされる。そのため、拡張性に富んだ画像処理が可能となり、かつ、遅延の少ない安定した動作の画像処理が維持される。
【００１５】
なお、本技術において、例えば、所定の画像処理状態に対応した各部の制御データを記憶する画像処理状態記憶部をさらに備え、画像処理状態を復元する指示がされるとき、第１のコンピュータは、画像処理状態記憶部に記憶されている該当制御データに基づき、ＧＰＵの画像処理状態を変更する制御を施し、第２のコンピュータは、ＧＰＵの画像処理状態の変更に同期させて、画像処理状態記憶に記憶されている該当制御データに基づき、画像切換部および画像合成部の画像処理状態を変更する制御を施す、ようにされてもよい。この場合、例えば、第２のコンピュータは、制御データを、第１のコンピュータから接続部を通じて受け取る、ようにされてもよい。
【００１６】
また、この場合、例えば、第２のコンピュータは、ＧＰＵの画像処理状態の変更時間（フレーム数単位）と、中間画像記憶部への書き込み、およびそれからの読み出しに係る遅延時間（フレーム数単位：通常１〜２フレーム）を合わせた時間だけ遅延させてから、画像切換部および画像合成部に制御を施すことで、ＧＰＵの画像処理状態の変更に同期させることが可能となる。このような制御により、ＧＰＵ系および本線系の画像処理状態の一括変更を良好に行うことができる。
【００１７】
また、この場合、例えば、画像処理状態を記憶する指示がされるとき、画像処理状態記憶部に、第１のコンピュータによるＧＰＵの制御データが記憶されると共に、第２のコンピュータの画像切換部および画像合成部の制御データが記憶される、ようにされてもよい。このとき、例えば、画像処理状態記憶部として、第１のコンピュータに付属するメモリに設けられている第１の画像処理状態記憶部と、第２のコンピュータに付属するメモリに設けられている第２の画像処理状態記憶部とを有し、第１のコンピュータは、第１の画像処理状態記憶部に、第１のコンピュータが管理する部分に関する制御データを書き込み、第２のコンピュータは、第２の画像処理状態記憶部に、第２のコンピュータが管理する部分に関する制御データを書き込む、ようにされてもよい。
【００１８】
また、この場合、第１のコンピュータに接続されるユーザ操作部をさらに備え、ユーザ操作部は、画像処理状態を変更する指示を入力する機能を有し、第１のコンピュータは、ユーザ操作部により画像処理状態を変更する指示がされるとき、この指示を、接続部を介して、第２のコンピュータに送る、ようにされてもよい。これにより、第１のコンピュータに指示が入力される場合であっても、第２のコンピュータにもその指示を送って、ＧＰＵ系および本線系の画像処理状態の同期した制御が可能となる。
【００１９】
また、本技術において、例えば、画像入力部に入力される画像データを記憶する入力画像記憶部をさらに備え、ＧＰＵは、入力画像記憶部から読み取る画像データを参照して動作する、ようにされてもよい。この場合、例えば、入力画像記憶部は、画像切換部から出力される画像データを記憶する、ようにされてもよい。これにより、ＧＰＵで生成されて中間画像記憶部に記憶される値に、入力画像データ由来の値を含めることが可能となる。
【００２０】
また、本技術において、例えば、ＧＰＵは、重畳する前景画像の画像データとそのキー信号を生成し、画像合成部は、前景画像の画像データとそのキー信号を中間画像記憶部から読み取り、キー信号に基づいて、前景画像の画像データを、画像切換部からの背景画像の画像データに重畳する、ようにされてもよい。
【００２１】
また、本技術において、例えば、画像入力部に入力される画像データを記憶する入力画像記憶部をさらに備え、第１のコンピュータは、入力画像記憶部から内部記憶部に画像データの転送を行い、表示部にこの転送された画像データによる画像を表示する、ようにされてもよい。これにより、例えば、第１のコンピュータに接続された表示部に、入力画像データによる画像を表示することが可能となる。
【００２２】
また、本技術において、例えば、第１のコンピュータは、中間画像記憶部から内部記憶部に画像データの転送を行い、表示部にこの転送された画像データによる画像を表示する、ようにされてもよい。これにより、例えば、第１のコンピュータに接続された表示部に、ＧＰＵで生成された画像データによる画像を表示することが可能となる。
【００２３】
また、本技術において、例えば、ＧＰＵは、中間画像記憶部に書き込む画像データと同じ画像データを第１のコンピュータの内部記憶部に書き込み、第１のコンピュータは、表示部に内部記憶部から読み出した画像データによる画像を表示する、ようにされてもよい。これにより、例えば、第１のコンピュータに接続された表示部に、ＧＰＵで生成された画像データによる画像を表示することが可能となる。
【００２４】
また、本技術において、例えば、画像合成部で合成される画像データを取り込んで第１のコンピュータに供給する出力キャプチャ部をさらに備える、ようにされてもよい。これにより、第１のコンピュータでは、画像合成部で合成された画像データによる画像を表示部に表示すること、この画像データを符号化して得られたストリームをストリーミング送信すること等が可能となる。
【００２５】
この場合、例えば、出力キャプチャ部はエンコーダを有し、出力キャプチャ部は、取り込まれた画像データをエンコーダで符号化して第１のコンピュータに供給する、ようにされてもよい。この場合、第１のコンピュータでは符号化を行わなくて済み、その負荷を軽減することが可能となる。
【００２６】
また、この場合、例えば、第１のコンピュータは、出力キャプチャ部から取得した画像データによる画像を表示部に表示する、ようにされてもよい。また、この場合、ネットワークインタフェース部をさらに備え、第１のコンピュータは、出力キャプチャ部から供給される画像データを、ネットワークインタフェースを介してストリーミング送信する、ようにされてもよい。
【００２７】
また、本技術において、例えば、複数の音声データを入力する音声入力部と、音声入力部に入力される音声データを用いて音声データを合成する音声合成部と、音声合成部で合成された音声データを出力する音声出力部とをさらに備え、第２のコンピュータは、さらに、音声合成部を制御する、ようにされてもよい。
【発明の効果】
【００２８】
本技術によれば、拡張性に富んだ画像処理を可能とし、かつ、遅延の少ない安定した動作の画像処理を維持できる。
【図面の簡単な説明】
【００２９】
【図１】本技術の実施の形態としての画像処理装置の構成例を示すブロック図である。
【図２】シリアル転送インタフェースであるＰＣＩｅ（PCI Express）による接続例を示す図である。
【図３】画像処理装置を構成する音声合成部の構成例を示すブロック図である。
【図４】画像処理装置を構成する画像合成部の構成例を示す図である。
【図５】画像処理装置を構成する画像合成部の他の構成例を示す図である。
【図６】画像処理装置を構成する画像合成部の他の構成例を示す図である。
【図７】第１のコンピュータにおける画像処理状態メモリへの記憶時の処理手順の一例を示すフローチャートである。
【図８】第２のコンピュータにおける画像処理状態メモリへの記憶時の処理手順の一例を示すフローチャートである。
【図９】第１のコンピュータにおける電源起動時の画像処理状態メモリの内容復元の処理手順の一例を示すフローチャートである。
【図１０】第２のコンピュータにおける電源起動時の画像処理状態メモリの内容復元の処理手順の一例を示すフローチャートである。
【図１１】第１のコンピュータにおける画像処理状態のリコール（復元）時の処理手順の一例を示すフローチャートである。
【図１２】第２のコンピュータにおける画像処理状態のリコール（復元）時の処理手順の一例を示すフローチャートである。
【図１３】画像処理装置のリコール（復元）時における動作例を説明するためのシーケンス図である。
【図１４】画像処理装置のリコール（復元）時における他の動作例を説明するためのシーケンス図である。
【図１５】画像処理装置のリコール（復元）時における他の動作例を説明するためのシーケンス図である。
【図１６】第２のコンピュータにおける画像処理状態の復元時の処理手順の他の例を示すフローチャートである。
【図１７】画像処理装置のリコール（復元）時における他の動作例を説明するためのシーケンス図である。
【図１８】画像処理装置の他の構成例を示すブロック図である。
【図１９】画像処理装置の他の構成例を示すブロック図である。
【図２０】画像処理装置の他の構成例を示すブロック図である。
【図２１】画像処理装置の他の構成例を示すブロック図である。
【図２２】画像合成部から出力される画像データを第１のコンピュータに送る経路の一例を説明するための図である。
【図２３】画像合成部から出力される画像データを第１のコンピュータに送る経路の他の一例を説明するための図である。
【図２４】画像処理装置の他の構成例を示すブロック図である。
【発明を実施するための形態】
【００３０】
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明は以下の順序で行う。
１．実施の形態
２．変形例
【００３１】
＜１．実施の形態＞
［画像処理装置の構成］
図１は、本技術の実施の形態としての画像処理装置１００の構成例を示している。この画像処理装置１００は、第１のコンピュータ１０１と、ユーザ操作部１０２と、ディスプレイ１０３と、グラフィクスプロセッシングユニット（ＧＰＵ）１０４と、入力メモリ部１０５と、中間メモリ部１０６を有している。また、この画像処理装置１００は、第２のコンピュータ１１１と、画像入力部１１２と、画像切換部（XPT）１１３と、画像合成部（Mixer）１１４と、画像出力部１１５と、音声入力部１１６と、音声合成部（Audio Mixer）１１７と、音声出力部１１８を有している。
【００３２】
第１のコンピュータ１０１は、例えば、ＣＰＵを備えたマイクロコンピュータで構成される。この第１のコンピュータ１０１には、ユーザインタフェースを構成するユーザ操作部１０２およびディスプレイ１０３が接続されている。ユーザ操作部１０２は、例えば、キーボード、マウスなどである。この第１のコンピュータ１０１は、ＧＰＵ１０４を制御する。
【００３３】
第２のコンピュータ１１１は、上述した第１のコンピュータ１０１と同様に、例えば、ＣＰＵを備えたマイクロコンピュータで構成される。この第２のコンピュータ１１１には、ユーザ操作部などのユーザインタフェースは接続されていない。この第２のコンピュータ１１１は、上述の第１のコンピュータ１０１と通信ライン（接続部）１０８で接続され、第１のコンピュータ１０１との間で通信が可能とされている。この第２のコンピュータ１１１は、第１のコンピュータ１０１とＧＰＵ１０４以外のハードウェア各部を、垂直同期信号に同期して、制御する。
【００３４】
画像入力部１１２は、外部から複数のＳＤＩ（Serial Digital Interface）信号の入力を受ける。この画像入力部１１２は、ＳＤＩ信号毎に、内部形式の画像データに変換して出力する。また、この画像入力部１１２は、ＳＤＩ信号毎に、埋め込まれている音声データを取り出して出力する。
【００３５】
画像切換部１１３は、画像入力部１１２から出力される複数の画像データおよび中間メモリ部１０６から読み出される所定数の画像データを入力し、任意の複数の画像データを出力する。つまり、この画像切換部１１３は、複数の出力ライン（画像データバス）のそれぞれに、複数の入力画像データのいずれか一つを選択して、画像合成部１１４に入力する。
【００３６】
また、画像切換部１１３は、画像入力部１１２から出力される複数の画像データから１つまたは複数の画像データを選択して、入力メモリ部１０５に入力する。この画像切換部１１３は、第２のコンピュータ１１１により制御され、画像データの垂直ブランキング期間に切換を行う。画像合成部１１４は、画像切換部１１３から出力される複数の画像データを用いて、重畳などにより所定数の画像データを合成する。この画像合成部１１４は、上述の画像切換部１１３と同様に、第２のコンピュータ１１１により制御される。
【００３７】
音声入力部１１６は、マイクロホンなどから入力される複数の音声信号の入力を受ける。この音声入力部１１６は、アナログ−デジタル変換回路（Ａ／Ｄコンバータ）を備え、音声信号毎に、アナログ信号からデジタル信号に変換し、さらに内部形式の音声データに変換して出力する。
【００３８】
音声合成部１１７は、音声入力部１１６から出力される音声データおよび画像入力部１１２から出力される音声データを用いて、所定数の音声データを合成する。この際、音声合成部１１７は、複数の入力音声データから選択した複数の音声データについてレベル制御をして合成し、出力とすることができる。音声出力部１１８は、デジタル−アナログ変換回路（Ａ／Ｄコンバータ）を備え、音声合成部１１７で合成された音声データを、デジタル信号からアナログ信号に変換して出力する。これらの音声系は、第２のコンピュータ１１１により制御される。
【００３９】
画像出力部１１５は、画像合成部１１４で合成される画像データを、ＳＤＩ信号に変換して外部に出力する。この際、画像出力部１１５は、音声合成部１１７から出力される音声データをＳＤＩ信号に埋め込む。
【００４０】
ＧＰＵ１０４は、画像処理プロセッサである。ＧＰＵ１０４は、例えば、入力メモリ部１０５から読み取った画像データに、縮小、回転などの特殊効果を施し、中間メモリ部１０６に書き込む。ＧＰＵ１０４においてどのような特殊効果を施すかは、第１のコンピュータ１０１により制御される。画像加工を制御する方式としては、例えば、ＯｐｅｎＧＬ（Open Graphics Library）がある。例えば、第１のコンピュータ１０１上で動作する制御プログラムから、ＯｐｅｎＧＬを用いた指示をＧＰＵ１０４に与える。
【００４１】
なお、ＧＰＵ１０４は、入力画像データに特殊効果を施すだけでなく、字幕やグラフィクスなどの画像データを生成することもある。そして、この場合、ＧＰＵ１０４は、例えば、文字やグラフィクスの中に入力画像を入れるという特殊効果を施すということも可能とされる。
【００４２】
入力メモリ部１０５は、メモリ（ＲＡＭ）を内蔵し、画像切換部１０５から出力される１つまたは複数の画像データ（ビデオ信号の毎フレーム）をメモリに書き込む。この書き込みは、第２のコンピュータ１１１により制御される。この入力メモリ部１０５において、メモリの周辺回路としてバス・アービタ（Bus Arbiter）を備え、メモリへの書き込み動作の他、ＧＰＵ１０４からもアクセス可能とされている。ＧＰＵ１０４は、この入力メモリ部１０５のメモリから処理に必要な画像データの読み出しを行う。
【００４３】
中間メモリ部１０６は、メモリ（ＲＡＭ）を内蔵する。この中間メモリ部１０６は、メモリから画像データを読み出し、内部形式の画像データを画像合成部１１４に供給する。この読み出しは、第２のコンピュータ１１１により制御される。この中間メモリ部１０６において、メモリの周辺回路としてバス・アービタ（Bus Arbiter）を備え、メモリの読み出し動作の他、ＧＰＵ１０４からもアクセス可能とされている。ＧＰＵ１０４は、処理生成した画像データを、この中間メモリ部１０６のメモリに書き込む。
【００４４】
図１に示す画像処理装置１００において、第１のコンピュータ１０１、ＧＰＵ１０４、入力メモリ部１０５、中間メモリ部１０６および第２のコンピュータ１１１は、例えば、シリアル転送インタフェースであるＰＣＩｅ（PCI Express）により接続されている。図２は、その接続の一例を示しており、ＰＣＩｅ スイッチ２２１およびＰＣＩｅ ブリッジ２２２を介して各デバイスの接続が行われている。
【００４５】
図３は、音声合成部１１７の構成例を示している。図３（ａ）の構成例では、音声合成部１１７は、音声切換部１１７ａおよび合成部１１７ｂの直列回路により構成されている。音声切換部１１７ａは、複数の音声データを入力し、任意の複数の音声データを出力する。つまり、この音声切換部１１７ａは、複数の出力ライン（音声データバス）のそれぞれに、複数の入力音声データのいずれか一つを選択して出力する。合成部１１７ｂは、音声切換部１１７ａから出力される複数の音声データについてレベル制御を行って合成し、複数の音声データを生成して出力する。
【００４６】
図３（ｂ）の構成例では、音声合成部１１７は、音声切換部１１７ａ、合成部１１７ｂおよび遅延部１１７ｃの直列回路により構成される。音声切換部１１７ａおよび合成部１１７ｂの部分は、図３（ａ）の構成例と同じものであるが、さらに、出力側に遅延部１１７ｃが設けられている。
【００４７】
この遅延部１１７ｃは、画像データが処理のために遅延する時間（フレーム数）に対応して音声データに遅延を加えるために設けられている。なお、遅延制御の目的として、それ以外に、ユーザの意思による遅延を加えるために用いられてもよい。例えば、マイクロホンがカメラに比べて話者に近い位置にあり、遠景としての画像になる場合、音声データに遅延を加えて、距離に自然な遅延とすることが考えられる。
【００４８】
図３（ｃ）の構成例では、音声合成部１１７は、遅延部１１７ｄ、音声切換部１１７ａ、合成部１１７ｂ、遅延部１１７ｃの直列回路により構成される。音声切換部１１７ａ、合成部１１７ｂおよび遅延部１１７ｃの部分は、図３（ｂ）の構成例と同じものであるが、さらに、入力側に遅延部１１７ｄが設けられている。この遅延部１１７ｄにより、入力音声データ毎に遅延設定が可能とされる。
【００４９】
図１に示す画像処理装置１００の通常の動作を簡単に説明する。画像入力部１１２には、外部から複数のＳＤＩ信号が入力される。画像入力部１１２では、ＳＤＩ信号毎に、内部形式の画像データに変換されて出力される。また、画像入力部１１２では、ＳＤＩ信号毎に、埋め込まれている音声データが取り出されて出力される。
【００５０】
画像入力部１１２から出力される複数の画像データは、第２のコンピュータ１１１の制御のもと、画像切換部１１３に入力される。また、中間メモリ部１０６から画像データが読み出され、画像切換部１１３に入力される。画像切換部１１３では、複数の出力ラインのそれぞれに、複数の入力画像データのいずれか一つが選択されて出力される。この画像切換部１１３から出力される複数の画像データは、画像合成部１１４に入力される。
【００５１】
また、画像切換部１１３では、画像入力部１１２から出力される複数の画像データから、一つまたは複数の画像データが選択的に取り出され、入力メモリ部１０５に入力される。この入力メモリ部１０５では、入力された各画像データが内蔵メモリに書き込まれる。
【００５２】
ＧＰＵ１０４では、第１のコンピュータ１０１の制御のもと、画像データが生成される。例えば、ＧＰＵ１０４では、入力メモリ部１０５の内蔵メモリから画像データが読み取られ、その画像データに縮小、回転などの特殊効果が施される。また、例えば、ＧＰＵ１０４では、入力画像データとは無関係に、字幕やグラフィックを表示するための画像データが生成される。この場合、入力メモリ部１０５の内蔵メモリから読み取られ画像データを用いて、文字やグラフィック内に画像を挿入する特殊効果が施される場合もある。
【００５３】
ＧＰＵ１０４で生成される画像データは、中間メモリ部１０６の内蔵メモリに書き込まれる。そして、第２のコンピュータ１１１の制御のもと、中間メモリ部１０６の内蔵メモリから画像データが読み出されて、上述したように画像切換部１１３に入力される。
【００５４】
画像合成部１１４では、第２のコンピュータ１１１の制御のもと、画像切換部１１３から出力される画像データが用いられて、重畳などにより所定数の画像データが合成される。この画像合成部１１４から出力される画像データは、画像出力部１１５に入力される。
【００５５】
また、音声入力部１１６には、外部から複数の音声信号が入力される。音声入力部１１６では、第２のコンピュータ１１１の制御のもと、各音声信号が、アナログ信号からデジタル信号に変換され、さらに内部形式の音声データに変換されて出力される。この音声入力部１１６から出力される複数の音声データは、音声合成部１１７に入力される。この音声合成部１１７には、画像入力部１１２でＳＤＩ信号から取り出される複数の音声データも入力される。
【００５６】
音声合成部１１７では、第２のコンピュータ１１１の制御のもと、音声入力部１１６から出力される音声データおよび画像入力部１１２から出力される音声データが用いられて、所定数の音声データが合成される。この場合、音声合成部１１７では、複数の入力音声データから選択された複数の音声データについてレベル制御がされて合成される。この音声合成部１１７から出力される複数の音声データは、画像出力部１１５に入力されると共に、音声出力部１１８に入力される。
【００５７】
画像出力部１１５では、第２のコンピュータ１１１の制御のもと、画像合成部１１４で合成される画像データがＳＤＩ信号に変換されて外部に出力される。この際、画像出力部１１５では、音声合成部１１７から出力される音声データをＳＤＩ信号に埋め込むことが行われる。また、音声出力部１１８では、第２のコンピュータ１１１の制御のもと、各音声データがデジタル信号からアナログ信号に変換されて外部に出力される。
【００５８】
［画像合成部の詳細構成例］
図４は、画像合成部１１４の構成例を示し、最もシンプルな例である。この構成例において、画像合成部１１４は、切換部（Mixer in Xpt）１３１と、合成部（Video Image MixingBlock）１３２とからなっている。切換部１３１は、画像切換部１１３からの画像データおよび中間メモリ部１０６からの画像データから、第１の画像データおよび第２の画像データを取り出して合成部１３２に入力する。合成部１３２は、第１の画像データから第２の画像データへの合成によるクロスフェード切り換えのトランジション（Transition）を行う。
【００５９】
図５は、画像合成部１１４の他の構成例を示し、２つの出力を有する例である。この構成例では、２つの画像出力を並行して切り換えるトランジションを実行できる。この構成例において、画像合成部１１４は、切換部（Mixer in Xpt）１４１と、２つの合成部（Video Image MixingBlock）１４２，１４３と、ワイプ用キー信号生成部（Wipe Key Signal Generator）１４４とからなっている。
【００６０】
切換部１４１は、画像切換部１１３からの画像データおよび中間メモリ部１０６からの画像データから第１の画像データおよび第２の画像データを取り出して合成部１４２に入力する。また、切換部１４１は、画像切換部１１３からの画像データおよび中間メモリ部１０６からの画像データから第３の画像データおよび第４の画像データを取り出して合成部１４３に入力する。
【００６１】
ワイプ用キー信号生成部１４４は、ワイプによる画像切換を行うためのワイプ用キー信号を生成して、合成部１４２，１４３に供給する。合成部１４２は、ワイプ用キー信号に基づいて、第１の画像データから第２の画像データへのワイプによる画像切換のトランジションを行う。同様に、合成部１４３は、ワイプ用キー信号に基づいて、第３の画像データから第４の画像データへのワイプによる画像切換のトランジションを行う。
【００６２】
図６は、画像合成部１１４のさらに他の構成例を示している。この構成例では、いずれかの入力画像をキーイング重畳できる。この構成例において、画像合成部１１４は、切換部（Mixer in Xpt）１５１と、２つの合成部（Video Image MixingBlock）１５２，１５３と、ワイプ用キー信号生成部（Wipe Key Signal Generator）１５４と、キー信号処理部（Key Signal Processor）１５５からなっている。
【００６３】
切換部１５１は、画像切換部１１３からの画像データおよび中間メモリ部１０６からの画像データからフィル用信号（第１の画像データ）およびキー用信号（第２の画像データ）を取り出してキー信号処理部１５５に入力する。この場合、例えば、このフィル用信号およびキー用信号は、ＧＰＵ１０４が作成するようにして、キーヤーをＧＰＵ１０４に分担させるようにしてもよい。
【００６４】
また、切換部１５１は、画像切換部１１３からの画像データおよび中間メモリ部１０６からの画像データから第３の画像データおよび第４の画像データを取り出して合成部１５２に入力する。ワイプ用キー信号生成部１５４は、ワイプによる画像切換を行うためのワイプ用キー信号を生成して、合成部１５２およびキー信号処理部１５５に供給する。合成部１５２は、ワイプ用キー信号に基づいて、第３の画像データから第４の画像データへのワイプによる画像切換のトランジションを行う。
【００６５】
キー信号処理部１５５は、キー用信号を輝度によりキー信号に変換し、あるいはキー用信号にクロマキー処理して、重畳領域・濃度を示すキー信号を生成する。なお、キー信号処理部１５５は、ワイプ用キー信号生成部１５４で発生されるワイプ用キー信号をキー信号にすることもできる。また、キー信号処理部１５５は、重畳する画像データとなる、フィル用信号も、キー信号に合わせて美しい重畳になるための波形処理を施す。合成部１５３は、キー信号処理部１５５から出力される処理済みのフィル用信号とキー信号に基づいて、合成部１５２から出力される画像データに、フィル用信号をキーイング重畳する。
【００６６】
［リコール（Recall）の説明］
次に、図１に示す画像処理装置１００におけるリコールについて説明する。画像処理装置１００は、各部の画像処理の内容を全て一括してメモリに記憶し、また、それを読み出して画像処理状態を復元する機能を備える。この復元の動作を「リコール」と呼ぶ。
【００６７】
画像処理装置１００において、各部の画像処理の内容の記憶は、専用のメモリ領域である画像処理状態メモリを用いて行われる。この画像処理状態メモリは、画像処理状態の一式を記憶する領域を複数有し、そのいずれかを、例えば番号で指定する操作を受けて、記憶と、復元が行われる。なお、第１のコンピュータ１０１において、電源断の後も画像処理状態メモリの内容を保持するために、ハードディスク等の内蔵する不揮発性ストレージが使用される。
【００６８】
画像処理装置１００において、画像処理状態メモリは、第１のコンピュータ１０１に付属するメモリに設けられている第１の画像処理状態メモリ１０１ａと、第２のコンピュータ１１１に付属するメモリに設けられている第２の画像処理状態メモリ１１１ａで構成される。そして、各画像処理状態メモリは、それぞれのコンピュータが管理する部分に関する制御データを記憶する。
【００６９】
図７のフローチャートは、第１のコンピュータ１０１における画像処理状態メモリへの記憶時の処理手順の一例を示している。第１のコンピュータ１０１は、ステップＳＴ１において、処理を開始し、その後に、ステップＳＴ２の処理に移る。このステップＳＴ２において、第１のコンピュータ１０１は、ユーザ操作部１０２におけるユーザの現在の画像処理状態を記憶する操作に応じて、このユーザ操作部１０２から現在の画像処理状態を記憶する指示を受信する。この指示には、画像処理状態メモリ中の一つの画像処理状態領域を特定する番号（メモリ番号Ｎ）が含まれる。
【００７０】
次に、第１のコンピュータ１０１は、ステップＳＴ３において、第１のコンピュータ１０１自身が制御している現在の画像処理状態に対応した制御データを、メモリ番号Ｎに該当するメモリ（第１の画像処理状態メモリ１０１ａの領域）に記憶する。そして、第１のコンピュータ１０１は、ステップＳＴ４において、現在の画像処理状態を記憶する指示（メモリ番号Ｎを含む）を、第２のコンピュータ１１１に送信する。
【００７１】
次に、第１のコンピュータ１０１は、ステップＳＴ５において、第２のコンピュータ１１１から現在の画像処理状態に対応した制御データを受信する。そして、第１のコンピュータ１０１は、ステップＳＴ６において、自身が管理する制御データと、第２のコンピュータ１１１から受信した制御データとを合わせ、図示しない不揮発性ストレージに書き込んで保存する。その後、第１のコンピュータ１０１は、ステップＳＴ７において、一連の処理を終了する。
【００７２】
図８のフローチャートは、第２のコンピュータ１１１における画像処理状態メモリへの記憶時の処理手順の一例を示している。第２のコンピュータ１１１は、ステップＳＴ１１において、処理を開始し、その後に、ステップＳＴ１２の処理に移る。このステップＳＴ１２において、第２のコンピュータ１１１は、第１のコンピュータ１０１から現在の画像処理状態を記憶する指示（メモリ番号Ｎを含む）を受信する。
【００７３】
次に、第２のコンピュータ１１１は、ステップＳＴ１３において、第２のコンピュータ１１１自身が制御している現在の画像処理状態に対応した制御データを、メモリ番号Ｎに該当するメモリ（第２の画像処理状態メモリ１１１ａの領域）に記憶する。そして、第２のコンピュータ１１１は、ステップＳＴ１４において、ステップＳＴ１３で記憶した制御データを、第１のコンピュータ１０１に送信する。その後、第２のコンピュータ１１１は、ステップＳＴ１５において、一連の処理を終了する。
【００７４】
図９のフローチャートは、第１のコンピュータ１０１における、電源起動時の画像処理状態メモリ１０１ａの内容復元の処理手順の一例を示している。第１のコンピュータ１０１は、ステップＳＴ２１において、処理を開始し、その後に、ステップＳＴ２２の処理に移る。このステップＳＴ２２において、第１のコンピュータ１０１は、不揮発性ストレージから、保存されている各メモリ番号の制御データを読み出す。
【００７５】
次に、第１のコンピュータ１０１は、ステップＳＴ２３において、第１のコンピュータ１０１が管理する部分の制御データを、第１の画像処理状態メモリ１０１ａに記憶する。そして、第１のコンピュータ１０１は、ステップＳＴ２４において、第２のコンピュータ１１１が管理する部分の制御データを、第２のコンピュータ１１１に送信する。その後、第１のコンピュータ１０１は、ステップＳＴ２５において、一連の処理を終了する。
【００７６】
図１０のフローチャートは、第２のコンピュータ１０１における、電源起動時の画像処理状態メモリ１１１ａの内容復元の処理手順の一例を示している。第２のコンピュータ１１１は、ステップＳＴ３１において、処理を開始し、その後に、ステップＳＴ３２の処理に移る。このステップＳＴ３２において、第２のコンピュータ１１１は、第１のコンピュータ１０１から、第２のコンピュータ１１１自身が管理する部分の制御データを受信する。そして、第２のコンピュータ１１１は、ステップＳＴ３３において、受信した制御データを、第２の画像処理状態メモリ１１１ａに記憶する。その後、第２のコンピュータ１１１は、ステップＳＴ２４において、一連の処理を終了する。
【００７７】
図１１のフローチャートは、第１のコンピュータ１０１における画像処理状態のリコール（復元）時の処理手順の一例を示している。第１のコンピュータ１０１は、ステップＳＴ４１において、処理を開始し、その後に、ステップＳＴ４２の処理に移る。
【００７８】
第１のコンピュータ１０１は、ステップＳＴ４２において、ユーザ操作部１０２におけるユーザのリコール操作に応じて、このユーザ操作部１０２からリコール指示を受信する。この指示には、画像処理状態メモリ中の一つの画像処理状態領域を特定する番号（メモリ番号Ｎ）が含まれる。そして、第１のコンピュータ１０１は、ステップＳＴ４３において、第２のコンピュータ１１１に、リコール指示（メモリ番号Ｎを含む）を送信する。
【００７９】
次に、第１のコンピュータ１０１は、ステップＳＴ４４において、第１の画像処理状態メモリ１０１ａのメモリ番号Ｎに該当するメモリ（第１の画像処理状態メモリ１０１ａの領域）から、制御データを読み出す。そして、第１のコンピュータ１０１は、ステップＳＴ４５において、１フレーム時間を待って、つまり同期信号の進行待ちを行い、その後に、ステップＳＴ４６において、制御データに従い、制御対象であるＧＰＵ１０４に指示を送る。その後、第１のコンピュータ１０１は、ステップＳＴ４７において、一連の処理を終了する。
【００８０】
図１２のフローチャートは、第２のコンピュータ１１１における画像処理状態のリコール（復元）時の処理手順の一例を示している。第２のコンピュータ１１１は、ステップＳＴ５１において、処理を開始し、その後に、ステップＳＴ５２の処理に移る。このステップＳＴ５２において、第２のコンピュータ１１１は、第１のコンピュータ１０１から、リコール指示（メモリ番号Ｎを含む）を受信する。
【００８１】
次に、第２のコンピュータ１１１は、ステップＳＴ５３において、第２の画像処理状態メモリ１１１ａのメモリ番号Ｎに該当するメモリ（第２の画像処理状態メモリ１１１ａの領域）から、制御データを読み出す。そして、第２のコンピュータ１１１は、ステップＳＴ５４において、制御データに従い、画像切換部１１３のうち入力メモリ部１０５に供給するラインの選択を指示する。
【００８２】
次に、第２のコンピュータ１１１は、ステップＳＴ５５において、２フレーム時間を待って、つまり同期信号の進行待ちを行い、その後に、ステップＳＴ５６において、制御データに従い、その他の制御対象（画像切換部１１３の他のライン、画像合成部１１４、音声系）に指示を送る。その後、第２のコンピュータ１１１は、ステップＳＴ５７において、一連の処理を終了する。
【００８３】
図１に示す画像処理装置１００におけるリコール（復元）の動作についてさらに説明する。リコールの動作においては、単純に、一度に（ある画像フレームの時点で）各部の状態を復元すると、問題が生じる場合がある。すなわち、ＧＰＵ１０４が入力メモリ部１０５から画像データを読み込み、中間メモリ部１０６に処理生成した画像データを書き込むまでには複数フレームの時間を要する。
【００８４】
リコール指示による最初のＧＰＵ処理が終わる前に、画像切換部１１３や画像合成部１１４でＧＰＵ１０４が書き込むはずの中間メモリ部１０６の画像データを使用すると、復元される前の状態でＧＰＵ１０４が処理した画像データが使用されることとなる。この場合、不正な出力画像データが一瞬生成されてしまう。これを防止するため、画像処理装置１００は、図１３に示すような一連の動作を実行する。この動作シーケンスは、画像切換部１１３および画像合成部１１４が動作タイミングとして用いる垂直同期信号を受けて、進められる。
【００８５】
上述したように、図１に示す画像処理装置１００において、画像処理状態メモリは、第１の画像処理状態メモリ１０１ａと、第２の画像処理状態メモリ１１１ａで構成される。第１の画像処理状態メモリ１０１ａは第１のコンピュータ１０１に付属するメモリに設けられ、第２の画像処理状態メモリ１１１ａは第２のコンピュータ１１１に付属するメモリに設けられ、それぞれのコンピュータが管理する部分に関する状態データを記憶する。
【００８６】
図１３に示す動作を順に説明する。ユーザ操作に基づくユーザ操作部１０２からのリコール（復元）指示の受信により、このシーケンスが始まる。このリコール指示には、画像処理状態メモリ中の一つの画像処理状態（領域）を特定する番号（メモリ番号Ｎ）が含まれる。第１のコンピュータ１０１は、リコール指示を、第２のコンピュータに転送する。
【００８７】
第１のコンピュータ１０１は、第１の画像処理状態メモリ１０１ａのメモリ番号Ｎに該当するメモリ（第１の画像処理状態メモリ１０１ａの領域）から、制御データを読み出す。第２のコンピュータ１１１は、第２の画像処理状態メモリ１１１ａのメモリ番号Ｎに該当するメモリ（第２の画像処理状態メモリ１１１ａの領域）から、制御データを読み出す。そして、第２のコンピュータ１１１は、画像切換部（XPT）１１３を制御して入力メモリ部１０５に供給する信号を選択させる。
【００８８】
画像切換部１１３は、垂直同期信号のタイミングに同期して、実際の信号切り換えを行う。その垂直同期信号のタイミングの後、第１のコンピュータ１０１は、先ほど読み出した制御データによりＧＰＵ１０４に指示を送る。ＧＰＵ１０４は、次の垂直同期信号の後から、その指示に従って、入力メモリ部１０５から画像データを読み取り処理を行う。画像データの処理は、フレーム／フィールドの途中で変更すると画面の途中で切れたおかしな画になるため、垂直同期信号を切れ目として、処理変更する。
【００８９】
さらに、次の垂直同期信号の後、ＧＰＵ１０４が処理生成した画像データを中間メモリ部１０６に書き込む。同時に、第２のコンピュータ１１１は、画像切換部１１３に対して、中間メモリ部１０６からの画像を選択して画像合成部１１４に供給するように指示する。画像切換部１１３はその指示による切り換えを次の垂直同期信号のタイミングで行う。
【００９０】
また、第２のコンピュータ１１１は、画像合成部１１４に対しても同じタイミングで処理状態復元の制御を送る。画像切換部１１３が切り換わった後、画像合成部１１４に中間メモリ部１０６からの画像が供給されるようになり、画像合成部１１４で、指定された画像処理（合成）が行われる。この一連の動作の後、画像処理装置１００に入力される画像フレームに対して、ＧＰＵ１０４、画像合成部１１４は継続して処理を行う。
【００９１】
なお、以上の例では、ＧＰＵ１０４の画像処理が、垂直同期信号の間隔の一つ分の時間で行われるとしたが、例えばもし二つ分の時間で行われる場合は、図１３の「※１」の部分が、垂直同期信号間をもう一つ使って、図１４に示すような処理となる。図１３の「※１」の部分に示す、ＧＰＵ１０４が画像データを読み込む動作は、以降の垂直同期信号毎に継続して行われる。
【００９２】
また、別の構成として、画像処理状態メモリを、第１のコンピュータ１０１に付属するメモリに設けられている画像処理状態メモリ１０１ａのみで構成することも考えられる。その場合、その画像処理状態メモリ１０１ａの中に第２のコンピュータ１１１が管理する部分に関する制御データも含まれ、その制御データを第１のコンピュータ１０１から第２のコンピュータ１１１に送信して使用させる構成となる。その場合、シーケンスの始まりの部分は、図１５に示すような処理となる。
【００９３】
すなわち、第１のコンピュータ１０１は、リコール（復元）指示の操作入力（メモリ番号Ｎを含む）を受信するとき、画像処理状態メモリ１０１ａのメモリ番号Ｎに該当するメモリ（第１の画像処理状態メモリ１０１ａの領域）から、第１のコンピュータ１０１自身が管理する部分の制御データと、第２のコンピュータ１１１が管理する部分の制御データを読み出す。そして、第１のコンピュータ１０１は、リコール指示を、第２のコンピュータ１１１が管理する部分の制御データを付けて、第２のコンピュータ１１１に送る。
【００９４】
なお、上述とは逆に、画像処理状態メモリを、第２のコンピュータ１１１に付属するメモリに設けられている画像処理状態メモリ１１１ａのみで構成することも考えられる。その場合、その画像処理状態メモリ１１１ａの中に第１のコンピュータ１０１が管理する部分に関する制御データも含まれ、その制御データを第２のコンピュータ１１１から第１のコンピュータ１０１に送信して使用させる構成となる。
【００９５】
その場合、第１のコンピュータ１０１は、リコール（復元）指示の操作入力（メモリ番号Ｎを含む）を受信するとき、そのリコール指示を、第２のコンピュータ１１１に送る。第２のコンピュータ１１１は、画像処理状態メモリ１１１ａのメモリ番号Ｎに該当するメモリ（第２の画像処理状態メモリ１１１ａの領域）から、第２のコンピュータ１１１自身が管理する部分の制御データと、第１のコンピュータ１０１が管理する部分の制御データを読み出す。そして、第２のコンピュータ１１１は、第１のコンピュータ１０１が管理する部分の制御データを、第１のコンピュータ１０１に送る。
【００９６】
図１６のフローチャートは、第２のコンピュータ１１１における画像処理状態の復元時の処理手順の他の例を示している。この図１６において、図１２と対応するステップには同一符号を付し、適宜、その詳細説明を省略する。図１６のフローチャートでは、ステップＳＴ５３の次に判断ステップとしてステップＳＴ５８が追加されている。このステップＳＴ５８で、第２のコンピュータ１１１は、読み出した制御データの内容を判断する。
【００９７】
この場合の判断は、制御データの内容は、ＧＰＵ１０４の出力（中間メモリ部１０６の出力）の内容が画像合成部１１４の出力に影響を与えるものか、という判断である。この場合、例えば、中間メモリ部１０６から読み出した画像データを、画像切換部１１３が画像合成部１１４に供給するか否かを判断する。供給するとき、第２のコンピュータ１１１は影響を与えると判断し、図１２のフローチャートと同様に、ステップＳＴ５４の処理に進む。
【００９８】
一方、供給しないとき、第２のコンピュータ１１１は影響を与えないと判断し、２フレームの時間待ちをすることなく、直ちにステップＳＴ５９の処理に移る。そして、このステップＳＴ５９において、第２のコンピュータ１１１は、制御データに従い、全ての制御対象（画像切換部１１３の全てのライン、画像合成部１１４、音声系）に指示を送る。その後、第２のコンピュータ１１１は、ステップＳＴ５７において処理を終了する。
【００９９】
詳細説明は省略するが、図１６のフローチャートのその他は、図１２のフローチャートと同様の処理構成である。このようにステップＳＴ５８の判断ステップを追加したことにより、ＧＰＵ１０４が生成する画像データを画像合成部１１４で使用しない場合は、２フレーム待たずに直ちに出力画像の状態を復元でき、操作に対する反応が早くなる。
【０１００】
図１７のシーケンス図は、さらに、別の動作例を示している。この例では、ＧＰＵ１０４は、第１のコンピュータ１０１から送られた画像データを使って、画像データの生成処理を行う。第１のコンピュータ１０１は、読み出した制御データを調べて、第１のコンピュータ１０１がストレージに保持している画像データを、ＧＰＵ１０４で使用するか調べる。使用する場合、第１のコンピュータ１０１は、該当する画像データをストレージから読み出し、ＧＰＵ１０４に渡す。この動作の具体例としては、ＰＣＩｅ（PCI Express） バスによって、ＧＰＵ１０４からアクセスできるメモリに当該画像データを置く。
【０１０１】
この結果、ＧＰＵ１０４で第１のコンピュータ１０１が格納している画像データを使った処理を、復元することができる。また、ＧＰＵ１０４の画像データの生成処理が、画像データにアクセス可能になる前に動いてしまい、不正な画像データ生成となることを防止できる。画像処理の内容により、第１のコンピュータ１０１が保持している画像データを、そのまま中間メモリ部１０６に書き込んで、画像合成部１１４でビデオ信号のフレームとして使用できるようにすることもできる。
【０１０２】
なお、中間メモリ部１０６に画像データを書く際には、画像データのフォーマットは、中間メモリ部１０６が画像データの出力処理を正しく行えるように、所定のフォーマットに限定される。例えば、ＪＰＥＧ画像データであるとか、あるいは非圧縮のＲＧＢデータである、というように、中間メモリ部１０６の機能により限定される。このため、中間メモリ部１０６に送る予定の画像データは、予め、そのようなフォーマットに変換して、第１のコンピュータ１０１のストレージに保持しておくのが効率がよい。図１７に示すシーケンス図では、中間メモリ部１０６に書き込むまでの時間は決まっているので、処理に間に合うように、事前にフォーマット変換しておくのが好ましい。
【０１０３】
上述したように、図１に示す画像処理装置１００においては、ＧＰＵ１０４の系と、画像切換部１１３や画像合成部１１４などの本線系は、それぞれ別個のコンピュータにより互いに独立して制御されるものである。そして、画像合成部１１４では、画像入力部１１２に入力される入力画像データだけでなく、ＧＰＵ１０４で生成される画像データも中間メモリ部１０６を介して利用可能とされる。そのため、拡張性に富んだ画像処理が可能となり、かつ、遅延の少ない安定した動作の画像処理が維持される。
【０１０４】
また、図１に示す画像処理装置１００においては、リコール（復元）が指示されるとき、第１のコンピュータ１０１は該当制御データに基づきＧＰＵ１０４の画像処理状態を変更する制御を施すものである。また、このとき、第２のコンピュータ１１１は、ＧＰＵ１０４の画像処理状態の変更に同期させて、該当制御データに基づき、画像切換部１１３および画像合成部１１４に制御を施すものである。そのため、リコール（復元）時に不正な出力画像が生成されることを抑制できる。
【０１０５】
＜２．変形例＞
なお、上述の図１に示す画像処理装置１００においては、入力メモリ部１０５には、画像入力部１１２から出力される複数の画像データのうち、画像切換部１１３で選択された一つまたは複数の画像データを書き込むものである。また、上述の図１に示す画像処理装置１００においては、中間メモリ部１０６から読み出される画像データは画像切換部１１３を通じて画像合成部１１４に入力されるものである。しかし、入力メモリ部１０５および中間メモリ部１０６の配置は、この図１に示す画像処理装置１００に限定されない。
【０１０６】
図１８は、入力メモリ部１０５および中間メモリ部１０６の配置の他の例を示している。この図１８において、図１と対応する部分には同一符号を付して示している。この例においては、入力メモリ部１０５には、画像入力部１１２から出力される複数の画像データが書き込まれる。また、中間メモリ部１０６から読み出される画像データは直接画像合成部１１４に入力される。
【０１０７】
図１９も、入力メモリ部１０５および中間メモリ部１０６の配置の他の例を示している。この図１９において、図１と対応する部分には同一符号を付して示している。この例においては、入力メモリ部１０５には、画像切換部１１３で選択された一つまたは複数の画像データが書き込まれる。また、中間メモリ部１０６から読み出される画像データは直接画像合成部１１４に入力される。
【０１０８】
図２０も、入力メモリ部１０５および中間メモリ部１０６の配置の他の例を示している。この図２０において、図１と対応する部分には同一符号を付して示している。この例においては、入力メモリ部１０５には、画像入力部１１２から出力される複数の画像データが書き込まれる。中間メモリ部１０６から読み出される画像データは画像切換部１１３を通じて画像合成部１１４に入力される。
【０１０９】
図２１は、画像処理装置１００の変形例を示している。この図２１において、図１と対応する部分には同一符号を付し、適宜、その詳細説明は省略する。この例では、第１のコンピュータ１０１において、動画像および音声を含むファイルが再生され、その音声データを音声合成部１１７に送る経路１６１が設けられている。また、この音声合成部１１７から出力される音声データを第１のコンピュータ１０１に送る経路１６２が設けられている。
【０１１０】
また、画像合成部１１４から出力される画像データを第１のコンピュータ１０１に送る経路１６３が設けられている。すなわち、この経路１６３は、画像構成部１１４で合成される画像データを取り込んで第１のコンピュータ１０１に供給する出力キャプチャ部を構成する。この経路１６３は、詳しくは、後述する図２２あるいは図２３に示すような回路を経由するものとなる。なお、第１のコンピュータ１０１で再生される画像データは、毎フレーム、中間メモリ部１０６に送ることで、画像切換部１１３を通じて、画像合成部１１４の入力に含めることができる。第１のコンピュータ１０１は、ネットワークインタフェース部１０７に対して、動画像および音声をエンコードしたストリーミングデータを送信することができる。
【０１１１】
図２２において、メモリ部１７１は、出力キャプチャ部を構成している。このメモリ部１７１は、入力メモリ部１０５に類似したもので、画像合成部１１４から出力される画像データを内蔵メモリに書き込み、それを第１のコンピュータ１０１から読み取り可能にする。第１のコンピュータ１０１は、メモリ部１７１から読み取った画像データを、ストリーミング配信に使用し、あるいは、付属のディスプレイ１０３に画像表示するために使用できる。ディスプレイ１０３に表示する場合、図示のように、ディスプレイ表示用のＧＰＵに供給する。
【０１１２】
なお、図２２において、第１のコンピュータ１０１内に設けられた遅延部（Delay）１７２は、入力メモリ部１０５あるいは中間メモリ部１０６から読み出された画像データに対して時間調整を行うために使用される。すなわち、メモリ部１７１からの画像データによる画像をディスプレイ１０３の一部に表示すると共に、入力メモリ部１０５あるいは中間メモリ部１０６から読み出された画像データによる画像をディスプレイ１０３の一部に表示する際に、入力メモリ部１０５あるいは中間メモリ部１０６から読み出された画像データに対して時間調整を行うものである。
【０１１３】
ここで、入力メモリ部１０５に記憶されている画像データによる画像をディスプレイ１０３に表示する場合、第１のコンピュータ１０１は、入力メモリ部１０５から画像データを読み出して、自身の内蔵メモリ（図示せず）に転送する。そして、第１のコンピュータ１０１は、このように転送された画像データに対して、遅延部（Delay）１７２で所定の遅延を施して時間調整を行って、画像表示を行う。
【０１１４】
また、中間メモリ部１０６に記憶されている画像データによる画像をディスプレイ１０３に表示する場合、第１のコンピュータ１０１は、中間メモリ部１０６から画像データを読み出して、自身の内蔵メモリ（図示せず）に転送する。そして、第１のコンピュータ１０１は、このように転送された画像データに対して、遅延部（Delay）１７２で所定の遅延を施して時間調整を行って、画像表示を行う。
【０１１５】
図２３において、エンコーダ１７３は、出力キャプチャ部を構成している。このエンコーダ１７３は、画像合成部１１４から出力される画像データを、ＭＰＥＧ２トランスポートストリームにエンコードして、第１のコンピュータ１０１に供給する。ストリーミング配信する場合、いずれかの箇所で、エンコードする必要がある。エンコード処理は、第１のコンピュータ１０１で行っても良いが、図２３のエンコーダ１７３のように専用のハードウェアを設ければ、より高性能に、第１のコンピュータ１０１の負荷を上げずに、エンコード処理を実現できる。さらに、第１のコンピュータ１０１において、第１のコンピュータ１０１の記憶手段に、エンコーダ１７３の出力を録画しても良い。
【０１１６】
また、上述の図１に示す画像処理装置１００においては、第１のコンピュータ１０１にユーザ操作部１０２が接続されている。しかし、このユーザ操作部１０２と共に、あるいはこのユーザ操作部１０２の代わりに、第２のコンピュータ１１１にユーザ操作部が接続される構成も考えられる。
【０１１７】
図２４は、第１のコンピュータ１０１にユーザ操作部１０２が接続され、さらに、第２のコンピュータ１１１にもユーザ操作部１７４が接続された画像処理装置１００の構成例を示している。この図２４において、図１と対応する部分には同一符号を付し、その詳細説明は省略する。このユーザ操作部１７４は、例えば、ボタンの列を備え、画像切換部１１３における信号選択を操作可能にされる。また、このユーザ操作部１７４は、例えば、ＧＰＵ１０４の動作状態も含めて信号処理を変更するタイミングを与える操作を行い得るようなボタンを備えるようにされてもよい。
【０１１８】
このように第２のコンピュータ１１１にユーザ操作部１７４が接続される場合、ユーザは、このユーザ操作部１７４によりリコール（復元）指示の操作を行うことも可能となる。その場合、ユーザ操作部１７４から第２のコンピュータ１１１にリコール指示が送られ、その後、この第２のコンピュータ１１１から第１のコンピュータ１０１にリコール指示が送られることになる。
【０１１９】
また、上述実施の形態においては、ＧＰＵ１０４で生成された画像データは、中間メモリ部１０６に書き込むものであった。しかし、このように中間メモリ部１０６に書き込まれる画像データと同じ画像データを、ＧＰＵ１０４が、第１のコンピュータ１０１の内蔵メモリ（内部記憶部）に書き込む構成も考えられる。この場合、例えば、第１のコンピュータ１０１は、この内蔵メモリからその画像データを読み出し、ディスプレイ１０３にそれによる画像を表示する。これにより、ユーザは、ＧＰＵ１０４で生成される画像データによる画像をディスプレイ１０３で確認できる。
【０１２０】
また、上述していないが、ＧＰＵ１０４と第２のコンピュータ１１１との両方からアクセス可能なＧＰＵ共有記憶部を設けることで、第２のコンピュータ１１１からＧＰＵ１０４を制御することも考えられる。この場合、第２のコンピュータ１１１は、ユーザ操作部１７４（図２４参照）からのユーザの操作入力に応じて、ＧＰＵ共有記憶部に画像処理状態に関する制御データの書き込みを行う。そして、ＧＰＵ１０４は、このＧＰＵ共有記憶部から制御データを読み取って自身の動作状態を変更する。
【０１２１】
また、上述していないが、ＧＰＵ１０４は、第２のコンピュータ１１１から受け取るフェーダ値に従ってワイプ用キー信号を作成する構成とすることも考えられる。この場合、画像合成部１１４に中間メモリ部１０６からＧＰＵ１０４で作成されたワイプ用キー信号を読み出して入力でき、画像のワイプ・トランジションに使用可能となる。
【０１２２】
また、上述していないが、ＧＰＵ利用モード入力操作部を設けることが考えられる。このＧＰＵ利用モード入力操作部は、図２４に示すユーザ操作部１７４と同様に、例えば、第２のコンピュータ１１１に接続される。この場合、画像切換部１１３および画像合成部１１４は、ＧＰＵ利用モード入力操作部により、ＧＰＵ１０４からの画像データを使用して出力画像データを作成するモードと、ＧＰＵ１０４からの画像データを使用せずに出力画像データを作成するモードとが切り換えられる。
【０１２３】
また、上述実施の形態においては、画像入力部１１２に入力される入力画像データを記憶する入力メモリ部１０５を設け、ＧＰＵ１０４はこの入力メモリ部１０５から必要な画像データを読み出して参照（使用）できる構成となっている。しかし、ＧＰＵ１０４で画像入力部１１２に入力される入力画像データを参照しない場合には、この入力メモリ部１０５は不要である。つまり、この入力メモリ部１０５を備えない構成も考えられる。
【０１２４】
本技術は、以下のような構成も取ることができる。
（１）グラフィクスプロセッシングユニットと、
上記グラフィクスプロセッシングユニットを制御する第１のコンピュータと、
上記グラフィクスプロセッシングユニットで生成された画像データを記憶する中間画像記憶部と、
複数の画像データを入力する画像入力部と、
上記画像入力部に入力される複数の画像データのうち任意の複数の画像データを出力する画像切換部と、
上記画像切換部から出力される画像データおよび上記中間画像記憶部に記憶されている画像データを用いて画像データを合成する画像合成部と、
上記画像合成部で合成される画像データを出力する画像出力部と、
上記画像切換部および上記画像合成部を制御する第２のコンピュータと、
上記第１のコンピュータと上記第２のコンピュータとを接続する接続部とを備える
画像処理装置。
（２）所定の画像処理状態に対応した各部の制御データを記憶する画像処理状態記憶部をさらに備え、
画像処理状態を復元する指示がされるとき、
上記第１のコンピュータは、上記画像処理状態記憶部に記憶されている該当制御データに基づき、上記グラフィクスプロセッシングユニットの画像処理状態を変更する制御を施し、
上記第２のコンピュータは、上記グラフィクスプロセッシングユニットの画像処理状態の変更に同期させて、上記画像処理状態記憶に記憶されている該当制御データに基づき、上記画像切換部および上記画像合成部の画像処理状態を変更する制御を施す
前記（１）に記載の画像処理装置。
（３）上記画像処理状態記憶部として、上記第１のコンピュータに付属するメモリに設けられている第１の画像処理状態記憶部と、上記第２のコンピュータに付属するメモリに設けられている第２の画像処理状態記憶部とを有し、
上記第１のコンピュータが管理する部分に関する制御データは、上記第１の画像処理状態記憶部に記憶され、上記第２のコンピュータが管理する部分に関する制御データは、上記第２の画像処理状態記憶部に記憶されている
前記（２）に記載の画像処理装置。
（４）上記画像処理状態記憶部は、上記第１のコンピュータに付属するメモリに設けられており、
上記第２のコンピュータは、上記制御データを、上記第１のコンピュータから上記接続部を通じて受け取る
前記（２）に記載の画像処理装置。
（５）上記画像処理状態記憶部に記憶されている上記制御データを書き込んで保存しておく不揮発性ストレージをさらに備える
前記（２）から（４）のいずれかに記載の画像処理装置。
（６）画像処理状態を記憶する指示がされるとき、
上記画像処理状態記憶部に、上記第１のコンピュータによる上記グラフィクスプロセッシングユニットの制御データが記憶されると共に、上記第２のコンピュータによる上記画像切換部および上記画像合成部の制御データが記憶される
前記（２）から（５）のいずれかに記載の画像処理装置。
（７）上記画像処理状態記憶部として、上記第１のコンピュータに付属するメモリに設けられている第１の画像処理状態記憶部と、上記第２のコンピュータに付属するメモリに設けられている第２の画像処理状態記憶部とを有し、
第１のコンピュータは、上記第１の画像処理状態記憶部に、上記第１のコンピュータが管理する部分に関する制御データを書き込み、
上記第２のコンピュータは、上記第２の画像処理状態記憶部に、上記第２のコンピュータが管理する部分に関する制御データを書き込む
前記（６）に記載の画像処理装置。
（８）上記第１のコンピュータに接続されるユーザ操作部をさらに備え、
上記ユーザ操作部は、上記画像処理状態を復元する指示を入力する機能を有し、
上記第１のコンピュータは、上記ユーザ操作部により上記画像処理状態を復元する指示がされるとき、該指示を、上記接続部を介して、上記第２のコンピュータに送る
前記（２）から（７）のいずれかに記載の画像処理装置。
（９）上記画像入力部に入力される画像データを記憶する入力画像記憶部をさらに備え、
上記グラフィクスプロセッシングユニットは、上記入力画像記憶部から読み取る画像データを参照して動作する
前記（１）から（８）のいずれかに記載の画像処理装置。
（１０）上記入力画像記憶部は、
上記画像切換部から出力される画像データを記憶する
前記（９）に記載の画像処理装置。
（１１）上記グラフィクスプロセッシングユニットは、重畳する前景画像の画像データとそのキー信号を生成し、
上記画像合成部は、上記前景画像の画像データとそのキー信号を上記中間画像記憶部から読み取り、上記キー信号に基づいて、上記前景画像の画像データを、上記画像切換部からの背景画像の画像データに重畳する
前記（１）から（１０）のいずれかに記載の画像処理装置。
（１２）上記画像入力部に入力される画像データを記憶する入力画像記憶部をさらに備え、
上記第１のコンピュータは、
上記入力画像記憶部から内部記憶部に画像データの転送を行い、表示部に該転送された画像データによる画像を表示する
前記（１）から（１１）のいずれかに記載の画像処理装置。
（１３）上記第１のコンピュータは、
上記中間画像記憶部から内部記憶部に画像データの転送を行い、表示部に該転送された画像データによる画像を表示する
前記（１）から（１２）のいずれかに記載の画像処理装置。
（１４）上記グラフィクスプロセッシングユニットは、上記中間画像記憶部に書き込む画像データと同じ画像データを上記第１のコンピュータの内部記憶部に書き込み、
上記第１のコンピュータは、表示部に上記内部記憶部から読み出した画像データによる画像を表示する
前記（１）から（１３）のいずれかに記載の画像処理装置。
（１５）上記画像合成部で合成される画像データを取り込んで上記第１のコンピュータに供給する出力キャプチャ部をさらに備える
前記（１）から（１４）のいずれかに記載の画像処理装置。
（１６）上記第１のコンピュータは、上記出力キャプチャ部から取得した画像データによる画像を表示部に表示する
前記（１５）に記載の画像処理装置。
（１７）上記出力キャプチャ部は、エンコーダを有し、
上記出力キャプチャ部は、上記取り込まれた画像データを上記エンコーダで符号化して上記第１のコンピュータに供給する
前記（１５）に記載の画像処理装置。
（１８）ネットワークインタフェース部をさらに備え、
上記第１のコンピュータは、上記出力キャプチャ部から供給される画像データを、上記ネットワークインタフェースを介してストリーミング送信する
前記（１５）に記載の画像処理装置。
（１９）複数の音声データを入力する音声入力部と、
上記音声入力部に入力される音声データを用いて音声データを合成する音声合成部と、
上記音声合成部で合成された音声データを出力する音声出力部とをさらに備え、
上記第２のコンピュータは、さらに、上記音声合成部を制御する
前記（１）から（１８）のいずれかに記載の画像処理装置。
（２０）グラフィクスプロセッシングユニットと、
上記グラフィクスプロセッシングユニットで生成された画像データを記憶する中間画像記憶部と、
複数の画像データを入力する画像入力部と、
上記画像入力部に入力される複数の画像データのうち任意の複数の画像データを出力する画像切換部と、
上記画像切換部から出力される画像データおよび上記中間画像記憶部に記憶されている画像データを用いて画像データを合成する画像合成部と、
上記画像合成部で合成される画像データを出力する画像出力部とを備える画像処理装置の制御方法であって、
上記グラフィクスプロセッシングユニットを第１のコンピュータにより制御し、上記画像切換部および上記画像合成部を、上記第１のコンピュータと接続される第２のコンピュータにより制御する
画像処理装置の制御方法。
【符号の説明】
【０１２５】
１００・・・画像処理装置
１０１・・・第１のコンピュータ
１０１ａ・・・第１の画像処理状態メモリ
１０２・・・ユーザ操作部
１０３・・・ディスプレイ
１０４・・・ＧＰＵ（グラフィクスプロセッシングユニット）
１０５・・・入力メモリ部
１０６・・・中間メモリ部
１０７・・・ネットワークインタフェース部
１０８・・・通信ライン（接続部）
１１１・・・第２のコンピュータ
１１１ａ・・・第２の画像処理状態メモリ
１１２・・・画像入力部
１１３・・・画像切換部
１１４・・・画像合成部
１１５・・・画像出力部
１１６・・・音声入力部
１１７・・・音声合成部
１１７ａ・・・音声切換部
１１７ｂ・・・合成部
１１７ｃ，１１７ｄ・・・遅延部
１１８・・・音声出力部
１３１，１４１，１５１・・・切換部（Mixer in Xpt）
１３２，１４２，１４３，１５２，１５３・・・合成部（Video Image Mixing Block）
１４４，１５４・・・ワイプ用キー信号生成部（Wipe Key Signal Generator）
１５５・・・キー信号処理部（Key Signal Processor）
１６１，１６２，１６３・・・経路
１７１・・・メモリ部
１７２・・・遅延部
１７３・・・エンコーダ
１７４・・・ユーザ操作部
２２１・・・ＰＣＩｅスイッチ（PCIe SW）
２２２・・・ＰＣＩｅブリッジ（PCIe Bridge）
【図１】
2014106276.tif 000003
【図２】
2014106276.tif 000004
【図３】
2014106276.tif 000005
【図４】
2014106276.tif 000006
【図５】
2014106276.tif 000007
【図６】
2014106276.tif 000008
【図７】
2014106276.tif 000009
【図８】
2014106276.tif 000010
【図９】
2014106276.tif 000011
【図１０】
2014106276.tif 000012
【図１１】
2014106276.tif 000013
【図１２】
2014106276.tif 000014
【図１３】
2014106276.tif 000015
【図１４】
2014106276.tif 000016
【図１５】
2014106276.tif 000017
【図１６】
2014106276.tif 000018
【図１７】
2014106276.tif 000019
【図１８】
2014106276.tif 000020
【図１９】
2014106276.tif 000021
【図２０】
2014106276.tif 000022
【図２１】
2014106276.tif 000023
【図２２】
2014106276.tif 000024
【図２３】
2014106276.tif 000025
【図２４】
2014106276.tif 000026