(57)【特許請求の範囲】
【請求項１】
複数のパッド操作子と、
これらパッド操作子の夫々に対応して任意の画像データをそれぞれ記憶する複数の画像記憶手段と、
上記パッド操作子に対する操作を検出する操作検出手段と、
上記操作が検出されたことに応じて、当該操作が検出されたパッド操作子に対応する画像記憶手段から画像データを読み出す読出し手段と、
読み出された画像データを処理して映像信号を生成する映像生成手段と
を具備することを特徴とする画像制御装置。
【請求項２】
複数種類のイベントの夫々に対応して任意の画像データをそれぞれ記憶する複数の画像記憶手段と、
イベントを入力するイベント入力手段と、
上記イベント入力手段により入力されたイベントに応じて、当該イベントの種類に対応する画像記憶手段から画像データを読み出す読出し手段と、
読み出された画像データを処理して映像信号を生成する映像生成手段と
を具備することを特徴とする画像制御装置。
【請求項３】
さらに、
複数のパッド操作子と、
上記パッド操作子に対する操作に応じて、当該操作がなされたパッド操作子に対応するイベントを発生するイベント発生手段と
を具備し、
前記イベント入力手段は、上記イベント発生手段により発生されたイベントを入力するものである
ことを特徴とする請求項２に記載の画像制御装置。
【請求項４】
さらに、
外部からの入力信号を受信するための受信手段と、
上記受信手段により受信された入力信号の中からイベントを検出するイベント検出手段と
を具備し、
前記イベント入力手段は、上記イベント検出手段により検出されたイベントを入力するものである
ことを特徴とする請求項２に記載の画像制御装置
【請求項５】
さらに、
前記画像記憶手段に記憶された画像データを保存するデータ保存手段と、
上記データ保存手段に保存された画像データを読み出して前記画像記憶手段に記憶させるデータ転送手段と
を具備することを特徴とする請求項１〜４の何れか１項に記載の画像制御装置。
【請求項６】
さらに、
ビデオ信号を入力するビデオ入力手段と、
上記ビデオ入力手段により入力されるビデオ信号の記録開始及び記録終了を指示する記録指示手段と、
前記複数の画像記憶手段のうち何れかを選択する選択手段と、
上記記録指示手段により記録開始が指示されてから記録終了が指示されるまでのビデオ信号に基づく画像データを、上記選択手段により選択された画像記憶手段に記憶させる録画手段と
を具備することを特徴とする請求項１〜５の何れか１項に記載の画像制御装置。
【請求項７】
さらに、
ビデオ信号を入力するビデオ入力手段と、
上記ビデオ入力手段により入力されたビデオ信号と前記映像生成手段により生成された映像信号とを合成した合成映像信号を生成する合成映像生成手段と、
上記合成映像生成手段により生成された合成映像信号を出力する出力手段と
を具備することを特徴とする請求項１〜５の何れか１項に記載の画像制御装置。
【請求項８】
前記映像生成手段は、所定の映像効果が付与された映像信号を生成することを特徴とする請求項１〜７の何れか１項に記載の画像制御装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、画像の再生をイベントに応じて任意に制御して多彩な映像を演出することができる画像制御装置に関する。
【０００２】
【従来の技術】
複数の映像データを記憶し編集する映像編集装置は、従来より、数多く存在する。しかしながら、この種の映像編集装置は、編集した後で映像出力させるようにしたものであって、その場の状況に応じて映像を選択的に出力するようなものではなく、リアルタイム性がなかった。
【０００３】
【発明が解決しようとする課題】
この発明は、任意の画像データをイベントに応じて自由なタイミングで任意の態様で再生出力して多彩な画像を演出することができる画像制御システムを提供することを目的とする。
【０００４】
【課題を解決するための手段】
この発明の１つの特徴に従うと、複数のパッド操作子（Ｐｄｊ：Ｐｄ１〜Ｐｄ８；１２）と、これらパッド操作子の夫々に対応して任意の画像データ（パッド画像データＩＭ：ＩＭａ１〜ＩＭａ８，ＩＭｂ１〜ＩＭｂ８又はＩＭｃ１〜ＩＭｃ８）をそれぞれ記憶する複数の画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）と、パッド操作子（Ｐｄｊ）に対する操作を検出する操作検出手段（Ｐ３，Ｐ３０；５）と、上記操作が検出されたことに応じて、当該操作が検出されたパッド操作子（Ｐｄｊ）に対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を読み出す読出し手段（Ｐ３０〜Ｐ３２；７３）と、読み出された画像データ（ＩＭ）を処理して映像信号を生成する映像生成手段（Ｐ３３；７４）とを具備する画像制御装置〔請求項１〕が提供される。なお、括弧書きは、理解の便のために、後で詳述する実施例の対応する参照記号、用語、箇所等を付記したものであり、以下においても同様である。
【０００５】
この発明の別の特徴に従うと、複数種類のイベント（Ｉｖ：Ａ−１〜Ｃ−８）の夫々に対応して任意の画像データ（パッド画像データＩＭ：ＩＭａ１〜ＩＭｃ８）をそれぞれ記憶する複数の画像記憶手段（ＰＡＤ：ＢＡＮＫ−Ａ〜ＣのＰＡＤ１〜ＰＡＤ８；７２）と、イベント（Ｉｖ）を入力するイベント入力手段（Ｐ３０，Ｐ３１）と、イベント入力手段により入力されたイベント（Ｉｖ）に応じて、当該イベント（Ｉｖ）の種類に対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を読み出す読出し手段（Ｐ３２；７３）と、読み出された画像データを処理して映像信号を生成する映像生成手段（Ｐ３３；７４）とを具備する画像制御装置〔請求項２〕が提供される。
【０００６】
この特徴に従う画像制御装置は、さらに、複数のパッド操作子（Ｐｄｊ：Ｐｄ１〜Ｐｄ８；１２）と、パッド操作子（Ｐｄｊ）に対する操作に応じて、当該操作がなされたパッド操作子（Ｐｄｊ）に対応するイベント（Ｉｖ）を発生するイベント発生手段（Ｐ３，Ｐ３０；５）とを具備し、イベント入力手段（Ｐ３０，Ｐ３１）は、イベント発生手段により発生されたイベント（Ｉｖ）を入力するものである〔請求項３〕ように構成することができる。また、この特徴に従う画像制御装置は、さらに、外部（１６）からの入力信号（ＭＩＤＩ信号）を受信するための受信手段（８）と、受信手段（８）により受信された入力信号の中からイベント（Ｉｖ）を検出するイベント検出手段（Ｐ４，Ｐ３０）とを具備し、イベント入力手段（Ｐ３０，Ｐ３１）は、イベント検出手段により検出されたイベントを入力するものである〔請求項４〕ように構成することができる。
【０００７】
この発明による画像制御装置は、さらに、画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）に記憶された画像データ（ＩＭ：ＩＭａ１〜ＩＭｃ８）を保存するデータ保存手段（Ｐ１７；４）と、データ保存手段（４）に保存された画像データ（ＩＭ）を読み出して画像記憶手段（ＰＡＤ）に記憶させるデータ転送手段（Ｐ１７；７６）とを具備する〔請求項５〕ように構成することができる。
【０００８】
この発明による画像制御装置は、さらに、ビデオ信号を入力するビデオ入力手段（１４）と、ビデオ入力手段（１４）により入力されるビデオ信号の記録開始及び記録終了を指示する記録指示手段（Ｐ９，Ｐ１２）と、複数の画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）のうち何れかを選択する選択手段（Ｐ７）と、記録指示手段（Ｐ９，Ｐ１０）により記録開始が指示されてから記録終了が指示されるまでのビデオ信号に基づく画像データを、選択手段により選択された画像記憶手段（ＰＡＤ）に記憶させる録画手段（Ｐ１０，Ｐ１３；７１）とを具備する〔請求項６〕ように構成することができる。また、この発明による画像制御装置は、さらに、ビデオ信号を入力するビデオ入力手段（Ｐ２１；１４）と、ビデオ入力手段（Ｐ２１；１４）により入力されたビデオ信号と映像生成手段（Ｐ３３；７４）により生成された映像信号とを合成した合成映像信号を生成する合成映像生成手段（Ｐ２１，Ｐ３３；７４）と、合成映像生成手段により生成された合成映像信号を出力する出力手段（７４）とを具備する〔請求項７〕ように構成することができる。
【０００９】
この発明による画像制御装置において、映像生成手段（Ｐ３３；７４）は、所定の映像効果が付与された映像信号を生成する〔請求項８〕ように構成することができる。
【００１０】
〔発明の作用〕
この発明の１つの特徴による画像制御装置（請求項１）においては、「パッド」タイプ（平盤ボタン形）のスイッチで構成され「パッドスイッチ」とも呼ばれる複数のパッド操作子（Ｐｄｊ：Ｐｄ１〜Ｐｄ８；１２）の夫々に対応付けられた複数の画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）の夫々に任意の画像データ（パッド画像データＩＭ：ＩＭａ１〜ＩＭａ８，ＩＭｂ１〜ＩＭｂ８又はＩＭｃ１〜ＩＭｃ８）がそれぞれ記憶されており、各画像記憶手段（ＰＡＤ）に記憶された画像データを再生するに当って（プレイモードＰＭ）、何れかのパッド操作子（Ｐｄｊ）に対するユーザ操作を検出すると（Ｐ３，Ｐ３０；５）、当該パッド操作子（Ｐｄｊ）に対応付けられた画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を読み出し（Ｐ３０〜Ｐ３２；７３）、読み出された画像データ（ＩＭ）を処理して映像信号を生成し（Ｐ３３；７４）、生成された映像信号に基づく映像をディスプレイ（１５）上に表示する。つまり、動画や複数枚の静止画像などから成る任意の画像データ（ＩＭ）が、複数のパッド操作子（Ｐｄｊ）の夫々に対応して複数の画像記憶手段（ＰＡＤ）に録画されて映像表示のために予め準備されており、パッド操作子（Ｐｄｊ）が操作される毎に、当該パッド操作子（Ｐｄｊ）に対応する画像記憶手段（ＰＡＤ）に準備されている個々の画像データ（ＩＭ）が順次再生される。従って、この発明によると、任意のパッド操作子に対するユーザ操作に応じて、複数の画像記憶手段のうち当該パッド操作子に対応する画像記憶手段に記憶された個々の画像データを任意に読み出したり切り替えて再生することができる。
【００１１】
この発明の別の特徴による画像制御装置（請求項２）においては、複数種類のイベント（Ｉｖ：Ａ−１〜Ｃ−８）の夫々に対応付けられた複数の画像記憶手段（ＰＡＤ：ＢＡＮＫ−Ａ〜ＣのＰＡＤ１〜ＰＡＤ８；７２）の夫々に任意の画像データ（パッド画像データＩＭ：ＩＭａ１〜ＩＭｃ８）がそれぞれ記憶されており、各画像記憶手段（ＰＡＤ）に記憶された画像データを再生するに当って（プレイ及び外部制御モードＰＭ，ＭＭ）、何れかのイベント（Ｉｖ）を入力すると（Ｐ３０，Ｐ３１）、当該イベント（Ｉｖ）の種類に対応付けられた画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を読み出し（Ｐ３２；７３）、読み出された画像データを処理して映像信号を生成し（Ｐ３３；７４）、この映像信号に基づく映像をディスプレイ（１５）上に表示する。つまり、動画や複数枚の静止画像などから成る任意の画像データ（ＩＭ）が、複数種類のイベント（Ｉｖ）の夫々に対応して複数の画像記憶手段（ＰＡＤ）に録画されて映像表示のために予め準備されており、イベントが入力される毎に、当該イベント（Ｉｖ）に対応する画像記憶手段（ＰＡＤ）の画像データ（ＩＭ）が順次再生される。従って、この発明によると、入力イベントに応じて、複数の画像記憶手段のうち当該入力イベントに対応する画像記憶手段に記憶された個々の画像データを任意に読み出したり切り替えて再生することができる。
【００１２】
別の特徴による画像制御装置では、イベント（Ｉｖ）を入力するために複数のパッド操作子（Ｐｄｊ：Ｐｄ１〜Ｐｄ８；１２）が設けられ、再生時（プレイモードＰＭ）において、ユーザがパッド操作子（Ｐｄｊ）を操作する毎に（Ｐ３）、当該パッド操作子（Ｐｄｊ）に対応して「パッド操作イベント」（操作子イベント）と呼ばれるイベント（Ｉｖ）が発生され（Ｐ３０）、当該パッド操作子（Ｐｄｊ）に対応して発生されたパッド操作イベント（Ｉｖ）が入力されて（Ｐ３１）、当該パッド操作イベントに対応する画像記憶手段から画像データ（ＩＭ）が順次読み出されて再生される（Ｐ３２，Ｐ３３）（請求項３）。従って、この発明によると、さらに、任意のパッド操作子に対するユーザ操作に応じて、複数の画像記憶手段のうち当該パッド操作に基づくパッド操作イベントに対応する画像記憶手段に記憶された個々の画像データを必要なときにすぐに読み出したり自由に切り替えて再生することができる。
【００１３】
別の特徴による画像制御装置では、また、パッド操作イベント（操作子イベント）の外に、遠隔的に入力される遠隔入力イベントを適用（利用）して画像を再生することができる。すなわち、外部（１６）からの入力信号（ＭＩＤＩ信号）を受信するための受信手段（８）が設けられ、再生時（外部制御モードＭＭ）において、受信手段（８）により受信された入力信号の中からイベント（Ｉｖ）が検出される毎に（Ｐ４，Ｐ３０）、当該イベント（Ｉｖ）が入力されて（Ｐ３１）、当該パッド操作イベントに対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）が順次読み出され再生される（Ｐ３２，Ｐ３３）（請求項４）。例えば、外部機器（１６）から受信した複数種の遠隔入力イベント信号から検出されたイベント種類（Ｉｖ）に応じて、対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を読み出すことができる。従って、この発明によると、さらに、外部機器からの入力信号中から順次検出される遠隔的なイベント（遠隔入力イベント）に応じて、複数の画像記憶手段のうち各遠隔入力イベントに対応する各画像記憶手段に記憶された個々の画像データを順次再生し、多彩な画像を出力することができる。この場合、遠隔入力イベント（Ｉｖ）には、特に、ＭＩＤＩ演奏機器などの外部音楽機器（１６）から送信される音楽信号の中から検出されるイベントを利用することができ、「音楽イベント」或いは「ＭＩＤＩイベント」と呼ばれる。この音楽イベントは、例えば、ノート番号（Ｃ１〜Ｅ４）のように、外部音楽機器（１６）からのＭＩＤＩ信号などの音楽信号の中にあるノートデータから得られる。つまり、外部制御モード（ＭＭ）において、この画像制御装置に受け付けられた外部入力信号（ＭＩＤＩ信号）の中から音楽イベント（Ｃ１〜Ｅ４）が検出される毎に、読出し手段（７３）によって、当該音楽イベントに対応する画像記憶手段（７２）から画像データ（ＩＭ）が順次読み出されて再生され、音楽イベントに応じた多彩な映像を演出することができる。
【００１４】
この発明による画像制御装置では、設定時（ジョブモードＪＭ）には、ユーザ操作に基づくセーブ／ロードの指示に従って、画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）に記憶された画像データ（ＩＭ：ＩＭａ１〜ＩＭｃ８）はメモリカードなどの外部記憶装置（４）に保存（セーブ）され（Ｐ１７）、また、外部記憶装置（４）に保存された画像データは画像記憶手段（ＰＡＤ）に記憶（ロード）される（Ｐ１７；７６）（請求項５）。従って、この発明によると、さらに、画像記憶手段に記憶された画像データを外部記憶装置にセーブしたり、外部記憶装置に保存された画像データを画像記憶手段にロードして映像表示に利用することができる。
【００１５】
この発明による画像制御装置では、画像データ（ＩＭ）の録画のために、ビデオ信号を入力するビデオ入力手段（１４）が設けられ、録画時（録画モードＲＭ）には、複数の画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）のうち何れかが選択され（Ｐ７）、ビデオ入力手段（１４）から入力されるビデオ信号の記録開始及び記録終了が指示されると（Ｐ９，Ｐ１２）、当該記録開始指示から記録終了指示までのビデオ信号に基づく画像データが、選択された画像記憶手段（ＰＡＤ）に記憶される（Ｐ１０，Ｐ１３；７１）（請求項６）。従って、この発明によると、さらに、まるでサンプラーのようにして画像データを各画像記憶手段に録画し準備しておくことができる。
【００１６】
また、この発明による画像制御装置では、各画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）からの画像データ（ＩＭ）に基づく映像信号との合成のために、映像再生器などの外部映像情報機器（１４）からビデオ信号を入力するビデオ入力手段（Ｐ２１）が設けられ、ビデオ入力手段（Ｐ２１；１４）から入力されたビデオ信号（別の映像信号）が、画像データ（ＩＭ）に基づいて生成された映像信号と合成されて合成映像信号が生成され（Ｐ２１，Ｐ３３；７４）、生成された合成映像信号が映像表示手段（１５）に出力される（７４）（請求項７）。この場合、両映像信号に対応する映像は、一部を重ねて表示したり、さらに、重なり部分の合成方法を任意に指定可能とすることができる。従って、この発明によると、さらに、画像記憶手段に準備されている画像データによる映像と外部映像情報機器から実時間で入力されてくる別の映像とを合成して更に多彩な映像を演出することができる。
【００１７】
この発明による画像制御装置の映像生成手段（Ｐ３３；７４）においては、映像表示手段（１５）に表示される映像に対して所定の映像効果が付与された映像信号を生成することができる（請求項８）。例えば、輝度（Ｙ）、色（Ｃ，Ｃｂ，Ｃｒ）、複数映像再生時の混合態様（Ａｄｄ／Ａｎｄ／Ｏｒ／Ｘｏｒ／…）や、ビデオ信号との重合せ態様（ＰＡＤｏｎＶＩＤＥＯ／…）、表示画面（１５）上の画像位置（Ｘ，Ｙ）などについて、多彩なの映像効果を付与することができる。また、パッドスイッチ（バンクでの切換えも含む）に対応付けて記憶した画像データに対し、同じパッドスイッチに対応付けて映像処理手順データを記憶しておくことにより、個々の画像データに対して、対応する映像処理手順データで処理を行い、個別に設定される多彩な映像効果を付与することができる。従って、この発明によると、さらに、映像効果の付与によってより一層多彩な映像を表示することができる。
【００１８】
なお、多数の画像データ（ＩＭ）を記憶するための記憶装置（７２）については、記憶装置（７２）内に、所定のイベント群（Ａ〜Ｃ）に対応する大記憶領域（ＢＡＮＫ：ＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃ）を複数個設定し、各バンク内には、更に、個々のイベントに対応する複数の画像記憶手段として複数の小記憶領域（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８）を設定し、各画像記憶手段（ＰＡＤ）に各画像データ（ＩＭ）をイベント（Ｉｖ）の種類に対応付けて記憶するように構成することができる。
【００１９】
これに対応して、複数の画像記憶手段（ＰＡＤ：ＰＡＤ１〜ＰＡＤ８；７２）を指示するための操作手段（１２）としては、複数（ｎ＝８）のパッド操作子〔Ｐｄｊ（１≦ｊ≦ｎ）：Ｐｄ１〜Ｐｄ８〕に加えて、「バンクスイッチ」と呼ばれる複数（ｍ＝３）のイベント群指示用操作子〔Ｂｉ（１≦ｉ≦ｍ）：Ｂ１〜Ｂ３〕を用い、これらバンクスイッチ（Ｂｉ）のユーザ操作に基づいて、所定数のイベント（Ａ−１〜Ａ−８，Ｂ−１〜Ｂ−８，Ｃ−１〜Ｃ−８）から成るイベント群（Ａ〜Ｃ）をそれぞれ指示するように構成することができる。この構成では、パッド操作子（Ｐｄｊ）は、バンク操作子（Ｂｉ）により指示される各イベント群（Ａ〜Ｃ）に属するイベント（Ａ−１〜Ａ−８，Ｂ−１〜Ｂ−８，Ｃ−１〜Ｃ−８）を個別に指示する個別イベント指定用操作子として機能する。
【００２０】
つまり、イベント群（Ａ〜Ｃ）をそれぞれ指示するための複数のバンクスイッチ（Ｂｉ）と各イベント群に属するイベント（Ｉｖ）から個別にイベントを指示するための複数（ｎ＝８）のパッドスイッチ（Ｐｄｊ）が設けられ、バンクスイッチ（Ｂｉ）の操作により、複数のイベント群（Ａ〜Ｃ）から任意のイベント群を選択することにより、対応する大記憶領域（ＢＡＮＫ）を指示し、パッドスイッチ（Ｐｄｊ）の操作により、当該大記憶領域（ＢＡＮＫ）内の対応する画像記憶手段（ＰＡＤ）を指示することができる。このように、バンクスイッチ（Ｂｉ）とパッドスイッチ（Ｐｄｊ）という２種のイベント操作子（Ｂｉ，Ｐｄｊ）を設けることにより、単に、映像再生に準備される画像データを多くするだけでなく、例えば、各パッドスイッチ（Ｐｄｊ）にバンクスイッチ（Ｂｉ）の数の分だけ類似のバリエーション画像データを対応付けたり、多数の画像データをバンク毎の種類分けで整理して記憶するなど、画像データを系統的に記録しておくことができる。また、再生時には、両スイッチ（Ｂｉ，Ｐｄｊ）の組み合せ操作によって、より多彩な映像再生が可能となる。
【００２１】
また、読出し手段（７３）は、イベント（Ｉｖ）が新たに発生したとき、先のイベントに基づく画像データの読出し中であるか否かに拘わらず、新たに発生したイベント（Ｉｖ）の種類に対応する画像記憶手段（７２）から画像データ（ＩＭ）を読出すように構成することができる。或るイベント（Ｉｖ）が新たに発生すると、読出し手段（７３）は、それ以前に発生した先のイベントに基づいて画像データが読み出されいるかいないかに拘わらず、新たに発生したイベント（Ｉｖ）に基づいて画像データ（ＩＭ）が読み出される。この場合、例えば、先のイベントに応じた画像データの読出しを中止し、新たに発生したイベントに応じた画像データの読出しを開始して映像信号を生成させて新たなイベントに基づく新規の映像だけを映像表示手段（１５）に表示させることができる。或いは、前イベントによる画像データ読出しを継続して、旧映像と新映像を画面分割や重合せなどで同時に表示することができる。
【００２２】
さらに、映像生成手段（７４）は、読出し手段（７３）により読み出される複数の画像データ（ＩＭ）に基づく映像信号を生成し、これらの画像データに対応する複数の映像を映像表示手段（１５）に同時に表示させることができる。例えば、上述のように、先のイベントに応じた画像データの読出し及び映像信号生成を継続しつつ、新たに発生したイベント（Ｉｖ）に応じた画像データ（ＩＭ）の読出し及び映像信号生成を開始することもできる。この場合、映像生成手段（７４）は、両イベントに応じて、複数の画像データに基づく複数の映像信号を生成し、映像表示手段（１５）に、画面を分割したり重ね合わせるなどの方法で、複数の映像を同時に表示させることができる。
【００２３】
【発明の実施の形態】
以下、図面を参照しつつ、この発明の好適な実施例を詳述する。なお、以下の実施例は単なる一例であって、この発明の精神を逸脱しない範囲で種々の変更が可能である。
【００２４】
〔ハードウエア構成〕
図１は、この発明の一実施例による画像制御システムのハードウエア構成のブロック図を示す。この例では、画像制御システムは、本体システム（本体制御部）、動画処理システム（動画処理部）及びインターフェース（Ｉ／Ｆ）部を備える。本体システムには、中央処理装置（ＣＰＵ）１、読出専用メモリ（ＲＯＭ）２、本体側ランダムアクセスメモリ（本体ＲＡＭ）３、外部記憶装置４、検出回路５及び表示回路６が含まれる。また、動画処理システムは動画処理回路７を含み、Ｉ／Ｆ部は、ＭＩＤＩインターフェース（ＭＩＤＩ・Ｉ／Ｆ）８及び通信インターフェース（通信Ｉ／Ｆ）９を含む。そして、これらの装置１〜９は、バス１０を介して互いに接続される。
【００２５】
画像制御装置全体を制御するＣＰＵ１は、所定のソフトウエア・プログラムに従いタイマ１１によるクロックを利用して種々の制御を行い、特に、後述する動画処理回路７による画像制御を管理する。ＲＯＭ２には、この画像制御装置を制御するための所定の制御プログラムが記憶されており、これらの制御プログラムには、基本的な情報処理と共に、この発明による画像制御などを管理するためのプログラムや、各種テーブル、各種データが含まれる。本体ＲＡＭ３は、各種処理に際して必要なデータやパラメータを記憶する一時記憶手段として機能する。
【００２６】
外部記憶装置４は、ハードディスクドライブ（ＨＤＤ）の外に、コンパクトディスク・リード・オンリィ・メモリ（ＣＤ−ＲＯＭ）、フレキシブルディスク（ＦＤ）、光磁気（ＭＯ）ディスク、ディジタル多目的ディスク（ＤＶＤ）、ＺＩＰ、メモリカード（スマートメディア）、半導体メモリ等の可搬型記憶媒体を用いた装置から成り、各種制御プログラムや各種データを記憶することができる。従って、画像制御などに必要なプログラムや各種制御データは、ＲＯＭ２を利用するだけでなく、外部記憶装置４からＲＡＭ３内に読み込むことができ、必要に応じて、処理結果を外部記憶装置４に記録しておくこともできる。また、メモリカードなどの外部記憶装置４には、画像データや、画像データに付随する映像効果などの画像制御データ（「再生条件」と呼ばれる。）を含む管理データを保存しておくことができる。
【００２７】
検出回路５にはパネル操作子装置１２が接続され、パネル操作子装置１２は、各種のスイッチやキー、その他のタイプの操作子を備える。これらの操作子は、パネル操作子とも呼ばれ、画像制御などの処理のために、ユーザによって、画像の記録や標準プレイ（再生）などのモード設定、各種のパラメータ設定や指示の情報に入力するために用いられる。例えば、モード指定スイッチ（Ｍ１〜Ｍ３）は、プレイモード以外のモードを指定するのに用いられ、バンク及びパッドスイッチ（Ｂ１〜Ｂ３，Ｐｄ１〜Ｐｄ８）は、記録やプレイモード下において、バンク毎に画像データをリアルタイムで選択的に指示するのに用いられる。
【００２８】
表示回路６は、ＬＣＤなどの本体ディスプレイ１３や各種インジケータを備えており、本体ディスプレイ１３を利用してパネル操作子装置１３の操作子で必要な操作を行うことにより画像制御に関する設定や指示が行われる。そして、上述した要素１〜６、１０〜１３により本体システム（本体制御部）が構成され、また、動画処理回路７及びインターフェース８，９を加えた点線内の要素１〜１３によって画像制御装置が構成される。
【００２９】
動画処理回路７は、専用ＲＡＭを備え、ＶＴＲやビデオディスク再生器などの映像再生器１４、及び、大型ＣＲＴやプロジェクタのような比較的大きな画面をもつ映像ディスプレイ１５が接続される。この動画処理回路７によって、映像再生器１４からのビデオ信号（画像映像信号）を記録し或いはリアルタイム処理して多様な態様で画像情報を再生し、この画像情報に基づく映像を映像ディスプレイ１５に表示させることができる。これらの動画処理回路７、映像再生器１４及び映像ディスプレイ１５によって動画処理システム（動画処理部）が構成される。
【００３０】
一方、ＭＩＤＩＩ／Ｆ８には、楽音情報生成機能を有するオーディオシーケンサ（ＭＩＤＩシーケンサ）やパーソナルコンピュータ（ＰＣ）で構成されるＭＩＤＩ機器１６が接続され、ＭＩＤＩ機器１６には、さらに、音源１７を介してＤＳＰ（ディジタル信号処理器）やスピーカを含むサウンドシステム１８が接続される。これらの機器１６〜１８は、この画像制御システムに外部接続される音楽演奏システム（音楽演奏部）を構成する。
【００３１】
ＭＩＤＩ機器１６は、自身のもつ音楽データや、ＲＯＭ２や外部記憶装置４に格納されている音楽データに基づく楽音を音源１７及びサウンドシステム１８を介して放音し音楽を演奏することができる。また、画像制御装置に対しては、ＭＩＤＩ機器１６から送出されるＭＩＤＩイベント（ノートオン／オフなどのノートデータ）や、ＭＩＤＩクロック、制御コードなどに従って動画処理回路７を制御する制御要素として機能する。
【００３２】
また、通信インターフェイス（Ｉ／Ｆ）９には、ローカルエリアネットワーク（ＬＡＮ）やインターネット、電話回線等の通信ネットワーク１９を介してサーバコンピュータ２０等に交信可能に接続される。このサーバコンピュータ１６や、ＭＩＤＩ機器１６、動画処理回路７などから、制御プログラムや音楽データ、画像データなどの各種データを外部記憶装置４にストアすることもできる。
【００３３】
〔パネル構成及びイベント割当て例〕
図２は、この発明の一実施例による画像制御装置のフロント面に設けられる操作パネルの一構成例（一部分）を示す。この操作パネルには、パネル操作子装置１２の操作状態や各種設定状態などを表示するためのディスプレイ１３や、複数のモード指定スイッチＭ１〜Ｍ３などの外に、画像データの格納領域を指定するための複数（ｍ）のバンクスイッチＢｉ（ｉ＝１，２，…，ｍ）及び複数（ｎ）のパッドスイッチＰｄｊ（ｊ＝１，２，…，ｎ）、各種映像効果を指定及び設定するための効果指定スイッチ群ＥＰ及び効果設定ダイヤルＤ１，Ｄ２などが設けられている。
【００３４】
モード指定スイッチＭ１〜Ｍ３には、外部制御モード指定スイッチ（ＭＩＤＩボタン）Ｍ１、録画モード指定スイッチ（ＲＥＣボタン）Ｍ２及びジョブモード指定スイッチ（ＪＯＢボタン）Ｍ３などがあり、これらのスイッチＭ１〜Ｍ３を操作することによって、この画像制御装置をプレイモード（操作子再生モード又はＰＬＡＹモード）以外の種々のモードに入れることができる。つまり、この実施例では、画像制御装置の電源投入直後の状態で、画像制御装置はプレイモードになる。一方、モード指定スイッチＭ１〜Ｍ３を操作すると、当該スイッチのバックライトが点灯し、画像制御装置に対して、操作されたスイッチに対応するモードを設定することができる。
【００３５】
なお、これらのモードに入った後は、各スイッチＭ１〜Ｍ３の再操作や別のモード指定スイッチＭ１〜Ｍ３の操作などによって、当該モードが終了し、当該モード指定スイッチＭ１〜Ｍ３のバックライトは消灯され、プレイモードに復帰したり別のモードに移行する。また、スタート／ストップスイッチ（Ｓ／Ｓ）は、各モードにおいて所定の動作を開始／終了させるのに用いられ、出口（ＥＸＴ）ボタンは、各モードの初期状態に戻すために使用される。
【００３６】
任意のバンクスイッチＢｉ及びパッドスイッチＰｄｊを操作することにより、「パッド操作イベント」と呼ばれる個別のイベントＩｖが発生され、このパッド操作イベントによって、画像データの格納領域を指定することができる。なお、これらのスイッチも、モード指定スイッチＭ１〜Ｍ３と同様に、選択操作によりバックライトが点灯してパッド選択状態をユーザに知らせ、点灯していたバックライトは、他のパッドスイッチ或いは他の所定スイッチの操作により消灯する。
【００３７】
図２に示される例では、３つのバンクスイッチＢ１〜Ｂ３及び８つのパッドスイッチＰｄ１〜Ｐｄ８が設けられており（ｍ＝３、ｎ＝８）、２４個のイベントＩｖを割り当てることができ、各イベントＩｖには、バンクスイッチＢ１〜Ｂ３毎のパッドスイッチＰｄ１〜Ｐｄ８に対応して“Ａ−１”〜“Ａ−８”、“Ｂ−１”〜“Ｂ−８”又は“Ｃ−１”〜“Ｃ−８”で示されるイベントＩＤが与えられる。
【００３８】
この発明の一実施例においては、画像メモリ（専用ＲＡＭ）には、イベントＩｖに対応付けられる画像データ格納領域を上述のバンクスイッチＢｉ及びパッドスイッチＰｄｊの構成に対応させて、「バンク」（ＢＡＮＫ）と呼ばれる複数（ｍ）の大記憶領域及び「パッド」（ＰＡＤ）と呼ばれる複数（ｎ）の小記憶領域を設定し、各大記憶領域ＢＡＮＫ内に設定された複数の小記憶領域ＰＡＤのそれぞれに画像データを記憶することができる。図３は、この発明の一実施例による画像メモリ構成の一例を示す。
【００３９】
図３に示された３バンク・８パッドのメモリ構成例では、画像データを格納する専用ＲＡＭ７２には、バンクスイッチＢ１〜Ｂ３に対応する複数のバンクＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃが設定され、各バンクＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃには、パッドスイッチＰｄ１〜Ｐｄ８の夫々に対応して、複数の画像データ格納領域即ちパッドＰＡＤ１〜ＰＡＤ８が設定されている。つまり、各バンクＢＡＮＫ−Ａ，ＢＡＮＫ−Ｂ，ＢＡＮＫ−ＣのパッドＰＡＤ１〜ＰＡＤ８は、イベントＩＤ“Ａ−１”〜“Ａ−８”、“Ｂ−１”〜“Ｂ−８”，“Ｃ−１”〜“Ｃ−８”に対応付けられる。
【００４０】
従って、プレイモードや、録画モード指定スイッチ（ＲＥＣボタン）Ｍ２の操作による録画モード（サンプリングモード又はＲＥＣモード）などにおいて、バンクスイッチＢｉを操作し更にパッドスイッチＰｄｊを操作することにより、画像メモリ（専用ＲＡＭ）７２内の特定のバンク（ＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃ）及びパッド（ＰＡＤ１〜ＰＡＤ８）を指示するパッド操作イベントＩｖ（“Ａ−１”〜“Ｃ−８”）を発生する。このイベントＩｖの発生に応じて、バンクスイッチＢｉにより指示されたバンク内のパッドＰＡＤ１〜ＰＡＤ８中から、パッドスイッチ操作に対応するパッドが指定される。
【００４１】
これにより、録画モードでは、指定されたバンクＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃ内の指定されたパッドＰＡＤ１〜ＰＡＤ８に画像データ“ＩＭａ１”〜“ＩＭａ８”，“ＩＭｂ１”〜“ＩＭｂ８”，“ＩＭｃ１”〜“ＩＭｃ８”を記憶し、プレイモードでは、指定されたバンクのパッドＢＡＮＫ−Ａ・ＰＡＤ１〜ＢＡＮＫ−Ｃ・ＰＡＤ８から画像データ“ＩＭａ１”〜“ＩＭｃ８”を選択的に読み出して再生することができる。なお、各パッドに記憶された画像データ“ＩＭａ１”〜“ＩＭｃ８”は「パッド画像データ」と呼ばれる。
【００４２】
この発明の一実施例においては、外部入力信号中から検出される外部入力イベントを画像メモリ（専用ＲＡＭ）の画像データ格納領域に対応付けて、外部入力イベントの発生に基づいて、画像メモリから対応するパッド画像データを読み出して再生することができる。外部入力信号は、例えば、外部のＭＩＤＩ機器１６からＭＩＤＩ・Ｉ／Ｆ８を介して画像制御装置に入力されるＭＩＤＩ信号であり、外部制御モード指定スイッチ（ＭＩＤＩボタン）Ｍ１の操作により画像制御装置が外部制御モード（ＭＩＤＩモード）に入っている状態で、ＭＩＤＩ信号中のノートデータを検出すると、「ＭＩＤＩイベント」（又は「音楽イベント」）と呼ばれる外部入力イベントＩｖが発生される。図４は、この発明の一実施例による各パッドへのＭＩＤＩイベント割当て例を示す。
【００４３】
図４の割当て例では、ＭＩＤＩ信号のノート（オン／オフ）データに含まれるノート番号“Ｃ１”〜“Ｅ４”が、イベントＩｖのイベントＩＤ“Ａ−１”〜“Ｃ−８”により、画像メモリ（専用ＲＡＭ）７２における各バンクＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃの各パッドＰＡＤ１〜ＰＡＤ８に対応付けられている。外部制御モード指定スイッチＭ１が操作されて外部制御モードに入りＭＩＤＩ信号からノートオンデータが検出されると、そのノート番号“Ｃ１”〜“Ｅ４”に対応するイベントＩＤ“Ａ−１”〜“Ｃ−８”のＭＩＤＩイベントＩｖが発生され、当該イベントＩＤに対応するバンクＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃ及びパッドＰＡＤ１〜ＰＡＤ８が指定される。従って、指定されたパッドに記憶されているパッド画像データ“ＩＭａ１”〜“ＩＭｃ８”が選択的に読み出されて再生される。
【００４４】
なお、再生されているパッド画像データは、原則として、当該ノート番号のノートに対するノートオフデータを検出した時点で読み出しが中止されるが、パネル設定（再生手順パラメータ）によって、全パッド画像データの読出し後或いは一定時間後に再生を中止したり、これらの再生中止時点に達していなくても、次のＭＩＤＩイベントＩｖを新たに検出すると再生を中止するなど、必要に応じて任意に変更することができ、変更された条件は、再生条件として管理データに含めることができる。
【００４５】
ジョブモード指定スイッチ（ＪＯＢボタン）Ｍ３を操作して画像制御装置がジョブモード（ＪＯＢモード）に入ると、パッドスイッチＰｄ１〜Ｐｄ８を所定のジョブ処理に転用することができる。例えば、このジョブ処理には、パッドスイッチＰｄ１（ＤＳＰＬ）はディスプレイ１３の表示態様の設定に、スイッチＰｄ２（ＰＲＲＳ）は各種パラメータの標準値へのリセットに、スイッチＰｄ３（ＣＯＰＹ）はパッド画像データＩＭａ１〜ＩＭｃ８や管理データの別パッドへのコピー（複写）に、そして、スイッチＰｄ４（ＴＨＭＬ）はパッド画像データＩＭａ１〜ＩＭｃ８のサムネイル表示に、それぞれ、使用することができる。
【００４６】
パッドスイッチＰｄ５（ＳＡＶＥ）は、パッド画像データＩＭａ１〜ＩＭｃ８や管理データを専用ＲＡＭから外部記憶装置（例えば、スマートメディア）４にセーブ（保存）し、また、スイッチＰｄ６（ＬＯＡＤ）は、パッド画像データや管理データを外部記憶装置４から専用ＲＡＭにロードし、スイッチＰｄ７（ＤＥＬＴ）はパッド画像データや管理データをデリート（消去）するの使用される。そして、スイッチＰｄ８（ＭＭＣＨ）は受信ＭＩＤＩチャンネルの設定に用いられる。
【００４７】
ジョブモードでは、パッドスイッチＰｄ１〜Ｐｄ８を上述のように転用するジョブ処理の外に、他のパネル操作子を用いて、再生モード（プレイモード、外部制御モード）で再生条件として利用される映像効果パラメータや再生手順パラメータなど種々の設定を行うこともできる。ジョブモードでの設定の過程や結果はディスプレイ１３上に表示される。
【００４８】
効果指定スイッチ群ＥＰは、再生モード（プレイモード、外部制御モード）やジョブモードにおいて、再生される画像に与える各種映像効果を指定するのに用いられ、各効果指定スイッチで指定された映像効果パラメータは、効果設定ダイヤルＤ１，Ｄ２で設定／変更され、設定／変更状態は、管理データの再生条件の１つとして専用ＲＡＭ７２に記憶され、ジョブモードにおいて、更に外部記憶装置（スマートメディアなど）４に保存することができる。
【００４９】
映像効果をかける対象については、画像選択スイッチ群ＰＶにより、映像再生器１４から入力される実時間のビデオ信号（ＶＩＮ）、各パッド画像データ（ＰＡＤ）或いは両者を含む映像出力全体（ＴＯＴ）の何れかを選択することができる。さらに、各パッド画像データＩＭａ１〜ＩＭｃ８による映像（“ＰＡＤ”）に効果を付与するときは、バンクスイッチＢ１〜Ｂ３及びパッドスイッチＰｄ１〜Ｐｄ８によりパッド画像データＩＭａ１〜ＩＭｃ８を選択した上、効果付与処理を実行させることができる。
【００５０】
なお、画像選択スイッチ群ＰＶ中のビデオ信号（“ＶＩＤＥＯ”）選択スイッチ（ＶＩＮ）及び全体選択スイッチ（ＴＯＴ）は、再生モード（プレイモード、外部制御モード）において映像再生器１４からの実時間映像信号を映像制御部７４に入力する指示を与え、ビデオ信号選択スイッチ（ＶＩＮ）は、録画モードで映像再生器１４からの映像信号を動画録画部７１に取り込む指示を与える機能をもっている。
【００５１】
また、付与される各種映像効果を規定するために映像効果パラメータが設定される。このような映像効果パラメータには、輝度（Ｙ）パラメータ、色合い（Ｃ，Ｃｂ，Ｃｒ）パラメータ、再生される複数映像の混合態様（“Ａｄｄ”／“Ａｎｄ”／“Ｏｒ”／“Ｘｏｒ”など）やビデオ信号との重合せ態様（“ＰＡＤ＆ＶＩＤＥＯ”／“ＰＡＤｏｎＶＩＤＥＯ”／“ＶＩＤＥＯｏｎＰＡＤ”など）などを決定する合成（混合・重合せ）パラメータ、再生映像の映像ディスプレイ１５の画面上での大きさや位置（Ｘ，Ｙ）を規定する大きさ・位置パラメータなどが含まれる。そして、これらの映像効果パラメータは、パラメータ選択スイッチ群ＥＰにより選択した上、ディスプレイ１３上に表示されるパラメータテーブルからカーソル（＋１／−１）で所望のものを選択したり、或いは、効果設定ダイヤルＤ１，Ｄ２を操作することによって、設定／変更することができる。
【００５２】
管理データの再生条件となる他のパラメータとして、パッド画像データの読出し態様を制御するための再生手順パラメータがあり、これらの再生手順パラメータは、パッドスイッチＰｄ１〜Ｐｄ３の上側に設けられた３つのスイッチを用いて設定することができる。これらのスイッチは、例えば、操作する毎に設定内容を段階的に変化させる２又は４段階設定が可能な操作子で構成することができる。
【００５３】
例えば、“Ｇａｔｅ／Ｔｒｉｇ”スイッチは、（１）パッド操作イベント操作やＭＩＤＩイベントなどのイベントの発生又は終了に対応する読出し態様などを設定するための４段階切換えスイッチであり、「ゲート（Ｇａｔｅ）」が設定されると、オンイベントの発生でパッド画像データの読出しを開始しオフイベントでこれを停止させる。また、「トリガ（Ｔｒｉｇ）」が設定されると、オンイベントのみに応答して、順次、読出しの開始及び停止を繰り返す。このスイッチは、（２）読出し停止後、再びオンイベントが発生したときの画像データの読出し開始位置を、先頭の位置又は停止時点の位置とする設定にも使用される。
【００５４】
“１ｓｈｏｔ／Ｌｏｏｐ”スイッチは、パッド画像データの読出し度合いを設定するための２段階切換えスイッチであり、パッド画像データを１回だけ再生させる「ワンショット（１ｓｈｏｔ）」、或いは、停止又は終了の指示があるまで何度もループ再生する「ループ（Ｌｏｏｐ）〕を設定することができる。
【００５５】
また、“Ｎｏｒｍ／Ｒｅｖｒ”スイッチは、パッド画像データの読出し方向を設定するための４段階切換えスイッチであり、パッド画像データを正方向に読み出す「ノーマル（Ｎｏｒｍ）」又は逆正方向に読み出す「リバース（Ｒｅｖｒ）」を設定することができる。このスイッチは、さらに、パッド画像データの再生を停止するときの表示態様を、停止時点の画像データによる映像を静止画で表示したり、或いは、非表示とする設定を行うことができる。
【００５６】
この画像制御装置のフロントパネルでは、パッドスイッチＰｄ３の上部に“ＷＲＩＴ”スイッチ（パッド画像データ記録スイッチ）が設けられており、再生モードにおいて、この記録スイッチを操作すると、再生条件に従って映像再生処理がなされたパッド画像データを記録しておく旨の指示を発生することができる。このフロントパネルには、さらに、再生速度や複数映像の混合比などの映像再生パラメータをリアルタイムで制御するためのリボンコントローラやスクラッチパッドなどのリアルタイム操作子や、テンポに合わせた再生（ＬｏｏｐＴｒＰｌａｙ）、…などの再生時のパラメータに関する設定スイッチなど、種々の操作子が設けられる。
【００５７】
〔動画処理システム〕
図５は、この発明の一実施例による動画処理システム（動画処理部）の機能ブロック図を示す。動画処理回路７は、動画録画部（ビデオサンプラー）７１、専用ＲＡＭ（画像メモリ）７２、データ読出部７３、映像制御部７４、管理データ入出力部７５及び画像転送部７６を備える。これら各部を管制するＣＰＵ１は、パネル操作子装置１２のモード指定スイッチＭ１〜Ｍ３が操作されないときは（モード指定なし＝図示のスイッチ機能要素ｍ１〜ｍ３が全てオン）、プレイモード（操作子再生モード又はＰＬＡＹモード）ＰＭで動作し、各モード指定スイッチＭ１〜Ｍ３が操作されたときは、それぞれ、録画モードＲＭ、外部制御モードＭＭ又はジョブモードＪＭで動作し、各部をモードに対応して制御する。
【００５８】
図５を用いて、この実施例による画像制御装置の概略を簡単に説明しておく。画像記憶専用ＲＡＭ７２には、録画モードＲＭにおいて、映像再生器１４から動画録画部１４に取り込んだ画像データが、パッド操作によるイベントに対応してパッド画像データＩＭａ１〜ＩＭｃ８として予め記憶される。プレイモードＰＭでは、データ読出部７３により、パッド操作によるイベントに対応してパッド画像データＩＭａ１〜ＩＭｃ８がＲＡＭ７２から選択的に順次読み出される。外部制御モードＭＭでは、外部機器１６からの受信信号から音楽イベントを検出する毎に、対応するパッド画像データＩＭａ１〜ＩＭｃ８がＲＡＭ７２から選択的に読み出される。映像制御部７４では、読み出されたパッド画像データＩＭａ１〜ＩＭｃ８から映像信号を生成し、併せて、映像効果を付与したり、映像再生器１４からの実時間映像信号と合成し、対応する映像が映像ディスプレイ１５に表示される。
【００５９】
以下、より詳しく説明する。動画録画部７１は、録画モードＲＭにおいて、ＶＴＲなどの外部の映像再生器１４からのビデオ信号（映像信号）を取り込みサンプリングしてディジタル画像データに変換し、専用ＲＡＭ７２は、動画録画部７１からのディジタル画像データを記憶する。専用ＲＡＭ７２は、画像データのストレージ（画像メモリ）として機能すると共に、画像データ処理上の管理データを記憶することができ、管理データには、画像データに対する再生条件（「再生パラメータ」ともいう。）が含まれる。
【００６０】
データ読出部７３は、プレイモードＰＭや外部制御モードＭＭなどの再生モードで、専用ＲＡＭ７２から、先ず、画像データに対応する管理データから再生条件を読み出し、次いで、再生条件に従って画像データを読み出す。映像制御部７４は、再生条件に従って、読み出された画像データに映像効果を付与して映像再生を行い、画像データに再生条件の内容を反映した映像データを生成し、この映像データに対応する映像を映像ディスプレイ１５に表示させる。再生モードＰＭ，ＭＭでは、映像制御部７４で、映像再生器１４からの外部映像信号との合成を行ったり、映像制御部７４で生成した映像データを動画記録部７１を介して専用ＲＡＭ７２に記憶することもできる。
【００６１】
管理データ入出力部７５は、ＣＰＵ１・専用ＲＡＭ７２間で再生条件を授受する媒介手段として機能する。例えば、上述した各モードにおいて、パネル操作子装置１２を用いて設定又は変更される再生パラメータを管理データ中の再生条件として専用ＲＡＭ７２に記憶させる。また、再生モードＰＭ，ＭＭにおいては、専用ＲＡＭ７２に記憶されている管理データから再生条件をＣＰＵ１に呼び込んで、ＣＰＵ１にデータ読出部７３及び映像制御部７４を制御させる。
【００６２】
そして、画像転送部７６は、ジョブモードＪＭにおいて、パッド画像データや管理データの保存及びロード処理が行われる場合、ＣＰＵ１の制御指示に従って、専用ＲＡＭ７２とメモリカード（スマートメディア）などの外部記憶装置４との間でパッド画像データや管理データを授受させる媒介手段として機能し、専用ＲＡＭ７２に記憶されているパッド画像データや管理データを外部記憶装置４に記録したり、或いは、外部記憶装置４に記録された画像データや管理データを専用ＲＡＭ７２にロードする。
【００６３】
次に、モード毎の動作を説明する。まず、録画モード（サンプリングモード又はＲＥＣモード）ＲＭについては、録画モード指定スイッチ（ＲＥＣボタン）Ｍ２が押圧操作されたとき録画モードＲＭとなる（スイッチ機能要素ｍ２がオフ）。録画モードＲＭでは、ＶＴＲなどの外部の映像再生器１４から入力された映像信号が動画処理回路７内の動画録画部７１に取り込まれる。動画録画部７１は、ＣＰＵ１の制御指示に従って、取り込んだ映像信号をサンプリングして録画に適したディジタル画像データに変換し、この変換により得られた画像データを、バンク及びパッドスイッチＢｉ，Ｐｄｊで指示された専用ＲＡＭ７２内の所定の画像データ格納領域（ＢＡＮＫ，ＰＡＤ）に記録する。
【００６４】
なお、各画像データは、動画であるか静止画であるかや時間などには拘束されず、任意の画像データでよいが、数秒〜数十秒程度の比較的短時間の動画像データ或いは比較的低速度で切換え再生される複数枚の静止画像データが好ましい。
【００６５】
このように、録画モードＲＭにおける画像データ格納領域の選択は、プレイモードＰＭで読み出されるパッド画像データを選択する場合と同様に、バンク及びパッドスイッチＢｉ，Ｐｄｊによるパッド操作イベントに対応して行われる。つまり、或る画像データを録画する場合には、録画モードＲＭにおいて、バンク及びパッドスイッチＢｉ，Ｐｊを操作してパッド操作イベントを発生させると、操作されたバンクスイッチＢｉに対応するバンク領域ＢＡＮＫ（Ａ〜Ｃ）内の、操作されたパッドスイッチＰｄｊに対応するパッド領域ＰＡＤ（１〜８）が指定される。次いで、スタート／ストップスイッチ（Ｓ／Ｓ）を操作すると、指定されたパッドへの画像データの記録が開始され、当該画像データがパッド画像データとして記憶される。また、スタート／ストップスイッチ（Ｓ／Ｓ）を再操作すると記録動作が終了し、プレイモードＰＭに復帰する。
【００６６】
プレイモード（操作子再生モード又はＰＬＡＹモード）ＰＭは、この画像制御装置の電源を入れたときのモード状態である。プレイモードＰＭでは、データ読出部７３によって、パネル操作子装置１２のバンク及びパッドスイッチＢ１〜Ｂ３，Ｐｄ１〜Ｐｄ８の操作により発生されるパッド操作イベントに対応して、パッド画像データが専用ＲＡＭ７２から読み出されて再生される。この場合、発生されたイベントに対応するパッドにパッド画像データが録画されていないときには、透過画面となる。
【００６７】
これに対して、外部制御モード（ＭＩＤＩモード）ＭＭは、外部制御モード指定スイッチ（ＭＩＤＩボタン）Ｍ１が押圧操作されたときの再生モードである（スイッチ機能要素ｍ１がオフ）。外部制御モードＭＭでは、データ読出部７３によって、外部のＭＩＤＩ機器１６から入力されるＭＩＤＩ信号から、設定されたＭＩＤＩチャンネルのノートデータを検出すると、このノートデータに対応して発生されるＭＩＤＩイベントに応じて専用ＲＡＭ７２から画像データが選択的に読み出されて再生される。
【００６８】
再生モード（プレイモードＰＭ及び外部制御モードＭＭ）では、各パッド操作イベント及びＭＩＤＩイベントは、図３及び図４で既に説明したように、イベントＩＤが割当て設定され、専用ＲＡＭ７２の各パッド（ＢＡＮＫ−Ａ・ＰＡＤ１〜ＢＡＮＫ−Ｃ・ＰＡＤ８）に個々に対応しているので、パッド操作イベント又はＭＩＤＩイベントが発生すると、この設定に従って、専用ＲＡＭ７２内の記憶領域（ＢＡＮＫ，ＰＡＤ）が指定される。従って、プレイモードＰＭや外部制御モードＭＭなどの画像再生時においては、データ読出部７３は、ＣＰＵ１の制御指示に従って、専用ＲＡＭ７２の複数のパッドにそれぞれ記憶された複数のパッド画像データの中から、パッド操作イベント又はＭＩＤＩイベントに対応するパッド画像データを選択的に順次読み出して映像制御部７４に送り出す。
【００６９】
映像制御部７４は、ＣＰＵ１の制御指示に従って、データ読出部７３で読み出されたパッド画像データを、パネル操作子装置１２で設定された所望の映像効果（エフェクト）が施された映像信号に変換すると共に、映像再生器１４から実時間で入力されるビデオ信号と合成するなどの処理を実行する。この映像効果は、パッド画像データ及びビデオ信号の何れの画像にも掛けることができる。
【００７０】
映像制御部７４では、前述したように、映像効果パラメータの再生条件に基づいて、輝度（Ｙ）、色合い（Ｃ，Ｃｂ，Ｃｒ）、複数映像の合成〔複数の再生映像の混合態様（Ａｄｄ／Ａｎｄ／Ｏｒ／Ｘｏｒなど）やビデオ信号との重合せ態様（ＰＡＤｏｎＶＩＤＥＯなど）〕、映像ディスプレイ１５の画面上における映像の大きさや位置（Ｘ，Ｙ）の制御などの映像効果付与処理が行われる。映像制御部７４は、外部からの映像信号との合成についても、データ読出部７３からの画像情報を（例えば、主画像として）受けると共に、実時間で再生される（所謂“たれ流し”）映像再生器１４からのビデオ情報を（例えば、背景画像として）受けて、両情報を合成した映像信号を生成し、映像ディスプレイ１５に両情報を合成した映像を表示させる。
【００７１】
なお、映像制御部７４において複数の映像（カラー画像）を表示させる手法には、複数の映像を単純に重ね合わせたり、それぞれに関連するクロスフェードなどをかけていったり、再生映像と実時間映像について論理和（Ｏｒ）や論理積（Ａｎｄ）などの論理演算をしたり、両者を別々の画面領域に表示させ各表示領域を変化させていくなど、必要に応じて、種々の映像演出効果を採用することができる。
【００７２】
データ読出部７３による画像再生については、再生手順パラメータ（ループ）に基づくＣＰＵ１からの指示により、専用ＲＡＭ７２中から選択された画像データの一部又は全部を何回も繰り返して再生する「ループ再生」を用いることができる。なお、ループ再生においては、画像の切落しや空白画像の発生などの破綻をなくしてシームレスに再生するよう考慮する必要がある。また、先のイベントによる動画を再生中に次のイベントが新たに発生した場合には、先のイベントに応じた動画の再生を中止し、新たなイベントに応じた動画を再生開始したり、先のイベントに応じた動画の再生を継続しつつ、次のイベントに応じた動画の再生を開始するようにすることができる。
【００７３】
なお、プレイモードＰＭや外部制御モードＭＭなどの画像再生時においては、オーディオシーケンサなどの外部ＭＩＤＩ機器１６からのＭＩＤＩ信号に含まれる制御コードやＭＩＤＩクロックにより、動画処理回路７の動作を制御することができる。パネル操作子装置１２によりＭＩＤＩチャンネルをセットしておくと、例えば、ＭＩＤＩ信号中の制御コードにより、パネル操作子装置１２の各種パラメータ設定スイッチに代って同様のパラメータ設定を行うことができる。また、ＭＩＤＩ信号中のＭＩＤＩクロック（Ｆ８）によって映像の再生時間をテンポに合わせることができる。
【００７４】
後者については、「テンポに合わせた再生」（ＬｏｏｐＴｒＰｌａｙ）をセットしておくと、ＣＰＵ１は、テンポ設定の対象となるＭＩＤＩチャンネルのＭＩＤＩ信号に含まれるＭＩＤＩクロック（Ｆ８）に基づいて読出し速度を演算し、データ読出部７３を制御する。これにより、専用ＲＡＭ７２から読み出すパッド画像データの再生時間を制御しつつループ読出しを行い、パッド画像データの再生と外部ＭＩＤＩ機器１６の演奏との同期を取ることができる。
【００７５】
さらに、再生モードＰＭ，ＭＭにおいて、再生パラメータに基づき映像処理された各パッド画像データは、必要に応じて、“ＷＲＩＴ”スイッチ（図２）の操作により、映像制御部７４から動画録画部７１を介して、専用ＲＡＭ７２内の元のパッド画像データに対応する所定記憶領域に記憶しておくことができる。
【００７６】
ジョブモード（ＪＯＢモード）ＪＭは、ジョブモード指定スイッチ（ＪＯＢボタン）Ｍ３が押圧操作されたときのモードである（スイッチ機能要素ｍ３がオフ）。ジョブモードＪＭでは、各種ジョブ処理を実行するための操作に転用されるパネル操作子装置１２のパッドスイッチＰｄ１〜Ｐｄ８の機能を転用して、各種ジョブ処理を行うことができる。
【００７７】
このジョブ処理には、例えば、前述したように、ディスプレイ１３の表示制御、パラメータの標準値へのリセット、パッド画像データの移動、複写、保存、ロード、消去、受信ＭＩＤＩチャンネルの設定などを行うことができる。ここで、専用ＲＡＭ７２とメモリカード（スマートメディア）などの外部記憶装置４との間でパッド画像データや管理データの保存及びロード処理を行う場合は、画像転送部７６を介してデータが授受される。
【００７８】
ジョブモードでは、このようなジョブ処理の外に、前述した再生手順パラメータや映像効果パラメータなどの再生パラメータを、本体ディスプレイ１３による表示援助の下でオフライン作業で設定し、設定された再生パラメータを映像再生に先立って予め管理データの再生条件として記録しておくことができる。この場合、パラメータ等を設定しようとするパッド乃至パッド画像データは、バンクスイッチＢｉ及びパッドスイッチＢｄｊの同時操作により指定することができる。
【００７９】
〔処理例〕
図６〜図９は、この発明の一実施例による画像制御のメイン処理のフローチャートである。最初のステップＰ１では、電源投入により所定プログラムの実行を開始してＲＡＭ３，７２の内容をクリアしてシステムの初期設定を行い、各種画像制御パラメータについては標準値にリセットする。続いて、ステップＰ２以下の映像制御処理フローに基づく処理が電源オフまで繰り返し実行される。まず、ステップＰ２では、モード設定を行い、例えば、初期化後モードスイッチ操作がない間は、プレイモードＰＭを設定し、サンプルのパッド画像データ及び標準の再生条件が専用ＲＡＭ７２にロードする。また、モードスイッチＭ１〜Ｍ３の操作があったときに、操作に基づくモード設定を行う。以後、このステップＰ２は、設定されたモードに対して変更操作がないときは、通過（スルー）となる。
【００８０】
次のステップＰ３では、モードスイッチＭ１〜Ｍ３以外の他のパネル操作子が操作され何らかの入力操作があったか否かの判定を行う。ここで、パネル操作子の入力がなければ（Ｐ３→ＮＯ）、ステップＰ４に進み、さらに、外部ＭＩＤＩ機器１６からの信号入力があったか否かの判定を行い、ここでも入力がなければ（Ｐ４→ＮＯ）、ステップＰ５に進む。ステップＰ５では、パッド画像データの再生動作中であるか否かを判定し、再生動作中でなければ（Ｐ５→ＮＯ）、ステップＰ２に戻る。
【００８１】
また、パネル操作子装置１２或いは外部ＭＩＤＩ機器１６から何らかの入力があると（Ｐ３，Ｐ４→ＹＥＳ）、ステップＰ３，Ｐ４からステップＰ６に進み、画像データを記録する指示であるか否かを判定する。ここで、ＲＥＣボタンＭ２の操作による記録モードＲＭにおける画像データの記録に関する指示であるときは（Ｐ６→ＹＥＳ）、ステップＰ７〜Ｐ１４（図６〜図７）の記録モードＲＭでの処理に進む。
【００８２】
まず、ステップＰ７では、バンク及びパッドスイッチＢｉ，Ｐｄｊの選択的操作に基づく割当て位置（パッド）の選択を受け付ける。つまり、バンク及びパッドスイッチＢｉ，Ｐｄｊの操作で選択された記録時パッド操作イベントＩｖを受け付け、このイベントＩｖに対応するイベントＩＤ（Ａ−１〜Ｃ−３）により、記録すべき画像データが割り当てられる専用ＲＡＭ７２（画像メモリ）上の記録領域（パッド）を決定する。
【００８３】
次いで、ステップＰ８で記録開始の受付けを行い、さらに、ステップＰ９（図７）で記録開始の指示があったか否か判定し、記録開始が指示されるまで（Ｐ９→ＮＯである間は）ステップＰ８，Ｐ９の動作を繰り返す。ここで、スタート／ストップスイッチ（Ｓ／Ｓ）が操作されて記録開始が指示されると（Ｐ９→ＹＥＳ）、ステップＰ１０に進んで、動画録画部７１を動作させて記録を開始し、ステップＰ４で決定されたイベントＩＤ（Ａ−１〜Ｃ−８）をもつ専用ＲＡＭ７２上の記録領域即ちパッド（ＢＡＮＫ−Ａ・ＰＡＤ１〜ＢＡＮＫ−Ｃ・ＰＡＤ８）に、映像再生器１４からの入力映像信号に基づく画像データを記憶させる。
【００８４】
次のステップＰ１１では、記録停止の受付けを行い、続いて、ステップＰ１２で記録停止の指示があったか否か判定し、記録停止が指示されるまで（Ｐ１２→ＮＯである間は）ステップＰ１１，Ｐ１２の動作を繰り返す。ここで、スタート／ストップスイッチ（Ｓ／Ｓ）が再操作されて記録停止が指示されると（Ｐ１２→ＹＥＳ）、ステップＰ１３に進んで画像データの記録を停止する。続くステップＰ１４では、画像データ録画条件（画質、分解能など）に関する管理データを作成し、画像データに対応させて専用ＲＡＭ７２に記憶する。そして、この管理データ処理の後、ステップＰ２（図６）に戻る。
【００８５】
なお、ステップＰ７〜Ｐ１４の記録モードＲＭでの作業や処理において画像データの記録や管理データを作成しないときは、任意のステップで出口（ＥＸＴ）ボタンを操作することによって、当該ステップを通過し、記録モードＲＭの初期状態に復帰することができる。このような出口（ＥＸＴ）ボタンによる初期状態への復帰は、他のモードにおいても（例えば、ステップＰ１８，Ｐ２５，Ｐ２７等）同様に行うことができる。
【００８６】
一方、ステップＰ６（図６）で画像データ記録の指示でないと判定されたときは（Ｐ６→ＮＯ）、ステップＰ１５（図７）に進み、映像出力に関連する指示であるか否かを判定する。ここで、映像出力関連の指示でないときは（Ｐ１５→ＮＯ）、更に、ステップＰ１６で、データの保存／ロードに関するものであるか否かを判定する。ここで、データの保存又はロード（Ｍ３＋Ｐｄ５／Ｐｄ６）が指示されていれば（Ｐ１６→ＹＥＳ）、ステップＰ１７にて、画像転送部７５の制御により、専用ＲＡＭ７２上のパッド画像データやこれに付随する管理データなどを外部記憶装置４にセーブし、或いは、外部記憶装置４に保存されたこれらのデータをＲＡＭ７２にロードする。
【００８７】
また、データの保存又はロード以外の指示であれば（Ｐ１６→ＮＯ）、映像出力に直接関連しない指示された処理を実行する。例えば、ディスプレイ１３の表示制御、パラメータの標準値へのリセット、ＲＡＭ７２内でのパッド画像データの移動、複写、消去、受信ＭＩＤＩチャンネルの設定などのジョブ処理を行う。ステップＰ１７，Ｐ１８の処理後は、ステップＰ２（図６）に戻る。
【００８８】
ステップＰ１５で、映像出力に関連する指示であると判定されたときは（Ｐ１５→ＮＯ）、ステップＰ１９（図８）に進んで、パッドに記録されたパッド画像データの再生に関する指示であるか否かを判定する。ここで、パッド画像データ再生に関連する指示でなければ（Ｐ１９→ＮＯ）、ステップＰ２０に進み、さらに、外部の映像再生器１４からの実時間映像信号を入力する指示であるか否かを判定する。
【００８９】
ここで、外部映像信号の入力指示であると判定されると（Ｓ２０→ＹＥＳ）、ステップＰ２１に進んで、映像再生器１４から入力される外部映像信号を映像制御部７４での処理を介して出力させる指令を生成する。次いで、ステップＰ２２で、映像ディスプレイ１５の映像出力画面について、ステップＰ２１の出力指令に基づく映像制御を映像制御部７４に実行させる。映像制御部７４は、これに対応する映像制御を行い、映像制御された映像を表わす映像表示信号を映像ディスプレイ１５に送信し、映像ディスプレイ１５は、映像表示信号に基いて描画処理を行い、所望の映像をその画面に表示する。そして、ステップＰ２２の処理の後ステップＰ２（図６）に戻る。
【００９０】
一方、ステップＰ２０で、外部映像信号の入力指示でないと判定されると（Ｓ１９→ＮＯ）、ステップＰ２３に進んで、外部映像信号の出力を停止する指示であるか否かを判定する。ここで、映像信号出力停止の指示であれば（Ｓ２３→ＹＥＳ）、ステップＰ２４に進み、外部からの入力映像信号による映像出力を映像制御部７４に停止させる指令を出す。そして、次のステップＰ２２で、映像制御部７４は、映像ディスプレイ１５の映像出力画面へ映像出力を停止させる制御を行った後、ステップＰ２（図６）に戻る。
【００９１】
また、ステップＰ２３で、映像信号出力停止の指示でもないと判定されたときは（Ｐ２３→ＮＯ）、ステップＰ２４に進み、映像出力に関連するその他の指示を受け付けて実行する。この場合のその他の指示には、テンポに合わせた再生（ＬｏｏｐＴｒＰｌａｙ）の設定や、リボンコントローラやスクラッチパッドなどのリアルタイム操作による指示などがあり、これらの指示に基づき設定される実時間パラメータなどに従って、随時、データ読出部７３及び映像制御部７４を動作させる。そして、このような動作指令の後は、ステップＰ２（図６）に戻る。
【００９２】
さて、ステップＰ１９で、パッド画像データの再生に関する指示であると判定されたときは（Ｐ１９→ＹＥＳ）、ステップＰ２６（図９）に進み、パッド画像データの再生パラメータを設定する操作であるか否かを判定する。ここで、再生パラメータの設定操作であれば（Ｐ２６→ＹＥＳ）、ステップＰ２７に進んで、この操作に応じてパッド画像データの再生条件を設定又は変更し、その結果を、当該パッド画像データに対応する専用ＲＡＭ７２上の所定記憶領域に記録する。そして、ステップＰ２（図６）に戻る。
【００９３】
ステップＰ２７で設定される再生パラメータには、例えば、映像効果パラメータや再生手順パラメータがある。映像効果パラメータは、画像選択スイッチ群ＰＶからの選択操作（ＰＡＤ／ＶＩＮ／ＴＯＴ）乃至バンク・パッドスイッチＢｉ・Ｐｄｊの操作（パッド操作イベント）などに応じて指定された効果付与対象に対して設定され、パラメータ選択スイッチ群ＥＰの操作でパラメータ種類を選択し、効果設定ダイヤルＤ１，Ｄ２の操作（本体ディスプレイ１３上の効果パラメータテーブルの選択を含む）によりパラメータ量を決定する。
【００９４】
また、再生手順パラメータは、パッド操作イベント操作やＭＩＤＩイベントなどで指定されたパッド画像データについて、イベント発生に対応する読出し態様〔オン・オフイベントで開始・停止（Ｇａｔｅ）／オンイベントのみに応答して順次開始・停止（Ｔｒｉｇ）〕、読出し度合い〔１回（１ｓｈｏｔ）／ループ再生（Ｌｏｏｐ）〕、読出し方向〔順方向（Ｎｏｒｍ）／逆方向（Ｒｅｖｒ）〕、読出し開始位置、再生一時停止時の表示態様などを設定することができる。
【００９５】
また、ステップＰ２７で、設定操作により新たに再生パラメータを設定した場合は、設定された再生パラメータを、ＲＡＭ７２上にロードされている管理データに再生条件として付加し、また、既に作成された再生条件が管理データ中に存在するときは、設定された再生パラメータで再生条件を書き換えて、再生条件を最新情報に更新する。
【００９６】
ステップＰ２６で再生パラメータ設定の操作でないと判定されたとき（Ｐ２６→ＮＯ）及びステップＰ５（図６）で再生動作中である（プレイモードＰＭ又は外部制御モードＭＭなどの再生モードである）と判定されたときは（Ｐ５→ＹＥＳ）、ステップＰ２８に進んで、映像処理されるパッド画像データを記録すべき旨の指示であるか否かを判定する。“ＷＲＩＴ”スイッチ（パッド画像データ記録スイッチ）の操作による処理済みパッド画像データの記録の指示であると（Ｐ２８→ＹＥＳ）、ステップＰ２９に進んで、再生中のパッド画像データに現在設定されている再生条件を基にして映像再生の処理がなされたパッド画像データを、以後、専用ＲＡＭ７２の所定の記憶領域に記録させる指令を発生し、ステップＰ２（図６）に戻る。
【００９７】
ステップＰ２８で、映像済みパッド画像データの記録指示でないと判定されたときは（Ｐ２８→ＮＯ）、ステップＰ３０に進んで、パネル操作子１２の操作又は外部機器からの制御信号の内容がイベントであるか否かを判定する。ここで、イベントであるときは（Ｐ３０→ＹＥＳ）ステップＰ３１に進み、さらに、当該イベントが新たなオンイベントであるか否かを判定する。新たなオンイベントのときは（Ｐ３１→ＹＥＳ）、まず、ステップＰ３２にて、新たなオンイベントに対応する管理データを読み出して、このイベントに対応するパッド画像データの再生条件を設定する。次いで、設定した再生条件に従って当該パッド画像データを読み出して、映像の再生処理を実行するように、データ読出部７３及び映像制御部７４に指令する。例えば、データ読出部７３に、この再生条件中の再生手順パラメータに従って、パッド画像データの読出し終了位置に到達するまでは読出し続けさせ、映像制御部７４には、映像効果パラメータに従って、輝度、色合い、大きさ・位置、合成（混合・重合せ）態様などの映像効果の付与処理を行い、処理結果の映像を表わす映像表示信号を送信する。続くステップＰ２２（図８）では、前述したように、映像ディスプレイ１５は、この映像表示信号に基づいて、対応する画面制御を行い、所望の映像を表示する。
【００９８】
さて、ステップＰ３０でイベントでないと判定されたときは（Ｐ３０→ＮＯ）、ステップＰ３４で、現在、再生動作中であるか否かが判定され、動作中でないときは（Ｐ３４→ＮＯ）、ステップＰ２（図６）に戻る。また、ステップＰ３４で映像再生の動作中であると判定されたとき（Ｐ３４→ＹＥＳ）及びステップＰ３１でイベントが新たなイベントでない（例えば、オンイベントの再発生やオフイベントの発生など）と判定されたとき（Ｐ３１→ＮＯ）は、ステップＰ３５に進む。
【００９９】
ステップＰ３５では、現在設定されている再生条件に従って、データ読出部７３によりパッド画像データの読出しを制御し、映像制御部７４により映像効果の付与処理などの映像処理を行い、映像再生を続行させる。例えば、データ読出部７３は、現在設定されている再生手順パラメータに従って、パッド画像データの読出し終了位置に到達するまでは読出し続け、終了位置で読出しを停止し（ワンショット）或いはループ開始位置に戻したり（ループ）。さらに、オンイベントの再発生でデータ読しの出停止と開始を順次繰り返したり（トリガ）、オフイベントの発生で読出しを停止したり（ゲート）する。また、映像制御部７４は、現在設定されている映像効果パラメータに従って映像効果の付与処理を行い映像表示信号を映像ディスプレイ１５に出力する。そして、次のステップＰ２２（図８）で、映像ディスプレイ１５に、この映像表示信号に対応する画面制御を行わせ、その後、ステップＰ２（図６）に戻る。
【０１００】
なお、ステップＰ３３，Ｐ３５からステップＰ２２に進んだ場合、ステップＰ２２では、例えば、或るパッド画像データの映像再生中に新たなパッド画像データによる映像再生の指示があったときは、複数のパッド画像データの再生が個々の再生条件に基づいて同時に映像再生処理が行われる。この場合、各映像間の重ねなどの混合パラメータについては映像間で異なることがあり、また、輝度パラメータや色合いパラメータなどの各映像自体の映像効果パラメータについてもそのハードウエア（又はソフトウエア）資源上の制約があるので、映像効果の付与態様については、予め定めておいたルールに従って、適用すべき映像効果パラメータの優先度を決定し、映像効果の付与処理を実行する。このように複数の映像を同時出力する場合には、予めルールを予め定めて以下のような処理を適用することできる。
【０１０１】
（１）通常は、可能な限り、各パッド画像データに設定されている再生条件に従って映像効果の付与を行い、各再生条件のとおり映像効果処理ができないときは、後着優先により映像処理を行って、新たに指定されたパッド画像データの再生条件の指示に従って映像効果を付与することを原則とする。この場合、例えば、次の方法を用いてもよい：
（１−１）２つ又は更に多くの映像が一部または全部が重なるように映像の再生位置が設定されている場合は、各映像に対応して設定されている再生条件（混合パラメータ）の内容に拘わらず、先に再生されている映像の上に、後から再生開始された映像を重ねるように表示する。
（１−２）また、輝度や色合いなどの各映像自体にかける効果処理については、効果処理するための効果回路（又は効果モジュール）に空きがある場合には、複数の映像に対して複数の効果処理をそれぞれ行うことが可能である。空きがない場合には、空きがないことを検出すると、後着優先の原則に従って、前の映像再生で付けられている映像効果を停止し、停止した効果回路を用いて、新たに再生開始された映像に設定された映像効果を付加させるようにしてもよい。
【０１０２】
（２）上述の（１）の処理とは逆に、先に映像処理を行っている映像効果パラメータを、後で再生される映像に対して優先処理（先着優先）することもできる。例えば、複数映像の重ね状態、効果回路の占有状態に関わる処理手法として、次の（２−１）及び（２−２）のように、再生指示の順番で処理条件を決めるよにすることができる：
（２−１）先に再生中の映像が後からの再生された映像でかくれてしまうことをなくすように、先の映像再生が終了又は停止（オフ）されて消えるまでは（先の映像再生が完了するまで）先の映像処理を優先させ、後の映像は、その裏側で再生を行うだけとする。
（２−２）また、映像自体にかける効果処理（輝度や色合い）については、先に再生中の効果処理が終了して効果回路が空いたときに、その効果回路を使用して効果をかけるよにうしてもよい。
【０１０３】
（３）ステップＰ２７の再生条件設定処理において、再生条件として各パッド画像データごとに優先度を定めておき、この優先度に基づいて映像効果付与処理を行うようにし、映像効果の優先性をユーザ設定可能となるようにしてもよい。例えば、ステップＰ２７で、ユーザの設定操作に基づいて優先度ランクを設定しておき、ステップＰ２２では、再生指示された複数のパッド画像データ間で優先度ランクを比較して高い優先度の方の再生条件を採用するものとすれば、ユーザ操作に対応させて設定した優先度で映像効果処理を行うことが可能となる。
【０１０４】
（４）なお、適用される映像効果が途中から切り替わるのに違和感がある場合には、先着優先で処理し、後着の映像処理については、その時点で利用可能な効果回路がないときは、先着の映像処理が終了するまで（効果回路の空きが途中でできたときでも）使用させないようにすることもできる。
【０１０５】
（５）上述のように、映像効果処理されるべき映像の数が効果回路の数を超える場合でなくとも、効果回路の空きの有無に拘わらず、処理中の映像の中で最初或いは最後に再生が指令された映像の効果パラメータを採用するなど、再生指令の順番だけで適用される映像効果パラメータを決定するようにしてもよい。
【０１０６】
〔種々の実施態様〕
以上、一実施例について説明したが、種々の実施態様を適用することができる。例えば、実施例の画像制御装置では、電源投入時や他のモードがリセットされたときにプレイモード（ＰＭ）になるようにしているが、別途、プレイモード指定スイッチを設けて、このスイッチ操作によりプレイモード（ＰＭ）になるようにしてもよい。
【０１０７】
実施例においては、スマートメディアなどの外部記憶装置に保存されるパッド画像データは、外部の映像再生器からの映像信号から動画録画部及び専用ＲＡＭを介して取得するようにしているが、予め画像データを記録したスマートメディアなどの可搬記録媒体を用いても、別の画像データ入力手段を用いて外部記憶装置に画像データを記録しておいてもよい。
【０１０８】
また、パッドスイッチの同時操作などによってパッド画像データの読出しを指示するイベントが同時に発生した場合は、両イベントをほぼ同時に読み出して、両イベントに対応するパッド画像データに基づく映像を同時に表示させてもよいし、これらのイベントを無効にしてもよいし、或いは、予め定められた優先順位に基づいて１つのイベントのみを有効としてもよい。
【０１０９】
【発明の効果】
以上説明したように、この発明による画像制御装置によれば、複数のパッド操作子（パッドスイッチＰｄｊ）の夫々に対応する複数の画像記憶手段（ＰＡＤ）の夫々に任意の画像データ（ＩＭ）を録画しておき、再生時（ＰＭ）には、何れかのパッド操作子（Ｐｄｊ）が操作される毎に、操作されたパッド操作子（Ｐｄｊ）に対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を順次読み出して映像としてディスプレイ（１５）上に再生するようにしているので（請求項１）、任意のパッド操作子に対するユーザ操作に応じて、複数の画像記憶手段のうち当該パッド操作子に対応する画像記憶手段に記憶された個々の画像データを任意に読み出したり切り替えて再生することができる。
【０１１０】
この発明による画像制御装置によれば、複数種類のイベント（Ｉｖ）の夫々に対応する複数の画像記憶手段（ＰＡＤ）の夫々に任意の画像データ（ＩＭ）を録画しておき、再生時（ＰＭ，ＭＭ）には、何れかのイベント（Ｉｖ）が入力される毎に、入力されたイベント（Ｉｖ）の種類に対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を順次読み出して映像としてディスプレイ（１５）上に再生するようにしているので（請求項２）、入力イベントに応じて、複数の画像記憶手段のうち当該入力イベントに対応する画像記憶手段に記憶された個々の画像データを任意に読み出したり切り替えて再生することができる。
【０１１１】
この画像制御装置では、再生時（ＰＭ）に、任意のパッド操作子（パッドスイッチＰｄｊ）のユーザ操作で発生されるイベント（パッド操作イベント）に対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を読み出すことにより（請求項３）、さらに、任意のパッド操作子に対するユーザ操作に応じて、複数の画像記憶手段のうち当該パッド操作に基づくパッド操作イベントに対応する画像記憶手段に記憶された個々の画像データを必要なときにすぐに読み出したり自由に切り替えて再生することができる。
【０１１２】
この画像制御装置では、再生時（ＭＭ）に、外部機器（１６）から入力される信号中から順次検出される遠隔的なイベント（遠隔入力イベント）の種類に対応する画像記憶手段（ＰＡＤ）から画像データ（ＩＭ）を順次読み出すことにより（請求項４）、さらに、外部機器からの遠隔入力イベントに応じて、複数の画像記憶手段のうち当該遠隔入力イベントに対応する画像記憶手段に記憶された個々の画像データを順次再生し、多彩な画像を出力することができる。この場合、遠隔入力イベントとして、特に、ＭＩＤＩ信号のノートデータなどの検出に基づくイベント（音楽又はＭＩＤＩイベント）を用いることによって、音楽の進行に応じた多彩な映像を演出することができる。
【０１１３】
この発明による画像制御装置では、設定時（ＪＭ）に、ユーザ操作に基づくセーブ／ロードの指示に従って、画像記憶手段（ＰＡＤ）に記憶された画像データ（ＩＭ）をメモリカードなどの外部記憶装置（４）に保存し、外部記憶装置（４）に保存された画像データ（ＩＭ）を画像記憶手段（ＰＡＤ）に記憶することにより（請求項５）、さらに、画像記憶手段に記憶された画像データを外部記憶装置にセーブしたり、外部記憶装置に保存された画像データを画像記憶手段にロードして映像表示に利用することができる。また、録画時（ＲＭ）には、複数の画像記憶手段（ＰＡＤ）のうち何れかが選択され、ビデオ入力手段（１４）から入力されるビデオ信号の記録開始及び記録終了が指示されると、選択された画像記憶手段（ＰＡＤ）に当該記録開始指示から記録終了指示までのビデオ信号に基づく画像データを記憶することにより（請求項６）、さらに、まるでサンプラーのようにして画像データを各画像記憶手段に録画し準備しておくことができる。
【０１１４】
この発明による画像制御装置では、各画像記憶手段（ＰＡＤ）に記録された画像データ（ＩＭ）に基づく映像に、映像再生器などの外部映像情報機器（１４）から入力されるビデオ信号に基づく別の映像を合成することにより（請求項７）、重合せなどの適宜の表示手法を用いて多彩な映像を演出することができる。また、表示される１乃至複数の映像に対して所定の映像効果を付与することによって（請求項８）、より一層多彩な映像効果を得ることができる。
【図面の簡単な説明】
【図１】図１は、この発明の一実施例による画像制御システムのハードウエア構成を示すブロック図である。
【図２】図２は、この発明の一実施例による画像制御装置のフロント面に設けられる操作パネルの一構成例（一部分）を示す。
【図３】図３は、この発明の一実施例による画像メモリの一構成例を表わす図である。
【図４】図４は、この発明の一実施例による各パッドへのＭＩＤＩイベント割当て例を表わす図である。
【図５】図５は、この発明の一実施例による画像制御システムにおける動画処理部の機能ブロック図である。
【図６】図６は、この発明の一実施例による映像制御処理を表わすフローチャートの第１部分（１／４）である。
【図７】図７は、この発明の一実施例による映像制御処理を表わすフローチャートの第２部分（２／４）である。
【図８】図８は、この発明の一実施例による映像制御処理を表わすフローチャートの第３部分（３／４）である。
【図９】図９は、この発明の一実施例による映像制御処理を表わすフローチャートの第４部分（４／４）である。
【符号の説明】
Ｍ１〜Ｍ３  モード指定スイッチ、
Ｂｉ：Ｂ１〜Ｂ３（１≦ｉ≦ｍ＝３）  バンクスイッチ、
Ｐｄｊ：Ｐｄ１〜Ｐｄ８（１≦ｊ≦ｎ＝８）  パッドスイッチ
ＢＡＮＫ；ＢＡＮＫ−Ａ〜ＢＡＮＫ−Ｃ  バンク（大記憶領域）、
ＰＡＤ；ＰＡＤ１〜ＰＡＤ８  パッド（小記憶領域）、
Ｉｖ；Ａ−１〜Ａ−８，Ｂ−１〜Ｂ−８，Ｃ−１〜Ｃ−８  イベントＩＤ、
ＩＭ；ＩＭａ１〜ＩＭｃ８  パッド画像データ、
Ｃ１〜Ｅ４  ノート番号（ＭＩＤＩイベント）。
【図１】
0003849540.tif 000002
【図２】
0003849540.tif 000003
【図３】
0003849540.tif 000004
【図４】
0003849540.tif 000005
【図５】
0003849540.tif 000006
【図６】
0003849540.tif 000007
【図７】
0003849540.tif 000008
【図８】
0003849540.tif 000009
【図９】
0003849540.tif 000010