(57)【特許請求の範囲】
【請求項１】
ｍ種類（但し、ｍはｍ≧３となる整数）の音声信号を混合して出力するための、各音声信号の混合割合を算出する混合割合算出装置であって、
前記ｍ種類の音声信号に対し、その混合割合の最小値から最大値を示すｍ個の座標軸が仮想的に割り当てられている領域内において、任意の座標位置を指定する座標位置指定手段と、
前記各音声信号の座標軸と、指定された前記座標位置と、に基づいて、前記各音声信号の混合割合を算出する混合割合算出手段と、を備えたことを特徴とする混合割合算出装置。
【請求項２】
前記ｍ個の座標軸のうち、少なくとも２個の座標軸は、一方の音声信号の最大値と他方の音声信号の最小値とが一致し、且つ一方の音声信号の最小値と他方の音声信号の最大値とが一致する、１の線分により構成され、
前記一方の音声信号の最大値および最小値の位置、並びに前記他方の音声信号の最大値および最小値の位置を、同時に入れ替える切替手段をさらに備えたことを特徴とする請求項１に記載の混合割合算出装置。
【請求項３】
前記座標位置指定手段により指定された座標位置を、前記領域内に表示する表示手段をさらに備えたことを特徴とする請求項１に記載の混合割合算出装置。
【請求項４】
前記ｍ個の座標軸のうち、少なくとも２個の座標軸は、所定の角度を持って前記領域内に割り当てられていることを特徴とする請求項１に記載の混合割合算出装置。
【請求項５】
ｎ種類（但し、ｎはｎ≧３となる整数）の映像信号を混合して出力するための、各映像信号の混合割合を算出する混合割合算出装置であって、
前記ｎ種類の映像信号に対し、その混合割合の最小値から最大値を示すｎ個の座標軸が仮想的に割り当てられている領域内において、任意の座標位置を指定する座標位置指定手段と、
前記各映像信号の座標軸と、指定された前記座標位置と、に基づいて、前記各映像信号の混合割合を算出する混合割合算出手段と、を備えたことを特徴とする混合割合算出装置。
【請求項６】
ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を混合して出力するための、各ＡＶ信号の混合割合を算出する混合割合算出装置であって、
前記ｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸が仮想的に割り当てられているタッチパネル上の領域内において、任意の座標位置を指定する座標位置指定手段と、
前記ＡＶ信号が前記映像信号である場合、前記タッチパネル上における前記座標軸の最大値側の端付近に、当該座標軸に対応する前記映像信号の映像を表示する映像表示手段と、
前記各ＡＶ信号の座標軸と、指定された前記座標位置と、に基づいて、前記各ＡＶ信号の混合割合を算出する混合割合算出手段と、を備えたことを特徴とする混合割合算出装置。
【請求項７】
ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を混合して出力するための、各ＡＶ信号の混合割合を算出する混合割合算出装置であって、
前記ｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸が仮想的に割り当てられているタッチパネル上の領域内において、任意の座標位置を指定する座標位置指定手段と、
前記各ＡＶ信号の座標軸と、指定された前記座標位置と、に基づいて、前記各ＡＶ信号の混合割合を算出する混合割合算出手段と、
前記タッチパネル上に、前記混合割合算出手段により算出された混合割合を、前記各ＡＶ信号に割り当てられた色の混合により表示する混合割合表示手段と、を備えたことを特徴とする混合割合算出装置。
【請求項８】
ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を混合して出力するための、各ＡＶ信号の混合割合を算出する混合割合算出装置であって、
前記ｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸が仮想的に割り当てられているタッチパネル上の領域内において、任意の座標位置を指定する座標位置指定手段と、
前記各ＡＶ信号の座標軸と、指定された前記座標位置と、に基づいて、前記各ＡＶ信号の混合割合を算出する混合割合算出手段と、
前記混合割合算出手段の算出結果に基づき、前記タッチパネル上に、前記ｎ種類の映像信号を混合した混合映像信号の映像を表示する混合映像表示手段と、を備えたことを特徴とする混合割合算出装置。
【請求項９】
ｍ種類（但し、ｍはｍ≧３となる整数）の音声信号を混合して出力するための、各音声信号の混合割合を算出する混合割合算出方法であって、
前記ｍ種類の音声信号に対し、その混合割合の最小値から最大値を示すｍ個の座標軸が仮想的に割り当てられている領域内において、任意の座標位置が指定された場合の位置情報を取得する位置情報取得ステップと、
前記各音声信号の座標軸と、指定された前記座標位置に基づく位置情報と、に基づいて、前記各音声信号の混合割合を算出する混合割合算出ステップと、を実行することを特徴とする混合割合算出方法。
【請求項１０】
コンピュータを、請求項１，５，６，７，８のいずれか１項に記載の混合割合算出装置における各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声信号または映像信号である複数のＡＶ信号を入力し、これらを混合した混合ＡＶ信号を出力する混合割合算出装置、混合割合算出方法およびプログラムに関するものである。
【背景技術】
【０００２】
従来、Ａ端とＢ端を両端とする移動範囲を移動部材が移動することにより、２種類の音声信号を同時に調整する音声信号調整装置が知られている（例えば、特許文献１）。この種の音声信号調整装置は、一般に「クロスフェーダ」と称され、Ａ端からＢ端への移動部材の移動に伴って第１の音声信号の音量が大きくなり、逆にＢ端からＡ端への移動部材の移動に伴って第２の音声信号の音量が大きくなるように構成されている。つまり、移動部材の位置に応じて、２種類の音声信号の混合割合を１つのインターフェースで決定できるようになっている。特に、この種の音声信号調整装置は、クラブ等において用いられるＤＪ機器（ディスクジョッキー（ＤＪ）が音響パフォーマンスに用いる機器）に適用されることが多く、より簡単に操作できることが望まれている。
一方、近年は、上記の音声信号調整装置を映像信号に応用し、２種類の映像信号の混合割合を１つのインターフェースで決定できるものも知られている。この種の映像信号調整装置も、クラブ等において、会場のモニターに変化の多い映像を映し出すために用いられるＶＪ機器（ビジュアルジョッキーまたはビデオジョッキー（ＶＪ）が映像パフォーマスンスに用いる機器）に適用されることが多く、上記のＤＪ機器と同様に、簡単な操作が望まれている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−５９８７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、３種類以上の音声信号、または３種類以上の映像信号の混合割合を、１つのインターフェースで決定できるものは未だ存在しない。また、２種類以上の音声信号と１種類の映像信号など、３種類の音声／映像信号（以下、「ＡＶ信号」と称する）の混合割合を、１つのインターフェースで決定できるものも存在しない。つまり、ＡＶ信号を３種類以上混合させた混合ＡＶ信号を得るためには、それぞれ独立した３種類以上のフェーダを操作するなど、複雑な操作が必要であった。したがって、上記のＤＪ機器やＶＪ機器のように、短い時間の間に多様な操作が要求されるシーンにおいては、操作性が悪く大変不便であった。
【０００５】
本発明は、上記の問題点に鑑み、３種類以上のＡＶ信号を簡易な操作で混合させ得る混合割合算出装置、混合割合算出方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の混合割合算出装置は、ｍ種類（但し、ｍはｍ≧３となる整数）の音声信号を混合して出力するための、各音声信号の混合割合を算出する混合割合算出装置であって、ｍ種類の音声信号に対し、その混合割合の最小値から最大値を示すｍ個の座標軸が仮想的に割り当てられている領域内において、任意の座標位置を指定する座標位置指定手段と、各音声信号の座標軸と、指定された座標位置と、に基づいて、各音声信号の混合割合を算出する混合割合算出手段と、を備えたことを特徴とする。
上記に記載の混合割合算出装置において、ｍ個の座標軸のうち、少なくとも２個の座標軸は、一方の音声信号の最大値と他方の音声信号の最小値とが一致し、且つ一方の音声信号の最小値と他方の音声信号の最大値とが一致する、１の線分により構成され、一方の音声信号の最大値および最小値の位置、並びに他方の音声信号の最大値および最小値の位置を、同時に入れ替える切替手段をさらに備えたことが好ましい。
上記に記載の混合割合算出装置において、座標位置指定手段により指定された座標位置を、領域内に表示する表示手段をさらに備えたことが好ましい。
上記に記載の混合割合算出装置において、ｍ個の座標軸のうち、少なくとも２個の座標軸は、所定の角度を持って領域内に割り当てられていることが好ましい。
本発明の他の混合割合算出装置は、ｎ種類（但し、ｎはｎ≧３となる整数）の映像信号を混合して出力するための、各映像信号の混合割合を算出する混合割合算出装置であって、ｎ種類の映像信号に対し、その混合割合の最小値から最大値を示すｎ個の座標軸が仮想的に割り当てられている領域内において、任意の座標位置を指定する座標位置指定手段と、各映像信号の座標軸と、指定された座標位置と、に基づいて、各映像信号の混合割合を算出する混合割合算出手段と、を備えたことを特徴とする。
本発明の他の混合割合算出装置は、ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を混合して出力するための、各ＡＶ信号の混合割合を算出する混合割合算出装置であって、ｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸が仮想的に割り当てられているタッチパネル上の領域内において、任意の座標位置を指定する座標位置指定手段と、ＡＶ信号が映像信号である場合、タッチパネル上における座標軸の最大値側の端付近に、当該座標軸に対応する映像信号の映像を表示する映像表示手段と、各ＡＶ信号の座標軸と、指定された座標位置と、に基づいて、各ＡＶ信号の混合割合を算出する混合割合算出手段と、を備えたことを特徴とする。
本発明の他の混合割合算出装置は、ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を混合して出力するための、各ＡＶ信号の混合割合を算出する混合割合算出装置であって、ｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸が仮想的に割り当てられているタッチパネル上の領域内において、任意の座標位置を指定する座標位置指定手段と、各ＡＶ信号の座標軸と、指定された座標位置と、に基づいて、各ＡＶ信号の混合割合を算出する混合割合算出手段と、タッチパネル上に、混合割合算出手段により算出された混合割合を、各ＡＶ信号に割り当てられた色の混合により表示する混合割合表示手段と、を備えたことを特徴とする。
本発明の他の混合割合算出装置は、ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を混合して出力するための、各ＡＶ信号の混合割合を算出する混合割合算出装置であって、ｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸が仮想的に割り当てられているタッチパネル上の領域内において、任意の座標位置を指定する座標位置指定手段と、各ＡＶ信号の座標軸と、指定された座標位置と、に基づいて、各ＡＶ信号の混合割合を算出する混合割合算出手段と、混合割合算出手段の算出結果に基づき、タッチパネル上に、ｎ種類の映像信号を混合した混合映像信号の映像を表示する混合映像表示手段と、を備えたことを特徴とする。
本発明の混合割合算出方法は、ｍ種類（但し、ｍはｍ≧３となる整数）の音声信号を混合して出力するための、各音声信号の混合割合を算出する混合割合算出方法であって、ｍ種類の音声信号に対し、その混合割合の最小値から最大値を示すｍ個の座標軸が仮想的に割り当てられている領域内において、任意の座標位置が指定された場合の位置情報を取得する位置情報取得ステップと、各音声信号の座標軸と、指定された座標位置に基づく位置情報と、に基づいて、各音声信号の混合割合を算出する混合割合算出ステップと、を実行することを特徴とする。
本発明のプログラムは、コンピュータを、上記のいずれか１項に記載の混合割合算出装置における各手段として機能させることを特徴とする。
なお、以下の構成としても良い。
本発明のＡＶ処理装置は、ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号およびｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を入力する入力手段と、入力されたｌ種類のＡＶ信号に対し、その混合割合の最小値から最大値を示すｌ個の座標軸がそれぞれ独立して仮想的に割り当てられている所定の２次元領域内において、任意の座標位置を指定する座標位置指定手段と、各ＡＶ信号の座標軸と、指定された座標位置と、に基づいて、各ＡＶ信号の混合割合をそれぞれ独立して算出する混合割合算出手段と、算出した各ＡＶ信号の混合割合に基づいて、ｍ種類の音声信号と、ｎ種類の映像信号とをそれぞれ混合した混合ＡＶ信号を生成する混合ＡＶ信号生成手段と、生成した混合ＡＶ信号を出力する出力手段と、を備えていることを特徴とする。
【０００７】
この構成によれば、独立したｌ種類の（３種類以上の）ＡＶ信号の座標軸が仮想的に割り当てられている所定の２次元領域内において、任意の座標位置を指定することにより、ｌ種類のＡＶ信号の混合割合を決定することができる。すなわち、簡易な操作で３種類以上のＡＶ信号を混合させることができる。例えば、第１の音声信号の最小値から最大値を示す第１の座標軸と、第２の音声信号の最大値から最小値を示す第２の座標軸とがＸ軸（０→max）に沿って割り当てられ、且つ第１の映像信号の最小値から最大値を示す第３の座標軸と、第２の映像信号の最大値から最小値を示す第４の座標軸とがＹ軸（０→max）に沿って割り当てられている２次元領域内において、座標（０，０）が指定された場合、混合ＡＶ信号として、第２の音声信号の最大値と、第２の映像信号の最大値とを得ることができる。
【０００８】
上記のＡＶ処理装置において、ｌ個の座標軸をそれぞれ独立して設定する座標軸設定手段をさらに備え、所定の２次元領域は、座標軸設定手段による設定に基づいて、ｌ個の座標軸が割り当てられることが好ましい。
【０００９】
この構成によれば、ユーザの好みやＡＶ信号の種類に応じて、ｌ個の座標軸をそれぞれ独立して設定し、当該設定に基づいてｌ個の座標軸を所定の２次元領域内に割り当てることができる。例えば、上記のように２種類の音声信号と２種類の映像信号が入力された場合、２種類の音声信号の座標軸をＸ軸の正方向および負方向に沿って設定し、さらに２種類の映像信号の座標軸をＹ軸の正方向および負方向に沿って設定しても良いし、Ｘ軸，Ｙ軸に代えて矩形領域の対角線に沿って各座標軸を設定しても良い。
【００１０】
上記のＡＶ処理装置において、ｌ個の座標軸は、少なくともそのうちの２つの座標軸の端が一致するように割り当てられていることが好ましい。
【００１１】
この構成によれば、座標軸の端が一致しているため、ユーザが感覚的に混合割合を認識し易くなる。特に、座標軸の両端を一致させるとより認識しやすい（例えば、第１の音声信号の最小値から最大値を示す第１の座標軸と、第２の音声信号の最大値から最小値を示す第２の座標軸とがＸ軸（０→max）に沿って割り当てられている場合、その両端を一致させることにより、第１の音声信号の最小値＝第２の音声信号の最大値、第１の音声信号の最大値＝第２の音声信号の最小値とすることができる）。
【００１２】
上記のＡＶ処理装置において、ｌ個の座標軸は、座標位置指定手段により座標位置を１カ所のみ指定すれば良いように割り当てられていることが好ましい。
【００１３】
この構成によれば、座標位置を１カ所のみ指定するだけの簡易な操作で、ｌ種類のＡＶ信号の混合割合を決定することができる。
【００１４】
上記のＡＶ処理装置において、座標位置指定手段により指定された座標位置を表示する座標位置表示手段をさらに備えていることが好ましい。
【００１５】
この構成によれば、ユーザが指定した座標位置を、ユーザ自身が確認することができる。なお、座標位置は、その場所自体を示す表示でも良いし、数値として表示しても良い。
【００１６】
上記のＡＶ処理装置において、座標位置指定手段は、タッチパネル上に形成された所定の２次元領域内における任意の位置の押下により座標位置を指定し、座標位置表示手段は、タッチパネル上に、その押下位置に相当する座標位置を表示することが好ましい。
【００１７】
この構成によれば、所定の２次元領域がタッチパネル上に形成されているため、２次元領域の形状の自由度が高い。また、タッチパネルの任意の位置の押下により、より簡単に座標位置を指定することができる。さらに、タッチパネル上に、その押下位置に相当する座標位置を表示するため、ユーザに対し座標位置をより分かり易く示すことができる。
【００１８】
上記のＡＶ処理装置において、ＡＶ信号が映像信号である場合、タッチパネル上における座標軸の最大値側の端付近に、当該座標軸に対応する映像信号の映像を表示する映像表示手段をさらに備えていることが好ましい。
【００１９】
この構成によれば、座標軸の最大値側の端付近に、当該座標軸に対応する映像信号の映像を表示するため、映像に近接した座標位置を指定するほどその映像信号の混合割合が高くなる。したがって、ユーザは、表示された映像を視認することで、ある程度混合ＡＶ信号の出力画像を想定することができる。
【００２０】
上記のＡＶ処理装置において、混合割合算出手段により算出された混合割合を表示する混合割合表示手段をさらに備えていることが好ましい。
【００２１】
この構成によれば、各ＡＶ信号の混合割合を、ユーザ自身が確認することができる。なお、混合割合は、フェーダのイメージなど画像で表示しても良いし、数値で表示しても良い。
【００２２】
上記のＡＶ処理装置において、混合割合表示手段は、各ＡＶ信号に割り当てられた色の混合により、タッチパネル上に、混合割合を表示することが好ましい。
【００２３】
この構成によれば、各ＡＶ信号に割り当てられた色の混合により混合割合を表示するため、ユーザは感覚的に各ＡＶ信号の混合割合を確認することができる。また、座標位置を指定するためのタッチパネル上に色の混合を表示するため、混合割合表示手段として特別な構成を必要としない。
【００２４】
上記のＡＶ処理装置において、タッチパネル上に、ｎ種類の映像信号を混合した混合映像信号の映像を表示する混合映像表示手段をさらに備えていることが好ましい。
【００２５】
この構成によれば、混合映像表示手段を備えているため、モニター等を用いなくとも出力映像を確認することができる。また、座標位置を指定するためのタッチパネル上に混合映像を表示するため、混合映像表示手段として特別な構成を必要としない。
【００２６】
上記のＡＶ処理装置において、入力手段は、ＡＶ信号として、少なくとも２種類の音声信号と、２種類の映像信号を入力することが好ましい。
【００２７】
この構成によれば、少なくとも２種類の音声信号と、２種類の映像信号とを、それぞれ混合した混合ＡＶ信号を得ることができる。
【００２８】
本発明のプログラムは、コンピュータを、上記のＡＶ処理装置における各手段として機能させるためのものであることを特徴とする。
【００２９】
このプログラムにより、３種類以上のＡＶ信号を簡易な操作で混合させ得るＡＶ処理装置を実現することができる。
【図面の簡単な説明】
【００３０】
【図１】本発明の一実施形態に係るＡＶ処理システムのシステム構成である。
【図２】ＡＶ処理装置に備えられたユーザインターフェースを示す図である。
【図３】ＡＶ処理装置のブロック図である。
【図４】座標軸の設定および配置を示す図である。
【図５】図４とは異なる座標軸の設定および配置を示す図である。
【図６】タッチパネルの表示例を示す図である。
【図７】座標軸の他の配置例を示す図である。
【図８】３種類または６種類のＡＶ信号を混合させる場合の座標軸の配置例を示す図である。
【図９】映像信号をワイプ方式で混合させる場合の説明図である。
【発明を実施するための形態】
【００３１】
以下、本発明の一実施形態に係る混合割合算出装置、混合割合算出方法およびプログラムについて、添付図面を参照しながら詳細に説明する。図１（ａ）は、本発明の混合割合算出装置として機能するＡＶ処理装置３０を適用したＡＶ処理システムＳＹのシステム構成図である。ＡＶ処理システムＳＹは、ＡＶ処理装置３０に入力するための１種類以上の音声信号を生成する１台以上のＣＤプレーヤ１０（同図では、１台のみ図示）と、ＡＶ処理装置３０に入力するための１種類以上の映像信号を生成する１台以上のＤＶＤプレーヤ２０（同図では、１台のみ図示）と、これら１台以上のＣＤプレーヤ１０および／または１台以上のＤＶＤプレーヤ２０から、１種類以上の音声信号および／または１種類以上の映像信号を入力し、それぞれを混合した混合音声信号および／または混合映像信号を生成するＡＶ処理装置３０と、ＡＶ処理装置３０から出力された混合音声信号を音声出力するスピーカー４０と、ＡＶ処理装置３０から出力された混合映像信号を表示するモニター５０と、から成る。
【００３２】
本実施形態のＡＶ処理装置３０は、音声信号と映像信号とを、併せて３種類以上入力可能となっている。また、ＡＶ処理装置３０の一例としては、例えばクラブ等において用いられるものであり、音声と映像の両方にエフェクトをかけるなど、楽器感覚で音声信号および／または映像信号（以下、「ＡＶ信号」と称する）を扱い得るＤＶＪ機器（ディスクジョッキー（ＤＪ）が音響パフォーマンスに用いるＤＪ機器と、ビジュアルジョッキーまたはビデオジョッキー（ＶＪ）が映像パフォーマスンスに用いるＶＪ機器とを複合化した機器）等が挙げられる。
【００３３】
ここで、ＶＪおよびＤＪについて説明する。ＶＪは、音楽に合わせて即興で映像をミックス（合成したりつないだり）する。ＤＪが即興で音楽をミックスするのに対し、ＶＪは映像を用いてパフォーマンスを行う。主にイベントやクラブパーティでスクリーン等に映像を切換出力するパフォーマンスを行い、会場でかかっている音楽や企画の進行に合わせて、適切な映像をその場で選択し、タイミングよく流すことを担う。
【００３４】
対して、ＤＪは場の雰囲気から楽曲を選曲し、切れ目のない再生を行う。楽曲のピッチ（スピード）を変速できるターンテーブル等を使用したライブ演奏を行う。選曲の他に、ＤＪミックス、スクラッチなどのパフォーマンスを行う行為が一般化しており、ミックスでは現在再生している曲と次に再生する曲をスムーズにつなぎ、音の切れ目をなくすことでフロアのテンションを維持する。
【００３５】
現状、一般的にＶＪとＤＪは住み分けがなされており、普通は得意分野によって音楽、映像のどちらか一方を対象としてパフォーマンスを行う者が多い。それぞれに得意分野があることから、専門分野以外の対象をミックスすることは困難である。また、一方を対象とするだけでも、即興でつなぎつつさらにエフェクトをかけたりするので、多様な操作を行う必要があり非常に慌しい。そのため、双方を扱う余裕がない。
【００３６】
しかし、どちらも会場の雰囲気やパフォーマー自身のフィーリングに合わせて、楽曲、映像をテンポよく切換出力する行為を行うものである。提供される音と映像が一致する必要があることから、双方を１人の人物が行うことも望まれる。本来映像が得意なＶＪでも、映像の変化に追従して音楽が変化すれば、映像と共に音楽を扱うことが容易となるし、逆に本来音楽専任のＤＪでも、音を変化させることに追従して映像が変化すれば、より自然に音と映像を合わせて扱うことができる。
【００３７】
本実施形態のＡＶ処理装置３０は、本来１人の人物が同時に扱うことができない映像と音楽を、１人で同時に扱うことを可能とするものである。また、音楽と映像両方を扱おうとする者に対して、簡便で快適な操作を提供するものである。
【００３８】
なお、ＡＶ処理装置３０に入力するためのＡＶ信号を生成するための装置としては、ＣＤプレーヤ１０やＤＶＤプレーヤ２０に限らず、他の装置（各種音声機器、映像機器およびパーソナルコンピュータなど）であっても良い。また、ＡＶ処理装置３０に、ＣＤプレーヤ１０やＤＶＤプレーヤ２０の機能を内蔵させても良い。さらに、映像信号は、動画であっても良いし静止画であっても良い。また、複数の音声信号をＡＶ処理装置３０に入力する場合は、ＣＤプレーヤ１０側またはＡＶ処理装置３０側のいずれかに、当該複数の音声信号のＢＰＭを一致させる機能が搭載されていることが好ましい。
【００３９】
図１（ｂ）は、ＡＶ処理装置３０の簡易構成図である。ここでは、ＡＶ信号として、２種類の音声信号（音声信号Ａ，Ｂ）と、２種類の映像信号（映像信号Ａ，Ｂ）とが入力されるものとして説明する。ＡＶ処理装置３０は、その主要構成要素として、タッチパネルＴＰ、ＣＰＵ３１および混合装置３２を有している。
【００４０】
タッチパネルＴＰは、ＡＶ処理装置３０に入力された各ＡＶ信号の混合割合をユーザが指定するためのものである。ＣＰＵ３１は、タッチパネルＴＰの押下位置に応じて発生するタッチ位置信号に基づいて、各ＡＶ信号の混合を指示するためのコントロール信号を生成し、これを混合装置３２（オーディオ／ビデオコントロールデバイス）に出力する。また、この他ＣＰＵ３１は、ユーザの操作に基づく情報管理や、外部装置との信号の入出力など、ＡＶ処理装置３０の統括制御を行う。
【００４１】
混合装置３２は、ＣＰＵ３１から入力されたコントロール信号に基づいて、入力された各ＡＶ信号の混合割合を算出する。また、算出した混合割合に基づいて、音声信号Ａと音声信号Ｂ、および映像信号Ａと映像信号Ｂをそれぞれ混合した、混合音声信号および混合映像信号を生成し、これらを各出力インターフェースから出力する。
【００４２】
次に、図２の平面図を参照し、ＡＶ処理装置３０に備えられたユーザインターフェースについて説明する。同図に示すように、ＡＶ処理装置３０は、その筐体上面に、上記のタッチパネルＴＰと、タッチパネルＴＰ上における座標軸Ｚの配置を設定する座標軸設定ボタン６１，６２と、混合映像信号等を表示するディスプレイ６３と、座標軸ＺとＡＶ信号との対応付けを切り替える切替ボタン６４と、を備えている。
【００４３】
タッチパネルＴＰは、各ＡＶ信号の混合割合を指定するために用いられる他、各種情報（ユーザによるタッチ位置、座標軸Ｚ、入力されている映像信号の映像、各ＡＶ信号の混合割合、生成した混合映像信号の映像等）を表示するために用いられる。
【００４４】
同図に示すタッチパネルＴＰは、座標軸設定ボタン６１が押下された場合にタッチパネルＴＰ上に仮想的に割り当てられる座標軸Ｚの配置を表示している。すなわち、左右方向（Ｘ軸方向）に音声信号Ａ（ＡｕｄｉｏＡ）と音声信号Ｂ（ＡｕｄｉｏＢ）との混合割合を決定するための基準となる音声座標軸Ｚａが割り当てられており、当該音声座標軸Ｚａは、タッチパネルＴＰのより右側をタッチすると、音声信号Ｂの混合割合が高くなり、タッチパネルＴＰのより左側をタッチすると、音声信号Ａの混合割合が高くなることを示している。また、上下方向（Ｙ軸方向）に映像信号Ａ（ＶｉｄｅｏＡ）と映像信号Ｂ（ＶｉｄｅｏＢ）との混合割合を決定するための基準となる映像座標軸Ｚｖが割り当てられており、当該映像座標軸Ｚｖは、タッチパネルＴＰのより上側をタッチすると、映像信号Ｂの混合割合が高くなり、タッチパネルＴＰのより下側をタッチすると、映像信号Ａの混合割合が高くなることを示している。
【００４５】
一方、座標軸設定ボタン６２が押下された場合は、タッチパネルＴＰのより右下側をタッチすると、音声信号Ａの混合割合が高くなり、タッチパネルＴＰのより左上側をタッチすると、音声信号Ｂの混合割合が高くなるように音声座標軸Ｚａが割り当てられる。また、タッチパネルＴＰのより左下側をタッチすると、映像信号Ａの混合割合が高くなり、タッチパネルＴＰのより右上側をタッチすると、映像信号Ｂの混合割合が高くなるように映像座標軸Ｚｖが割り当てられる（いずれも図５参照）。すなわち、ユーザは、自分の好みや使い勝手に応じて２つの座標軸設定ボタン６２のいずれかを押下することにより、タッチパネルＴＰ上における座標軸Ｚの配置を設定することができる。なお、各座標軸Ｚの設定および配置については、後に詳述する。また、タッチパネルＴＰ上における座標軸Ｚの表示は、ユーザの操作により表示／非表示を選択可能となっている。
【００４６】
ディスプレイ６３は、ユーザの押下位置を座標（数値）で表示したり、各ＡＶ信号の混合割合をパーセンテージで数値表示したりするために用いられる。またその他、不図示の画面切替ボタンの押下により、入力されている映像信号に基づく映像や、生成した混合映像信号に基づく映像等を表示可能となっている。
【００４７】
切替ボタン６４は、座標軸ＺとＡＶ信号との対応付けを、その押下によって切り替えるために用いられる。例えば図示の状態は、音声座標軸Ｚａの右端が音声信号Ｂの最大値を示し、音声座標軸Ｚａの左端が音声信号Ａの最大値を示しているが、切替ボタン６４の押下により、音声信号Ａと音声信号Ｂの最大値となる位置を入れ替えることができる。また、さらに切替ボタン６４を押下すると、映像信号Ａと映像信号Ｂの最大値となる位置を入れ替えることができる。また、さらに切替ボタン６４を押下すると、音声座標軸Ｚａと映像座標軸Ｚｂの位置を入れ替えることができる。なお、座標軸設定ボタン６２が押下された場合も、同様に座標軸ＺとＡＶ信号との対応付けを切り替えることができる。
【００４８】
次に、図３のブロック図を参照し、ＡＶ処理装置３０の制御構成について説明する。同図に示すように、ＡＶ処理装置３０は、入力手段３１０、操作手段３２０、混合処理手段３３０、表示手段３４０および出力手段３５０を有している。
【００４９】
入力手段３１０および出力手段３５０は、不図示の映像信号入出力インターフェース（ＵＳＢやＭＩＤＩなど）により、その主要部が構成される。また、操作手段３２０は、上記のタッチパネルＴＰ、座標軸設定ボタン６１，６２および切替ボタン６４（図２参照）により、その主要部が構成される。また混合処理手段３３０は、ＣＰＵ２２および混合装置３２により、その主要部が構成される。さらに表示手段３４０は、ＣＰＵ２２、タッチパネルＴＰおよびディスプレイ６３（図２参照）により、その主要部が構成される。
【００５０】
入力手段３１０は、音声信号入力手段３１１と、映像信号入力手段３１２とを有している。音声信号入力手段３１１は、ｍ種類（但し、ｍはｍ≧０となる整数）の音声信号を入力し、映像信号入力手段３１２は、ｎ種類（但し、ｎは、ｎ≧０となる整数）の映像信号を入力する。また、入力手段３１０は、ｍ種類の
音声信号およびｎ種類の映像信号を含むｌ種類（但し、ｌはｌ＝ｍ＋ｎ≧３となる整数）のＡＶ信号を入力する。
【００５１】
操作手段３２０は、座標軸設定手段３２１と、座標位置指定手段３２２とを有している。座標軸設定手段３２１は、ユーザが座標軸設定ボタン６１，６２を用いて、座標軸Ｚの配置（割り当て方）を設定するものである。なお、座標軸設定ボタン６１，６２の押下だけでなく、パーソナルコンピュータ等の制御装置から送信された所定のコマンドをＡＶ処理装置３０が受信することによって、座標軸Ｚを設定するようにしても良い。
【００５２】
また、座標位置指定手段３２２は、ユーザがタッチパネルＴＰ上の任意の位置を押下することにより、タッチパネルＴＰの全体を対象とする所定の２次元領域内における座標位置を指定するものである。なお、押下位置は、座標軸Ｚの配置に応じて１カ所であっても複数箇所であっても良いが、本実施形態では１カ所のみ押下されるものとする。
【００５３】
混合処理手段３３０は、混合割合算出手段３３１と、混合ＡＶ信号生成手段３３２とを有している。混合割合算出手段３３１は、操作手段３２０により設定された各ＡＶ信号の座標軸Ｚと、指定された座標位置と、に基づいて、各ＡＶ信号の混合割合を算出するものである。また、混合ＡＶ信号生成手段３３２は、混合割合算出手段３３１により算出した各ＡＶ信号の混合割合に基づいて、上記２種類（ｍ種類）の音声信号と、上記２種類（ｎ種類）の映像信号とをそれぞれ混合した混合ＡＶ信号を生成するものである。
【００５４】
表示手段３４０は、座標位置表示手段３４１と、映像表示手段３４２と、混合割合表示手段３４３と、混合映像表示手段３４４とを有している。座標位置表示手段３４１は、タッチパネルＴＰ上に、ユーザの押下位置に相当する座標位置ＰＰ（図４（ａ）参照）を表示すると共に、ディスプレイ６３（図２参照）上に、２次元領域内における座標（ｘ，ｙ）を数値表示するものである。
【００５５】
映像表示手段３４２は、タッチパネルＴＰおよびディスプレイ６３上に、入力されている映像信号の映像を表示するものである。なお、タッチパネルＴＰ上においては、各映像信号に対応する映像座標軸Ｚｖの最大値側の端付近に、各映像Ｇａ，Ｇｂを表示する（図６参照）。
【００５６】
混合割合表示手段３４３は、タッチパネルＴＰの中心付近（混合映像表示領域Ｇｍの周辺に位置する枠領域Ｇ０）に、各音声信号の混合割合を、各音声信号に割り当てられた色の混合により表示するものである（図６参照）。例えば、音声信号Ａに赤色が割り当てられ、且つ音声信号Ｂに青色が割り当てられている場合、両者が５０％ずつの割合で混合されると、枠領域Ｇ０が紫色で表示される。また、混合割合表示手段３４３は、ディスプレイ６３（図２参照）上に、各ＡＶ信号の混合割合をパーセンテージで数値表示する。
【００５７】
混合映像表示手段３４４は、タッチパネルＴＰおよびディスプレイ６３上に、生成した混合映像信号の映像を表示するものである。なお、タッチパネルＴＰ上においては、その中心付近の混合映像表示領域Ｇｍに、混合映像信号の映像を表示する（図６参照）。また、映像信号が入力されず、４種類の音声信号が入力されるような場合、当該混合映像表示領域Ｇｍには、上下方向に設定された音声座標軸Ｚａに対応する音声信号の混合割合が、各音声信号に割り当てられた色の混合により表示される。
【００５８】
出力手段３５０は、音声信号出力手段３５１と、映像信号出力手段３５２とを有している。音声信号出力手段３５１は、入力された２種類（ｍ種類）の音声信号を、算出した混合割合で混合した混合音声信号を、スピーカー４０等に出力するものである。また、映像信号出力手段３５２は、入力された２種類（ｎ種類）の映像信号を、算出した混合割合で混合した混合映像信号を、モニター５０等に出力するものである。
【００５９】
次に、図４および図５を参照し、座標軸Ｚの設定および配置について説明する。図４（ａ）は、座標軸設定ボタン６１が押下された場合の座標軸Ｚの配置を示している。各座標軸Ｚは、各ＡＶ信号の混合割合の最小値から最大値を示すものである。したがって、本実施形態では、４種類のＡＶ信号に対応する４つの座標軸Ｚが割り当てられる。なお、各座標軸Ｚは、ユーザの押下対象となる所定の２次元領域内に割り当てられるが、本実施形態では、タッチパネルＴＰの領域＝所定の２次元領域であるものとする。また、各ＡＶ信号の混合割合の最小値は０％、最大値は１００％であるものとする。
【００６０】
図４（ａ）に示すように、音声Ａ座標軸Ｚａａは、音声信号Ａの最小値（Ｘ座標：Ｘｍａｘ）から最大値（Ｘ座標：Ｘ０）を示し、音声Ｂ座標軸Ｚａｂは、音声信号Ｂの最小値（Ｘ座標：Ｘｍａｘ）から最大値（Ｘ座標：Ｘ０）を示している。また、映像Ａ座標軸Ｚｖａは、映像信号Ａの最小値（Ｘ座標：Ｙｍａｘ）から最大値（Ｘ座標：Ｙ０）を示し、映像Ｂ座標軸Ｚｖｂは、映像信号Ｂの最小値（Ｘ座標：Ｙｍａｘ）から最大値（Ｘ座標：Ｙ０）を示している。
【００６１】
すなわち、音声Ａ座標軸Ｚａａと音声Ｂ座標軸Ｚａｂの端は、Ｘ座標：Ｘ０とＸ座標：Ｘｍａｘとで一致しており、映像Ａ座標軸Ｚｖａと映像Ｂ座標軸Ｚｖｂの端は、Ｙ座標：Ｙ０とＹ座標：Ｙｍａｘとで一致している。また、音声座標軸Ｚａと映像座標軸Ｚｖは、垂直方向に割り当てられている。なお、分かり易く図示するため、各座標軸Ｚの最大値付近には、各ＡＶ信号の種類（「音声Ａ」、「音声Ｂ」、「映像Ａ」、「映像Ｂ」）を示すものとする。
【００６２】
上記のように各座標軸Ｚが割り当てられている場合、例えば座標位置ＰＰ１（Ｘ１，Ｙ１）が押下されると、各ＡＶ信号の混合割合は、同図（ｂ）に示すとおりとなる。すなわち、座標位置ＰＰ１から２つの音声座標軸Ｚａに伸ばした垂線と、各音声座標軸Ｚａとの交点ＡＡ１，ＡＢ１に基づいて、音声信号Ａおよび音声信号Ｂの混合割合が算出される。また、座標位置ＰＰ１から２つの映像座標軸Ｚｖに伸ばした垂線と、各映像座標軸Ｚｖとの交点ＶＡ１，ＶＢ１に基づいて、映像信号Ａおよび映像信号Ｂの混合割合が算出される。
【００６３】
また、押下位置が、座標位置ＰＰ１（Ｘ１，Ｙ１）から座標位置ＰＰ２（Ｘ２，Ｙ２）に移動されると（ドラッグされると）、その移動に伴って、各ＡＶ信号の混合割合は、同図（ｃ）に示すとおりとなる。つまり、押下位置（１カ所）の移動のみで、４つのＡＶ信号の混合割合を徐々に変化させることができる。
【００６４】
一方、図５（ａ）は、座標軸設定ボタン６２が押下された場合の座標軸Ｚの配置を示している。この場合、音声Ａ座標軸Ｚａａは、音声信号Ａの最小値｛座標（Ｘ０，Ｙｍａｘ）｝から最大値｛座標（Ｘｍａｘ，Ｙ０）｝を示し、音声Ｂ座標軸Ｚａｂは、音声信号Ｂの最小値｛座標（Ｘｍａｘ，Ｙ０）｝から最大値｛座標（Ｘ０，Ｙｍａｘ）｝を示している。また、映像Ａ座標軸Ｚｖａは、映像信号Ａの最小値｛座標（Ｘｍａｘ，Ｙｍａｘ）｝から最大値｛座標（Ｘ０，Ｙ０）｝を示し、映像Ｂ座標軸Ｚｖｂは、映像信号Ｂの最小値｛座標（Ｘ０，Ｙ０）｝から最大値｛座標（Ｘｍａｘ，Ｙｍａｘ）｝を示している。
【００６５】
すなわち、音声Ａ座標軸Ｚａａと音声Ｂ座標軸Ｚａｂの端は、｛座標（Ｘ０，Ｙｍａｘ）｝と｛座標（Ｘｍａｘ，Ｙ０）｝とで一致しており、映像Ａ座標軸Ｚｖａと映像Ｂ座標軸Ｚｖｂの端は、｛座標（Ｘｍａｘ，Ｙｍａｘ）｝と｛座標（Ｘ０，Ｙ０）｝とで一致している。なお、分かり易く図示するため、２つの座標軸Ｚの両端が一致している場合は、同図（ｂ）に示すように、２つの座標軸Ｚを、両矢印の座標軸１本で示すものとする。
【００６６】
同図（ｂ）に示すように、例えば座標位置ＰＰが押下されると、座標位置ＰＰから各座標軸Ｚａ，Ｚｖへ伸ばした垂線と、各座標軸Ｚａ，Ｚｖとの交点（Ｘａｐ，Ｙａｐ）および（Ｘｖｐ，Ｙｖｐ）に基づいて、４つのＡＶ信号の混合割合が決定する。すなわちこの場合は、座標位置ＰＰに基づいて算出された座標軸Ｚａ上の位置（座標）と、音声信号ＡおよびＢの混合割合とを関連づけたテーブル（図示省略）を参照して、音声信号Ａおよび音声信号Ｂの混合割合を決定する。同様に、座標位置ＰＰに基づいて算出された座標軸Ｚｖ上の位置（座標）と、映像信号ＡおよびＢの混合割合とを関連づけたテーブル（図示省略）を参照して、映像信号Ａおよび映像信号Ｂの混合割合を決定する。
【００６７】
なお、各ＡＶ信号の混合割合は、上記のようにテーブルを参照して決定するのではなく、各座標軸Ｚを示す計算式と、押下位置に相当する座標位置と、に基づいて算出することも当然可能である。
【００６８】
次に、図６を参照し、タッチパネルＴＰ上の表示について説明する。同図は、座標軸設定ボタン６１（図２参照）が押下された場合の表示例を示している。同図に示すように、映像座標軸Ｚｖの両端付近には、映像信号Ａの映像が表示される映像表示領域Ｇａと、映像信号Ｂの映像が表示される映像表示領域Ｇｂとが配置されている。これらは、映像表示領域Ｇａ，Ｇｂ付近を押下すると、そこに表示されている映像の混合割合が高い混合映像信号を得ることができることを示している。したがって、例えば座標位置ＰＰが押下された場合は、タッチパネルＴＰ中心付近の混合映像表示領域Ｇｍに、映像信号Ａと映像信号Ｂとが５０％ずつ混合された混合映像信号の映像が表示される。この場合、「映像信号が混合される」とは、フェード方式による混合を指す。なお、押下位置に相当する座標位置ＰＰは、同図に示すように二重丸で表示される。
【００６９】
一方、音声信号の混合割合については、混合映像表示領域Ｇｍの周辺に位置する枠領域Ｇ０に、各音声信号に割り当てられた色の混合により表示される。例えば、音声信号Ａに赤色が、また音声信号Ｂに青色が割り当てられている場合、音声信号Ａの混合割合が１００％の場合は、枠領域Ｇ０が赤色となる。また、そこから音声信号Ｂの混合割合が高くなるに連れて、赤紫、紫、青紫、青色と、枠領域Ｇ０の色が変化する。したがって、例えば座標位置ＰＰが押下された場合は、枠領域Ｇ０が青紫色となる。
【００７０】
以上、説明したとおり、本実施形態によれば、ｌ種類の（３種類以上の）ＡＶ信号の座標軸Ｚが仮想的に割り当てられている所定の２次元領域内（タッチパネルＴＰ上）において、任意の座標位置を指１本で押下するだけの操作で、ｌ種類のＡＶ信号の混合割合を決定することができる。
【００７１】
また、座標軸設定ボタン６１，６２（図２参照）により、ユーザの好みやＡＶ信号の種類に応じて、座標軸Ｚの配置を切り替える（設定する）ことができる。この場合、いずれも設定においても、音声座標軸Ｚａおよび映像座標軸Ｚｂの両端が一致しているため、ユーザが感覚的に混合割合を認識し易くなる。さらに、いずれも設定においても、座標位置を１カ所のみ指定すれば良いように座標軸Ｚが割り当てられているため、１カ所のみ座標位置を指定するだけの簡易な操作で、ｌ種類のＡＶ信号の混合割合を決定することができる。
【００７２】
また、ユーザが押下した座標位置を、タッチパネルＴＰ上に二重丸で表示するため（図６参照）、ユーザ自身がその座標位置を確認することができる。また、ディスプレイ６３（図２参照）上には、座標位置が数値表示されるため、タッチパネルＴＰとディスプレイ６３の両方で確認することができる。
【００７３】
また、タッチパネルＴＰ上において、映像座標軸Ｚｖの最大値側の端付近に配置された映像表示領域Ｇａ，Ｇｂ、各映像座標軸Ｚｖａ，Ｚｖｂに対応する映像信号の映像を表示することにより（図６参照）、映像に近接した座標位置を指定するほどその映像信号の混合割合が高くなることを示すことができる。さらに、タッチパネルＴＰ上の混合映像表示領域Ｇｍには、混合映像を表示するため、モニター５０等を用いなくとも出力映像を確認することができる。
【００７４】
また、音声信号の混合割合については、画像として表示することができないが、各音声信号に割り当てられた色の混合により、タッチパネルＴＰ上の枠領域Ｇ０に各音声信号の混合割合を表示するため（図６参照）、ユーザは感覚的に各音声信号の混合割合を確認することができる。また、ディスプレイ６３（図２参照）上には、混合割合がパーセンテージで数値表示されるため、タッチパネルＴＰとディスプレイ６３の両方で確認することができる。
【００７５】
なお、上記の例では、座標軸Ｚの配置（割り当て方）を２つのパターンから選択できるものとしたが（座標軸設定ボタン６１，６２，図２参照）、それ以外のパターンを用いても良い。図７は、座標軸Ｚの他の配置例を示す図である。
【００７６】
同図（ａ）に示すように、座標位置を２カ所指定するように、各座標軸Ｚを配置しても良い。この場合は、座標位置ＰＰ１の押下により、当該座標位置ＰＰ１から音声Ａ座標軸Ｚａａおよび音声Ｂ座標軸Ｚａｂに伸ばした垂線の交点（Ｘｐｐ１，Ｙ０），（Ｘ０，Ｙｐｐ１）から、音声信号Ａおよび音声信号Ｂの混合割合を求めることができる。また、座標位置ＰＰ２の押下により、当該座標位置ＰＰ２から映像Ａ座標軸Ｚｖａおよび映像Ｂ座標軸Ｚｖｂに伸ばした垂線の交点（Ｘｐｐ２，Ｙ０），（Ｘ０，Ｙｐｐ２）から、映像信号Ａおよび映像信号Ｂの混合割合を求めることができる。
【００７７】
また、タッチパネルＴＰ（所定の２次元領域）の形状も矩形（長方形）とは限らず、同図（ｂ）に示すように、円形であっても良い。この場合は、座標位置ＰＰの押下により、当該座標位置ＰＰから音声座標軸Ｚａおよび映像座標軸Ｚｖに伸ばした垂線の交点（Ｘａｐ，Ｙａｐ），（Ｘｖｐ，Ｙｖｐ）から、各ＡＶ信号の混合割合を求めることができる。
【００７８】
この他、平行四辺形、菱形、台形など、タッチパネルＴＰの形状は任意である。また、タッチパネルＴＰの領域＝所定の２次元領域とならない場合（タッチパネルＴＰの一部の領域が所定の２次元領域に相当する場合）は、その所定の２次元領域をタッチパネルＴＰ上に表示することが好ましい。この構成によれば、ユーザが座標位置として指定可能な範囲を把握することができる。また、円の中心に各座標軸Ｚの最小点を配置すると共に円周上に各座標軸Ｚの最大点を配置して各座標軸Ｚを放射状に割り当てるなど、座標軸Ｚの割り当て方も任意である。
【００７９】
また、上記の例では、２種類の音声信号と２種類の映像信号とから成る４種類のＡＶ信号を混合する場合について示したが、混合するＡＶ信号の種類（数）は任意である。図８（ａ）は、２種類の音声信号と１種類の映像信号とから成る３種類のＡＶ信号を混合する場合の座標軸Ｚの配置例を示したものである。音声座標軸Ｚａについては、図４等に示した例と同じ配置であるが、映像座標軸Ｚｖが、映像信号Ａの最小値から最大値のみを示している点で異なる。この場合、座標位置ＰＰの押下により、当該座標位置ＰＰから映像座標軸Ｚｖに伸ばした垂線の交点（Ｘ０，Ｙｖｐ）から、映像信号Ａの混合割合を求めることができる。したがって、座標位置ＰＰのＹ座標がＹ０となる場合は、映像が出力されないこととなる（出力映像を表示するモニター画面は、黒色または透明一色となる）。
【００８０】
また、同図（ｂ）は、４種類の音声信号と２種類の映像信号とから成る６種類のＡＶ信号を混合する場合の座標軸Ｚの配置例を示したものである。この場合は、正六角形の領域を所定の２次元領域としており、座標位置ＰＰの押下により、当該座標位置ＰＰから音声信号Ａ，Ｂの座標軸Ｚａ１、音声信号Ｃ，Ｄの座標軸Ｚａ２および映像信号Ａ，Ｂの座標軸Ｚｖに伸ばした垂線の交点（Ｘａｐ１，Ｙａｐ１），（Ｘａｐ２，Ｙａｐ２）および（Ｘｖｐ，Ｙｖｐ）から、音声信号Ａ〜Ｄの混合割合および映像信号Ａ，Ｂの混合割合を求めることができる。
【００８１】
また、上記の例では、映像信号を混合する場合、フェーダ方式で混合するものとしたが、ワイプ方式で混合させても良い。図９は、映像信号をワイプ方式で混合させる場合の説明図である。同図（ａ）に示すように、映像表示領域Ｇａ，Ｇｂに、図示のような映像Ａおよび映像Ｂが表示されており、これらを例えば映像Ａ：２０％，映像Ｂ：８０％で混合すると、混合映像表示領域Ｇｍには、同図（ｂ）に示すような混合映像が表示される。この状態で、押下位置を移動（ドラッグ）させることにより、混合割合を映像Ａ：８０％，映像Ｂ：２０％とすると、混合映像表示領域Ｇｍには、同図（ｃ）に示すような混合映像が表示される。すなわち、混合割合に応じて、映像Ａの一方の端から徐々に映像Ｂに移り変わっていくような混合方式（ワイプ方式）を本発明に採用しても良い。
【００８２】
また、上記の例では、各音声信号に割り当てられた色の混合により、タッチパネルＴＰ上の枠領域Ｇ０に各音声信号の混合割合を表示するものとしたが、映像信号についても、その混合割合を色の混合により表示するようにしても良い。
【００８３】
また、各音声信号の混合割合を色の混合により表示する場合、各音声信号に割り当てられた色を、音声座標軸Ｚａの最大値側の端付近に表示することが好ましい。この構成によれば、ユーザが各音声信号に割り当てられた色を確認することができる。
【００８４】
また、上記の例では、各座標軸の最小値が０％、最大値が１００％に設定されているものとしたが、最小値および最大値の値は任意に設定可能である。またユーザが、座標軸Ｚ毎に、最小値および最大値の値を指定できるようにしても良い。この構成によれば、音声や映像の表現の幅が拡がり、よりユーザの好みに応じた処理結果を得ることができる。
【００８５】
また、上記の例では、タッチパネルＴＰを用いて、座標位置を指定するものとしたが、マウスやジョイスティックなどで座標位置を指定しても良い。すなわち、所定の２次元領域内における任意の座標位置を指定可能な種々のインターフェースを採用可能である。
【００８６】
また、ＡＶ処理装置３０としては、クラブ等において用いられるＤＶＪ機器を例示したが、当該ＤＶＪ機器以外にも、複数のＡＶ信号を入力し、これらをブレンド可能な装置やプログラム（音声／映像ミキサー、音声／映像コントローラ、音声／映像処理アプリケーションなど）であれば、本発明を適用可能である。すなわち、音声信号と映像信号の両方を処理する装置でなくとも、音声信号のみ、映像信号のみを処理する装置にも、本発明を適用可能である。
【００８７】
また、上記の例に示したＡＶ処理装置３０における各部、並びに各機能をプログラムとして提供することも可能である。また、そのプログラムを記録媒体（図示省略）に格納して提供することも可能である。記録媒体としては、ＣＤ―ＲＯＭ、フラッシュＲＯＭ、メモリカード（コンパクトフラッシュ（登録商標）、スマートメディア、メモリースティック等）、コンパクトディスク、光磁気ディスク、デジタルバーサタイルディスク、フレキシブルディスクおよびハードディスク等を利用することができる。
【００８８】
また、上述した実施例によらず、ＡＶ処理システムＳＹのシステム構成、ＡＶ処理装置３０の装置構成や処理工程等について、本発明の要旨を逸脱しない範囲で、適宜変更も可能である。
【符号の説明】
【００８９】
１０：ＣＤプレーヤ，２０：ＤＶＤプレーヤ，３０：ＡＶ処理装置，３１：ＣＰＵ，３２：混合装置，４０：スピーカー，５０：モニター，６１〜６２：座標軸設定ボタン，６３：ディスプレイ，６４：切替ボタン，ＳＹ：ＡＶ処理システム，ＴＰ：タッチパネル，Ｚ：座標軸，Ｚａ：音声座標軸，Ｚｖ：映像座標軸
【図１】
0004688927.tif 000002
【図２】
0004688927.tif 000003
【図３】
0004688927.tif 000004
【図４】
0004688927.tif 000005
【図５】
0004688927.tif 000006
【図６】
0004688927.tif 000007
【図７】
0004688927.tif 000008
【図８】
0004688927.tif 000009
【図９】
0004688927.tif 000010