(57)【要約】【課題】例えば、カラオケ装置等の画像・音響合成処理装置において、外部から画像情報を入力して、リクエスト曲とは無関係に、歌唱者のイメージする背景画像（画像情報）を任意に選択して、この画像情報と音響情報を合成処理することができる画像・音響合成処理装置を提供すること。【解決手段】カラオケ装置Ａは、演算処理装置１０、通信制御回路１１、カラオケ情報記録装置１２、リモコン受信部１３、歌詞テロップ再生回路１４、再生画像記録媒体１５、ビデオカメラ１６、撮影画像処理回路１７、画像情報編成回路１８、映像合成回路１９、映像再生回路２０、ディスプレイ表示装置２１、音楽・音声再生回路２２、マイクロホン２３、スピーカ２４、画像入力回路２５と、入力画像処理回路２６と、画像・音響合成処理回路２７、画像・音響情報記録装置２８を備えて構成されている。【選択図】　　　　図１
2004138772.tif 000002
【特許請求の範囲】
【請求項１】
人物像を撮影する撮影手段と、外部から画像情報を入力する画像情報入力手段と、画像情報入力手段で入力された画像情報に前記撮影手段で撮影した人物像を嵌め込み合成処理する嵌め込み合成処理手段と、外部から音響情報を入力する音響情報入力手段と、上記嵌め込み合成処理手段で嵌め込み合成処理された嵌め込み画像情報と音響情報入力手段で入力された音響情報を合成処理する画像・音響合成処理手段と、を備えたことを特徴とする画像・音響合成処理装置。
【請求項２】
画像・音響合成処理手段で合成処理された嵌め込み画像情報と音響情報を記録媒体に記録する記録手段を設けたことを特徴とする請求項１に記載の画像・音響合成処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像情報と音響情報を合成処理する画像・音響合成処理装置に関する。
なお、ここでいう画像情報とは、静止画情報及び動画情報を含む概念であり、音響情報とは、音声情報及び音楽情報を含む概念である。
【０００２】
【従来の技術】
従来より、画像・音響合成処理装置として、例えば、カラオケ装置が提供されている。
このカラオケ装置は、カラオケを歌っている歌唱者をビデオカメラ等の撮影手段で撮影し、予め用意された画像情報である背景画像の指定された個所に撮影した歌唱者の人物像を取り込んで嵌め込み合成し、ディスプレイで表示する構成となっている。
また、このように嵌め込み合成された嵌め込み画像情報とともに、音響情報（歌唱者の音声及び演奏音楽をいう、以下同じ）を合成処理して、例えば、ビデオテープ等の記録媒体に記録する装置も提供されている。
【０００３】
【発明が解決しようとする課題】
しかしながら、上記のような画像・音響合成処理装置であるカラオケ装置においては、一つの問題を有していた。
すなわち、上記カラオケ装置においては、予め用意された画像情報である背景画像情報は背景画像情報記憶手段に記憶され、これらの背景画像情報は、適宜、歌唱者のリクエスト曲に応じた背景画像情報記憶手段から読み出され、ディスプレイ装置に表示される。
【０００４】
このため、歌唱者は、自分でリクエストした曲に関連付けられ、予め定められた画像情報である背景画像しか選択することができず、リクエスト曲とは関係なく任意に背景画像を選択することができないという問題を有していた。
すなわち、上記のようなカラオケ装置においては、外部から画像情報を入力する画像情報入力手段が存在せず、さらに、この外部からの画像情報に音響情報を合成処理して記録するという機能を有していなかった。
【０００５】
本発明は、上記問題点を解決するためになされたものであり、例えば、カラオケ装置等の画像・音響合成処理装置において、外部から画像情報を入力して、リクエスト曲とは無関係に、歌唱者のイメージする背景画像（画像情報）を任意に選択して、この画像情報と音響情報を合成処理することができる画像・音響合成処理装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記目的を達成するために、請求項１の発明は、
人物像を撮影する撮影手段と、外部から画像情報を入力する画像情報入力手段と、画像情報入力手段で入力された画像情報に前記撮影手段で撮影した人物像を嵌め込み合成処理する嵌め込み合成処理手段と、外部から音響情報を入力する音響情報入力手段と、上記嵌め込み合成処理手段で嵌め込み合成処理された嵌め込み画像情報と音響情報入力手段で入力された音響情報を合成処理する画像・音響合成処理手段と、を備えたことを特徴とする。
【０００７】
請求項２の発明は、請求項１に記載の画像・音響合成処理装置において、
画像・音響合成処理手段で合成処理された嵌め込み画像情報と音響情報を記録媒体に記録する記録手段を設けたことを特徴とする。
【０００８】
【作用】
すなわち、請求項１に記載の画像・音響合成処理装置によれば、撮影手段により撮影された人物像の画像情報と、外部から入力された画像情報を嵌め込み合成処理手段で嵌め込み合成処理し、この嵌め込み合成処理された嵌め込み画像情報と音響情報を合成処理する。
請求項２に記載に画像・音響合成処理装置によれば、画像・音響合成処理手段で合成処理された嵌め込み画像情報と音響情報を記録媒体に記録する。
【０００９】
【発明の実施の形態】
以下、本発明の画像・音響合成処理装置について説明する。なお、以下の説明において、画像・音響合成処理装置の一例としてカラオケ装置を用いて説明することとする。
このカラオケ装置Ａは、演算処理装置１０、通信制御回路１１、カラオケ情報記録装置１２、リモコン受信部１３、歌詞テロップ再生回路１４、再生画像記録媒体１５、ビデオカメラ１６、撮影画像処理回路１７、画像情報編成回路１８、映像合成回路１９、映像再生回路２０、ディスプレイ表示装置２１、音楽・音声再生回路２２、マイクロホン２３、スピーカ２４、画像入力回路２５と、入力画像処理回路２６と、画像・音響合成処理回路２７、画像・音響情報記録装置２８を備えて構成されている。
【００１０】
なお、上記ビデオカメラ１６が人物像を撮影する撮影手段を、画像入力回路２５が画像情報入力手段を構成している。
また、画像情報編成回路１８が撮影した人物像を嵌め込み合成処理する嵌め込み合成処理手段を、マイクロホン２３が外部から音響情報を入力する音響情報入力手段を構成している。
また、画像・音響合成処理回路２７が画像・音響合成処理手段を、画像・音響合成情報記録装置２８が記録手段をそれぞれ構成している。
【００１１】
上記カラオケ装置Ａは、カラオケシステムの提供業者の本社等に備えられたデータベース３１に電気通信回線Ｎを介して接続されており、このデータベース３１には、カラオケに使用される多数の曲の音楽情報、テロップ情報、及び、それぞれの曲目に対応する画像パターンの背景画像選択信号情報が記録されている。
【００１２】
カラオケ装置Ａの演算処理装置１０は、ＣＰＵ本体、プログラムＲＯＭ、プログラムＲＡＭ、ワークＲＡＭ等からなり、カラオケ装置Ａの各周辺構成部を統括し、制御している。
【００１３】
ＣＰＵ本体は、カラオケ装置Ａ全体の作動を制御する役割を果たし、通信関係の制御、音楽の再生制御、テロップの表示と制御、画像の合成再生制御、リクエストの受付と表示制御等を行う。
【００１４】
通信制御回路１１は、データベース３１に接続された電気通信回線Ｎへの送受信を制御するものであり、データベース３１を呼び出すための信号の発信並びにデータベース３１から送られてくる情報の受信を行う。
【００１５】
カラオケ情報記録装置１２は、音楽データバッファＲＡＭ、歌詞テロップ情報バッファＲＡＭ、背景画像選択信号バッファＲＡＭ（いずれも図示せず）から成る。
音楽データバッファＲＡＭは、データベース３１から電気通信回線Ｎを通じて送られてくる音楽情報を一時的にストアし、歌詞テロップ情報バッファＲＡＭは、歌詞テロップ情報を一時的にストアし、それらの情報が一定量に達したとき、これを演算処理装置１０に転送する。
また、背景画像選択信号バッファＲＡＭは、データベース３１から送られてくる背景画像選択のための信号情報を一時的にストアし、情報が一定量に達したときに演算処理装置１０に転送する。
【００１６】
リモコン受信部１３は、歌唱者が所望のカラオケのリクエストナンバーを入力するためのリモコン装置のリモコン送信部３２からの信号を受信するもので、このリモコン受信部１３を介して演算処理装置１０のワークＲＡＭに入力されたリクエストナンバーは、通信制御回路１２を介して前記電気通信回線Ｎよりデータベース３１に送られる。
【００１７】
歌詞テロップ再生回路１４は、前記歌詞テロップ情報バッファＲＡＭから演算処理装置１０を介して転送されてくる歌詞のテロップ情報をディスプレイ装置２１により表示し得る信号に変換すると共に、曲の進行に応じて歌うべき歌詞の位置をテロップの色の変化により表示するよう当該色の変化を制御するものであり、その出力データは映像合成回路１９に送られる。
【００１８】
レーザーディスク等の再生画像記録媒体１５には、リクエストされるカラオケ曲にふさわしいさまざまな背景画像情報が記録されており、各背景画像情報には、ビデオカメラ１６により撮影された歌唱者の人物像を写し込む部分を指定する指令信号が含まれている。
なお、この再生画像記録媒体１５は、カラオケ装置Ａ内部の背景画像情報の入力手段となる。
【００１９】
ビデオカメラ１６は、カラオケを歌っている歌唱者本人の顔などの人物像を撮影する。撮影画像処理画路１７は、ビデオカメラ１６で撮影された歌唱者の人物像を一旦記録し、合成のために必要な所定の画像処理を行って、背景画像と合成するのに適した画像情報に変換する。
【００２０】
画像情報編成回路１８は、前記背景画像選択信号バッファＲＡＭから演算処理装置１０を介して転送されてくる背景画像選択信号に基づきリクエスト曲に応じて上記再生画像記録媒体１５から読み出だされた背景画像の人物像を写し込む部分に、撮影画像処理回路１７で得られた人物像の画像情報をクロマキー合成技術等を利用して写し込み、所望の画像情報を編成する。
なお、画像情報編成回路１８は、後述するように、画像入力回路２５で入力した画像情報にビデオカメラ１６で撮影した人物像の画像情報をクロマキー合成技術等を利用して写し込み、所望の画像情報を編成する。
【００２１】
映像合成回路１９は、画像情報編成回路１８で得られた背景及び人物の合成画像情報を、前記歌詞テロップ再生回路１４で変換されたテロップ信号と合成して、リクエスト曲に対応したディスプレイ画面全体の映像情報を編成する。
【００２２】
映像再生回路２０は、映像合成回路１９から出力される映像データをディスプレイ装置２１により表示し得る信号に変換する。
音楽・音声再生回路２２は、演算処理装置１０を介して転送されてくる音楽情報をデコードすると共に、マイクロホン２３で採取され電気信号として入力される歌唱者の音声を上記デコードされた音楽に重畳して、スピーカ２４に送る。
【００２３】
画像入力回路２５は、前記ディスプレイ装置２１で背景として表示される背景画像情報を外部から入力するもので、例えば、レーザーディスク、ＤＶＤ、ビデオＣＤ、フラッシュメモリ、ビデオテープ等の画像が記録された画像記録媒体を再生するドライブを備えて構成されている。
なお、上述したようにカラオケ装置Ａの再生画像記録媒体１５が内部の入力手段であるのに対して、これとは別に設けられ、例えば、歌唱者が持ち込んだ上記記録媒体の画像情報を入力することができるという意味での外部である。
【００２４】
入力画像処理回路２６は、前記画像入力回路２５で入力された画像情報にビデオカメラ１６により撮影された歌唱者の人物像を写し込む部分を指定する指令信号を付加する処理を行う。
そして、この背景画像は、画像情報編成回路１８に転送され、人物像を写し込む部分を指定する指令信号が含まれた背景画像の写し込み部分に、撮影画像処理画路１７で得られた歌唱者の人物像をクロマキー合成技術等を利用して写し込み、所望の画像情報を編成する。
【００２５】
画像・音響合成処理回路２７は、画像情報編成回路１８で嵌め込み合成処理された画像情報と、音楽・音声再生回路２２で歌唱者の音声に音楽を重畳した音響情報を合成処理する。
画像・音響合成情報記録装置２８は、画像・音響合成処理回路２７で合成処理された画像・音響合成情報を取り込んで、所定の記録媒体に記録する。なお、本実施形態においては、ＣＤ−ＲＯＭやＤＶＤ―ＲＯＭ等のディジタルメディアにＭ−ＰＥＧ形式で記録する構成となっている。
【００２６】
次に、上記の如く構成されたカラオケ装置Ａの基本的な動作について説明する。
演算処理装置１０は、リモコン受信部１３で選曲入力信号を受信すると、選曲された当該信号を通信制御回路１１及び電気通信回路Ｎを通じてデータベース３１に送出する。
【００２７】
データベース３１は、上記選曲入力信号に従い、選曲された曲目の音楽情報とテロップ情報を読み出すとともに、当該曲目にふさわしい映像の背景画像を選択するための背景画像選択信号情報を読み出し、それらの情報を電気通信回線Ｎを介してカラオケ装置Ａのカラオケ情報記録装置１２に送出する。
【００２８】
そして、上記カラオケ情報記録装置１２にストアされた音楽情報は、演算処理装置１０を介して音楽・音声再生回路２２に送られ、スピーカ２４に供給すべきアナログ信号に変換されるとともに、マイクロホン２３に入力された歌唱者の音声と重畳してスピーカ２４へ送られ、当該音楽及び音声がスピーカ２４によって再生される。
【００２９】
歌詞テロップ情報は、演算処理装置１０を介して歌詞テロップ再生回路１４に送られ、ディスプレイ装置２１により表現し得る信号に変換され、曲の進行に応じて歌うべき歌詞の位置をテロップの色の変化により表示するよう編成される。
【００３０】
背景画像選択信号情報は、演算処理装置１０を介して再生画像記録媒体１５の読出し装置に送られ、当該背景画像選択信号情報に基づき、リクエストされた曲に対応する背景画像が読み出される。
【００３１】
ビデオカメラ１６により歌唱者の人物像が撮影され、その画像情報は撮影画像処理回路１７で合成のための所定の処理を施されて、合成用の人物像の画像情報が作成される。
【００３２】
上記の如くして、再生画像記録媒体１５から読み出された画像情報と、撮影画像処理回路１７で得られた画像情報は画像情報編成回路１８でクロマキー合成技術を用いて編成され、人物像を写し込んだ合成画像情報が作成される。
【００３３】
画像情報編成回路１８において画像合成された映像情報と、歌詞テロップ再生画路１４において編成された歌詞テロップ信号は、映像合成回路１９にて合成され、更に、映像再生回路２０においてディスプレイ装置２１により表現し得る信号に変換され、ディスプレイ装置２１に送られてディスプレイ表示される。
【００３４】
以上が、カラオケ装置Ａの基本的な動作であるが、つぎにこのカラオケ装置Ａの特徴となる動作、すなわち、本発明の画像・音響合成処理装置の特徴について説明する。
すなわち、カラオケ装置Ａは、画像入力回路２５を介して外部から画像が入力されると、この入力された画像情報は入力画像処理回路２６で、ビデオカメラ１６により撮影された人物像を写し込む部分を指定する指令信号を付加する処理を行う。
【００３５】
そして、この画像情報は、背景画像情報として画像情報編成回路１８に転送され、人物像を写し込む部分を指定する指令信号で指定された人物像の写し込み部分に、撮影画像処理画路１７で得られた人物像の画像情報をクロマキー合成技術等を利用して写し込み、所望の画像情報が編成され、映像再生回路２０を介してディスプレイ装置２１で表示される。
【００３６】
また、上記画像情報編成回路１８で得られた画像情報は、画像・音響合成処理回路２７で音楽・音声再生回路２２から転送されてくる音響情報と合成処理され、この合成処理がなされた画像・音響合成情報は、画像・音響合成情報記録装置２８でＣＤ−ＲＯＭやＤＶＤ―ＲＯＭ等のディジタルメディアにＭ−ＰＥＧ形式で記録される。
【００３７】
以上のように、画像入力回路２５で入力された画像情報を入力画像処理回路２６で画像処理し、画像情報編成回路１８で画像情報を編成し、画像・音響合成処理回路２７で編成された画像情報と音響情報を合成処理し、画像・音響合成情報記録装置２８で記録する構成とすれば、以下のような効果を得ることができる。
【００３８】
すなわち、背景となる画像は、予めカラオケ装置Ａ内の再生画像記録媒体１５に記録された背景画像情報をデータベース３１から送信される背景画像選択信号情報に基づいて読み出されるのみではなく、歌唱者等が持ち込んだレーザーディスク、ＤＶＤ、ビデオＣＤ、フラッシュメモリ、ビデオテープ等の画像が記録された画像記録媒体の画像情報と歌唱者の人物像を画像合成処理することができる。
【００３９】
この結果、例えば、運動会や思い出のビデオテープ等、歌唱者の保持する任意の記録媒体に記録された画像情報をカラオケの背景画像として用いることができ、これにより歌唱者は自己が選択した曲のイメージにあわせた背景画像をバックにあたかもプロの歌手のように最高の演出を味わうことができるという効果がある。
【００４０】
また、カラオケ装置Ａで画像合成された画像は、画像・音響合成処理回路で２７合成処理され、画像・音響合成情報記憶装置２８でＤＶＤ―ＲＯＭ、ＣＤ−ＲＯＭ等のディジタルの記録媒体にＭ−ＰＥＧ形式で記録されるため、自分だけのオリジナル映像を作成することができるという効果がある。また、記録媒体は、ディジタル形式の記録媒体であるため、劣化することもない。
【００４１】
また、ＤＶＤ―ＲＯＭ、ＣＤ−ＲＯＭ等にＭ−ＰＥＧ形式記録されているため、個人のホームページに動画データとして表現することができ、また、簡単に記録された映像の一部をプリントアウトしたり、シールを作成することができる。さらに、簡単に複製することができるため、友人等に自己のイメージ映像をプレゼント等することができるという効果がある。
さらにまた、このカラオケ装置Ａをカラオケ専門店、ホテル、結婚式場等に設置すれば、カラオケ装置Ａの用途の幅が広がり、歌唱者は自己ＰＲすることができるという効果がある。
【００４２】
以上、本発明の画像・音響合成処理装置について、カラオケ装置を例にして説明してきたが、本発明の画像・音響合成処理装置は、上記カラオケ装置に限定されるものでは決してなく、例えばビデオ編集装置等にも用いることができる。
【００４３】
この場合においては、既存のビデオテープに記録された画像情報を画像情報入力手段で入力し、また、ビデオテープに記録された音響情報を音響情報入力手段で入力する。
そして、嵌め込み合成手段で、画像情報入力手段で入力されたビデオテープの画像情報に撮影手段で撮影した人物像を嵌め込み合成する。
【００４４】
そして、上記嵌め込み合成された嵌め込み画像情報と、音響情報入力手段で入力したビデオテープの音響情報を画像・音響合成処理手段で合成処理して、他のビデオテープ等の記録媒体に記録することにより、ビデオテープの編集を行うことができる。
【００４５】
なお、上記ビデオテープの編集装置においては、外部から入力される音響情報として、予めビデオテープに記録された音響情報を用いたが、ビデオテープに記録された画像情報だけを用いて、音響情報をマイク等の音響情報入力手段を用いて入力し、ビデオテープを編集する構成とすることも可能である。
また、これとは逆に、ビデオテープに記録された音響情報のみを用いて、画像情報をビデオテープ以外の外部から入力して編集することもできる。
【００４６】
【発明の効果】
請求項１に記載の画像・音響合成処理装置によれば、撮影手段により撮影された人物像の画像情報と、外部から入力された画像情報を嵌め込み合成処理手段で嵌め込み合成し、この嵌め込み合成された嵌め込み画像情報と音響情報を合成処理する。
この結果、例えば、カラオケ装置等の画像・音響合成処理装置においては、外部から画像情報を入力して、リクエスト曲とは無関係に、歌唱者のイメージする背景画像（画像情報）を任意に選択して、この画像情報と音響情報を合成処理することができるという効果がある。
【００４７】
請求項２に記載のカラオケ装置によれば、合成処理された画像情報と音響情報を記録媒体に記録する。
この結果、自分だけのオリジナルのイメージ映像及び音響情報を記録媒体に記録することができるという効果がある。
【図面の簡単な説明】
【図１】本発明のカラオケ装置の構成を示すブロック図である。
【符号の説明】
Ａ　　カラオケ装置
１０　演算処理装置
１１　通信制御回路
１２　カラオケ情報記録装置
１３　リモコン受信部
１４　再生画像記録媒体
１５　テロップ再生回路
１６　ビデオカメラ
１７　撮影画像処理回路
１８　画像情報編成回路
１９　映像合成回路
２０　映像再生回路
２１　ディスプレイ表示装置
２２　音楽・音声再生回路
２３　マイクロホン
２４　スピーカ
２５　画像入力回路
２６　入力画像処理回路
２７　画像・音響合成処理回路
２８　画像・音響合成情報記録装置
３１　データベース
【図１】
2004138772.tif 000003