(57)【要約】【課題】  通信デュエットを行っている歌唱者同士の相性評価値に基づいて、通信デュエット相手となっている歌唱者の歌唱映像の表示態様を制御することにより、デュエット歌唱の楽しさを十分に堪能する。【解決手段】  伝送路を介して通信可能に接続した２台のカラオケ装置３０をペアとして、一方を第１拠点、他方を第２拠点とする。各拠点における歌唱音声信号を比較して、両者の相性評価値を算出する相性評価値算出手段６４と、各拠点で撮影した歌唱映像を他の拠点との間で送受信する歌唱映像送受信手段４７と、各拠点において受信した歌唱映像の表示制御を行う歌唱映像表示制御手段５１とを備える。歌唱映像表示制御手段５１は、少なくとも一方の拠点において、相性評価値に基づいて、受信した歌唱映像の表示態様を制御する。【選択図】図１
2015040995.tif 000002
【特許請求の範囲】
【請求項１】
伝送路を介して、少なくとも２台のカラオケ装置を通信可能に接続し、同一のカラオケ楽曲の演奏同期をとりながら、各カラオケ装置において同時に歌唱を行う機能を有し、２台のカラオケ装置をペアとするとともに、一方を第１拠点とし、他方を第２拠点とした通信カラオケシステムであって、
前記カラオケ楽曲を歌唱する際に、複数の歌唱区間毎に、前記第１拠点における第１歌唱者の第１歌唱音声信号と、前記第２拠点における第２歌唱者の第２歌唱音声信号との比較に基づいて、前記第１歌唱者と前記第２歌唱者の歌唱に関する相性評価値を算出する相性評価値算出手段と、
前記伝送路を介して、前記第１歌唱者の歌唱姿態を撮影した第１歌唱映像又は前記第２歌唱者の歌唱姿態を撮影した第２歌唱映像を、前記ペアとなる前記第１拠点及び前記第２拠点との間で送受信する歌唱映像送受信手段と、
前記第１拠点又は前記第２拠点において、それぞれ受信した前記第２歌唱映像又は前記第１歌唱映像の表示制御を行う歌唱映像表示制御手段と、を備え、
前記歌唱映像表示制御手段は、前記第１拠点又は前記第２拠点の少なくとも一方において、前記相性評価値算出手段により算出された相性評価値に基づいて、前記受信した第１歌唱映像又は前記第２歌唱映像の表示態様を制御する、
ことを特徴とする通信カラオケシステム。
【請求項２】
前記歌唱映像表示制御手段は、映像効果付与手段を備え、
前記映像効果付与手段は、歌唱開始時点では、前記第１歌唱映像又は前記第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を識別不能となるように映像効果を付与し、前記カラオケ楽曲の演奏進行に伴い、前記相性評価値算出手段により算出した相性評価値に基づいて、前記第１歌唱映像又は前記第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別可能とする、
ことを特徴とする請求項１に記載の通信カラオケシステム。
【請求項３】
前記映像効果付与手段は、前記相性評価値算出手段により算出した相性評価値に基づいて、前記第１歌唱映像又は前記第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別可能とした後、前記カラオケ楽曲の演奏進行に伴い、前記相性評価値が低下した場合に、前記第１歌唱映像又は前記第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別不能とすることを特徴とする請求項２に記載の通信カラオケシステム。
【請求項４】
カラオケ楽曲の複数の歌唱区間毎に、前記第１拠点又は前記第２拠点における歌唱採点値を算出する歌唱採点手段を備え、
前記第１拠点の映像効果付与手段は、当該第１拠点の前記歌唱採点手段により算出した歌唱採点値に基づいて、前記第２歌唱映像に対して映像効果を付与し、
前記第２拠点の映像効果付与手段は、当該第２拠点の前記歌唱採点手段により算出した歌唱採点値に基づいて、前記第１歌唱映像に対して映像効果を付与する、
ことを特徴とする請求項１〜３のいずれか１項に記載の通信カラオケシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、伝送路で接続された２台のカラオケ装置において、例えば、通信デュエット歌唱を行い、デュエット相手の歌唱音声及び歌唱映像を視聴可能な通信カラオケシステムに関するものであり、詳しくは、通信デュエットを行っている歌唱者同士の相性評価値に基づいて、デュエット相手の歌唱者の歌唱映像の表示態様を制御することが可能な通信カラオケシステムに関するものである。
【背景技術】
【０００２】
現在普及しているカラオケシステムでは、伝送路により接続されたカラオケ装置において、デュエット歌唱を行うことができるシステムが普及し始めており、通信デュエット歌唱を行うためのシステムが種々開示されている（例えば、特許文献１参照）。
【０００３】
特許文献１に開示された技術は、双方向ブロードバンド方式の通信網に接続される複数の音楽演奏通信装置と、この音楽演奏通信装置の情報を管理する情報管理サーバとを接続して情報をやりとりする送受信システムを利用した通信デュエットに関する技術である。すなわち、音楽演奏通信装置間で映像・音響信号を、相互に送受信可能として複数の利用者が同時に演奏・参加するための検索・参加手段を備えており、演奏開始時刻及び進行中の演奏位置を相互で同時刻に合わせる同期信号方式と音響信号ストリームの通信上の欠損率（通信パケットロスの割合）と遅延とが大きくならないように他の映像ストリームや特徴情報よりも、音響信号を優先して通信網に配信する方式を用いるようになっている。
【０００４】
また、デュエット歌唱において、歌唱者の相性診断を行うことが可能なカラオケ採点装置が開示されている（例えば、特許文献２参照）。特許文献２に開示されたカラオケ採点装置は、デュエット曲の歌唱音声を入力するための第１マイクロホンと第２マイクロホンとを備えている。そして、第１マイクロホンからの歌声信号の音量推移と、第２マイクロホンからの歌声信号の音量推移とを比較し、両者の時間的相似性に相関した採点データを出力する。また、第１マイクロホンからの歌声信号のピッチ推移と、第２マイクロホンからの歌声信号のピッチ推移とを比較し、両者の時間的相似性に相関した採点データを出力する。
【０００５】
また、歌唱者の姿態を撮影して歌唱者映像を生成する技術も一般的となっており、生成した歌唱者映像は、歌唱音声とともにＤＶＤ等の記録媒体に記録したり、ウェブサイトで動画データとして公開したりすることができる。さらに、歌唱の巧拙（歌唱採点値）に応じて歌唱者映像の表示態様を変化させる技術が種々提案されている（例えば、特許文献３、特許文献４、特許文献５参照）。
【０００６】
特許文献３に開示された技術は、歌唱者の歌唱姿態を撮影した歌唱映像を表示する際に、歌唱映像を加工して、歌唱音声に対して歌唱採点値を告知するものである。このカラオケ装置は、演奏手段と、歌唱入力手段と、入力歌唱音声を評価する評価手段と、歌唱者を撮影する撮影手段と、評価手段による評価結果に応じて、歌唱者の撮影画像に画像処理を施す画像処理手段と、画像処理手段で画像処理された、歌唱者の撮影画像を表示する表示手段とを備えている。
【０００７】
特許文献４に開示された技術は、同一のカラオケ装置において、カラオケ楽曲の演奏に合わせて同時に二人の歌唱者が歌唱を行う際に、各歌唱者の歌唱採点値に応じて、各歌唱者の歌唱姿態を撮影した歌唱映像の表示態様を変化させるものである。この歌唱力採点機能付きカラオケ装置は、歌唱者の歌唱力を所定のタイミングで採点する歌唱力採点手段と、歌唱者用の領域を少なくとも一部に表示可能な表示手段と、歌唱力採点手段による採点結果に基づいて、表示手段上の歌唱者用の領域を増減可能な制御手段とを備えている。そして、モニタ画面上の映像の変化により相対的又は絶対的な得点を判断できるようになっている。
【０００８】
特許文献５に開示された技術は、例えば、通信デュエット歌唱等を行う場合に、接続相手の画像の表示や個人情報の開示、接続相手とのコミュニケーションにおいて制限を加え、お互いのプライバシーや安全性に配慮した情報開示及び表示を行えるようにしたものである。このカラオケシステムは、相互に接続されたカラオケ装置における歌唱者の画像を含む画像情報を取得するための画像情報取得手段と、取得した画像情報をそのまま表示しないように、画像処理により表示制限を行うための表示制限手段と、表示制限を解除する条件を設定するための解除条件設定手段と、解除条件設定手段で設定した条件に基づいて画像表示を行うための画像表示手段とを備えている。そして、カラオケ装置の採点機能で判定された歌唱採点値が所定値以上である場合に、表示制限を解除することができるようになっている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００５−７７４８５号公報
【特許文献２】特開２００６−２５９２３７号公報
【特許文献３】特開２００６−１２６３００号公報
【特許文献４】特開平９−１６０５７４号公報
【特許文献５】特開２００３−３４５３６７号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
ところで、特許文献２に記載された技術のように、同一のカラオケ装置を用いてデュエット歌唱を行う場合には、知人・友人関係にある利用者同士でデュエット歌唱を行うのが一般的であり、全く素性が解らない利用者同士でデュエット歌唱を行うことは考えられない。このようなデュエット歌唱においては、お互いの歌唱姿態を見ながら歌唱を行うことができ、カラオケ装置を用いたデュエット歌唱の楽しさを十分に堪能することができる。
【００１１】
一方、伝送路で接続された２台のカラオケ装置において、通信デュエット歌唱を行う場合には、お互いにデュエット歌唱を行うことを了承しているものの、相手の素性が解らない場合もある。上述したように、デュエット歌唱においては、お互いの歌唱姿態を見ながら歌唱を行うことにより、カラオケの楽しさを十分に堪能することができるが、通信デュエット歌唱の場合には、全く素性が解らない相手に、自らの歌唱姿態を撮影した歌唱映像を見られたくないと考えることがある。
【００１２】
しかし、通信デュエット歌唱の場合であっても、お互いの相性がよく、上手に歌唱することができている場合には、デュエット歌唱を行っている相手の歌唱姿態を撮影した歌唱映像を見たいと考えるのも一般的である。
【００１３】
なお、歌唱採点値に基づいて、歌唱姿態を撮影した歌唱映像の表示態様を変化させる技術は存在する（上述した特許文献３、特許文献４、特許文献５）。特許文献３及び特許文献４に記載された技術では、同一のカラオケ装置（１台のカラオケ装置）で、二人の歌唱者が歌唱する場合に、歌唱者映像の表示態様を制御している。また、特許文献５に記載された技術では、通信デュエット歌唱等を行う場合に、各歌唱者の歌唱採点値に基づいて歌唱者映像の表示態様を制御している。このように、従来の歌唱映像の表示態様を変化させる技術は、通信デュエット歌唱を考慮しておらず、また通信デュエットを考慮したものであっても、通信デュエット歌唱を行う歌唱者同士の相性については、何ら考慮されていない。
【００１４】
本発明は、上述した事情に鑑み提案されたもので、通信デュエットを行っている歌唱者同士の相性評価値に基づいて、デュエット相手となっている歌唱者の歌唱映像の表示態様を制御することにより、デュエット歌唱の楽しさを十分に堪能することが可能な通信カラオケシステムを提供することを目的とする。
【課題を解決するための手段】
【００１５】
本発明の通信カラオケシステムは、上述した事情に鑑み提案されたもので、以下の特徴点を有している。すなわち、本発明の通信カラオケシステムは、伝送路を介して、少なくとも２台のカラオケ装置を通信可能に接続し、２台のカラオケ装置をペアとするとともに、一方を第１拠点とし、他方を第２拠点として、同一のカラオケ楽曲の演奏同期をとりながら、各カラオケ装置において同時に歌唱を行う機能を有する通信カラオケシステムであって、相性評価値算出手段と、歌唱映像送受信手段と、歌唱映像表示制御手段とを備えたことを特徴とするものである。
【００１６】
相性評価値算出手段は、カラオケ楽曲を歌唱する際に、複数の歌唱区間毎に、第１拠点における第１歌唱者の第１歌唱音声信号と、第２拠点における第２歌唱者の第２歌唱音声信号との比較に基づいて、第１歌唱者と第２歌唱者の歌唱に関する相性評価値を算出するための手段である。歌唱映像送受信手段は、伝送路を介して、第１歌唱者の歌唱姿態を撮影した第１歌唱映像又は第２歌唱者の歌唱姿態を撮影した第２歌唱映像を、ペアとなる第１拠点及び第２拠点との間で送受信するための手段である。
【００１７】
歌唱映像表示制御手段は、第１拠点又は第２拠点において、それぞれ受信した第２歌唱映像又は第１歌唱映像の表示制御を行うための手段であり、第１拠点又は第２拠点の少なくとも一方において、相性評価値算出手段により算出された相性評価値に基づいて、受信した第１歌唱映像又は第２歌唱映像の表示態様を制御する。
【００１８】
また、本発明の通信カラオケシステムは、上述した構成において、歌唱映像表示制御手段は、映像効果付与手段を備えることが可能である。映像効果付与手段は、歌唱開始時点では、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を識別不能となるように映像効果を付与し、カラオケ楽曲の演奏進行に伴い、相性評価値算出手段により算出した相性評価値に基づいて、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別可能とするための手段である。
【００１９】
このような構成とした場合に、映像効果付与手段は、相性評価値算出手段により算出した相性評価値に基づいて、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別可能とした後、カラオケ楽曲の演奏進行に伴い、相性評価値が低下した場合に、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別不能とすることが可能である。
【００２０】
また、本発明の通信カラオケシステムは、上述した構成において、カラオケ楽曲の複数の歌唱区間毎に、第１拠点又は第２拠点における歌唱採点値を算出する歌唱採点手段を備えることが可能である。このような構成とした場合に、第１拠点の映像効果付与手段は、当該第１拠点の歌唱採点手段により算出した歌唱採点値に基づいて、第２歌唱映像に対して映像効果を付与し、第２拠点の映像効果付与手段は、当該第２拠点の歌唱採点手段により算出した歌唱採点値に基づいて、第１歌唱映像に対して映像効果を付与する。
【発明の効果】
【００２１】
本発明の通信カラオケシステムでは、伝送路で接続された２台のカラオケ装置をペアとするとともに、一方を第１拠点とし、他方を第２拠点として、同一のカラオケ楽曲の演奏同期をとりながら、各カラオケ装置において同時に歌唱を行う場合に、各カラオケ装置における歌唱者同士の相性評価値に基づいて、両者の歌唱映像の表示態様（例えば、鮮明度）を制御する。これにより、通信デュエット歌唱を行っている歌唱者同士の相性評価値に基づいて、デュエット相手の歌唱姿態の表示態様（例えば、鮮明度）が変化するため、通信デュエット歌唱に対する興趣が増加する。
【００２２】
また、歌唱開始時点では、各歌唱者の歌唱映像の一部又は全部を識別不能とし、相性評価値が算出されると、当該相性評価値に基づいて、各歌唱者の歌唱映像の一部又は全部を段階的に識別可能とする（例えば、鮮明度を上昇させる）。さらに、相性評価値が低下した場合には、一旦識別可能となった各歌唱者の歌唱映像の一部又は全部を段階的に識別不能とする（例えば、鮮明度を低下させる）。これにより、通信デュエット歌唱を行う場合に、各歌唱者は相性評価値が増加するように努力して歌唱を行うこととなり、通信デュエット歌唱に対する興趣がさらに一層増加する。
【００２３】
また、自らの歌唱採点値に基づいて、デュエット相手の歌唱姿態の表示態様（例えば鮮明度）が変化する構成とした場合には、各歌唱者は歌唱採点値が増加するように努力して歌唱を行うこととなり、カラオケ歌唱に対する興趣が増加する。
【００２４】
また、通信デュエット相手の歌唱映像を鮮明に見たいという気持ちがある一方、自分の歌唱映像を通信デュエット相手に見せるのは恥ずかしいという気持ちもある。このような複雑な歌唱者の心理状態に対して、カラオケ装置が相性評価値に基づいて歌唱映像の見え方（例えば鮮明度）を変化させることにより、通信デュエット歌唱に対する歌唱者の拒否反応を軽減して、通信デュエットの利用者を増加させることができる。
【００２５】
このように、本発明の通信カラオケシステムでは、通信デュエット歌唱を行っている歌唱者同士の相性評価値や、各歌唱者の歌唱採点値に基づいて、デュエット相手の歌唱映像の表示態様（例えば、鮮明度）を変化させることにより、各歌唱者はデュエット相手の歌唱映像をより一層鮮明に見るための努力を行うので、通信デュエット歌唱の楽しさを高めることが可能となる。特に、デュエット相手の歌唱映像が鮮明なものとなった場合には、デュエット歌唱の楽しさを十分に堪能することが可能となる。
【図面の簡単な説明】
【００２６】
【図１】本発明の実施形態に係る通信カラオケシステムの構成を示すブロック図。
【図２】本発明の実施形態に係る通信カラオケシステムにおける歌唱映像の表示制御の説明図（実施例１）。
【図３】本発明の実施形態に係る通信カラオケシステムにおける歌唱映像の表示制御の説明図（実施例２）。
【図４】本発明の実施形態に係る通信カラオケシステムにおける歌唱映像の表示制御の説明図（実施例３）。
【図５】本発明の実施形態に係る通信カラオケシステムにおける歌唱映像の表示制御の説明図（実施例４）。
【発明を実施するための形態】
【００２７】
図面を参照して、本発明の通信カラオケシステムの実施形態について説明する。図１〜図５は本発明の実施形態に係る通信カラオケシステムに関するもので、図１は通信カラオケシステムの構成を示すブロック図、図２〜図５は歌唱映像の表示制御の説明図である。
【００２８】
＜通信カラオケシステムの概要＞
本発明の実施形態に係る通信カラオケシステム１０は、図１に示すように、伝送路（専用電話回線２０ａ、汎用回線２０ｂ、インターネット２０ｃ等）を介して、少なくとも２台のカラオケ装置３０を通信可能に接続し、同一のカラオケ楽曲の演奏同期をとりながら、各カラオケ装置３０において同時に歌唱を行う機能を有し、２台のカラオケ装置３０をペアとするとともに、一方を第１拠点とし、他方を第２拠点としたシステムであり、第１拠点及び第２拠点で撮影した歌唱者の歌唱映像を相手方となる拠点において表示する際に、その表示態様（映像効果）に変化を持たせたものである。
【００２９】
以下に示す実施形態では、説明を簡単なものとするため、２台のカラオケ装置３０の間で通信デュエット歌唱を行う場合を説明するが、３台以上のカラオケ装置３０の間で、同一のカラオケ楽曲の演奏同期をとりながら、各カラオケ装置３０において同時に歌唱を行う場合にも、本発明を適用することができる。３台以上のカラオケ装置３０を用いた場合には、すべてのカラオケ装置３０において、２台のカラオケ装置３０をそれぞれペアとして取り扱い、ペアとなったカラオケ装置３０の間で、相手方の歌唱映像の表示態様を制御する。
【００３０】
本実施形態の通信カラオケシステム１０は、相性評価値算出手段６４と、歌唱映像送受信手段４７と、歌唱映像表示制御手段５１とを備えることにより、歌唱者の姿態を撮影した歌唱者映像の表示制御を行う。また、歌唱映像表示制御手段５１は、映像効果付与手段５１ａを含んで構成することが可能であり、さらに、歌唱採点を行うための歌唱採点手段５３を備えることが可能である。本実施形態では、相性評価値算出手段６４は管理サーバ６０の機能手段となっており、歌唱映像送受信手段４７、歌唱映像表示制御手段５１、映像効果付与手段５１ａ、歌唱採点手段５３はカラオケ装置３０の機能手段となっている。
【００３１】
なお、以下の説明において、プログラムとは、ＲＡＭ等に記憶され、ＣＰＵ等のハードウェアで実行されることにより、その機能を発揮するソフトウェアだけではなく、同等の機能を発揮することが可能な論理回路も含む概念である。
【００３２】
＜カラオケ装置＞
本発明の実施形態に係る通信カラオケシステム１０を適用するカラオケ装置３０は、図１に示すように、カラオケ本体３１、ビデオカメラ３２、スピーカ３３、マイクロホン３４、ミキシングアンプ３５、表示装置３６、カラオケリモコン装置３７を備えている。また、カラオケ装置３０は、ルータ４０及び伝送路（専用電話回線２０ａ、汎用回線２０ｂ、インターネット２０ｃ等）を介して、他のカラオケ装置３０及び管理サーバ６０とネットワーク接続されている。
【００３３】
なお、図１に示すカラオケ装置３０は、２台を一組としてペアリングし、ペアとなった２台のカラオケ装置３０について、歌唱者同士の相性評価値を算出して、当該相性評価値に基づいて、相手方の歌唱映像の表示を制御する。例えば、歌唱映像の映像効果として、歌唱開始時点においては、相手方の歌唱映像を非表示にしたり、モザイクをかけたり、ぼかし処理を行ったりして、相手方の歌唱映像を見難くする。そして、両カラオケ装置３０において歌唱を行って相性評価値が算出されると、その相性評価値に応じて、モザイクの状態を変化させたり、ぼかし処理の状態を変化させたりして、相手方の歌唱映像の鮮明度を変化させる。また、歌唱映像における歌唱者の表示面積を変化させてもよい。この際、相性評価値が上がれば、さらに鮮明度を向上させたり、表示面積を拡大したりし、一方、相性評価値が下がれば、鮮明度を低下させたり、歌唱者の表示面積を縮小させたりしてもよい。さらに、歌唱区間毎の採点値に基づいて、相手方の歌唱映像の映像効果を変化させることもできる。
【００３４】
＜伝送路＞
伝送路は、専用電話回線２０ａ、汎用回線２０ｂ（一般電話回線）、インターネット２０ｃ、光通信網、ＬＡＮ及びこれらを組み合わせた通信回線等を使用することができる。使用する伝送路は、カラオケ装置３０が設置された環境等に応じて、適宜選択することができるが、特に、歌唱音声信号の送受信を行う伝送路は、可能な限りデータ送受信の遅延をなくすために、専用電話回線２０ａを用いることが好ましい。また、データ送受信の遅延が問題とならないデータの場合には、インターネット２０ｃのＶＰＮ機能等を用いてもよい。
【００３５】
＜管理サーバ＞
管理サーバ６０は、会員情報の管理、カラオケ装置３０に対する楽曲データの配信、録音録画データの公開等を行うためのサーバである。管理サーバ６０は、主要な構成要素として、サーバ制御手段６１、通信制御手段６２、データ記憶手段６３、相性評価値算出手段６４を備えている。なお、図示しないが、サーバとしての機能を発揮するための電子機器であるＲＯＭ、ＲＡＭ、その他の電子機器を備えている。また、単独の管理サーバ６０により、上述した複数の機能を実現するのではなく、各機能に特化したサーバを設け、各サーバにより各機能を実現してもよい。この際、仮想化技術により、１つのサーバに複数の機能を持たせることもできる。
【００３６】
＜サーバ制御手段／通信制御手段／データ記憶手段＞
サーバ制御手段６１は、ＣＰＵ等を備えて管理サーバ６０を総合的に制御するための電子回路からなり、ＲＯＭ等に記憶された制御プログラムに従ってＣＰＵ等が動作することにより、管理サーバ６０の動作を制御する。通信制御手段６２は、伝送路を介して、カラオケ装置３０や他のサーバ等の間でデータを送受信する際に、データ通信の整合性を確保するための電子回路及びプログラムからなる。データ記憶手段６３は、会員情報データ、楽曲データ等の各種のデータを記憶するＨＤＤ等の大容量記憶装置からなる。
【００３７】
＜相性評価値算出手段＞
相性評価値算出手段６４は、第１拠点のカラオケ装置３０から送信されてくる第１歌唱者の第１歌唱音声信号と、第２拠点のカラオケ装置３０から送信されてくる第２歌唱者の第２歌唱音声信号とに基づいて、複数の歌唱区間毎に、第１歌唱音声信号と第２歌唱音声信号とを比較し、第１歌唱者と第２歌唱者の歌唱に関する相性評価値を算出するためのプログラムからなる。相性評価値とは、両歌唱者の歌唱について、基準ピッチからの偏差、音量、抑揚、リズム、種々の歌唱法の類似性に基づいて算出される値である。なお、カラオケ装置３０が備える歌唱採点手段５３に、相性評価値算出手段６４の機能を兼ね備えさせることもできる。
【００３８】
相性評価値算出手段６４における相性評価値の算出において、例えば、二人の歌唱者がユニゾンで歌唱する歌唱区間では、第１拠点及び第２拠点において、それぞれマイクロホン３４から入力された第１歌唱音声信号と第２歌唱音声信号の音量推移とピッチを比較し、時間的相似性に相関した相性評価値を算出する。また、各人が別々に歌唱するパートで、二人の歌唱が重複しない歌唱区間では、音量推移とピッチ推移を逐次測定して、測定値を記憶しておく。そして、記憶した測定値に基づいて相性評価値を算出すればよい。なお、二人の歌唱者がハーモニーで歌唱する歌唱区間では、音量推移の時間的相似性のみを採点対象とし、ピッチ推移の相似性が悪くても減点しないようにしてもよい。
【００３９】
さらに、ピッチ推移についての短期間の周期性を抽出すればビブラートの周期や深さなどを分析することができる。これを比較して両歌唱者のビブラート特性の相似性を相性評価値に加味することもできる。
【００４０】
相性評価値算出手段６４で算出した相性評価値は、第１拠点及び第２拠点のカラオケ装置３０に送信され、歌唱映像表示制御手段５１における歌唱映像の表示制御に用いられる。なお、カラオケ装置３０における演算処理等を行う構成機器が高機能であり、２台のカラオケ装置３０でデータの送受信に許容範囲以上の遅延が生じない場合には、相性評価値算出手段６４を管理サーバ６０の機能手段とするのではなく、カラオケ装置３０の機能手段とすることもできる。この場合には、ペアとなる双方のカラオケ装置３０において、それぞれ相性評価値算出手段６４を用いて相性評価値を算出してもよいが、いずれか一方の拠点のカラオケ装置３０の相性評価値算出手段６４のみを機能させて相性評価値を算出し、算出した相性評価値を他方の拠点のカラオケ装置３０に送信してもよい。
【００４１】
＜カラオケリモコン装置＞
カラオケリモコン装置３７は、ユーザインタフェース機能を備えており、ルータ４０を介して、カラオケ本体３１のネットワーク送受信手段４１との間でデータの送受信を行うようになっている。このカラオケリモコン装置３７は、楽曲検索手段３７ａとして機能するプログラム、楽曲索引データベース３７ｂ、種々のデータを記憶するためのデータ記憶部３７ｃ、データの入出力を行うための入出力表示部３７ｄ等を備えている。このカラオケリモコン装置３７に付帯するスイッチ類や、入出力表示部３７ｄに表示される各種のアイコン等を操作することにより、選曲操作等が行われる。
【００４２】
また、カラオケ装置３０と、利用者が所持する携帯情報端末（例えば、スマートフォン）とをペアリングすることにより、相互にデータの送受信を可能とするとともに、携帯情報端末に選曲予約のためのアプリケーションソフトをインストールして、当該携帯情報端末に選曲予約機能を持たせることもできる。
【００４３】
＜楽曲検索手段／楽曲索引データベース＞
楽曲検索手段３７ａは、利用者の指示に基づき、楽曲索引データベース３７ｂを参照して楽曲を検索するためのプログラムからなる。楽曲索引データベース３７ｂは、カラオケ装置３０で演奏に供されるカラオケ楽曲について、その属性情報を記述したデータベースであり、例えば、楽曲番号・曲名・アーティスト名・歌い出し部分の歌詞・流行時期・音楽ジャンル区分・デュエット曲か否かなど、種々の属性情報がこれに含まれている。
【００４４】
＜ビデオカメラ＞
ビデオカメラ３２は、利用者の歌唱姿態を撮影するための装置であり、本実施形態では、歌唱者の歌唱姿態を撮影可能な位置に設置されている。また、ビデオカメラ３２は、フォーカシング機能、ズーム機能、パン・チルト機能等を備えていてもよく、さらに、マイクロホンを備えていてもよい。このビデオカメラ３２で撮影した歌唱者の歌唱映像は、ビデオＩ／Ｆ５２を介して、カラオケ本体３１に取り込まれ、通信デュエット歌唱を行う相手側のカラオケ装置３０に送信して、その表示装置３６に表示する。また、撮影した歌唱映像をＤＶＤ等の記憶媒体に記憶したり、ウェブサイト等で公開したりする機能を持たせてもよい。
【００４５】
＜マイクロホン＞
マイクロホン３４は、歌唱音声の入力を行うための装置である。マイクロホン３４から入力された歌唱音声信号は、ミキシングアンプ３５により、音楽再生制御手段４８から送出される演奏音声信号とミキシングされると共に増幅され、スピーカ３３へ出力される。
【００４６】
また、通信デュエット歌唱を行う場合には、第１拠点のカラオケ装置３０に付帯したマイクロホン３４から入力され、Ａ／Ｄコンバータ４９によりデジタル変換された第１歌唱音声信号は、第２拠点のカラオケ装置３０に送信される。同様に、第２拠点のカラオケ装置３０に付帯したマイクロホン３４から入力され、Ａ／Ｄコンバータ４９によりデジタル変換された第２歌唱音声信号は、第１拠点のカラオケ装置３０に送信される。
【００４７】
さらに、マイクロホン３４から入力された歌唱音声信号は、Ａ／Ｄコンバータ４９によりデジタル変換され、歌唱採点手段５３における採点処理に使用するとともに、管理サーバ６０に送信されて、相性評価値算出手段６４における相性評価値の算出に使用する。
【００４８】
＜表示装置＞
表示装置３６は、カラオケ楽曲に関連した背景映像や歌詞テロップ、通信デュエット歌唱の相手映像等を表示するための装置で、例えば、液晶ディスプレイ等により構成される。
【００４９】
＜カラオケ本体＞
カラオケ本体３１は、ネットワーク送受信手段４１、中央制御手段４２、ＲＯＭ４３、ＲＡＭ４４、ＨＤＤ４５、予約管理手段４６、歌唱映像送受信手段４７、音楽再生制御手段４８、Ａ／Ｄコンバータ４９、映像再生制御手段５０、歌唱映像表示制御手段５１、ビデオＩ／Ｆ５２、歌唱採点手段５３を備えている。また、本実施形態において、歌唱映像表示制御手段５１は、映像効果付与手段５１ａを含んでいる。
【００５０】
＜中央制御手段＞
中央制御手段４２は、カラオケ本体３１を総合的に制御するための手段であり、例えばＣＰＵ及びその周辺機器により構成されており、ＣＰＵ等がＲＯＭ４３等に記憶されたプログラムに従って動作することにより、制御機能を発揮することができるようになっている。
【００５１】
＜ＲＯＭ／ＲＡＭ＞
ＲＯＭ４３は、カラオケ本体３１を構成する各機器を制御するためのプログラムデータや数値データを記憶するための機器で、例えば半導体メモリ等で構成される。また、ＲＡＭ４４は、プログラムや各種データを一時的に記憶する一時記憶領域として機能するもので、例えば半導体メモリ等で構成される。
【００５２】
本実施形態では、ＲＡＭ４４に、予約待ち行列４４ａが記憶されるようになっている。なお、予約待ち行列４４ａは、選曲予約されたカラオケ楽曲について、演奏順に楽曲ＩＤを並べて構成されたデータテーブルであり、選曲予約者の利用者ＩＤ等、他の識別データが紐付けされている場合もある。
【００５３】
＜ＨＤＤ＞
ＨＤＤ４５は、大容量記憶装置として機能するもので、楽曲データベース４５ａ、映像データベース４５ｂが格納されている。なお、ＨＤＤ４５に替えて、あるいはＨＤＤ４５と共に、データを書き替え可能なＤＶＤ等の大容量記憶装置を用いてもよい。
【００５４】
＜楽曲データベース／映像データベース＞
楽曲データベース４５ａは、演奏制御データ（ＭＩＤＩ規格のデータ）及び歌詞描出データが同期されて構成される楽曲データについて、楽曲ＩＤと対応付けてそれぞれ構成されたデータベースである。演奏制御データは、各楽曲の演奏を制御するためのデジタルデータであり、歌詞描出データは演奏に同期した歌詞文字の表示タイミングデータ及び色変わりデータを含んでいる。映像データベース４５ｂは、演奏されるカラオケ楽曲に対応した背景映像を、当該カラオケ楽曲の楽曲ＩＤに対応させた映像ファイルとして所定数格納したデータベースである。
【００５５】
＜ネットワーク送受信手段＞
ネットワーク送受信手段４１は、ルータ４０を介して管理サーバ６０及び他のカラオケ装置３０との間でデータの送受信を行うための電子回路及びプログラムからなる。また、カラオケ装置３０がルータ４０を介して店内ＬＡＮ接続されている場合には、ネットワーク送受信手段４１の機能により、店内ＬＡＮに接続された他のカラオケ装置３０やＰＯＳサーバ（図示せず）等の間で行われるデータの送受信も制御する。
【００５６】
さらに、ローカル送受信手段（図示せず）を設けて、カラオケ本体３１とカラオケリモコン装置３７との間で、赤外線通信等によるデータの送受信を行い、カラオケ本体３１とカラオケリモコン装置３７とのペアリング等を行ってもよい。
【００５７】
＜予約管理手段＞
予約管理手段４６は、任意の利用者が選曲予約する際に、当該選曲されたカラオケ楽曲の楽曲ＩＤを含む予約待ち行列４４ａを作成して管理するためのプログラムからなる。すなわち、予約管理手段４６は、利用者により楽曲検索手段３７ａの機能を用いて選曲された楽曲ＩＤを演奏順に並べて予約待ち行列４４ａを作成し、この予約待ち行列４４ａをＲＡＭ４４に格納して管理する。また、予約待ち行列４４ａに選曲者の利用者ＩＤを含める場合には、利用者ＩＤの取得が必要となる。
【００５８】
利用者ＩＤは、利用者ＩＤカードに記憶された利用者ＩＤをカードリーダにより読み取り、あるいは、カラオケリモコン装置３７の入出力表示部３７ｄを用いて入力された利用者ＩＤ及びパスワードに基づいて取得すればよい。さらに、利用者が携帯する携帯情報端末を用いて予約を行う機能を有する場合には、当該携帯情報端末の機器ＩＤに紐付けされた利用者ＩＤを取得してもよい。また、カラオケ装置３０を使用する際に、利用者に対して一時的に利用者ＩＤを付与してもよい。
【００５９】
＜歌唱映像送受信手段＞
歌唱映像送受信手段４７は、伝送路を介して、第１歌唱者の歌唱姿態を撮影した第１歌唱映像又は第２歌唱者の歌唱姿態を撮影した第２歌唱映像を、ペアとなる第１拠点及び第２拠点との間で送受信するためのプログラムからなる。すなわち、各拠点では、ビデオカメラ３２により歌唱者の歌唱姿態を撮影しており、ビデオカメラ３２からの歌唱映像信号は、ビデオＩ／Ｆ５２を介してカラオケ本体３１に入力される。この歌唱映像信号は、歌唱映像送受信手段４７の機能により、ネットワーク送受信手段４１、ルータ４０、伝送路を介して、相手方のカラオケ装置３０に伝送される。
【００６０】
＜歌唱映像表示制御手段＞
歌唱映像表示制御手段５１は、第１拠点又は第２拠点において、それぞれ受信した第２歌唱映像又は第１歌唱映像の表示制御を行うためのプログラムからなる。そして、歌唱映像表示制御手段５１は、第１拠点又は第２拠点の少なくとも一方において、相性評価値算出手段６４により算出された相性評価値に基づいて、受信した第１歌唱映像又は第２歌唱映像の表示態様を制御する。本実施形態では、歌唱映像表示制御手段５１が映像効果付与手段５１ａを含んでいる。
【００６１】
なお、第１拠点又は第２拠点の双方において、相手の歌唱映像を識別可能に表示するのではなく、歌唱映像の表示を拒否した拠点の歌唱者については、他の拠点において歌唱映像を表示しないようにすることもできる。
【００６２】
＜映像効果付与手段＞
映像効果付与手段５１ａは、歌唱開始時点では、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を識別不能となるように映像効果を付与し、カラオケ楽曲の演奏進行に伴い、相性評価値算出手段６４により算出した相性評価値に基づいて、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別可能とするためのプログラムからなる。また、映像効果付与手段５１ａは、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を識別可能とした後、相性評価値に基づいて、第１歌唱映像又は第２歌唱映像における各歌唱者の少なくとも顔を含む身体の一部又は全部を段階的に識別不能とするような制御を行うこともできる。
【００６３】
映像効果の付与とは、例えば、歌唱映像を表示する際に、その鮮明度を変化させたり、表示面積を変化させたりすることをいう。すなわち、表示する歌唱映像にモザイク処理を施したり、ぼかし処理を施したりすることにより、鮮明度を変化させて、映像効果を付与することができる。また、歌唱者の全身を撮影した歌唱映像の場合には、足の部分だけ、下半身だけ、首から下の部分だけ、顔を含めた全身のように、その表示面積を変化させることにより、映像効果を付与することができる。
【００６４】
＜歌唱採点手段＞
歌唱採点手段５３は、マイクロホン３４から入力された歌唱音声信号と、歌唱採点のためのリファレンスデータとを比較して、所定の歌唱区間毎に歌唱採点値を算出するためのプログラムからなる。歌唱採点では、カラオケ演奏との同期度、ピッチ、音量、ビブラート、シャクリ、フォール、コブシ、ロングトーン等、種々の要素を対象として採点値を算出することができる。
【００６５】
歌唱採点手段５３における歌唱採点結果を用いて映像効果を付与する場合には、第１拠点の映像効果付与手段５１ａは、当該第１拠点の歌唱採点手段５３により算出した歌唱採点値に基づいて、第２歌唱映像に対して映像効果を付与する。同様に、第２拠点の映像効果付与手段５１ａは、当該第２拠点の歌唱採点手段５３により算出した歌唱採点値に基づいて、第１歌唱映像に対して映像効果を付与する。
【００６６】
＜音楽再生制御手段＞
音楽再生制御手段４８は、楽曲ＩＤに基づいて演奏データから抽出された演奏制御データを用いて、音源データをデジタル再生すると共にアナログ変換してミキシングアンプ３５に出力するための電子回路である。上述したように、ミキシングアンプ３５は、マイクロホン３４から入力された歌唱者の歌唱音声信号と、音楽再生制御手段４８から送出される演奏音声信号とをミキシングすると共に、アンプ機能により増幅してスピーカ３３より出力するための装置である。
【００６７】
＜映像再生制御手段＞
映像再生制御手段５０は、カラオケ楽曲の演奏中に、映像データベース４５ｂから抽出した背景映像データと、演奏データに含まれる歌詞描出データに基づいて作成される歌詞文字とを、当該カラオケ楽曲の演奏データに同期させて表示装置３６に出力するためのプログラムからなる。
【００６８】
＜歌唱映像の表示制御（実施例１）＞
実施例１に係る歌唱映像の表示制御は、相性評価値に応じて、歌唱映像の鮮明度を変化させる。実施例１では、図２に示すように、歌唱開始時点では、各カラオケ装置３０の表示装置３６に表示する相手の歌唱映像は、識別不能となっている（ａ）。そして、カラオケ楽曲の演奏進行に伴い相性評価値が算出されると、当該相性評価値に基づいて、鮮明度を高めることにより、相手の歌唱映像を段階的に識別可能とする（ｂ）、（ｃ）、（ｄ）。
【００６９】
＜歌唱映像の表示制御（実施例２）＞
実施例２に係る歌唱映像の表示制御は、相性評価値に応じて、歌唱映像の表示面積を変化させる。実施例２では、図３に示すように、歌唱開始時点では、各カラオケ装置３０の表示装置３６に表示する相手の歌唱映像は、表示されない（ａ）。そして、カラオケ楽曲の演奏進行に伴い相性評価値が算出されると、当該相性評価値に基づいて、下半身（ｂ）、下半身から顔の下半部分まで（ｂ）、顔を含んだ全身（ｄ）というように、表示面積を増加させることにより、相手の歌唱映像を段階的に識別可能とする。
【００７０】
＜歌唱映像の表示制御（実施例３）＞
実施例３に係る歌唱映像の表示制御は、相性評価値の変化に応じて、歌唱映像の鮮明度を変化させたり、表示面積を変化させたりする。実施例３では、図４に示すように、歌唱開始時点では、各カラオケ装置３０の表示装置３６に表示する相手の歌唱映像は、識別不能となっている（ａ）。そして、カラオケ楽曲の演奏進行に伴い相性評価値が算出されると、当該相性評価値に基づいて、鮮明度を高めることにより、相手の歌唱映像を段階的に識別可能とする（ｂ）、（ｃ）。また、相性評価値が下がった場合には、鮮明度を段階的に下げて、相手の歌唱映像の識別度を低下させる（ｄ）。なお、図４に示す例では、実施例１と同様に鮮明度を変化させているが、実施例２と同様に表示面積を変化させてもよい。
【００７１】
＜歌唱映像の表示制御（実施例４）＞
実施例４に係る歌唱映像の表示制御は、各カラオケ装置３０において、相性評価値及び歌唱採点値に基づいて、歌唱映像の鮮明度を変化させたり、表示面積を変化させたりする。実施例４では、図５に示すように、各カラオケ装置３０において、デュエット相手の歌唱映像の表示態様が異なる。すなわち、歌唱開始時点では、各カラオケ装置３０の表示装置３６に表示する相手の歌唱映像は、識別不能となっている（ａ）。
【００７２】
そして、第１拠点のカラオケ装置３０では、カラオケ楽曲の演奏進行に伴い相性評価値が算出されるとともに、歌唱採点値が算出されると、当該相性評価値及び歌唱採点値に基づいて、鮮明度を高めることにより、相手の歌唱映像を段階的に識別可能とする（ｂ）、（ｃ）、（ｄ）。
【００７３】
一方、第２拠点のカラオケ装置３０では、第１拠点と相性評価値が同一であるが、第１拠点と比較して歌唱採点値が低い。したがって、相手の歌唱映像の鮮明度は向上せずに、最初に歌唱映像が表示された時点の鮮明度のまま変化しない（ｂ）、（ｃ）、（ｄ）。なお、図５に示す例では、実施例１と同様に鮮明度を変化させているが、実施例２と同様に表示面積を変化させてもよい。
【００７４】
上述したように、実施例４に係る歌唱映像の表示制御では、デュエット相手との相性評価値だけではなく、自らの歌唱採点値に応じて歌唱映像の表示制御が行われるので、たとえ相性評価値が高い場合であっても歌唱採点値が低い場合には、デュエット相手の歌唱映像の鮮明度を高めたり、表示面積を増加させたりすることはできない。
【００７５】
＜他の実施形態＞
本発明のシステム及びその周辺装置を構成する機器や手段は上述したものに限定されず、その利用目的に応じて、必要な機器や手段のみの構成としたり、適宜他の機器や手段を付加したりすることができる。また、各手段をそれぞれ別個のものとして構成するのではなく、複数の機能を統合した手段として構成してもよい。
【符号の説明】
【００７６】
１０  通信カラオケシステム
２０ａ  専用電話回線
２０ｂ  汎用回線
２０ｃ  インターネット
３０  カラオケ装置
３１  カラオケ本体
３２  ビデオカメラ
３３  スピーカ
３４  マイクロホン
３５  ミキシングアンプ
３６  表示装置
３７  カラオケリモコン装置
３７ａ  楽曲検索手段
３７ｂ  楽曲索引データベース
３７ｃ  データ記憶部
３７ｄ  入出力表示部
４０  ルータ
４１  ネットワーク送受信手段
４２  中央制御手段
４３  ＲＯＭ
４４  ＲＡＭ
４４ａ  予約待ち行列
４５  ＨＤＤ
４５ａ  楽曲データベース
４５ｂ  映像データベース
４６  予約管理手段
４７  歌唱映像送受信手段
４８  音楽再生制御手段
４９  Ａ／Ｄコンバータ
５０  映像再生制御手段
５１  歌唱映像表示制御手段
５１ａ  映像効果付与手段
５２  ビデオＩ／Ｆ
５３  歌唱採点手段
６０  管理サーバ
６１  サーバ制御手段
６２  通信制御手段
６３  データ記憶手段
６４  相性評価値算出手段
【図１】
2015040995.tif 000003
【図２】
2015040995.tif 000004
【図３】
2015040995.tif 000005
【図４】
2015040995.tif 000006
【図５】
2015040995.tif 000007