(57)【特許請求の範囲】
【請求項１】
人物像を形成する部位に関連する部位別情報を複数記憶した第１データベースと、
人物識別子と部位別情報の対応関係を示す他者情報を複数記憶した第２データベースと、
人物識別子と楽曲識別子の対応関係を示す第３データベースと、
ユーザーを撮影した撮像情報の部位毎に、前記第１データベースを参照して部位別情報を選択する本人部位選択手段と、
前記本人部位選択手段にて選択された部位別情報と、前記第２データベースの他者情報に基づいて類似度を算出し、所定の類似度を有する他者情報の人物識別子を抽出する類似判断手段と、
前記第３のデータベースを参照し、前記類似判断手段で抽出された人物識別子に対応する楽曲識別子を抽出し、当該楽曲識別子に対応した楽曲関連情報を表示させる表示制御手段と、を備えることを特徴とする
楽曲検索システム。
【請求項２】
部位別情報は、部位別画像情報を含んで構成され、
前記表示制御手段は、前記本人部位選択手段にて選択された部位別情報に含まれる部位別画像情報を表示させることを特徴とする
請求項１に記載の楽曲検索システム。
【請求項３】
部位別情報は、部位別画像情報を含んで構成され、
前記表示制御手段は、前記類似判断手段で抽出された人物識別子に対応する部位別情報の部位別画像情報を表示させることを特徴とする
請求項１または請求項２に記載の楽曲検索システム。
【請求項４】
他者情報は、撮像情報を含んで構成され、
前記表示制御手段は、前記類似度判断手段で抽出された人物識別子に対応する撮像情報を表示させることを特徴とする
請求項１から請求項３の何れか１項に記載の楽曲検索システム。
【請求項５】
部位を指定する部位指定手段を備え、
前記類似判断手段は、前記部位指定手段で指定された部位について類似度を算出することを特徴とする
請求項１から請求項４の何れかに記載の楽曲検索システム。
【請求項６】
前記本人部位選択手段にて選択された部位別情報と、ユーザーの人物識別子に対応付けて他者情報として前記第２データベースに記憶させることを特徴とする
請求項１から請求項５の何れかに記載の楽曲検索システム。
【請求項７】
前記類似判断手段は、部位毎に重み付けを行って類似度を算出することを特徴とする
請求項１から請求項６の何れかに記載の楽曲検索システム。
【請求項８】
前記類似判断手段は、所定の類似度を有する複数の他者情報の人物識別子を抽出し、
前記表示制御手段は、前記類似判断手段で抽出された複数の人物識別子に対応する楽曲関連情報を表示させることを特徴とする
請求項１から請求項７の何れかに記載の楽曲検索システム。
【請求項９】
人物像を形成する部位に関連する部位別情報を記憶した第１データベースと、
人物識別子と部位別情報の対応関係を示す他者情報を複数記憶した第２データベースと
、
人物識別子と楽曲関連情報の対応関係を示す第３データベースを使用し、
ユーザーを撮影した撮像情報の部位毎に、前記第１データベースを参照して部位別情報を選択する本人部位選択処理と、
前記本人部位選択処理にて選択された部位別情報と、前記第２データベースの他者情報に基づいて類似度を算出し、所定の類似度を有する他者情報の人物識別子を抽出する類似判断処理と、
前記第３のデータベースを参照し、前記類似判断処理で抽出された人物識別子に対応する楽曲関連情報を表示させる表示制御処理と、をコンピューターに実行させることを特徴とする
楽曲検索プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、所望の楽曲を指定して歌唱を楽しむカラオケ、あるいは、所望の楽曲を指定してダウンロードする音楽配信などにて使用する楽曲検索装置、楽曲検索システム、楽曲検索プログラムに関するものである。
【背景技術】
【０００２】
通信型カラオケ装置は、楽曲情報が生音を録音したものからＭＩＤＩ情報を利用して演奏を行う演奏装置が利用可能となったこと、並びに、通信網の整備を利用して開発されたエンターテイメント装置である。また、ハードディスクなどの記憶装置の高容量化に伴い、記憶容量の小さいＭＩＤＩ情報は、数千〜数万曲記憶することも可能となっている。
【０００３】
従来、カラオケ装置ではこのような膨大な数の楽曲から自分の歌唱したい楽曲を選択するため、楽曲名、歌手名、ジャンルなどの項目と楽曲ＩＤを対応付けて記載した帳面（いわゆる歌本）を利用していた。しかしながら、前述したようにカラオケ装置で演奏できる楽曲数は、年々増加する一方であって、帳面を利用した選曲は困難となっている。
【０００４】
そのため、従来の楽曲ＩＤを指定するリモコン装置に、表示画面を持たせ、楽曲に関連する情報と楽曲ＩＤを対応付けたデータベースを設け、選曲機能を付加したものが登場している。このようなリモコン装置では、楽曲名、歌手名を指定した検索はもとより、使用ユーザー毎のデータベースを設けることで、自分の十八番を登録した呼び出す十八番検索など、各種検索を行うことが可能となっている。
【０００５】
特許文献１には、このようなリモコン装置を使用するカラオケシステムにおいて、ログインしている利用者の属性情報を利用した選曲方法が提案されている。具体的には、カラオケ演奏装置にログインしている利用者において、属性情報の所定項目内容が予め設定された割合以上で共通している場合、当該項目内容に対応した楽曲情報を抽出し表示手段に表示するものである。この特許文献１に開示する選曲方法では、同席しているログイン利用者において、出身校、勤め先、好きなプロスポーツチームなど共通する属性情報に関連する楽曲を推奨することが可能となる。
【０００６】
特許文献２には、歌唱者の音声をフォルマントと、データベースに記憶された歌手のフォルマントデータとの類似度を算出し、類似度の高い２、３の歌手の似顔絵を読み出して表示する似顔絵出力装置が開示されている。また、フォルマント類似度の高いサンプルの似顔絵を複数選択し、それらの部品（顔の輪郭、眉、目、鼻、口）を組み合わせることによって１つの似顔絵を合成することも記載されている。そして、利用者は、類似度の高い歌手のカラオケ楽曲から選曲を行うことが可能となっている。
【０００７】
特許文献３には、顔画像データと歌う候補曲に関する歌情報を組にして保管しておき、カメラで撮影した顔と一致する顔画像データを検索し、当該顔画像データに対応する歌情報を表示することで選曲を行うカラオケ装置が提案されている。このカラオケ装置では、いわば顔認証を用いたものであって、自分の持ち歌を簡単に表示させることが可能となっている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００６−１７８２４６号公報
【特許文献２】特開２００７−１４０５４８号公報
【特許文献３】特開２００８−３０４６８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
このように、カラオケにおける選曲では、データベースを利用した様々な手法が提案されている。特許文献１にて開示される選曲方法は、その場に居合わせたグループ間で共通する項目に関連する楽曲を歌唱曲として推奨するものであって、推奨対象となる楽曲数は限られたものである。
【００１０】
また、特許文献２にて開示される装置では、利用者と類似度の高い歌手の持ち歌から選曲するものであって、特許文献１と同様に推奨楽曲は限られたものである。また、歌手が新たに登録されない限りは、推奨される楽曲は常に一定となってしまう。
【００１１】
特許文献３に開示されるカラオケ装置は、現在、カラオケ装置でよく知られた十八番登録機能を利用するものであって、ユーザー認証として顔認証を用いたものである。そのため利用者に対して新たな楽曲を推奨するものではない。利用者は楽曲を自分で選んで候補曲として登録する必要がある。
【課題を解決するための手段】
【００１２】
本発明は、新たな観点で楽曲を推奨することのできる楽曲検索装置、楽曲検索システム、楽曲検索プログラムを提案するものである。特に、ユーザーの見た目を用いて検索を行うことを特徴としたものであって、そのため以下の構成を有することとしている。
【００１３】
本発明に係る楽曲検索システムは、人物像を形成する部位に関連する部位別情報を複数記憶した第１データベースと、人物識別子と部位別情報の対応関係を示す他者情報を複数記憶した第２データベースと、人物識別子と楽曲関連情報の対応関係を示す第３データベースと、ユーザーを撮影した撮像情報の部位毎に、前記第１データベースを参照して部位別情報を選択する本人部位選択手段と、前記本人部位選択手段にて選択された部位別情報と、前記第２データベースの他者情報に基づいて類似度を算出し、所定の類似度を有する他者情報の人物識別子を抽出する類似判断手段と、前記第３のデータベースを参照し、前記類似判断手段で抽出された人物識別子に対応する楽曲関連情報を表示させる表示制御手段と、を備えることを特徴とするものである。
【００１４】
さらに本発明に係る楽曲検索システムにおいて、部位別情報は、部位別画像情報を含んで構成され、前記表示制御手段は、前記本人部位選択手段にて選択された部位別情報に含まれる部位別画像情報を表示させることを特徴としている。
【００１５】
さらに本発明に係る楽曲検索システムにおいて、部位別情報は、部位別画像情報を含んで構成され、前記表示制御手段は、前記類似判断手段で抽出された人物識別子に対応する部位別情報の部位別画像情報を表示させることを特徴としている。
【００１６】
さらに本発明に係る楽曲検索システムにおいて、他者情報は、撮像情報を含んで構成され、前記表示制御手段は、前記類似度判断手段で抽出された人物識別子に対応する撮像情報を表示させることを特徴としている。
【００１７】
さらに本発明に係る楽曲検索システムは、部位を指定する部位指定手段を備え、前記類似判断手段は、前記部位指定手段で指定された部位について類似度を算出することを特徴としている。
【００１８】
さらに本発明に係る楽曲検索システムは、前記本人部位選択手段にて選択された部位別
情報と、ユーザーの人物識別子に対応付けて他者情報として前記第２データベースに記憶させることを特徴としている。
【００１９】
さらに本発明に係る楽曲検索システムにおいて、前記類似判断手段は、部位毎に重み付けを行って類似度を算出することを特徴としている。
【００２０】
さらに本発明に係る楽曲検索システムにおいて、前記類似判断手段は、所定の類似度を有する複数の他者情報の人物識別子を抽出し、前記表示制御手段は、前記類似判断手段で抽出された複数の人物識別子に対応する楽曲関連情報を表示させることを特徴としている。
【００２１】
また本発明に係る楽曲検索プログラムは、人物像を形成する部位に関連する部位別情報を記憶した第１データベースと、人物識別子と部位別情報の対応関係を示す他者情報を複数記憶した第２データベースと、人物識別子と楽曲関連情報の対応関係を示す第３データベースを使用し、ユーザーを撮影した撮像情報の部位毎に、前記第１データベースを参照して部位別情報を選択する本人部位選択処理と、前記本人部位選択処理にて選択された部位別情報と、前記第２データベースの他者情報に基づいて類似度を算出し、所定の類似度を有する他者情報の人物識別子を抽出する類似判断処理と、前記第３のデータベースを参照し、前記類似判断処理で抽出された人物識別子に対応する楽曲関連情報を表示させる表示制御処理と、をコンピューターに実行させることを特徴としている。
【発明の効果】
【００２２】
以上、本発明の楽曲検索システムでは、カラオケシステムや楽曲配信システムなど、多数の楽曲の中から楽曲を選択するシステムにおいて、新たな検索手法を提供することが可能となる。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施形態に係るカラオケシステムのネットワーク構成を示す図。
【図２】本発明の実施形態に係るカラオケシステムを示す図。
【図３】本発明の実施形態に係るトップ画面を示す図。
【図４】本発明の実施形態に係るユーザー情報を示す図。
【図５】本発明の実施形態に係る類似度検索のメイン処理を示すフロー図。
【図６】本発明の実施形態に係る撮像処理を示すフロー図。
【図７】本発明の実施形態に係る撮像情報確認画面を示す図。
【図８】本発明の実施形態に係る比較対象部位指定画面を示す図。
【図９】本発明の実施形態に係る検索条件指定画面を示す図。
【図１０】本発明の実施形態に係る部位別情報、他者情報を示す図。
【図１１】本発明の実施形態に係る保存・公開設定画面を示す図。
【図１２】本発明の実施形態に係る類似度検索モードでの対象者選択画面を示す図。
【図１３】本発明の実施形態に係る類似度検索モードでの楽曲選択画面を示す図。
【図１４】本発明の他の実施形態に係る類似度選択画面を示す図。
【図１５】本発明の他の実施形態に係る類似度別楽曲選択画面を示す図。
【図１６】本発明の実施形態に係る演奏処理を示すフロー図。
【図１７】本発明の実施形態に係る演奏時の表示画面を示す図。
【発明を実施するための形態】
【００２４】
図１は、本発明の実施形態に係るカラオケシステムのネットワーク構成を示す図である。図中、カラオケシステムとしての主要構成は、カラオケ用ホスト５（サーバ装置）、店舗などに設置されるコマンダ２などにて構成される。コマンダ２は楽曲再生機能を有した、いわゆるカラオケ装置であって、店舗内のＬＡＮ１００に接続されている。コマンダ２
とカラオケ用ホスト５は、インターネットを介して接続され、新しく供給された楽曲情報やユーザー情報など、各種サービスに必要な情報の送受信を行う。本実施形態ではＶＰＮ（Ｖｉｒｔｕａｌ  Ｐｒｉｖａｔｅ  Ｎｅｔｗｏｒｋ）を介して接続されており、セキュリティに優れた通信を行うことが可能となっている。
【００２５】
店舗に設置されるコマンダ２は、リモコン装置１によりユーザーからの各種指示を受け付けることが可能となっている。また、リモコン装置１は表示画面を備え、ユーザーに対して各種情報を提供することも可能である。リモコン装置１は、ＬＡＮ１００上に設置されたアクセスポイント１１０ａを介してコマンダ２と無線接続される。例えば、コマンダ２ａにはリモコン装置１ａと１ｂが対応付けられ、ＬＡＮ１００ａを介した操作が可能となっている。また、リモコン装置１とコマンダ２とは赤外線などを利用した近距離通信を行うことも可能である。
【００２６】
さらに、本実施形態のカラオケシステムでは、ユーザーに各種サービスを提供するためインターネット用ホスト６が設けられている。このインターネット用ホスト６は、ユーザーのパーソナルコンピュータ、携帯情報端末（携帯電話やＰＤＡなど）と接続され、これら機器を利用するユーザーに各種サービスを提供することができる。また、インターネット用ホスト６は、カラオケ用ホスト５とデータ共有する、例えば、カラオケ用ホスト５の第１記憶部５１と、インターネット用ホスト６の第２記憶部６１に記憶される各種データベースが同期することで連携を取ったサービスを提供することができる。
【００２７】
図２は、本発明の実施形態に係る店舗Ａに設置されたカラオケシステムの構成を示す図である。本実施形態におけるカラオケシステムは、コマンダ２（カラオケ装置）と、リモコン装置１にて構成されており、これらは、ＬＡＮ１００にて、無線、有線で互いに接続されている。
【００２８】
コマンダ２は、全体を統括制御する制御部３０を中心として機能し、主な機能として、楽曲演奏処理、映像表示処理、楽曲指定処理などを実行可能としている。楽曲演奏処理は、入力部２１やリモコン装置１にて、ユーザーにより指定された楽曲に対応する演奏情報をＭＩＤＩ音源２６などの音源部にて演奏させ、スピーカー４２から放音させる処理である。このとき、スピーカー４２からは歌唱用マイク４４から入力される音声も合わせて放音される。映像再生処理は、映像再生部２９にて各種映像情報、歌詞情報などを再生させ、モニタ４１を介した視覚情報をユーザーに提供する処理である。
【００２９】
楽曲指定処理は、ユーザーからの指定に基づいて楽曲を選択、予約するための処理である。本実施形態ではリモコン装置１と連携して実行することとなる。リモコン装置１の操作部１７から入力されたユーザーの指令は、赤外線通信部１９、２３、あるいは、ＬＡＮ１００を介してコマンダ２に伝達される。コマンダ２での処理結果は、リモコン装置１側の表示部１１に表示され、ユーザーは選曲のための各種情報を視認することが可能である。コマンダ２とリモコン装置１は、この楽曲指定処理に限らず、ユーザー個別のサービスを提供するためのログイン処理など各種処理を実行することが可能である。
【００３０】
本実施形態のコマンダ２には、カメラ４３が接続可能となっており、接続されたカメラ４３から歌唱者や同伴客の様子を撮影することが可能となっている。カメラ４１の映像を表示手段（例えば、モニタ４１）にてモニタする場合には、カメラ４３は、当該表示手段の上部など、表示手段の近傍に配置することが好ましい。ユーザーは、モニタ画像を鏡のように利用することが可能となる。なお、カメラ４３を複数設け、同時に、あるいは、切り換えて撮影することで映像情報を取得することとしても構わない。
【００３１】
また、本実施形態では、リモコン装置１側にもカメラ１０が設けられている。このカメ
ラ１０は表示部１１側、あるいは、表示部１１とは反対側、あるいは、両側を撮影可能なよう２箇所に設けられる。表示部１１側に設けることで、ユーザーはカメラ１０にて撮像される自己の映像を見ながら操作を行うことが可能となる。
【００３２】
本実施形態における見た目検索で使用される撮像情報は、このコマンダ２側に設けられるカメラ４３、あるいは、リモコン装置１側に設けられるカメラ１０の何れかで撮影されることとなる。
【００３３】
図３は、本発明の実施形態に係るトップメニューを示す図である。本実施形態では、リモコン装置１の表示部１１に表示させ、リモコン装置１を操作するユーザーに対して各種情報を提供する。なお、リモコン装置１の操作部１７としては、カーソルキーなどの各種スイッチの他、表示部１１に表示されたアイコンを直接タッチして操作を行うタッチパネル等を採用することができる。
【００３４】
トップメニューには、楽曲選択のための各種方法（歌手名検索、曲名検索、見た目検索）を指定可能の他、ユーザーのログインに関する情報が表示されている。
【００３５】
本実施形態のカラオケシステムは、複数のユーザーがログインすることが可能となっている。ユーザーのログインに関する情報は、画面上方に常時表示される。ログイン中のユーザーを示すアイコンが表示される。図ではＡさん、Ｅさん、Ｃさん、３人のアイコンが表示されているが、更なるユーザーをログインさせることも可能である。表示されている３人のアイコン中、背景が褐色で表示されているユーザー（Ａさん）は操作ユーザーであることを示している。本実施形態では、操作ユーザーのユーザー名、並びに、操作ユーザーに対する各種メッセージも表示される。
【００３６】
操作ユーザーに対しては、当該ユーザーのユーザー情報に基づいて各種サービスを行うことが可能となっており、ユーザー情報に含まれる個人情報や操作履歴などを参照することで、それに基づくサービスを提供することが可能である。
【００３７】
操作ユーザーは、画面上方左側に表示されているユーザー切替を操作することで切り換えることができる。また、画面上方右側には、新たにユーザーをログインさせる新規ログイン、操作ユーザーをログアウトさせるログアウトが表示されており、これらを操作することで、ユーザーの追加、ログアウトを行うことができる。
【００３８】
図４は、各ユーザー毎に記憶されたユーザー情報を説明するための図である。本実施形態では、ユーザー情報として、個人情報、十八番テーブル、履歴テーブルなど、ユーザーに関する各種情報を含んで構成される。また、ユーザー情報には、ユーザーがログインしてこれら情報を利用するためのユーザーＩＤ、パスワードなどが対応付けられている。個人情報には、ユーザー名（実際の名前に限ったものでなく、ニックネームであってもよい）、性別、年齢等を含んで構成されている。これらの設定は、リモコン装置１、あるいは、ネットワークに接続されたパーソナルコンピュータ、携帯情報端末などにてログインして設定することができる。
【００３９】
十八番テーブルは、ユーザーによって事前に登録された楽曲を示すテーブルであって、少なくとも楽曲を識別するための楽曲識別子を含んで構成されている。この他にも各楽曲識別子に、歌唱した際に採点された最高点（採点情報）や、自分の歌唱音域に合わせるための音程情報を合わせて登録しておいてもよい。ユーザーは、この十八番テーブルを呼び出すことで、事前に登録した楽曲を容易に呼び出して選曲を行うことが可能となる。
【００４０】
履歴テーブルは、ユーザーがこれまでに選曲した履歴が記載されたテーブルであって、
楽曲識別子、歌唱日時、歌唱店舗、採点情報、音程情報などを含んで構成されている。採点情報は、歌唱したときの採点手段による結果を示す情報であり、音程情報は歌唱したときのピッチ変更を示す情報である。
【００４１】
本実施形態では、このようなユーザー情報を利用することで、ユーザーに対し様々なサービスを提供することができる。
【００４２】
図５は、本発明の実施形態に係る見た目検索のメイン処理を示すフロー図である。本実施形態の見た目度検索とは、検索を実行するユーザーの撮像情報と、他者の画像との類似度を求め、所定の類似度を有する他者の楽曲関連情報を表示して、ユーザーに対して楽曲を推奨する処理である。ここで、検索対象となる他者としては、以前にこの見た目検索を利用したユーザー、あるいは、サービス提供者側で用意した著名人に関するデータなどである。なお、著名人を歌手とする場合には、楽曲関連情報として当該歌手の持ち歌を利用することが、また、著名人を役者とした場合には、当該役者の出演するドラマ、映画などの主題歌などを利用することが考えられる。
【００４３】
Ｓ１０１にて処理が開始され、Ｓ１０２にてユーザーによる見た目検索が指定されると、まず撮影処理が実行される（Ｓ２００）。本実施形態では、この見た目検索の指定は、図３のトップ画面にて指定される。
【００４４】
図６は、この撮像処理の詳細を示したフロー図である。撮像処理が開始される（Ｓ２０１）と、まず、見た目検索を実行しているユーザー、すなわち、操作ユーザーに対応する撮像情報があるか否かが判定される。本実施形態では、ユーザーが以前に見た目検索を使用した場合には、以前に撮影した撮像情報を再利用することが可能となっている。再利用する撮像情報には、見た目検索に限らず他のサービスで撮像した撮像情報を利用することとしてもよい。
【００４５】
操作ユーザーの撮像情報が無い場合には、Ｓ２０３にて撮像情報の取得（撮影）が行われる。撮影はリモコン装置１に搭載されているカメラ１０、もしくは、コマンダ２に接続されているカメラ４３にて実行される。本実施形態では、撮影実行後、撮像情報に対して画像認識を行い、見た目検索で使用可能な撮像情報か否か、具体的には、撮像対象となるユーザーが適正な位置、ポーズでフレーム内に映っているか、複数の人物が映っていないかなどが判定される（Ｓ２０４）。検索に適正な撮像情報である場合には、表示部１１に撮像情報を表示してユーザーに確認させる。一方、見た目検索の条件を満たしていない撮像情報でないと判定された場合には、撮影を再度実行させる（Ｓ２０３）。
【００４６】
図７は、本発明の実施形態に係る撮像情報確認画面を示す図である。ユーザーは、この確認画面で、撮影した自己の姿を確認し、決定ボタンを操作することで撮像処理を終了する。一方、Ｓ２０２にて以前に撮影した撮像情報がある場合にも、図７と同様の画面で撮像情報を確認させる。どちらの場合においてもユーザーが利用しないことを指定した場合にはＳ２０３にて撮影を行い、利用することを指定した場合には撮像処理を終了する（Ｓ２０８）。
【００４７】
図６のフロー図に戻り、撮像処理Ｓ２００終了後、本実施形態では見た目検索を行う上での各種条件を選択可能としている（Ｓ１０３）。図８、図９は、各種条件を指定する画面を示した図であって、図８は、本発明の実施形態に係る比較対象部位指定画面であり、図９は、本発明の実施形態に係る検索条件指定画面である。
【００４８】
まず、本実施形態では、目、鼻、など比較する部位（パーツ）を選択することが可能となっている。ユーザーはこの画面中のチェックボックスを指定することで、比較する部位
を選択することができる。本実施形態では、髪、輪郭、服装、まゆげ、目、鼻、口の中から類似するか否かを判定する部位を選択することができる。また、「全てを選択する」に併記されたチェックボックスを指定することで、容易に全ての部位を一括して選択することも可能となっている。図では全てを選択した状態が示されている。このようにユーザーは身体上の部位を選択することで、特定の部位だけ似ている人を検索することが可能となっている。
【００４９】
比較する部位の選択を終えたユーザーは「次へ」のボタンを操作して、図９の検索条件指定画面へと進む。ここでは、類似判定の対象者に関する各種条件を指定することが可能となっている。まず、比較する対象として「一般ユーザー」、「著名人」を選択することができる。一般ユーザーを選択した場合は、見た目検索を以前に利用したことのあるユーザーの情報に基づいて、また、著名人を選択した場合は、サービス提供者側で用意した情報に基づいて検索が実行される。ユーザーは、対象として、どちらか一方、あるいは、両方を選択することができる。
【００５０】
さらに、本実施形態では、オプションとして見た目検索の対象者の性別、居住地域、年齢を選択することができる。オプション指定のチェックボックスが指定されたときには、これらの検索項目に限定した検索が実行される。一般ユーザーの場合には、図４で説明した各ユーザー情報中の個人情報を使用して、各項目に対する検索が実行される。一方、著名人の場合にはサービス提供者側でこれらに関する情報が予めデータベースに用意される。
【００５１】
図８、図９にて見た目検索を行う上での各種条件を指定したユーザーは、図９の「検索開始」ボタンを操作することで検索を実行させる。図５のフローに戻り、Ｓ１０４では、コマンダ２は、決定した撮像情報とＳ１０３にて選択した各種検索条件をカラオケ用ホスト５に送信する。
【００５２】
撮像情報と検索条件を受信したカラオケ用ホスト５では、まず、受信した撮像情報に対し、撮影されたユーザーの部位（パーツ）毎に部位の形状、色などを示す特徴量を算出する（Ｓ１２１）。このとき、図８にて比較対象部位が選択されている場合には、本人部位選択手段では算出された特徴量に基づいて、部位別情報を複数記憶したデータベース（第１データベース）の中から類似度が一致、あるいは、近似する部位別情報を選択する（Ｓ１２２）。図１０に、部位別情報のデータ構成例が示されている。部位別情報は、部位ＩＤ、特徴量、部位別画像情報を有して構成されている。部位別画像情報は、目、鼻、口など人物像を形成するための部位の画像であって、各部位の部位別画像情報を組み合わせることで人物像を形成することができる。本実施形態では、各部位別情報に特徴量を持たせた構成としているが、部位の選択については、このような手法に限られるものではなく、例えば、撮像情報と部位画像情報を直接比較するなど、各種手法を採用することが可能である。
【００５３】
本実施形態では、部位毎に特徴量が一致、あるいは、近似する部位別情報を抽出することとしているが、このとき、撮像情報中の部位の大きさや傾きを考慮してもよい。この場合、各部位について大きさや傾きを付随情報として保持させておく。
【００５４】
Ｓ１２３では、Ｓ１２２にて抽出した本人の部位別情報に基づいて、他のユーザー、あるいは、著名人の情報（他者情報）の検索、すなわち、類似判断を実行する。図１０は、本発明の実施形態に係る他者情報のデータ構成を示した図であって、複数の他者情報の集合でデータベース（第２データベース）が形成されている。ここに示す他者情報は、ユーザーが見た目検索を行うことで得られた場合の他者情報の例であって、過去に実行された見た目検索で利用した情報を利用した例である。著名人の他者情報についても同様なデー
タ構成を採用することができるが、データ自体はサービス提供者によって作成されることとなる。
【００５５】
他者情報は、ユーザーＩＤ（人物識別子）に対応付けられた撮像情報と、部位情報、公開可否情報を含んで構成されている。部位情報は、各部位（目、鼻、口など）について部位別情報を指定する識別情報である。公開可否情報は、ユーザーにて指定された撮像情報の公開の可否を示す情報である。
【００５６】
Ｓ１２２で選択された本人の部位別情報中の部位ＩＤと、記憶部５１に記憶される複数人の他者情報中の部位ＩＤを、部位毎に比較することで類似度を算出することができる。このとき、部位毎に重み付けを異ならせて類似度を算出することが好ましい。例えば、人の類似を判断するのに重要な部位（例えば目など）に重みを大きくすることで、他の部位が似ていない場合であっても類似度を大きく算出し、人の視覚特性と類似度を調和させることが可能となる。
【００５７】
本実施形態では、算出された類似度において、類似度の高いユーザーのユーザー情報が抽出される（Ｓ１２４）。ユーザー情報（第３データベース）は、ユーザーＩＤと楽曲識別子の対応関係を示した情報であって、図４にて説明した十八番テーブルや、履歴テーブルなどを使用することができる。ここで抽出したユーザー情報、Ｓ１２２にて選択された本人の部位別情報、Ｓ１２４にて検索された他者情報は、検索結果として検索要求のあったコマンダ２に送信される（Ｓ１２５）。本人の部位別情報、他者情報を用いることで、受信したコマンダ２側では人物像を再現することができる。このときコマンダ２側にも部位別画像情報を含む部位別情報を複数記憶したデータベースを有することとなる。なお、カラオケ用ホスト５側で形成された人物像をコマンダ２に送信することとしてもよい。
【００５８】
コマンダ２では検索結果を受信する（Ｓ１０５）と、受信した検索結果に基づいて各種表示を行う。図１１〜図１３は検索結果の各種表示画面を示した図であって、図１１には、本発明の実施形態に係る保存・公開設定画面が、図１２は、本発明の実施形態に係る類似度検索モードでの対象者選択画面が、図１３には、本発明の実施形態に係る類似度検索モードでの楽曲選択画面が示されている。
【００５９】
まず、最初に図１１に示す保存・公開設定画面が表示される。変換アバター（変換画像）は、カラオケ用ホスト５で選択された部位別情報中の部位別画像情報を組み合わせて形成された人物像である。ここでは、検索のため撮像した撮像情報（送信写真）が、カラオケ用ホスト５でどのような人物像に変換されたかをユーザーに確認させ、情報の保存、そして、撮像情報を公開するか否かをユーザーに尋ねる。保存を選択した場合には、撮像情報、並びに、変換画像情報に使用される部位ＩＤを含めて、当該ユーザーの他者情報として新たに記憶する。このとき、写真を公開することが選択（チェックボックスが指定されている状態）にされた場合には、他者情報中の公開可否情報に公開可能であることを示すフラグを立てておく。一方、公開が指定されていない場合には公開可否情報のフラグを立てない。記憶された他者情報は、適宜機会にカラオケ用ホスト５に送信され、データベース上で管理され、他の機会に行われる見た目検索で使用される。なお、作成された他者情報は、図４で説明したユーザー情報中に含めて管理してもよい。
【００６０】
図１１の画面で「次へ」ボタンを操作すると、図１２の対象者選択画面が表示される。この画面は、図５のＳ１２３で抽出された本人と所定の類似関係を有する他者に関する情報を表示させる画面である。本実施形態では、類似度順にユーザー名が表示されている。また、各ユーザーについて検索を依頼したユーザーとの楽曲共通率も併せて表示される。この楽曲共通率は、検索を依頼したユーザーと、表示されるユーザーがこれまでに歌唱した楽曲、または、十八番としてユーザー情報に登録してある楽曲の少なくとも一方につい
ての共通率を示した数値である。本実施形態のように部位別情報の組み合わせだけでは、（特に、部位別情報の数が少ないと）類似度が等しいユーザーが抽出される可能性が高い。そのため楽曲共通率を使用した順位付けを行っている。すなわち、等しい類似度間では、楽曲共通率にて順位付けが行われることとなる。
【００６１】
この画面では、興味あるユーザーを選択することが可能となっている。図では類似度９０％を有する「●●さん」が選択されている状態が示されている。タッチパネルなどの操作部１７にてユーザー名を指定すると、当該ユーザーの変換画像が表示される。このとき、本人の変換画像も並んで表示され、選択したユーザーの変換画像と本人の変換画像を比較することができる。また、各画像を撮像情報に代えることも可能となっており、各画像の下部に表示されている「アバター  ←→  写真」ボタンを操作することで、各画像と撮像情報を切り換えることができる。なお、ユーザーが撮像情報の公開を指定していないとき、すなわち、図１０で説明した公開可否情報のフラグが立っていないときには、このボタンの操作は無視される、もしくは、ボタンを表示させない。
【００６２】
図１２中において興味のあるユーザーを指定した状態で「楽曲を見る」ボタンを操作すると、図１３に示す楽曲選択画面に進み、指定したユーザーの楽曲関連情報を表示してユーザーに楽曲選択を促す。図１３には、選択したユーザーの変換画像が表示されている。なお、この画面においても撮像情報に切り換えることが可能とされている。その右側には、複数のタブで項目を選択することが可能となっており、選択されたユーザーに対応する楽曲関連情報が表示される。本実施形態では、選択されたユーザーの十八番テーブルに基づいて楽曲関連情報を表示する「お気に入り」、履歴テーブルに基づいて楽曲関連情報を表示する「最近歌った曲」、また、検索を実行しているユーザーと十八番テーブル、もしくは、履歴テーブル内において共通する楽曲の楽曲関連情報を表示する「共通楽曲」の中から楽曲を選択することができる。
【００６３】
本実施形態では、楽曲関連情報として曲名、歌手名を表示し、その右側に表示されている「選曲」ボタンを操作することで、当該楽曲の予約処理が実行される（Ｓ１０８）。予約処理では、予約を行ったユーザー（操作ユーザー）のユーザーＩＤ、指定した楽曲の楽曲識別子、そして、見た目検索で指定したユーザーのユーザーＩＤを含む予約情報が予約テーブルに登録される。一方、楽曲を指定しなかった場合（「戻る」ボタンが操作された場合）には、見た目検索処理を終了する（Ｓ１０９）。このように本実施形態では、楽曲の予約をしなくとも、自分の見た目と他のユーザーの見た目を比較することのみ、あるいは、さらに他のユーザーの選曲状況を確認するのみでも楽しむことができる。
【００６４】
図１４、図１５は、他の実施形態に係る楽曲選択の様子を示す図であって、図１４には、類似度選択画面を示す画面の様子が、また、図１５には、類似度別楽曲選択画面を示す画面の様子が示されている。前述した実施形態では、類似度毎に表示されたユーザーの中から特定のユーザーを選択し、選択したユーザーに関連する楽曲を選択することとしていたのに対し、本実施形態では、同程度の類似度を有するユーザーの歌唱傾向に基づいて選曲させることとしている。
【００６５】
本実施形態では、まず、図１４に示される対象者選択画面において、どの程度の類似度のユーザーについて楽曲を検索するかを選択させる。この画面において、何れかの類似度が選択された場合、選択された類似度に該当する全てのユーザーを対象として、当該ユーザーに関連する楽曲が抽出される。ここで、ユーザーに関連する楽曲は、ユーザーの十八番テーブル、履歴テーブルの何れか、あるいは、両者に基づいて抽出される。抽出された楽曲は、ユーザーの母数に対して当該楽曲に関連付けられるユーザーの数を共通率として、共通率の高い順に楽曲名などの楽曲関連情報を表示させて選曲させる。例えば、共通率が１００％の場合には、選択された類似度のユーザー全てが関連付けられている楽曲とな
る。
【００６６】
図１５は、図１４の対象者選択画面において、類似度１００％が選択された場合の類似度別楽曲選択画面が示されている。この画面には、類似度１００％のユーザー間で共通率に基づく順位にて楽曲関連情報が表示されており、操作ユーザーは、この画面で楽曲を選択することで予約を実行することができる。本実施形態では、所定の類似度を有する特定のユーザーに限定することなく、自分の見た目と似ている、あるいは、似ていない人達（所定の類似度を有する複数のユーザー）がどのような楽曲を好むかという傾向を提示して選曲させることが可能となる。本実施形態においても、前述の実施形態と同様、選択された類似度に属するユーザーの変換画像、撮像情報を表示することとしてもよい。
【００６７】
以上、２つの実施形態、すなわち、所定の類似度のユーザーを選択させ、当該ユーザーに関連する楽曲を選択させる実施形態、あるいは、類似度を選択させ、当該類似度に属するユーザーに関連する楽曲を選択させる実施形態について説明したが、これらは、どちらか一方であってもよいし、ユーザーに選択させることとしてもよい。選択された楽曲は次に説明する演奏処理にて演奏される。
【００６８】
図１６は、本発明の実施形態に係る演奏処理を示すフロー図である。予約された楽曲は予約情報として予約テーブルに登録される。演奏処理が開始されると、この予約テーブルから予約情報が順次読み出される。Ｓ３０２では、楽曲が予約されているか、すなわち、予約テーブル上に演奏すべき予約情報があるか否かが判定される。予約があると判定された場合には、Ｓ３０３にて予約情報に含まれる楽曲識別子に対応する演奏情報を読み出して、ＭＩＤＩ音源２６、音声制御部２５などで構成される演奏手段に演奏させる。
【００６９】
演奏処理では、演奏情報に付帯する歌詞情報を表示手段としてのモニタ４１に表示して、歌唱を補助することとなるが、表示される歌詞の背景に映像を表示することで、歌唱の場を盛り上げることが行われる。本実施形態では、見た目検索にて選曲が実行された場合、見た目検索で選択したユーザーの変換画像を表示することで、歌唱の場を盛り上げることとしている。
【００７０】
Ｓ３０４では、見た目検索で予約されたか否か、具体的には予約情報中に見た目検索で指定したユーザーのユーザーＩＤが含まれているか否かが判定される。見た目検索を利用して予約された場合には、指定したユーザーＩＤに基づいて変換画像（変換アバター）を表示させる。この変換画像は、静止画であってもよいし、変換画像としての人物に所定の動作をさせる動画であってもよい。図１７には、この演奏時の表示画面の様子が示されている。また、見た目検索で指定したユーザーの変換画像に限らず、本人の変換画像、あるいは、指定したユーザーの撮像情報、あるいは、見た目検索で検索されたユーザーの変換画像の何れか、あるいは、複数を表示させることとしてもよい。
【００７１】
一方、見た目検索でない予約の場合には、Ｓ３０７で通常映像の表示、例えば、演奏情報のジャンルに応じた背景映像を表示させる、あるいは、演奏情報に直接対応付けられた背景映像を表示させる処理が実行される。
【００７２】
以上、本実施形態では、カラオケに使用されるコマンダ２側にて見た目検索を行う場合について説明したが、図１に示されるように、カラオケ用ホスト５とデータ共有を図るインターネット用ホスト６にて、携帯情報端末、パーソナルコンピュータなどから見た目検索を行うこととしてもよい。また、本発明は、カラオケシステムに限ったものではなく、音楽配信システムにて配信する楽曲を検索対象としてもよい。
【００７３】
なお、本発明はこれらの実施形態のみに限られるものではなく、それぞれの実施形態の
構成を適宜組み合わせて構成した実施形態も本発明の範疇となるものである。
【符号の説明】
【００７４】
１…リモコン装置、１１…表示部、１２…ビデオＲＡＭ、１３…映像制御部、１４…メモリ、１５…制御部、１６…無線ＬＡＮ通信部、１７…操作部、１８…操作処理部、１９…赤外線通信部、２…コマンダ（カラオケ装置）、２１…操作部、２２…操作処理部、２３…赤外線通信部、２４…インターフェイス部、２５…音声制御部、２６…ＭＩＤＩ音源、２７…メモリ、２８…ビデオＲＡＭ、２９…映像再生部、３０…制御部、３１…映像制御部、３２…ハードディスク、４１…モニタ、４２…スピーカー、４３…カメラ、４４ａ、４４ｂ…歌唱用マイク、１００…ＬＡＮ、１１０…アクセスポイント、１２０…ルータ、５…カラオケ用ホスト、５１…第１記憶部、５２…Ｗｅｂサーバ、６…インターネット用ホスト、６１…第２記憶部、６２…Ｗｅｂサーバ
【図１】
0005436465.tif 000002
【図２】
0005436465.tif 000003
【図３】
0005436465.tif 000004
【図４】
0005436465.tif 000005
【図５】
0005436465.tif 000006
【図６】
0005436465.tif 000007
【図７】
0005436465.tif 000008
【図８】
0005436465.tif 000009
【図９】
0005436465.tif 000010
【図１０】
0005436465.tif 000011
【図１１】
0005436465.tif 000012
【図１２】
0005436465.tif 000013
【図１３】
0005436465.tif 000014
【図１４】
0005436465.tif 000015
【図１５】
0005436465.tif 000016
【図１６】
0005436465.tif 000017
【図１７】
0005436465.tif 000018