(57)【要約】【課題】音声のみで選曲をする際に、選曲していない楽曲が再生された場合のユーザのストレス軽減を図る。【解決手段】楽曲再生システムは、音声を収音する収音部と、収音部によって収音された音声を音声認識する音声認識部と、音声認識部が音声認識した情報に含まれる選曲情報に基づいて、複数の候補楽曲を抽出する候補楽曲抽出部と、候補楽曲抽出部によって抽出された複数の候補楽曲の一部をそれぞれ順次再生する候補楽曲部分再生部と、候補楽曲部分再生部の再生に対して、収音部で収音されて音声認識部が音声認識した情報に含まれる楽曲選択指示入力に基づいて、再生された候補楽曲から選択された楽曲を再生する選択楽曲再生部とを備える。【選択図】図１
2019159099.tif 000002
【特許請求の範囲】
【請求項１】
音声を収音する収音部と、
前記収音部によって収音された音声を音声認識する音声認識部と、
前記音声認識部が音声認識した情報に含まれる選曲情報に基づいて、複数の候補楽曲を抽出する候補楽曲抽出部と、
前記候補楽曲抽出部によって抽出された複数の前記候補楽曲の一部をそれぞれ順次再生する候補楽曲部分再生部と、
前記候補楽曲部分再生部の再生に対して、前記収音部で収音されて前記音声認識部が音声認識した情報に含まれる楽曲選択指示入力に基づいて、再生された前記候補楽曲から選択された楽曲を再生する選択楽曲再生部と、
を備えることを特徴とする楽曲再生システム。
【請求項２】
前記音声認識部が音声認識した情報に含まれる選曲情報に基づいて、特定の楽曲を抽出して再生する通常再生モードを備え、
前記音声認識部が音声認識した情報に基づいて、再生された楽曲がユーザの選曲と一致していないことを判断する不一致再生判断部を備え、
前記不一致再生判断部が不一致と判断した場合に、前記候補楽曲抽出部の候補楽曲抽出を行うことを特徴とする請求項１記載の楽曲再生システム。
【請求項３】
ユーザの音声による選曲入力に基づいて、楽曲を選択して再生する楽曲再生方法であって、
入力された音声を音声認識する音声認識工程と、
音声認識した情報に含まれる選曲情報に基づいて、複数の候補楽曲を抽出する候補楽曲抽出工程と、
前記候補楽曲抽出工程で抽出された複数の前記候補楽曲の一部をそれぞれ順次再生する候補楽曲部分再生工程と、
前記候補楽曲部分再生工程での再生に対して、ユーザの音声を音声認識した情報に含まれる楽曲選択指示入力に基づいて、再生された前記候補楽曲の中から選択された楽曲を再生する選択楽曲再生工程とを有することを特徴とする楽曲再生方法。
【請求項４】
収音された音声を音声認識する音声認識処理と、
前記音声認識処理が音声認識した情報に含まれる選曲情報に基づいて、複数の候補楽曲を抽出する候補楽曲抽出処理と、
前記候補楽曲抽出処理によって抽出された複数の前記候補楽曲の一部をそれぞれ順次再生する候補楽曲部分再生処理と、
前記候補楽曲部分再生処理の再生に対して、収音されて前記音声認識処理にて音声認識された情報に含まれる楽曲選択指示入力に基づいて、再生された前記候補楽曲から選択された楽曲を再生する選択楽曲再生処理とを、コンピュータに実行させる楽曲再生プログラム。
【請求項５】
請求項４に記載の楽曲再生プログラムを記録したコンピュータが読み取り可能な記録媒体。
【請求項６】
ネットワークを介して通信可能な音楽配信サーバと、
ネットワークを介して前記音楽配信サーバとの情報送受信が可能なユーザ端末装置とを備え、
前記ユーザ端末装置は、前記収音部と、再生された前記候補楽曲又は前記楽曲を音に変換するスピーカユニットとを備え、
前記ユーザ端末装置のコンピュータと前記音楽配信サーバのコンピュータの一方又は両方に、前記楽曲再生システムの各部が配備されることを特徴とする請求項１記載の楽曲再生システム。
【請求項７】
請求項１に記載の楽曲再生システムに用いられるスピーカ装置であって、
前記収音部と、再生された前記候補楽曲又は前記楽曲を音に変換するスピーカユニットとを備えるスピーカ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、楽曲再生システムに関するものである。
【背景技術】
【０００２】
近年、ネットワークを介した音楽配信サービスが普及している。このような音楽配信サービスでは、ユーザは、楽曲を再生する機能を有する情報端末（スマートフォン，ＰＣ，オーディオ機器など）をネットワークに接続して、音楽配信サーバからネットワークを介して送られてきた楽曲情報を、一端情報端末にダウンロードしてから再生するか、或いは、情報端末にダウンロードしながら同時再生（ストリーミング）する（例えば、下記特許文献１参照）。
【０００３】
また最近では、ユーザ側の情報端末として、音声対話型のインターフェースを備えた情報端末が用いられ、対話形式で情報検索を行うシステムが普及している。更には、音声対話対応スピーカ（スマートスピーカ，ＡＩスピーカなど）と呼ばれる、音声入出力のみで手入力機能や表示画面を持たない、完全対話型の情報端末も普及しつつある。この音声対話対応スピーカは、ＡＩ（人工知能）を取り入れた音声認識情報検索システムを採用するなどして、ユーザの求める情報を対話式で提供するものであり、面倒な操作入力を省き、ハンズフリーでの使用が可能になるといった利便性を有している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−１９１７０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
前述した音声対話対応スピーカを音楽配信サービスのユーザ側情報端末として用いる場合、ユーザが聴きたい楽曲の情報は、音声で入力されることになり、音楽配信サーバからユーザ側情報端末に送られてきた楽曲情報は、音声対話対応スピーカによって再生されて初めてユーザに確認されることになる。従来型の表示画面を備える情報端末の場合には、ユーザは、送られてきた楽曲情報を表示画面で確認することができるが、表示画面を持たない音声対話対応スピーカは、このような確認をすることができない。
【０００６】
そうすると、常にユーザの選曲に合致した楽曲情報が送られてくれば問題はないが、ユーザの選曲とは異なる楽曲情報が送られてきた場合には、ユーザは、選曲とは異なる楽曲の再生を聴き続けるか、或いは一旦楽曲の再生を止めて、再度音声入力し直すことになり、繰り返しの再入力でも求める楽曲に辿り着かない場合には、他の入力手段への代替えができないこともあって、ユーザは大きなストレスを感じることになる。
【０００７】
前述した説明は、オンラインの音楽配信サービスに音声対話対応スピーカを接続する場合を例に説明したが、オフラインの楽曲再生システムであっても、音声入力のみによるハンズフリーでの使用を前提とする場合には、同様の問題が生じることになる。
【０００８】
本発明は、このような問題に対処するために提案されたものである。すなわち、音声のみで選曲をする際に、選曲していない楽曲が再生された場合のユーザのストレス軽減を図ること、などが本発明の課題である。
【課題を解決するための手段】
【０００９】
このような課題を解決するために、本発明は、以下の構成を具備するものである。
音声を収音する収音部と、前記収音部によって収音された音声を音声認識する音声認識部と、前記音声認識部が音声認識した情報に含まれる選曲情報に基づいて、複数の候補楽曲を抽出する候補楽曲抽出部と、前記候補楽曲抽出部によって抽出された複数の前記候補楽曲の一部をそれぞれ順次再生する候補楽曲部分再生部と、前記候補楽曲部分再生部の再生に対して、前記収音部で収音されて前記音声認識部が音声認識した情報に含まれる楽曲選択指示入力に基づいて、再生された前記候補楽曲から選択された楽曲を再生する選択楽曲再生部と、を備えることを特徴とする楽曲再生システム。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係る楽曲再生システムを示した説明図である。
【図２】本発明の他の実施形態に係る楽曲再生システムに示した説明図である。
【図３】楽曲再生システムにおける音声認識された情報に対する処理のフロー例を示した説明図である。
【図４】候補楽曲から選択楽曲を選択する手法例を示した説明図である（（ａ）が第１例、（ｂ）が第２例を示している。）。
【図５】楽曲再生システムの構成例を示した説明図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本発明の実施形態を説明する。図１において、楽曲再生システム１は、収音部１０、音声認識部１１、候補楽曲抽出部１２、候補楽曲部分再生部１３、選択楽曲再生部１４を備えている。この楽曲再生システム１は、音声入力のみで楽曲の選曲と再生を行うためのシステムであり、ユーザの音声入力による選曲時に、ユーザが受けるストレスを軽減することを課題としている。
【００１２】
楽曲再生システム１は、先ず、収音部１０によって収音された音声を音声認識部１１が音声認識する。次に、音声認識部１１が音声認識した情報に含まれる選曲情報に基づいて、候補楽曲抽出部１２が複数の候補楽曲を抽出する。そして、候補楽曲部分再生部１３が、候補楽曲抽出部１２によって抽出された複数の候補楽曲をそれぞれ順次再生する。この際、候補楽曲部分再生部１３は、曲の一部を再生する。すなわち、候補楽曲部分再生部１３は、各曲からサビ部分やイントロ部分などを部分的に取り出して再生する。その後、候補楽曲部分再生部１３の再生に対して、収音部１０で収音されて音声認識部１１が音声認識した情報に楽曲選択指示入力がある場合には、この楽曲選択指示入力によって候補楽曲から選択された楽曲を選択楽曲再生部１４が再生する。
【００１３】
このような楽曲再生システム１によると、ユーザが収音部１０に対して音声入力で選曲を行うと、音声認識された情報に含まれる選曲情報に基づいて、複数の候補楽曲が抽出され、その候補楽曲のイントロ部分やサビ部分などが順次再生される。ユーザは、その候補楽曲の中に選曲に合致した楽曲が存在する場合には、音声入力で楽曲選択指示入力を行う。これにより、その楽曲選択指示によって選択された楽曲が再生されることになる。これによると、ユーザの選曲を単独で抽出する場合と比較して、ユーザの選曲に合致した楽曲が候補楽曲に含まれる確率が高くなり、ユーザのストレスを軽減することが可能になる。
【００１４】
図２は、本発明の他の実施形態を示している。この例の楽曲再生システム１Ａは、音声認識部１１が音声認識した情報に含まれる選曲情報に基づいて、特定の楽曲を抽出して再生する通常再生モード１５を備えている。また、音声認識部１１が音声認識した情報に基づいて、再生された楽曲がユーザの選曲と一致していないことを判断する不一致再生判断部１６を備えており、不一致再生判断部１６が不一致と判断した場合に、前述した候補楽曲抽出部１３が候補楽曲の抽出を行う。
【００１５】
不一致再生判断部１６は、例えば、通常再生モード１５おける音声認識による選曲操作が所定時間内に所定回数以上繰り返された場合、通常再生モード１５における再生が同じ曲を再生し、その都度ユーザに音声入力で中断指示をされるような場合、再選曲を促す設定された言葉が、所定時間の間に所定回数以上検出された場合など、音声入力されて音声認識された情報から、再生された楽曲がユーザの選曲と一致していないと判断される場合に作動する。
【００１６】
このような楽曲再生システム１Ａは、ユーザが収音部１０に対して音声入力で選曲を行うと、先ずは、通常再生モード１５にて、音声認識部１１が音声認識した情報に含まれる選曲情報に基づいて楽曲が抽出されて、その楽曲が再生される。ユーザが再生された楽曲の再生継続を望む場合は、そのまま通常再生モード１５が継続する。
【００１７】
これに対して、ユーザが例えば音声入力で中断指示をしたような場合に、不一致再生判断部１６が不一致判断をすることになり、その場合には、音声認識された情報に含まれる選曲情報に基づいて、複数の候補楽曲が抽出されて、その候補楽曲のイントロ部分やサビ部分などが順次再生される。ユーザは、その候補楽曲の中に選曲に合致した楽曲が存在する場合には、音声入力で楽曲選択指示入力を行う。これにより、その楽曲が選択されて再生される。
【００１８】
図３は、楽曲再生システム１Ａにおける音声認識された情報を処理する各部の処理フロー例を示している。ステップＳ１では、音声認識部１１にて選曲情報の有無が判断されている。ここでの選曲情報は、曲名、アーティスト名、アルバム名、コンピレーションなど、各種の情報が該当する。選曲情報が無い場合（ステップＳ１：ＮＯ）には、選曲待ちの状態が継続される。
【００１９】
音声認識部１１が選曲情報有りを判断した場合（ステップＳ１：ＹＥＳ）には、通常再生モード１５にて選曲に対応する楽曲が再生される（ステップＳ２）。また、楽曲の再生と共に、不一致再生判断部１６が不一致再生判断を行う（ステップＳ３）。ステップＳ３では、選曲行為が短時間で所定回数以上繰り返し行われる、同じ曲の再生と中断指示が所定回数以上繰り返される、選曲を行う際に用いられる設定された言葉（起動ワード）が短時間に所定回数以上繰り返されるなどの状況が判断され、ユーザの選曲と通常再生モードでの再生曲が一致しているか否かが判断される。ユーザの選曲と再生曲が一致している場合（ステップＳ３：ＮＯ）には、通常再生モード（ステップＳ２）が継続される。
【００２０】
これに対して、ステップＳ３にてユーザの選曲と再生曲が一致してないと判断された場合（ステップＳ３：ＹＥＳ）には、ステップＳ４にて、例えば、「ご希望の曲が見つかりませんか？」という問いかけを実行して、候補楽曲を抽出するか否かが判断される。この問いかけに対して、「いいえ」の回答が音声認識された場合（ステップＳ４：ＮＯ）には、引き続き通常再生が実行されるが（ステップＳ２）、「ご希望の曲が見つかりませんか？」という問いかけに対して「はい」といった回答が音声認識された場合（ステップＳ４）には、候補楽曲抽出部１２にて候補楽曲の抽出が行われる（ステップＳ５）。
【００２１】
ステップＳ５における候補楽曲抽出部１２の処理は、最後に音声認識された情報に含まれる選曲情報に基づいて、或いは、繰り返された音声入力から音声認識された情報に含まれる選曲情報に基づいて、それに関連する複数の候補楽曲を抽出する。
【００２２】
この際、選曲情報が曲名の場合は、例えば、同じ曲名で異なる楽曲が存在する場合はその全て又は一部、音声認識の精度を考慮した類似の曲名、などが候補楽曲として抽出される。また、選曲情報がアーティスト名の場合には、通常再生モートで再生された楽曲とは異なる同名アーティストの楽曲、呼び名が同じ又は類似したアーティストの楽曲、などが候補楽曲として抽出される。また、選曲情報がアルバム名等の場合には、同じアルバム内の他の楽曲、異なるアーティストの同名アルバム内の楽曲、などが候補楽曲として抽出される。
【００２３】
そして、ステップＳ５にて候補楽曲が抽出されると、抽出された楽曲の全て又は一部に対して、再生の順番付けが設定される。再生の順番付けは、例えば、音声認識による確からしさによる順番、ユーザによって予め指定された情報による順番付け、記憶されている過去のユーザの選択傾向（履歴）に基づいた順番付け、などによって設定される。
【００２４】
抽出された候補楽曲の中で再生を行う楽曲の順番が設定されると、その順番に応じて、候補楽曲の部分再生が行われる（ステップＳ６）。曲の部分再生は、予め曲のどの部分（イントロ部分、サビ部分、特徴部分など）を再生するかが設定されており、その設定に応じて部分再生がなされる。複数の候補楽曲を順次再生する際には、間に間隔を入れて再生する、或いは、クロスフェードで再生するなどして、各曲の区切りが分かりやすいように再生を行う。
【００２５】
そして、候補楽曲の部分再生中或いは再生後に、ユーザから音声入力で楽曲選択指示の入力があった場合（ステップＳ７：ＹＥＳ）には、候補楽曲の中から選択楽曲を特定して、選択楽曲再生部１４がその楽曲の再生を行い（ステップＳ８）、そのまま通常再生モード（ステップＳ２）に移行する。この際の楽曲選択指示は、例えば、「それ！」、「その曲！」、「ＯＫ！」といった、選択指示と判断できるものであればよい。
【００２６】
選択楽曲指示の入力が無い場合（ステップＳ７：ＮＯ）には、抽出した候補楽曲の中に他の候補楽曲が有るか無いかを判断して（ステップＳ９）、他の候補楽曲が有る場合（ステップＳ９：ＹＥＳ）には、候補楽曲を変更して（ステップＳ１０）して、再び候補楽曲の部分再生を行う（ステップＳ６）。また、他の候補楽曲が無い場合（ステップＳ９：ＮＯ）には、「継続しますか」といった問いかけを行って継続確認をして（ステップＳ１１）、継続する場合（ステップＳ１１：ＹＥＳ）には、候補楽曲の再抽出を行う（ステップＳ５）。この際の候補楽曲の再抽出時には、選曲のヒントとなる追加キーワードを質問するなどして、新たな抽出要素の音声入力を促すようにしてもよい。そして、継続しない場合（ステップＳ１１：ＮＯ）には、選曲処理を終了する。
【００２７】
図４には、複数の候補楽曲から選択楽曲を選択する手法の例を示している。図４（ａ）に示した例では、候補曲を順番に続けて部分再生し（ステップＳ２０）、全て再生後に、「ご希望の曲は何番目でしたか？」といった質問を行い（ステップＳ２１）、それに対する答えに応じて選択曲の再生を行う（ステップＳ２２）。また、ステップＳ２１の質問に対して回答が無い場合には、候補曲があるか否かを確認して（ステップＳ２３）、候補曲が有る場合には（ステップＳ２３：ＹＥＳ）、再度候補曲を順番に続けて再生する（ステップＳ２０）。また、候補曲が無い場合には（ステップＳ２３：ＮＯ）、「ご希望の曲はありません」といった音声出力を行った後（ステップＳ２４）、通常再生モード（ステップＳ２）に移行する。
【００２８】
図４（ｂ）に示した例では、１番目の候補曲をある時間のみ再生し（ステップＳ３０）、「ご希望の曲ですか？」といった質問を行い（ステップＳ３１）、希望の曲であることが確認できた場合は選択曲の再生を行う（ステップＳ３２）。また、ステップＳ３１の質問に対して希望の曲で無い旨の回答の場合には、候補曲があるか否かを確認して（ステップＳ３３）、候補曲が有る場合には（ステップＳ３３：ＹＥＳ）、次の候補曲をある時間のみ再生する（ステップＳ３０）。また、候補曲が無い場合には（ステップＳ３３：ＮＯ）、「ご希望の曲はありません」といった音声出力を行った後（ステップＳ３４）、通常再生モード（ステップＳ２）に移行する。
【００２９】
このような楽曲再生システム１，１Ａは、家庭用オーディオや車載用オーディオなどのオフラインのシステムにおける音声入力での使用に採用することができるが、オンラインの音楽配信サービスにおいて効果的に採用することができる。
【００３０】
図５には、楽曲再生システム１，１Ａをオンラインの音楽配信サービスに採用する際のシステム例を示している。この例では、ネットワーク２０を介して通信可能な音楽配信サーバ２１と、ネットワーク２０を介して音楽配信サーバ２１との情報送受信が可能なユーザ端末装置である、音声対話対応のスピーカ装置３０を備えている。
【００３１】
スピーカ装置３０は、前述した収音部１０を構成するマイク３１と、再生された候補楽曲又は選択楽曲の音声信号を音に変換するスピーカユニット３２とを備えている。また、スピーカ装置３０はマイク３１が収音した音声信号が入力され、スピーカユニット３２に音声信号を出力する情報処理部３３と、情報処理部３３から出力された情報をネットワーク２０を介して音楽配信サーバ２１に送信し、音楽配信サーバ２１からネットワーク２０を介して送信された情報を受信して情報処理部３３に送る通信部３４を備えている。
【００３２】
このようなスピーカ装置３０と音楽配信サーバ２１がネットワーク２０に接続されたシステムにおいて、前述した楽曲再生システム１，１Ａは、収音部１０を除く構成要素の一部又は全部を、音楽配信サーバ２１のコンピュータとスピーカ装置３０における情報処理部３３のコンピュータの一方又は両方に適宜配備させることができる。その際、音楽配信サーバ２１或いは情報処理部３３には、音声認識部１１が実行する音声認識処理、候補楽曲抽出部１２が実行する候補楽曲抽出処理、候補楽曲部分再生部１３が実行する候補楽曲部分再処理、選択楽曲再生部１４が実行する選択楽曲再生処理、不一致再生判断部１６が実行する不一致再生判断処理をコンピュータに実行させる楽曲再生プログラムがインストールされることになり、インストールされた楽曲再生プログラムは、コンピュータが読み取り可能なメモリや他の記録媒体に記録されることになる。
【００３３】
このような楽曲再生システム１，１Ａを用いると、音声信号のみで選曲を行う場合に、選曲していない楽曲が再生された場合のユーザのストレスを軽減することができる。
【００３４】
以上、本発明の実施の形態について図面を参照して詳述してきたが、具体的な構成はこれらの実施の形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計の変更等があっても本発明に含まれる。また、上述の各実施の形態は、その目的及び構成等に特に矛盾や問題がない限り、互いの技術を流用して組み合わせることが可能である。
【符号の説明】
【００３５】
１，１Ａ：楽曲再生システム，
１０：収音部，１１：音声認識部，１２：候補楽曲抽出部，
１３：候補楽曲部分再生部，１４：選択楽曲再生部，１５：通常再生モード，
１６：不一致再生判断部，
２０：ネットワーク，２１：音楽配信サーバ，
３０：スピーカ装置（ユーザ端末装置），３１：マイク（収音部），
３２：スピーカユニット，３３：情報処理部，３４：通信部
【図１】
2019159099.tif 000003
【図２】
2019159099.tif 000004
【図３】
2019159099.tif 000005
【図４】
2019159099.tif 000006
【図５】
2019159099.tif 000007