(57)【要約】【課題】  「歌謡（歌）」によって、ユーザー（歌い手）が映像（動画）とインターアクト（交流）することで、映像（動画）が進行・変化する新しい映像（動画）技術を提供することにある。【解決手段】  ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、ユーザーに対して、動画と楽曲の出力にあわせて様々な言語で表記された歌詞（テキスト文）を表示するテキスト文表示機能と、表示された歌詞を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、評価された評価結果に基づいて、これと関連付けられた動画を出力する動画出力機能と、音声認識評価機能による評価結果を換算する評価結果換算機能と、評価結果換算機能によって換算された成績を出力する成績出力機能とを備えたことを特徴とする。【選択図】  図２
2015049365.tif 000002
【特許請求の範囲】
【請求項１】
ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、
ユーザーに対して、動画の出力にあわせて様々な言語で表記されたテキスト文を表示するテキスト文表示機能と、
表示されたテキスト文を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、
評価された評価結果に基づいて、これと関連付けられた動画を出力する動画出力機能とを備えたことを特徴とするインターアクティブ・ビデオシステム。
【請求項２】
ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、
ユーザーに対して、動画の出力にあわせて様々な言語で表記されたテキスト文を表示するテキスト文表示機能と、
表示されたテキスト文を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、
音声認識評価機能による評価結果を換算する評価結果換算機能と、
評価結果換算機能によって換算された成績を出力する成績出力機能とを備えたことを特徴とするインターアクティブ・ビデオシステム。
【請求項３】
ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、
ユーザーに対して、動画の出力にあわせて様々な言語で表記されたテキスト文を表示するテキスト文表示機能と、
表示されたテキスト文を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、
評価された評価結果に基づいて、これと関連付けられた動画を出力する動画出力機能と、
音声認識評価機能による評価結果を換算する評価結果換算機能と、
評価結果換算機能によって換算された成績を出力する成績出力機能とを備えたことを特徴とするインターアクティブ・ビデオシステム。
【請求項４】
テキスト文表示機能で表記されたテキスト文が歌詞であって、動画の出力と共に当該楽曲が出力されることを特徴とする請求項１，２又は３記載のインターアクティブ・ビデオシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本願発明は、音声認識技術などを使用して、ユーザーが映像（動画）とインターアクト（対話・交流）することで、映像（動画）が進行・変化する新しい映像（動画）技術の提供に関するものである。
【背景技術】
【０００２】
テレビの地上デジタル放送が始まり、視聴者が参加できる（リモコンのボタンを押して答えが選べる）双方向可能なクイズ番組をよく見かけるようになったが、答えを声で言えたら楽しいのではないか？さらにクイズ番組に限らず、映画やドラマなど映像（動画）に話しかけられたら楽しいのではないか？その声に映像（動画）が反応すると、もっと楽しいのではないか？このように考えるうちに、ユーザー（視聴者）が映像（動画）とインターアクト（対話・交流）することで、映像（動画）が進行・変化する新しい映像（動画）のアイディアを思いつく。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平７−２９５４６６号公報
【特許文献２】特開２０１２−４２５０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
こうして思いついたのが、本願発明者による特許文献２である。特許文献２は、ユーザーに対して、所定又は選択肢のある音声入力を促す音声受音機能と、受音されたユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、評価された評価結果に基づいて、これと関連付けられた動画を出力する動画出力機能とを備えたものである。
ここでは、主に「会話」によってユーザー（視聴者）が映像（動画）とインターアクトしていたが、本願発明者は「歌謡（歌）」によって、ユーザー（歌い手）が映像（動画）とインターアクトできると考えて、本願発明を完成するに至った。
【課題を解決するための手段】
【０００５】
本願発明の第１の発明（ストーリーモード）は、ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、ユーザーに対して、動画の出力にあわせて様々な言語で表記されたテキスト文を表示するテキスト文表示機能と、表示されたテキスト文を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、評価された評価結果に基づいて、これと関連付けられた動画を出力する動画出力機能とを備えたことを特徴とするものである。
第２の発明（採点モード）は、ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、ユーザーに対して、動画の出力にあわせて様々な言語で表記されたテキスト文を表示するテキスト文表示機能と、表示されたテキスト文を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、音声認識評価機能による評価結果を換算する評価結果換算機能と、評価結果換算機能によって換算された成績を出力する成績出力機能とを備えたことを特徴とするものである。
第３の発明（ストーリー＆採点モード）は、ユーザーが動画と交流するインターアクティブ・ビデオシステムであって、ユーザーに対して、動画の出力にあわせて様々な言語で表記されたテキスト文を表示するテキスト文表示機能と、表示されたテキスト文を発音したユーザーの音声を音声認識手段によって認識・評価する音声認識評価機能と、評価された評価結果に基づいて、これと関連付けられた動画を出力する動画出力機能と、音声認識評価機能による評価結果を換算する評価結果換算機能と、評価結果換算機能によって換算された成績を出力する成績出力機能とを備えたことを特徴とするものである。
第４の発明（カラオケモード）は、テキスト文表示機能で表記されたテキスト文が歌詞であって、動画の出力と共に当該楽曲が出力されることを特徴とする同インターアクティブ・ビデオシステムである。
【発明の効果】
【０００６】
本願発明によれば、以下のような効果を有する。
（１）ユーザーの発した音声（発音）によって、動画（映像）の流れ（例えば、ストーリー）が変化する。すなわち、ユーザーの行為に動画（映像）が反応し、ユーザー（視聴者）と動画（映像）のインターアクト（交流）を実現できる。
（２）ユーザーの音声（発音）の評価結果を換算し、成績結果を出力することで、ユーザー自身が客観的に自分の成績（様々な言語の発音力）を把握できる。それとともに、その成績（点数）は記録として残り、他ユーザーと比較できるランキングに登録可能となる。また、そのランキングはコミュニティー（例、ＳＮＳサービス）で共有され、ユーザー同士、コメントをし合うことができる。
（３）インターアクティブ・ビデオシステムをカラオケのように利用できることで、勉強とは意識せず、好きな歌を歌いながら楽しく様々な言語の発音レッスンができたり、好きな歌手を先生（お手本）にレッスンができたり、一人でも大人数でも楽しみながらレッスンができる。
（４）成績結果だけではなく、評価結果によって動画（映像）が変化する楽しさがある。
（５）ランキングの順位が上がることで上達が実感でき、繰り返し挑戦する（発音レッスンをする）モチベーションになる。
【図面の簡単な説明】
【０００７】
【図１】本願発明に係るインターアクティブ・ビデオの機能（カラオケモード）を示す説明図。
【図２】本願発明に係るインターアクティブ・ビデオの特徴（カラオケモード）を示す説明図。
【発明を実施するための形態】
【０００８】
本願発明の実施形態をカラオケモードを例示して図面に基づいて説明する。
図１は、本願発明に係るインターアクティブ・ビデオシステムの機能（カラオケモード）を示す説明図である。
予めユーザー（ユーザー端末）は、インターアクティブ・ビデオシステムの利用に必要なアプリケーションソフトをサーバーからダウンロードしておく（ダウンロードではなく、ユーザー端末にプリインストールされていてもよい）。このアプリケーションソフトには、音声認識に必要なＳＤＫが含まれている（なお、音声認識の処理をアプリケーションソフトではなく、サーバー側で処理させるようにしてもよい）。
ユーザー（ユーザー端末）が、インターアクトしたい楽曲を選択すると、選択した楽曲がストリーミング配信（動画・楽曲・歌詞）される。なお、ストリーミング配信ではなく、ダウンロード配信でもよい。また、配信以外にも、既に端末に入力されている音楽データ（例：ＣＤからリッピングしたもの）を選択したものであってもよい。
次に、配信された楽曲の歌詞（様々な言語の歌詞、例えば英語の歌詞、以下同じ）に対するユーザーの歌声（音声）を受音すると、音声認識ＳＤＫが作動して受音した歌声（音声）の音声認識を行う。
そして、音声認識ＳＤＫの評価によって、動画を変化させたり、ユーザーによる歌詞（様々な言語）の発音の採点を行う。
【０００９】
図２は、本願発明に係るインターアクティブ・ビデオシステムの特徴（カラオケモード）を示す説明図である。
（１）カラオケのように、楽曲の再生中に画面（モニター）に動画と英語の歌詞（テキスト文）が表示される。
（２）ユーザーは、表示された英語の歌詞（テキスト文）をマイクへ歌う（発音する）。
（３）そして、その発音が上手であると、点数が上がったり、動画がポジティブに進行する。一方、その発音が下手であると、点数が下がったり、動画がネガティブに進行する（或いは、発音が悪い箇所に色や下線を付けても良い）。
【産業上の利用可能性】
【００１０】
本願発明は、「歌謡（歌）」によって、ユーザー（歌い手）が映像（動画）とインターアクトできるようにしたものであり、その目的は、カラオケのように楽しみながら自然と様々な言語の発音のレッスンができることにあるので、語学教育のシステムとしての他に、カラオケの付加機能としても利用できるものである。
【図１】
2015049365.tif 000003
【図２】
2015049365.tif 000004