(57)【要約】【課題】  本発明は、移動通信端末機における音楽演奏を制御する装置及び方法を提供する。【解決手段】  本発明の移動通信端末機における音楽演奏を制御する装置は、前記移動通信端末機の動きを感知して感知信号を出力する動作認識センサー部と、サウンドを出力する音源チップと、前記動作認識センサー部からの感知信号を入力されて、前記移動通信端末機の動き値を計算し、前記音源チップが前記計算された動き値に従属するサウンドを出力するように制御する制御部とを含むことを特徴とする。【選択図】  図１
2006065331.tif 000002
【特許請求の範囲】
【請求項１】
移動通信端末機における音楽演奏を制御する装置において、
前記移動通信端末機の動きを感知して感知信号を出力する動作認識センサー部と、
サウンドを出力する音源チップと、
前記動作認識センサー部からの感知信号を入力されて、前記移動通信端末機の動き値を計算し、前記音源チップが前記計算された動き値に従属するサウンドを出力するように制御する制御部と、
を含むことを特徴とする装置。
【請求項２】
前記動作認識センサー部は、前記移動通信端末機の前後または左右の往復運動の動きを感知する加速度センサー又はジャイロセンサーであることを特徴とする請求項１に記載の装置。
【請求項３】
前記制御部は、前記感知信号を用いて前記移動通信端末機の往復運動を判断し、前記判断された往復運動によって所定の打楽器のサウンドが前記音源チップを通して出力されるように制御することを特徴とする請求項１に記載の装置。
【請求項４】
前記制御部は、前記感知信号を用いて前記移動通信端末機の往復運動を判断し、前記判断された往復運動によって所定のサウンドファイル音楽の各音符に対応したサウンドが前記音源チップを通して順次出力されるように制御することを特徴とする請求項１に記載の装置。
【請求項５】
移動通信端末機における音楽演奏を制御する方法において、
前記移動通信端末機の動きがあるかを判断するステップと、
前記判断の結果、動きがあれば、前記移動通信端末機の動き値を算出するステップと、
前記算出された動き値に従属するサウンドを出力するステップと、
を含むことを特徴とする方法。
【請求項６】
前記動きは、前記移動通信端末機の前後または左右の往復運動であることを特徴とする請求項５に記載の方法。
【請求項７】
前記感知信号を用いて前記移動通信端末機の往復運動を判断するステップと、
前記往復運動があれば、所定の打楽器のサウンドを出力するステップと、
をさらに含むことを特徴とする請求項５に記載の方法。
【請求項８】
前記感知信号を用いて前記移動通信端末機の往復運動を判断するステップと、
前記往復運動があれば、所定のサウンドファイル音楽の各音符に対応したサウンドを前記音源チップを通じて順次出力するステップと、
をさらに含むことを特徴とする請求項５に記載の方法。
【請求項９】
移動通信端末機における音楽演奏を制御する装置において、
音楽演奏に必要なユーザー入力のためのユーザーインターフェースと、
演奏する音楽に対する情報画面を表示する表示部と、
前記端末機の運動状態を瞬間的に感知する動作認識センサー部と、
少なくとも一つ以上の音楽情報を格納する領域が具備されるサウンドファイル格納部と、
前記動作認識センサー部により前記端末機の運動が感知されると、その運動状態に応じて前記音楽が演奏されるように制御する制御部と、
前記演奏される音楽をサウンドで出力するスピーカーと、
を含むことを特徴とする装置。
【請求項１０】
前記音楽演奏はビートボックス演奏であり、前記サウンドファイル格納部に格納された音楽情報はビートボックスの種類であり、
前記制御部は、前記ユーザーインターフェースを通したビートボックス学習機能の使用に必要なユーザー入力を感知し、前記表示部にビートボックス学習機能の実行に従う画面が表示されるように制御し、前記動作認識センサー部により前記端末機の運動が感知されると、その運動状態に応じてビートボックスが演奏されるように制御することを特徴とする請求項９に記載の装置。
【請求項１１】
前記制御部は、前記表示部のビートボックス設定画面、ビートボックス聞き取り画面及びビートボックス真似画面の表示を制御し、前記ビートボックス設定画面で感知した設定入力に応じて、前記ビートボックス聞き取り画面でビートボックスが演奏されるように制御し、前記ビートボックス真似画面の表示状態で前記動作認識センサー部により前記端末機の運動が感知されると、その運動状態に応じてビートボックスが演奏されるように制御することを特徴とする請求項１０に記載の装置。
【請求項１２】
前記表示部は、ビートボックスの種類を変更できる画面をさらに表示することを特徴とする請求項１１に記載の装置。
【請求項１３】
前記表示部は、楽器の種類を変更できる画面をさらに表示することを特徴とする請求項１１に記載の装置。
【請求項１４】
前記表示部は、ボリュームを変更できる画面をさらに表示することを特徴とする請求項１１に記載の装置。
【請求項１５】
前記制御部は、前記選択されたビートボックスの１小節をユーザーが予め聞けるように出力しながら、前記聞き取り画面が表示されるように制御し、前記小節と同じ小節をユーザーが真似することにより、ビットを出力しながら前記真似画面が表示されるように制御することを特徴とする請求項１１に記載の装置。
【請求項１６】
前記音楽情報は、ユーザーにより作られた自分だけの楽器を含んで楽器データを少なくとも一つ以上を有し、前記制御部は、前記メモリに自分だけの楽器ファイルを格納するための録音を制御することを特徴とする請求項９に記載の装置。
【請求項１７】
前記録音のためのサウンドを電気的信号に変換するマイクをさらに備え、
前記マイクを通して入力されるサウンドを自分だけの楽器ファイルに格納するために、前記制御部は、ユーザーが録音時間を選択できる画面、録音時間が選択されると録音を開始する録音進行画面、録音が完了すると格納されるファイルに付与する楽器名の入力を要求する画面が、前記表示部に表示されるように制御することを特徴とする請求項１６に記載の装置。
【請求項１８】
前記制御部は、前記録音進行画面に棒グラフを表示して、前記録音時間の経過を示すように制御することを特徴とする請求項１７に記載の装置。
【請求項１９】
前記制御部は、格納された楽器の種類を示す画面を表示した後、ユーザーによる楽器選択を感知すれば、前記選択された内容を示す画面を表示し、当該楽器のサウンドが出力されるように制御して、前記自分だけの楽器を確認できるようにすることを特徴とする請求項１６に記載の装置。
【請求項２０】
前記サウンドファイル格納部は、一定条件に応じて既設定の背景画面用カラーを格納する領域をさらに含むことを特徴とする請求項９に記載の装置。
【請求項２１】
前記制御部は、前記ビートボックスの演奏時、音源の種類或いは音源の有無によって背景画面のカラーが変更されるように制御することを特徴とする請求項２０に記載の装置。
【請求項２２】
前記音楽演奏が電子オルゴール演奏であり、前記サウンドファイル格納部に格納された音楽情報は電子オルゴール演奏のための少なくとも一つ以上の曲であり、
前記制御部は、前記ユーザーインターフェースを通した電子オルゴール機能の使用に必要なユーザー入力を感知し、前記表示部に前記演奏対象として選択された曲に対する情報画面が表示されるように制御し、前記動作認識センサー部により前記端末機の運動が感知される毎に順次前記選択曲の階名に対応するサウンドが演奏されるように制御することを特徴とする請求項９に記載の装置。
【請求項２３】
前記サウンドファイル格納部は階名に対応するカラーを格納する領域をさらに備え、
電子オルゴール機能が選択されると、前記制御部は、前記表示部に演奏する曲の歌詞の一定分量が表示されるように制御し、前記曲が演奏されるにつれて、前記歌詞の各字が前記曲の階名に対応するカラーに変更されるように制御することを特徴とする請求項２２に記載の装置。
【請求項２４】
前記サウンドファイル格納部は演奏状態に対応するカラーを格納する領域をさらに備え、
電子オルゴール機能が選択されると、前記制御部は、前記表示部に演奏する曲の歌詞の一定分量が第１カラーで表示されるように制御し、前記曲が演奏されるにつれて、前記歌詞の各字が第２カラーに変更されるように制御することを特徴とする請求項２２に記載の装置。
【請求項２５】
前記サウンドファイル格納部は階名に対応するカラーを格納する領域をさらに備え、
電子オルゴール機能が選択されると、前記制御部は、前記曲が演奏されるにつれて、前記表示部に表示される背景画面が前記曲の階名に対応するカラーに変更されるように制御することを特徴とする請求項２２に記載の装置。
【請求項２６】
前記音楽演奏が電子オルゴール演奏であり、前記サウンドファイル格納部に格納された音楽情報は電子オルゴール演奏のための少なくとも一つ以上の曲であり、
前記制御部は、前記ユーザーインターフェースを通した電子オルゴール機能の使用に必要なユーザー入力を感知し、前記表示部に前記演奏対象として選択された曲に対する情報画面が表示されるように制御し、前記動作認識センサー部により前記端末機の運動が感知される毎に前記選択曲の複数の階名に対応するサウンドが同時に演奏されるように制御することを特徴とする請求項９に記載の装置。
【請求項２７】
前記音楽演奏は電子オルゴール演奏であり、前記サウンドファイル格納部に格納された音楽情報は電子オルゴール演奏のための少なくとも一つ以上の曲であり、
前記制御部は、前記ユーザーインターフェースを通した電子オルゴール機能の使用に必要なユーザー入力を感知し、前記表示部に前記演奏対象として選択された曲に対する情報画面が表示されるように制御し、前記動作認識センサー部により前記端末機の運動が感知される毎に前記選択曲の所定区間に該当する階名に対応するサウンドが順次演奏されるように制御することを特徴とする請求項９に記載の装置。
【請求項２８】
移動通信端末機における音楽演奏を制御する装置において、
ビートボックス設定画面、ビートボックス聞き取り画面及びビートボックス真似画面を表示する表示部と、
ビートボックスをサウンドで出力するスピーカーと、
前記ビートボックス学習機能の使用に必要なユーザー入力のためのユーザーインターフェースと、
前記端末機の運動状態を瞬間的に感知する動作認識センサー部と、
ビートボックスの種類を格納する領域が具備されるサウンドファイル格納部と、
前記表示部にビートボックス学習機能の実行に従う画面が表示されるように制御し、前記ビートボックス真似画面の表示状態で前記動作認識センサー部により前記端末機の運動が感知されると、その運動状態に応じてビートボックスが演奏されるように制御する制御部と、
を含むことを特徴とする装置。
【請求項２９】
移動通信端末機における音楽演奏を制御する装置において、
電子オルゴール機能の使用に必要なユーザー入力のためのユーザーインターフェースと、
演奏に対する情報画面を表示する表示部と、
前記端末機の運動状態を瞬間的に感知する動作認識センサー部と、
少なくとも一つ以上の曲を格納する領域が具備されるサウンドファイル格納部と、
前記電子オルゴール機能が選択され、前記動作認識センサー部により前記端末機の運動が感知される毎に順次前記曲の階名に対応するサウンドが出力されるように制御する制御部と、
を含むことを特徴とする装置。
【請求項３０】
移動通信端末機における音楽演奏を制御する方法において、
ビートボックスの設定を変更できる画面を表示するステップと、
前記ビートボックス設定状態或いは初期設定状態で演奏命令の入力が感知されると、当該状態に従うビートボックスを出力しながら、ユーザーがそのビートボックスを真似しながら学習できるようにガイドする画面を表示する演奏ステップと、
を含むことを特徴とする方法。
【請求項３１】
ユーザーにより予め録音されてファイル形態に格納される自分だけの楽器を作るステップをさらに含み、
前記楽器の種類には、前記自分だけの楽器が少なくとも一つ以上含まれることを特徴とする請求項３０に記載の方法。
【請求項３２】
前記自分だけの楽器を作るステップは、
録音時間を選択できる画面を表示するステップと、
録音時間が選択されると、録音を開始して録音進行画面を表示するステップと、
録音が完了すると、楽器名の入力を要求する画面を表示するステップと、
録音内容に前記入力された楽器名を付与して格納するステップと、
を含むことを特徴とする請求項３１に記載の方法。
【請求項３３】
前記自分だけの楽器を確認するステップをさらに含み、
前記自分だけの楽器を確認するステップは、
格納された楽器の種類を示す画面を表示するステップと、
楽器の選択を感知するステップと、
前記選択された内容を示す画面を表示し、当該楽器のサウンドを出力するステップと、
を含むことを特徴とする請求項３２に記載の方法。
【請求項３４】
前記選択された楽器の詳細情報を示す画面を表示し、当該楽器のサウンドを出力するステップをさらに含むことを特徴とする請求項３３に記載の方法。
【請求項３５】
前記演奏ステップは、
前記選択されたビートボックスの同じ小節を、
ユーザーが予め聞けるように出力しながら、当該画面を表示するステップと、
ユーザーが真似することにより、ビートを出力しながら当該画面を表示するステップと、
を含むことを特徴とする請求項３０に記載の方法。
【請求項３６】
移動通信端末機における音楽演奏を制御する方法において、
電子オルゴール演奏対象曲を選択するための画面を表示するステップと、
前記選択された曲に対する情報画面を表示するステップと、
前記端末機の運動が感知される毎に前記曲の階名に対応するサウンドを出力するステップと、
を含むことを特徴とする方法。
【請求項３７】
前記情報画面は演奏する曲の歌詞の一定分量が第１カラーで表示される画面であり、
前記曲が演奏されるにつれて、前記歌詞の各字が第２カラーに変更されることを特徴とする請求項３６に記載の方法。
【請求項３８】
前記情報画面は演奏する曲の歌詞の一定分量が表示される画面であり、
前記曲が演奏されるにつれて、前記歌詞の各字が前記曲の階名に対応するカラーに変更されることを特徴とする請求項３６に記載の方法。
【請求項３９】
前記曲が演奏されるにつれて、前記情報画面が前記曲の階名に対応するカラーに変更されるように制御することを特徴とする請求項３６に記載の方法。
【請求項４０】
前記端末機の運動が感知される毎に前記選択曲の複数の階名に対応するサウンドが同時に出力されることを特徴とする請求項３６に記載の方法。
【請求項４１】
前記端末機の運動が感知される毎に前記選択曲の所定区間に該当する階名に対応するサウンドが順次出力されることを特徴とする請求項３６に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は移動通信端末機をエンターテイメント用として活用するための装置及び方法に関し、特に、動作認識センサー部を通して連続動作を認識する移動通信端末機における音楽演奏を制御するための装置及び方法に関する。
【背景技術】
【０００２】
最近は、携帯電話やＰＤＡ(Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ)等のような個人携帯可能な移動通信端末機の普及が一般化しつつある。このような移動通信端末機は、通信技術の発展に伴い、通話機能やＳＭＳ(Ｓｈｏｒｔ  Ｍｅｓｓａｇｅ  Ｓｅｒｖｉｃｅ)機能のような通信機能の外にも、各種のイメージとサウンドを用いたゲーム機能、アラーム機能、ＭＰ３プレーヤー機能などのような付加機能を提供している。これにより、移動通信端末機のユーザーは、固有の通話機能の外にも様々な使用上の便宜を提供されることになる。
【０００３】
しかしながら、ユーザーは、常に携帯可能な移動通信端末機がより楽しい機能を持つことを所望している。よって、移動通信端末機の製造者は、既存のサウンド出力機能やディスプレイ機能などを用いて、より楽しい他の機能の開発に努力している。
【０００４】
通常、動作認識センサー部(例：慣性センサー)を通したビートボックスは、移動通信端末機に予め格納された楽器のサウンドを用いて当該演奏がなされる。また、ビートボックスは、ユーザーが移動通信端末機を振る毎に既設定の音源で演奏する。そして、このような演奏時の背景画面は所定のイメージで固定されている。
【０００５】
動作認識センサー部を通したサウンド機能を活用するために使用される音源は、その種類において限界があり得る。このように限定された楽器の音源を使用すれば、ユーザーのサウンド機能の活用における楽しみも限界がある。また、音楽の拍子に不慣れなユーザーは、ビートボックス演奏機能にあまり興味を感じられない恐れがある。そして、サウンド機能の使用時の背景画面が所定の一イメージで固定されていれば、出力されるサウンドに比べて視覚的に平凡に感じられる恐れもある。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明は前記問題点を解決するために案出されたもので、その目的は次の通りである。
本発明は、ユーザーが移動通信端末機を用いて楽しい遊びができる装置及びその制御方法を提供することにある。
本発明は、移動通信端末機がユーザーの動きに応じて、サウンドを出力できる装置及びその制御方法を提供することにある。
本発明は、動作認識センサー部を備えた移動通信端末機のサウンド機能(ビートボックス、電子オルゴール等)の活用において、自由度を高めてユーザーが感じる楽しみを倍加できる装置及び方法を提供することにある。
本発明は、移動通信端末機に含まれている音源の外にも、様々な音源でサウンド機能を活用できる装置及び方法を提供することにある。
本発明は、ビートボックス学習において、ユーザーが音楽の種類別の拍子に従って学習できるようにすることで、学習の楽しみを与える装置及び方法を提供することにある。
本発明は、背景画面の表現におけるサウンド機能の使用時、聴覚且つ視覚の側面においても楽しみが与えられる装置及び方法を提供することにある。
【課題を解決するための手段】
【０００７】
このために、第１発明は、移動通信端末機における音楽演奏を制御する装置において、前記移動通信端末機の動きを感知して感知信号を出力する動作認識センサー部と、サウンドを出力する音源チップと、前記動作認識センサー部からの感知信号を入力されて、前記移動通信端末機の動き値を計算し、前記音源チップが前記計算された動き値に従属するサウンドを出力するように制御する制御部とを含むことを特徴とする。
【０００８】
第２発明は、移動通信端末機における音楽演奏を制御する方法において、前記移動通信端末機の動きがあるかを判断するステップと、前記判断の結果、動きがあれば、前記移動通信端末機の動き値を算出するステップと、前記算出された動き値に従属するサウンドを出力するステップとを含むことを特徴とする。
【０００９】
第３発明は、移動通信端末機における音楽演奏を制御する装置が、音楽演奏に必要なユーザー入力のためのユーザーインターフェースと、演奏する音楽に対する情報画面を表示する表示部と、前記端末機の運動状態を瞬間的に感知する動作認識センサー部と、少なくとも一つ以上の音楽情報を格納する領域が具備されるサウンドファイル格納部と、前記動作認識センサー部により前記端末機の運動が感知されると、その運動状態に応じて前記音楽が演奏されるように制御する制御部と、前記演奏される音楽をサウンドで出力するスピーカーと、を含むことを特徴とする。
【００１０】
第４発明は、移動通信端末機における音楽演奏を制御する方法において、ビートボックスの設定を変更できる画面を表示するステップと、前記ビートボックス設定状態或いは初期設定状態で演奏命令の入力が感知されると、当該状態に従うビートボックスを出力しながら、ユーザーがそのビートボックスを真似しながら学習できるようにガイドする画面を表示する演奏ステップとを含むことを特徴とする。
【００１１】
第５発明は、移動通信端末機における音楽演奏を制御する方法において、電子オルゴール演奏対象曲を選択するための画面を表示するステップと、前記選択された曲に対する情報画面を表示するステップと、前記端末機の運動が感知される毎に前記曲の階名に対応するサウンドを出力するステップとを含むことを特徴とする。
【発明の効果】
【００１２】
本発明は、移動通信端末機の動きに従属するサウンドを出力することで、ユーザーが、移動通信端末機の動きを制御してまるで実際の楽器を演奏するよう、生動感溢れるようにサウンドを変化させて出力できるという利点がある。また、本発明は、ユーザーが、移動通信端末機に自分だけの楽器を作って格納することで音源の選択が可能であり、ビートボックスの種類も選択が可能であるため、ビートボックス演奏に多くの興味を誘発できる。換言すれば、ユーザーに、多様なビートボックスの種類の選択において多くの自由度を付与し、且つ、自分だけの楽器の作りの音源の選択においても多くの自由度を付与することで、ユーザー向きのビートボックス環境を提供できる。また、ビートボックス、電子オルゴール演奏などのようなサウンド機能を使用する時、背景画面のカラーを多様に変更可能であるため、ユーザーに聴覚的且つ視覚的に楽しみを倍加させることができる。
【発明を実施するための最良の形態】
【００１３】
以下、添付図面に基づき、本発明の好適な実施の形態を詳細に説明する。下記の説明では具体的なメニュー画面の表示(デザイン)などのような特定事項が記載されているが、これは、本発明の全般的な理解のために提供されたもので、このような特定事項なしに本発明が実施し得ることは当該技術分野における通常の知識を有した者には明らかである。そして、本発明において、関連した公知の機能や構成に対する具体的な説明が、本発明の要旨を不明にする可能性がある場合には、その詳細は説明を省略する。
【００１４】
本発明は、移動通信端末機において、その動きに従属するサウンドを出力する機能を具現する。このために、本発明は、移動通信端末機の動きを感知し、感知された動き値を算出して当該動き値に従属するサウンドを出力する。このとき、サウンドはユーザーにより既定の方式で出力されることができる。
これにより、ユーザーは、移動通信端末機の動きを制御することで、サウンドを所望の通り出力できるので、例えば、コンサート場やカラオケなどで面白いサウンドが出力されることができる。
【００１５】
本発明の好適な実施の形態によるビートボックスの学習は、学習するビートボックスの種類、音源及びボリュームを設定できる画面と、ビートボックスに真似しながら学習できる画面とからなる。ユーザー選択のビートを１小節ずつ予め聞かせてユーザーが真似する方式で学習が進行される。また、ビートボックスを学習するために、ユーザーは予め格納されたビート(音楽の拍子)、楽器、ボリュームを選択する。学習が開始されると、ユーザー設定のビートを１小節ずつ学習できるようにする。
【００１６】
図１は本発明の実施の形態による移動通信端末機のブロック構成図を示す。
【００１７】
制御部１０は、通話及びデータ送受信などのような移動通信端末機の動作を制御する。また、制御部１０は、移動通信端末機の動きがあれば、その動き値に従属するサウンドを出力するように制御する。このような移動通信端末機の動きは動作認識センサー部５０により検出される。
【００１８】
動作認識センサー部５０は、ジャイロセンサー(ＧＹＲＯ  ＳＥＮＳＯＲ)を含むことが好ましいが、ジャイロセンサーは、スピン(ｓｐｉｎ)軸に直交する１個以上の軸周囲の慣性空間を基準とした場合、角運動を感知するために角運動量を使用するセンサーである。
動作認識センサー部５０は端末機の運動状態を瞬間的に感知する。すなわち、移動通信端末機に動きがあれば、移動通信端末機の水平及び垂直(前後又は左右)方向への動きを示す感知信号を制御部１０に出力する。動作認識センサー部５０は、移動通信端末機の動きに応じた感知信号を出力する何れのセンサーで具現しても良い。
【００１９】
制御部１０は、動作認識センサー部５０から出力された感知信号を用いて、移動通信端末機の往復運動(ｒｅｃｉｐｒｏｃａｔｉｎｇ  ｍｏｔｉｏｎ)を識別する。また、制御部１０は、動作認識センサー部５０から出力された感知信号を用いて、移動通信端末機の動き値を算出する。そして、制御部１０は、移動通信端末機の動き値によってサウンドを音源チップ８０を通して出力するようにする。
【００２０】
音源チップ８０は、制御部１０からミディなどのようなサウンドファイルのサウンドデータが入力されると、入力されたサウンドデータをユーザーが聞けるアナログ信号に変換出力する。本発明の実施の形態によれば、音源チップ８０は、ピアノ、ギター、ドラムなどの音色を原音色で出力する高性能音源チップであることが好ましい。
【００２１】
制御部１０は、ユーザーから所定の楽器が選択された後、動作認識センサー部５０から移動通信端末機の動きに応じた感知信号が提供されると、その移動通信端末機の往復運動を判断し、往復運動によってユーザー選択の楽器のサウンドを音源チップ８０を通して出力するようにする。
例えば、ユーザーが、カラオケにおいてタンバリンを選択後に移動通信端末機を振ると、制御部１０はその動きを感知して動きに従属するタンバリンサウンドを出力する。これにより、ユーザーは実際にタンバリンを振るようなサウンドが聞ける。
【００２２】
また、制御部１０は、ユーザーから所定のサウンドファイルが選択された後、動作認識センサー部５０から移動通信端末機の動きに応じた感知信号が提供されると、移動通信端末機の動きを判断し、動きに応じて移動通信端末機のユーザー選択のサウンドファイル音楽の各音符に対応するサウンドを音源チップ８０を通して順次出力する。
例えば、ユーザーが“きらきら小さな星(Ｔｗｉｎｋｌｅ  Ｔｗｉｎｋｌｅ  Ｌｉｔｔｌｅ  Ｓｔａｒ)”というサウンドファイルを選択後に移動通信端末機を振ると、制御部１０は、その動きに応じて、音符すなわち“ド-ド-ソ-ソ-ラ-ラ-ソ〜”に対応するサウンドを出力する。このとき、出力サウンドはユーザー設定の楽器が出すサウンドであることもできる。
【００２３】
一方、制御部１０は、出力されるサウンドに適したイメージを表示部３０によりディスプレイできる。例えば、制御部１０は、各楽器が演奏される動映像やイメージを表示部３０上に表示でき、サウンドファイルの音楽を示す楽譜を表示し、現在出力されるサウンドに該当する音符を識別できるように表示部３０上に表示できる。
【００２４】
表示部３０は、制御部１０の制御下で各種メッセージなどをディスプレイする。表示部３０は、液晶表示装置(ＬＣＤ：Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ)、ＴＦＴ(Ｔｈｉｎ  Ｆｉｌｍ  Ｔｒａｎｓｉｓｔｏｒ)、有機ＥＬ(Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ)等からなる。ユーザーインターフェース部４０は、多数の数字キー及び機能キーを備え、ユーザーが押すキーに対応するキー入力データを制御部１０に出力する。
【００２５】
また、制御部１０と連結しているメモリ部２０は、移動通信端末機の動作制御時に必要な多数のプログラム及び情報を格納するためのＲＯＭ(Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ)、ＲＡＭ(Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ)、音声メモリなどからなる。サウンドファイル格納部２２は多数のサウンドファイルを格納しているが、このサウンドファイルはユーザーによりインターネットなどを通してダウンロードできる。
【００２６】
ここで、サウンドファイルは、所定の打楽器のサウンドに関するデータ又は特定の音楽に関するデータを持つことができる。サウンドファイルが特定の音楽に関するデータを持つ場合、本発明の一実施の形態により、その音楽を構成する音符を制御部１０が識別できるようにする所定のインジケーターを含むことができる。或いは、サウンドファイルは、本発明の他の実施の形態により、その音楽に該当する拍子を制御部１０が識別できるようにする所定のインジケーターを含むことができる。よって、サウンドファイルが拍子を識別するインジケーターを持つ場合、制御部１０は移動通信端末機の動きに応じて各拍子に対応するサウンドを出力できる。
【００２７】
通常、移動通信端末機は基地局との無線通信を行うが、このために、ＲＦモジュール９０はアンテナ(ＡＮＴ)を介して基地局とＲＦ信号を送/受信する。具体的に、ＲＦモジュール９０は、受信されるＲＦ信号をＩＦ(Ｉｎｔｅｒｍｅｄｉａｔｅ  Ｆｒｅｑｕｅｎｃｙ)信号に変換してベースバンド処理部６０に出力し、ベースバンド処理部６０から入力するＩＦ信号をＲＦ信号に変換して送信する。ここで、ベースバンド処理部６０は、制御部１０とＲＦモジュール９０との間のインターフェースを提供するＢＡＡ(Ｂａｓｅｂａｎｄ  Ａｎａｌｏｇ  ＡＳＩＣ)であって、制御部１０から印加されるベースバンドのデジタル信号をアナログＩＦ信号に変換してＲＦモジュール９０に印加し、ＲＦモジュール９０から印加されるアナログＩＦ信号をベースバンドのデジタル信号に変換して制御部１０に印加する。そして、制御部１０と連結している音声処理部(Ｖｏｉｃｅｂａｎｄ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ)７０はマイクロホン７２及びスピーカー７４と接続される。マイクロホン７２は録音又は通話などのために入力されるサウンドを電気的信号に変換する。スピーカー７４は電気的信号をサウンドに変換出力することで、ユーザーが音楽演奏を聴取できるようにする。音声処理部７０は、マイクロホン７２から入力される電気的信号をデジタル処理し、デジタル信号をスピーカー７４に出力するためにアナログ処理する。
【００２８】
図２は本発明により移動通信端末機における動きに従属するサウンドを生成するための制御の流れを示す図である。
【００２９】
制御部１０は、ユーザーにより演奏モードが選択されると、１１０段階において各種楽器を表示部３０上に表示する。このとき、表示される楽器はドラム、タンバリン、ピアノ、バイオリン等になり得る。そして、制御部１０は、１２０段階において表示された楽器の何れか一つがユーザーにより選択されたかを判断する。以下、図２を参照した説明での楽器は、例えば、タンバリンが好ましい。
【００３０】
ユーザーが所定の楽器を選択すると、制御部１０は１３０段階において選択された楽器のイメージを表示部３０上に表示する。１３０段階は図２の制御の流れ上において省略可能な選択事項である。続いて、制御部１０は１４０段階において動作認識センサー部５０を通して移動通信端末機の動きがあるかをチェックする。このとき、移動通信端末機の動きは単純な動き及び移動通信端末機を前後又は左右に振る往復運動の人為的な動きを含む。例えば、人がタンバリンを振らしてサウンドを出すようにさせるには、タンバリンを左右に一定速度以上で動かさなければならない。すなわち、制御部１０は、動作認識センサー部５０からの感知信号を用いて、例えば、移動通信端末機が一定速度以上で振れるかを判断する。
【００３１】
続いて、制御部１０は１５０段階において移動通信端末機の動きに応じた動き値を算出する。これを詳細に説明すれば、動作認識センサー部５０が、例えば、ジャイロセンサーを通して移動通信端末機の前後や左右の動きを感知して感知された信号を制御部１０に伝達すれば、制御部１０が動作認識センサー部５０からの信号によって動き値を算出した後、１６０段階に進行する。
【００３２】
制御部１０は、１６０段階において動き値に従属するサウンドを出力し、ユーザー選択の楽器の動映像を表示する。この楽器の動映像の表示は図２の制御の流れ上において省略可能な選択事項である。そして、制御部１０は１７０段階において演奏モードが終了したかを判断する。演奏モードはユーザーにより終了されるが、例えば、着信される場合に終了される。演奏モードが終了されないと、制御部１０は１５０段階に移行して継続して動き値を算出し、１６０段階において動き値に従属するサウンドを出力する。
したがって、移動通信端末機のユーザーは、まるで実際の楽器で演奏するようなサウンドが聞けるわけである。
【００３３】
図３は本発明の好適な実施の形態による移動通信端末機における動きに従属するサウンド生成のための制御の流れを説明する図、図４は本発明の好適な実施の形態による移動通信端末機におけるサウンド生成時の画面の例示図である。
【００３４】
図３を参照すれば、制御部１０は、ユーザーにより演奏モードが選択されると、２１０段階において各種打楽器を表示部３０上に表示する。打楽器はドラム、タンバリン、鼓などになり得る。そして、制御部１０は、２２０段階において表示された打楽器の何れか一つがユーザーにより選択されたかを判断する。ユーザーが所定の打楽器を選択すると、制御部１０は２３０段階において動作認識センサー部５０を通して移動通信端末機の動きがあるかをチェックする。続いて、制御部１０は２４０段階において移動通信端末機の往復運動が１回あったかを判断する。すなわち、制御部１０は、動作認識センサー部５０からの感知信号を用いて、移動通信端末機が一定速度以上で１回往復運動したかを判断する。
【００３５】
移動通信端末機が１回往復運動したのであれば、制御部１０は２５０段階においてユーザーにより選択された打楽器のサウンドを出力する。このとき、出力される打楽器のサウンドは、打楽器を一回叩いた時に出すサウンドとすることができ、打楽器を２回叩いた時に出すサウンドとすることもできる。そして、制御部１０は２６０段階において演奏モードが終了したかを判断する。前述したように、演奏モードはユーザーにより終了されるが、例えば、着信される場合に終了される。演奏モードが終了されていないと、制御部１０は段階２４０に移行する。
【００３６】
一方、移動通信端末機の往復運動によるサウンドを出力するとき、表示部３０上に図４に示すようなイメージや動映像を表示できる。
【００３７】
このように、移動通信端末機のユーザーがカラオケなどにおいてタンバリンを選択後に移動通信端末機を振ると、タンバリンサウンドが出力されるため、まるで実際にタンバリンを振るようなサウンドが聞ける。
【００３８】
図５は本発明の好適な実施の形態による移動通信端末機における動きに従属するサウンド生成のための他の制御の流れを説明する図、図６Ａおよび図６Ｂは本発明の好適な実施の形態による移動通信端末機におけるサウンド生成時の他の画面の例示図である。
【００３９】
制御部１０は、ユーザーにより演奏モードが選択されると、３３０段階において動作認識センサー部５０を通して移動通信端末機の動きがあるかをチェックする。続いて、制御部１０は３４０段階において移動通信端末機の往復運動があるかを判断する。制御部１０は、動作認識センサー部５０からの感知信号を用いて、移動通信端末機が一定速度以上で往復運動したかを判断する。
移動通信端末機が１回往復運動したのであれば、制御部１０は３５０段階において往復運動に対応する各音符をディスプレイすると共にサウンドを出力する。
本発明の一実施の形態によって音楽を構成する音符が識別できる所定のインジケーターを含むことができる。
【００４０】
続いて、制御部１０は３６０段階において演奏モードが終了したかを判断する。演奏モードが終了されていないと、制御部１０は３４０段階に移行する。
移動通信端末機の往復運動によるサウンドを出力するとき、表示部３０上に図６Ａに示すようなイメージを表示する。また、本発明は図６Ｂに示すように、現在出力されるサウンドに対応する音符をａ矢印のように表示できる。
【００４１】
図７は本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習の設定方法を画面変化に基づいて示す図である。
【００４２】
図７(１ａ)はビートボックス学習を設定するための初期画面を例示したものである。ビートボックス（BEATBOX）は“ヒップホップ１（HIPHOP1）”、楽器（INSTRUMENT）は“小鼓（SMALL DRUM）”、ボリューム（VOLUME）の設定値はデフォルトで表示されたもので、ユーザーが変更したいときは各々調整可能である。すなわち、ビートボックスにフォーカスした状態においてメニューキーを押すと、図７(１ｂ)のようにビートボックスの種類が表示された下位メニュー画面が表示され、上/下方キーを用いて所望のものを選択できる。図７(１ｃ)のように下方キーを用いてグッコリ調子（Goodgery Rhythm；グッコリ調子は韓国の民謡の１つである）を選択し、確認キーを押すと、図７(１ｄ)のようにビートボックスがグッコリ調子に変更表示される。楽器やボリュームは変更したくないときは、すぐ確認キーを押すと、図７(１ｇ)のようにビートボックス学習の画面が表示される。
【００４３】
楽器の種類も変更したいときは、図７(１ｄ)の状態において下方キーを押すと、図７(１ｅ)のように楽器にフォーカスした状態になる。以後、具体的な楽器種類の選択は示さないが、前述したビートボックスの場合と同様である。以後、ボリュームは変更したくないときは、すぐ確認キーを押すと、図７(１ｇ)のようにビートボックス学習の画面が表示される。
【００４４】
ボリュームの設定も変更したいときは、図７(１ｅ)の状態において下方キーを押すと、図(１ｆ)のようにボリュームにフォーカスした状態になる。このとき、左/右方キーを用いてボリュームを調整できる。以後、確認キーを押すと、図７(１ｇ)のようにビートボックス学習の画面が表示される。
図７(１ｇ)のように、ビートボックス学習の画面が表示された後は、後述するビートボックス学習の演奏が行われる。
【００４５】
図８は本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習の演奏方法を画面変化に基づいて示す図である。
ビートボックス学習の演奏は、聞き取り及び真似が交互に示され、これにより選択したビートを学習できる。２小節のビートボックスを学習する場合を仮定して具体的に説明すれば、次の通りである。
【００４６】
図８(２ａ)は、前述した図７(１ｆ)と同様に、ビートボックスは“グッコリ調子”、楽器は“小鼓”に設定したと仮定し、ボリュームの設定段階から示すものである。このとき、左/右方キーを用いてボリュームを調整して確認キーを押すと、図８(２ｂ)(図７(１ｇ)と同様)のようにビートボックス学習の画面が表示される。もし、図８(２ｂ)の状態において取消キーを押すと、図８(２ａ)の状態に戻って更にボリュームを調整できる。
グッコリ調子の１小節は“ダン-ギ ダク ダン ダ-ル-ル-ル（DUNG-GI DUCK DUNG DU-RU-RU-RU）”、２小節は“クン-ギ ダク クン ダ-ル-ル-ル（KUNG-GI DUCK KUNG DU-RU-RU-RU）”である。
【００４７】
図８(２ｃ)は１小節の聞き取り画面を示す。このときはビートの一部を聞かせる。“演奏（PLAY）”ソフト(ｓｏｆｔ)キーはビート再生完了後に出力される。確認キーを押すと、図８(２ｄ)のような真似画面が表示される。聞き取り画面で聞いたビートを真似画面でユーザーが演奏すればよい。このとき、ユーザーが端末機を振ると、その振りによって音源が出力されてビートボックス演奏が行われる。しかし、端末機を振らないと、音源を出力しなくてビートボックス演奏が行われない。
【００４８】
以後、確認キーを押すと、図８(２ｅ)のような２小節の聞き取り画面が表示される。以後、ユーザーがさらに確認キーを押すと、図８(２ｆ)のような２小節の真似画面が表示される。２小節の聞き取り画面で聞いたビートを真似画面でユーザーが演奏すればよい。このときにも、ユーザーが端末機を振ると、その振りによって音源が出力されてビートボックス演奏が行われる。しかし、端末機を振らないと、音源を出力しなくてビートボックス演奏が行われない。以後、メニューキーを押すと、図８(２ｂ)のようなビートボックス学習画面が表示され、確認キーを押すと、図８(２ｇ)のようにモーションビートボックスの初期画面が表示される。
【００４９】
図９は本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を作る方法を画面変化に基づいて示す図である。
基本的な楽器の外にもユーザーが自分だけの楽器を作って用いられる。自分だけの楽器は、音源を録音できる作りと、録音された音源を再生し削除できる保管箱とからなる。楽器として用いる音源を録音するためには、まず録音時間を設定する。録音時間設定の後、音源が録音される時点を通知する棒グラフが表示され、録音される間にユーザーは音源として使用したい楽器のサウンドや声を出すようにする。このように録音された音源はビートボックス演奏及び学習で使用可能である。
【００５０】
図９(３ａ)は自分だけの楽器を作るための初期画面すなわちモーションビートボックス画面である。上/下方キーを用いてフォーカスを自分だけの楽器（MY INSTRUMENT）の項目に移動させて確認キーを押すと、図９(３ｂ)の自分だけの楽器の画面が表示される。上/下方キーを用いてフォーカスを作り（CUSTOMIZING）の項目に移動させて確認キーを押すと、図９(３ｃ)のように作りの画面が表示される。この状態において左/右方キーを用いて図９(３ｄ)のように録音時間を設定できる。録音時間が設定されると、図９(３ｅ)-(３ｈ)のような過程を経て録音される。このとき、ユーザーは録音の準備１１０、開始、実行１２０、完了を棒グラフの変化により認知できる。録音が完了すると、図９(３ｉ)のように録音ファイル名を入力する画面が表示される。ユーザーが録音ファイル名を入力して確認キーを押すと、図９(３ｊ)のように自分だけの楽器の画面が再表示されながら作業が終了する。
前記図９(３ｂ)-(３ｅ)の各状態において取消キーを押すと、以前の状態に戻る。
【００５１】
図１０は本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を確認する方法を画面変化に基づいて示す図である。
【００５２】
図１０(４ａ)は自分だけの楽器を確認するための初期画面すなわちモーションビートボックス画面である。上/下方キーを用いてフォーカスを自分だけの楽器（MY INSTRUMENTの項目に移動させて確認キーを押すと、図１０(４ｂ)のように自分だけの楽器の画面が表示される。上/下方キーを用いてフォーカスを保管箱（STORAGE SPACE）の項目に移動させて確認キーを押すと、図１０(４ｃ)のように保管箱の画面が表示される。この状態において上/下方キーを用いてフォーカスを移動させることができる。フォーカスが“声１（VOICE1）”項目に位置した場合、確認キーを押すと、図１０(４ｄ)のように“声１”確認画面が表示される。また、下の“メニュー（MENU）”ソフトキーを用いて詳細情報（DETAILED INFORMATION）を選択して確認キーを押すと、図１０(４ｅ)のように“声１”の詳細情報画面が表示される。詳細情報は例えばファイル形式、録音日付、容量、録音時間などを含むことができる。
前記図１０(４ｂ)、(４ｃ)の各状態において取消キーを押すと、以前の状態に戻る。
【００５３】
図１１は本発明の好適な実施の形態による移動通信端末機における電子オルゴール演奏方法を画面変化に基づいて示す図である。
【００５４】
図１１(５ａ)は電子オルゴール演奏を選択できる初期画面すなわちモーションビートボックス画面である。上/下方キーを用いてフォーカスを電子オルゴール（MUSIC BOX）の項目に移動させて確認キーを押すと、図１１(５ｂ)のように電子オルゴールメニュー画面が表示される。ここで、電子オルゴールメニューは電子オルゴール演奏対象曲のリストである。示すように、上/下方キーを用いてフォーカスを例えば“故郷の春（ARE YOU SLEEPING?）”項目に移動させて確認キーを押すと、図１１(５ｃ)のように“故郷の春”の歌詞の一定分量が画面に第１カラー(例：黒)で表示される。図１１(５ｃ)の状態においてユーザーが端末機を１回振ると、図１１(５ｄ)のように“故郷の春”の第一の階名に該当するサウンドを出力しながら、画面では前記第一の階名に該当する歌詞の字“私（ARE）”のカラーを第２カラー(例：青)に変化させる。そして、更にユーザーが端末機を振ると、図１１(５ｅ)のように“故郷の春”の第二の階名に該当するサウンドを出力しながら、画面では前記第二の階名に該当する歌詞の字“の（YOU）”のカラーを第２カラーに変化させる。以後、演奏が進行されるにつれて、すなわち、ユーザーが端末機を振る毎に一つずつの階名に該当するサウンドを出力しながら、字のカラーを変化させる。図１１(５ｆ)はユーザーが端末機を１１回振って図１１(５ｃ)で表示した歌詞の全分量が演奏された状態を示す。
【００５５】
図１２は本発明の好適な他の実施の形態による移動通信端末機の構成を示す図である。
図１のサウンドファイル格納部２２を具体的に示すことを除いては、前述の図１と同様である。よって、図１のサウンドファイル格納部２２が例えば図１２に示すサウンドファイル格納部２３のような細部構成を持つことを前提として、主要な構成要素の関連動作について説明する。
【００５６】
演奏に係る音楽情報を格納するサウンドファイル格納部２３は、ビートボックスの種類を格納する領域(ビートボックス保管箱)、基本的な楽器とユーザーにより作られた自分だけの楽器とを格納する領域(楽器保管箱)、背景画面の表示のために一定条件に応じて既設定された情報(例：階名又は演奏の進行に従うカラー、アバター等)を格納する領域(背景保管箱)、及び電子オルゴール演奏のための曲情報(階名及び歌詞)を格納する領域(電子オルゴール保管箱)等を具備できる。
【００５７】
表示部３０は、ビートボックスの種類、楽器の種類、ボリュームを変更できる画面(メニュー画面)、ビートボックス聞き取り画面、及びビートボックス真似画面を表示する。ビートボックス学習機能の使用に必要なユーザー入力はユーザーインターフェース部４０を通してなされる。制御部１０は、前記ユーザーインターフェース部４０を通した入力に応答して、前記表示部３０に当該メニュー画面が表示されるように制御し、ビートボックス学習の設定、ビートボックス学習の演奏、自分だけの楽器の作り、自分だけの楽器の確認などを制御し、ビートボックスの演奏を制御し、前記ビートボックス真似画面の表示状態において、前記動作認識センサー部５０により感知される端末機の運動状態に応じて演奏される拍子が変化するように制御する。
本実施の形態は、ビートボックス及び電子オルゴールに係る音楽情報を持つもので、これらの何れか一つを持ったり、他のものを持ったりできることは明らかである。
【００５８】
ビートボックス及び電子オルゴールで音源が出力されるとき、背景画面のカラーが異に出力される。
ユーザーがユーザーインターフェース部４０を通して電子オルゴール機能の実行を命令すると、制御部１０は、これを感知し、ユーザーの曲選択のために表示部３０を通して電子オルゴール演奏対象曲のリスト画面が表示されるように制御する。このとき、ユーザーの選択曲が無歌詞の階名だけの曲(例：ヨハンシュトラウスの“春の声、ワルツ”)であれば、当該曲が演奏されるにつれて、前記表示部３０に表示される背景画面が前記曲の階名に対応するカラーに変化するように制御できる。前記カラーの情報は背景画面保管箱を参照できる。このとき、演奏は階名単位になされ、次の階名への進行(演奏)可否は動作認識センサー部５０で移動通信端末機の運動を感知したか否かによる。換言すれば、電子オルゴール演奏対象曲の階名は既設定されているが、後述するビートボックスと同様に、ユーザーが端末機を振ると演奏がなされて拍子が変化する。すなわち、運動感知間隔が演奏間隔且つ拍子である。換言すれば、端末機の運動が感知される毎に一つずつ順次演奏曲の階名に対応するサウンドを出力する。また、無歌詞なので、背景画面に特定アバターを表示できる。例えば、階名が“ソ-ソ-ラ-ラ-ソ-ソ-ミのとき、赤-赤-青-青-赤-赤-黄の順に背景画面のカラーを変化させることができる。
【００５９】
歌詞がある曲を選択した場合、制御部１０は、その曲の当該歌詞が一定量だけ背景画面に表示されるように表示部３０を制御した状態において、動作認識センサー部５０により移動通信端末機の運動が感知される毎にその曲を階名単位に演奏すると共に、各階名に対応する字(歌詞の字)の表示形態が変化するように制御する。ここで、表示形態は点滅、カラーなど多様に具現できる。後者の場合に対する具体例として、画面に“私の住んだ故郷は”が黒の字で表示された状態において、現在“だ”に該当する階名“ハ”の電子音が出力されていると、階名“ソ”が赤、“ミ”が黄、“ハ”が青に設定されていると仮定する場合、“私の住んだ”までは階名が“ソソミハ”なので、各々赤、赤、黄、青に変化し、残り“故郷は”の字はそのまま黒を維持することになる。他の例として、“私の住んだ”までは赤に変化し、残り“故郷は”はそのまま黒を維持するようにできる。これは、但し演奏の進行可否に基づいて歌詞の字のカラーが変化するようにする場合である。
【００６０】
ビートボックスは、端末機を振って音源が出力される時及び端末機を振らなくて音源を出力しない時(無音源)、各々異なるカラーを背景画面に出力する。例えば、音源が出力される時は赤、無音源の時は既定の順序によりカラーを変化させたり赤でない他の一つのカラーを維持できる。また、ビートボックスは、端末機の振りがない時は音源を出力しなくてビートボックス演奏が行われず、振りがある時はその振りにより音源を出力してビートボックス演奏が行われる。
【００６１】
一方、動作認識センサー部５０は、物体の動きに対する情報を測定するセンサーであって、物体の位置変化を計算するために加速度を測定する加速度センサーと、物体の回転角変化を計算するために角速度を測定する角速度センサー{例えば、“ジャイロスコープ(ｇｙｒｏｓｃｏｐｅ)”}とを言う。本発明の好適な実施の形態を具現するのに加速度センサー又は角速度センサーが次の通り用いられるが、センサー自体に発明の要旨があるものではない。
【００６２】
加速度センサーを用いて端末機を振る時点を感知する方法は多様である。振る動作は急激な加速度の変化を発生させる。急激な加速度の変化は加速度を時間軸に示す時に大きい傾きを持つことで表現される。傾きに対する所定のしきい値を設定しておき、測定された加速度の傾きがそのしきい値を越えた時に振りが感知されたと判断できる。他の方法として、振る動作は加速度値自体を大きくする。加速度値に対する所定のしきい値を設定しておき、測定された加速度値がそのしきい値を越えた時に振りが感知されたと判断できる。さらに他の方法として、前記２種類の方法を共に適用して振りが感知されたと判断できる。
【００６３】
角速度センサーを用いて端末機を振る時点を感知する方法も多様である。振る動作は急激な角速度の変化を発生させる。急激な角速度の変化は角速度を時間軸に示す時に大きい傾きを持つことで表現される。傾きに対する所定のしきい値を設定しておき、測定された角速度の傾きがそのしきい値を越えた時に振りが感知されたと判断できる。他の方法として、振る動作は角速度値自体を大きくする。角速度値に対する所定のしきい値を設定しておき、測定された角速度値がそのしきい値を越えた時に振りが感知されたと判断できる。更に他の方法として、前記２種類の方法を共に適用して振りが感知されたと判断できる。
【００６４】
図１３は本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習の設定方法を示すフローチャートである。
【００６５】
制御部１０は、６１１段階においてビートボックス設定画面が表示されるように制御し、６１２段階においてメニューキー入力の有無をチェックし、チェックの結果、メニューキー入力が感知されると、６１３段階においてビートボックスメニュー画面が表示されるように制御し、６１４段階においてユーザーが画面によって表示されたビートボックス項目の何れか一つを選択したか否かをチェックする。ユーザーによる選択は図７に示すように上/下方キーと確認キーの入力により行われる。制御部１０は、選択が感知されると、６１５段階においてビートボックス選択内容を表示し、６１６段階において選択が終了したか否かをチェックし、選択が終了すると、６１８段階に移行して選択されたビートボックス学習の画面が表示されるように制御する。
【００６６】
これに対し、制御部１０は、選択が終了していないと、６１７段階において楽器設定画面が表示されるように制御し、６１９段階においてユーザーが画面に表示された楽器項目の何れか一つを選択したか否かをチェックする。前述した図７では楽器選択の中間過程が省略されているが、ビートボックスの選択時と同様に、メニューキー、上/下方キー及び確認キーの入力により楽器選択がなされることは明らかである。制御部１０は、楽器選択が感知されると、６２０段階において楽器選択内容を表示し、６２１段階において選択が終了したか否かをチェックし、選択が終了すると、６１８段階に移行して選択されたビートボックス学習の画面が表示されるように制御する。
【００６７】
これに対し、制御部１０は、選択が終了していないと、６２２段階においてボリューム設定画面が表示されるように制御し、６２３段階においてユーザーが画面に表示された楽器項目の何れか一つを選択したか否かをチェックする。前述した図７ではボリューム選択の中間過程が省略されているが、左/右方キーと確認キーの入力によりボリューム選択がなされることは明らかである。制御部１０は、ボリューム選択が感知されると、６２４段階においてボリューム選択内容を表示し、６２５段階において選択が終了したか否かをチェックし、選択が終了すると、６１８段階に移行して選択されたビートボックス学習の画面が表示されるように制御する。
【００６８】
図１４Ａ及び図１４Ｂは、本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習の演奏方法を示すフローチャートである。
【００６９】
図１４Ａを参照すれば、制御部１０は、７１１段階においてビートボックス学習の演奏画面が表示されるように制御し、７１２段階において確認キー入力の有無をチェックし、確認キー入力が感知されると、７１３段階においてビートボックスの種類を表示する。また、制御部１０は、７１４段階において確認キー入力の有無をチェックし、確認キー入力が感知されると、７１５段階においてビートボックス演奏画面が表示されるように制御し、７１６段階において確認キー入力の有無をチェックし、確認キー入力が感知されると、７１７段階において真似画面の表示及び演奏を行う。また、 制御部１０は、７１８段階において動作認識センサー部５０により端末機の振りが感知されるか否かをチェックし、振りが感知されると、７１９段階においてその感知された振りによってビートボックスを出力する。
これに対し、図１４Ｂを参照すれば、制御部１０は、振りが感知されないと、７２０段階において確認キー入力の有無をチェックし、確認キー入力が感知されると、７２１段階においてビートボックス演奏画面が表示されるように制御する。また、制御部１０は、７２２段階において確認キー入力の有無をチェックし、確認キー入力が感知されると、７２３段階において真似画面の表示及び演奏を行う。また、制御部１０は、７２４段階において動作認識センサー部５０により端末機の振りが感知されるか否かをチェックし、振りが感知されると、７２５段階においてその感知された振りに従ってビートボックスを出力する。そして、制御部１０は、７２６段階においてメニューキー入力の有無をチェックし、メニューキー入力が感知されると、図１４Ａの７１３段階に移行してビートボックスの種類を表示する。
７２６段階においてメニューキー入力が感知されないと、制御部１０は、７２７段階において確認キー入力の有無をチェックし、確認キー入力が感知されると、７２８段階においてモーションビートボックス画面を表示し、作業を終了する。
【００７０】
図１５は本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を作る方法を示すフローチャートである。
【００７１】
制御部１０は、８１１段階においてモーションビートボックスのメニュー画面が表示されるように制御し、８１２段階において自分だけの楽器を選択したかチェックし、自分だけの楽器が選択されると、８１３段階において自分だけの楽器メニュー画面が表示されるように制御する。また、制御部１０は、８１４段階において作りが選択されたかチェックし、作りが選択されると、８１５段階において録音時間設定画面が表示されるように制御する。また、制御部１０は、８１６段階において録音時間設定の有無をチェックし、録音時間が設定されると、８１７段階において録音準備及び棒グラフ表示を行う。録音準備ができれば録音を開始する。そして、制御部１０は、８１８段階において録音が完了したかチェックし、録音が完了すると、８１９段階において録音ファイル名を入力し、８２０段階において前記入力された名で録音ファイルを格納し、自分だけの楽器メニュー画面が表示されるように制御する。
【００７２】
図１６は本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を確認する方法を示すフローチャートである。
【００７３】
制御部１０は、９１１段階においてモーションビートボックスメニュー画面が表示されるように制御し、９１２段階において自分だけの楽器を選択したかチェックし、自分だけの楽器が選択されると、９１３段階において自分だけの楽器メニュー画面が表示されるように制御する。また、制御部１０は、９１４段階において保管箱が選択されたかチェックし、保管箱が選択されると、９１５段階において保管箱メニュー画面が表示されるように制御する。そして、制御部１０は、９１６段階において“声１”を、単純選択したか、その詳細情報を選択したかをチェックし、単純選択であれば、９１７段階において“声１の再生”を表示し、詳細情報を選択すれば、９１８段階において詳細情報画面が表示されるように制御する。
【００７４】
図１７は本発明の好適な実施の形態による移動通信端末機における電子オルゴール演奏方法を示すフローチャートである。
【００７５】
制御部１０は、１０１１段階において表示部３０を通してモーションビートボックスメニュー画面が表示されるように制御し、１０１２段階において電子オルゴール選択の有無をチェックし、電子オルゴールが選択されると、１０１３段階において表示部３０を通して電子オルゴールメニュー画面が表示されるように制御する。そして、制御部１０は、１０１４段階において電子オルゴールメニュー画面に表示された演奏曲の何れか一つが選択されたかチェックし、演奏曲が選択されると、１０１５段階において当該演奏曲の曲情報画面が表示部３０に表示されるように制御する。曲情報画面表示の後、制御部１０は、１０１６段階においてn番目の振りを感知し、１０１７段階において演奏曲の第n番目の階名のサウンドを出力する。続いて、制御部１０は、１０１８段階において演奏曲の全ての階名を演奏したか否かをチェックし、全ての階名が演奏されると作業を終了し、そうでなければ、１０１６段階に移行する。
【００７６】
図１８は本発明の好適な実施の形態による移動通信端末機における背景画面を変更する方法を示すフローチャートである。
【００７７】
制御部１０は、１１１１段階において現状態がビートボックス学習演奏モードか否かをチェックし、現状態がビートボックス学習演奏モードであれば、１１１２段階において第１音源演奏か否かをチェックする。第１音源演奏であれば、制御部１０は、１１１６段階において第３カラーの背景画面を出力し、第１音源演奏でなければ、１１１３段階において第２音源演奏か否かをチェックする。 第２音源演奏であれば、制御部１０は、１１１７段階において第２カラーの背景画面を出力し、第２音源演奏でなければ、１１１４段階において無音源か否かをチェックする。無音源であれば、制御部１０は、１１１５段階において第１カラーの背景画面を出力する。
【００７８】
各演奏は端末機の運動感知の有無によるが、運動感知と演奏の関係は図１４Ａ、図１４Ｂ及び図１７で十分説明されているので、具体的に記載しない。
【００７９】
また、図７又は図８を参照すれば、楽器を選択できる窓は一つなので、演奏楽器は固定されているが、学習機能でなく単純演奏機能であれば、二つ以上の楽器を選択できるように具現可能である。例えば、実際の演奏時に端末機を振ると共に、特定ボタンを押すか否かによって“クン-ギ ダク クン”の“クン-ギ ダク”は小鼓のサウンド、“クン”は大鼓のサウンドで演奏できる。図示例において、第１音源と第２音源は互いに異なる楽器のサウンドであることを意味する。
【００８０】
制御部１０は、１１１１段階においてビートボックス学習演奏モードでなければ、１１１８段階において電子オルゴール演奏モードか否かをチェックし、電子オルゴール演奏モードであれば、１１１９段階において選択曲の歌詞を画面に表示する。また、制御部１０は、１１２０段階において振りが感知される毎に当該曲の階名に該当するサウンドを演奏しながら、前記階名に該当する画面の歌詞の字のカラーを、最初{１１１９段階、例：図１１(５ｃ)}表示された時と異なるカラーに変更する{例：図１１(５ｄ)、(５ｅ)、(５ｆ)}。
また、示していないが、振りが感知される毎に当該曲の階名を一つずつ演奏するが、サウンドファイル格納部２３の背景保管箱を参照して、各階名に従うカラーを持つ背景画面を出力するように具現できる。
また、示していないが、曲選択の後、画面に予め一つのカラーで表示された一定量の歌詞において、現在演奏される階名に該当する字のカラーを前記階名に該当するカラーに変化するように具現できる。
また、端末機の振りが感知される毎に多数の階名を同時に或いは順次演奏できる。つまり、振り感知に適応的に和音(ｃｈｏｒｄ)演奏或いは所定区間(例：節)演奏が可能である。一例として、サウンドファイル格納部２３にある曲に対するメロディと和音を予め格納しておき、ユーザーが端末機を１回振ると一音とその音に対応する和音が演奏される。他の例として、サウンドファイル格納部２３にある曲に対する和音を予め格納しておき、ユーザーが端末機を１回振る毎に一和音ずつ演奏される。このような場合は、ユーザーが直接歌を歌いながら端末機を振ってその歌の和音を演奏したい時使用するためである。更に他の例として、サウンドファイル格納部２３にある曲を節単位に区分して予め格納しておき、ユーザーが端末機を振る毎に一節ずつ順次演奏される。
【００８１】
なお、本発明の詳細な説明では具体的な実施の形態について説明したが、本発明の要旨から逸脱しない範囲内で多様に変形できる。例えば、詳細な説明では、主に移動通信端末機の往復運動に応答してサウンドを出力する場合を例として説明したが、本発明は移動通信端末機の動きがある場合にも適用可能であることは当業者に明らかである。例えば、移動通信端末機が一方向のみに動く場合にも本発明はその動きに従属するサウンドを出力できるように構成でき、演奏した曲をメモリに格納した後に再生できる。よって、本発明の範囲は説明された実施の形態に限るものではなく、特許請求の範囲だけでなくその均等物等により定めなければならない。
【図面の簡単な説明】
【００８２】
【図１】本発明の実施の形態による移動通信端末機のブロック構成図である。
【図２】本発明による移動通信端末機における動きに従属するサウンドを生成するための制御の流れを示す図である。
【図３】本発明の好適な実施の形態による移動通信端末機における動きに従属するサウンド生成のための制御の流れを説明する図である。
【図４】本発明の好適な実施の形態による移動通信端末機におけるサウンド生成時の画面の例示図である。
【図５】本発明の好適な実施の形態による移動通信端末機における動きに従属するサウンド生成のための他の制御の流れを説明する図である。
【図６Ａ】本発明の好適な実施の形態による移動通信端末機におけるサウンド生成時の他の画面の例示図である。
【図６Ｂ】本発明の好適な実施の形態による移動通信端末機におけるサウンド生成時の他の画面の例示図である。
【図７】本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習を設定する方法を画面変化に基づいて示す図である。
【図８】本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習演奏方法を画面変化に基づいて示す図である。
【図９】本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を作る方法を画面変化に基づいて示す図である。
【図１０】本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を確認する方法を画面変化に基づいて示す図である。
【図１１】本発明の好適な実施の形態による移動通信端末機における電子オルゴール演奏方法を画面変化に基づいて示す図である。
【図１２】本発明の好適な実施の形態による移動通信端末機の構成を示す図である。
【図１３】本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習設定方法を示すフローチャートである。
【図１４Ａ】本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習演奏方法を示すフローチャートである。
【図１４Ｂ】本発明の好適な実施の形態による移動通信端末機におけるビートボックス学習演奏方法を示すフローチャートである。
【図１５】本発明の好適な実施の形態による移動通信端末機における自分だけの楽器を作る方法を示すフローチャートである。
【図１６】発明の好適な実施の形態による移動通信端末機における自分だけの楽器を確認する方法を示すフローチャートである。
【図１７】本発明の好適な実施の形態による移動通信端末機における電子オルゴール演奏方法を示すフローチャートである。
【図１８】本発明の好適な実施の形態による移動通信端末機における背景画面を変更する方法を示すフローチャートである。
【図１】
2006065331.tif 000003
【図２】
2006065331.tif 000004
【図３】
2006065331.tif 000005
【図４】
2006065331.tif 000006
【図５】
2006065331.tif 000007
【図６Ａ】
2006065331.tif 000008
【図６Ｂ】
2006065331.tif 000009
【図７】
2006065331.tif 000010
【図８】
2006065331.tif 000011
【図９】
2006065331.tif 000012
【図１０】
2006065331.tif 000013
【図１１】
2006065331.tif 000014
【図１２】
2006065331.tif 000015
【図１３】
2006065331.tif 000016
【図１４Ａ】
2006065331.tif 000017
【図１４Ｂ】
2006065331.tif 000018
【図１５】
2006065331.tif 000019
【図１６】
2006065331.tif 000020
【図１７】
2006065331.tif 000021
【図１８】
2006065331.tif 000022