(57)【特許請求の範囲】
【請求項１】
指定音の音高および発音時点を示す基本情報と、相前後する各指定音のレガートに関するレガート情報と、指定音の発音文字を示す文字情報とを指定音毎に含む音楽情報を利用して、前記基本情報が示す音高に応じて第１軸の方向の位置が決定されるとともに前記基本情報が示す発音時点に応じて第２軸の方向の位置が決定された音指示子を指定音毎に表示装置に表示させる表示制御手段を具備し、
前記表示制御手段は、前記レガートの先行音の音指示子と後続音の音指示子とを連結する形状の連結部を前記表示装置に表示させるとともに、前記先行音の文字情報が指定する発音文字と前記後続音の文字情報が指定する発音文字との境界線を、利用者から指示された可変の位置に表示させる
音楽情報処理装置。
【請求項２】
指定音の音高および発音時点を示す基本情報と、指定音の発音文字を示す文字情報とを指定音毎に含む音楽情報を利用して、前記基本情報が示す音高に応じて第１軸の方向の位置が決定されるとともに前記基本情報が示す発音時点に応じて第２軸の方向の位置が決定された音指示子を指定音毎に表示装置に表示させる表示制御手段を具備し、
前記表示制御手段は、前記文字情報が指定する発音文字の分類毎に相異なる態様で前記音指示子を前記表示装置に表示させる
音楽情報処理装置。
【請求項３】
指定音の音高および発音時点を示す基本情報と、相前後する各指定音のレガートに関するレガート情報と、指定音の発音文字を示す文字情報とを指定音毎に含む音楽情報を利用して、前記基本情報が示す音高に応じて第１軸の方向の位置が決定されるとともに前記基本情報が示す発音時点に応じて第２軸の方向の位置が決定された音指示子を指定音毎に表示装置に表示させる音楽情報処理方法において、
前記レガートの先行音の音指示子と後続音の音指示子とを連結する形状の連結部を前記表示装置に表示させるとともに、前記先行音の文字情報が指定する発音文字と前記後続音の文字情報が指定する発音文字との境界線を、利用者から指示された可変の位置に表示させる
音楽情報処理方法。
【請求項４】
指定音の音高および発音時点を示す基本情報と、指定音の発音文字を示す文字情報とを指定音毎に含む音楽情報を利用して、前記基本情報が示す音高に応じて第１軸の方向の位置が決定されるとともに前記基本情報が示す発音時点に応じて第２軸の方向の位置が決定された音指示子を指定音毎に表示装置に表示させる音楽情報処理方法において、
前記文字情報が指定する発音文字の分類毎に相異なる態様で前記音指示子を前記表示装置に表示させる
音楽情報処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音楽に関する情報を表示する技術に関する。
【背景技術】
【０００２】
音高と発音時点とを音毎に指定する音楽情報（スコアデータ）を利用して音声を合成する技術が従来から提案されている。利用者は、音楽情報を可視化した画像（以下「音楽情報画像」という）を表示装置で確認しながら音楽情報を作成または編集する。例えば特許文献１に開示されるように、音楽情報画像は、合成の対象として指定された音（以下「指定音」という）を示す図形（以下「音指示子」という）を時系列に配列した画像（ピアノロール）である。縦軸の方向における音指示子の位置は指定音の音高に応じて決定され、横軸の方向における音指示子の位置は指定音の発音の時点に応じて決定される。
【０００３】
特許文献１には、各指定音に指示された属性を表す画像（以下「属性画像」という）を音指示子の近傍に配置する技術が開示されている。以上の構成によれば、利用者は、各指定音について音量やビブラートなどの属性を確認しながら音楽情報を編集することが可能である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第３８２３９２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、特許文献１の技術では、音指示子とは別個の属性画像が各音指示子の近傍に配置されるから、音楽情報画像が複雑化して各指定音の属性の確認が困難となり、音楽情報の作成や編集の効率が低下するという問題がある。各指定音に多数の属性が付与された場合には、相異なる属性に対応する多数の属性画像が１個の音指示子の近傍に密集するから、各指定音の属性の確認が困難になるという問題は特に深刻化する。以上の事情を考慮して、本発明は、音楽情報画像を過度に複雑化せずに各指定音の属性を表示することを目的とする。
【課題を解決するための手段】
【０００６】
以上の課題を解決するために、本発明の音楽情報処理装置は、指定音（合成の対象として指定された音響）の音高および発音時点を示す基本情報と当該指定音の属性を示す属性情報とを指定音毎に含む音楽情報を記憶する記憶手段（例えば図１の記憶装置１２）と、基本情報が示す音高に応じて第１軸の方向の位置が決定されるとともに基本情報が示す発音時点に応じて第２軸の方向の位置が決定された音指示子を、当該指定音の属性情報に応じた態様の図形として指定音毎に表示装置に表示させる表示制御手段とを具備する。以上の態様においては、属性情報に応じた態様で指定音の音指示子が表示される（すなわち、属性情報が音指示子と一体的に表示される）から、属性情報に応じた属性画像を音指示子とは別個に配置する特許文献１の技術と比較して、音指示子の表示（音楽情報画像）が簡素化される。したがって、各指定音の属性を利用者が容易に確認できるという利点がある。
【０００７】
「音指示子の態様」とは、人間が視覚的に認識できる画像の状態を意味する。例えば、音指示子の形状（サイズを含む），階調の濃淡，表示色（色相，明度，彩度）、またはこれらの組合せが「音指示子の態様」の概念に包含される。
【０００８】
本発明の好適な態様において、属性情報は、指定音に付加されるビブラートに関するビブラート情報を含み、表示制御手段は、ビブラート情報が示すビブラートを表す波状の輪郭線（例えば図５の輪郭線Ｌ）を含む音指示子（例えば図４の音指示子ＰB）を表示装置に表示させる。以上の態様においては、属性情報のビブラート情報に応じた波状の輪郭線を音指示子が含むから、指定音におけるビブラートの有無を利用者が容易に把握できるという利点がある。具体的な態様において、ビブラート情報は、ビブラート深度（例えば図３のビブラート深度ｖ2）とビブラート速度（例えば図３のビブラート速度ｖ3）とを示し、表示制御手段は、ビブラート深度に応じた振幅とビブラート深度に応じた波長（周期）とに設定された波状の輪郭線を含む音指示子を表示装置に表示させる。以上の態様においては、ビブラート深度やビブラート速度に応じた輪郭線の音指示子が表示されるから、指定音に付加されるビブラートのビブラート深度やビブラート速度を利用者が容易に把握できるという利点がある。
【０００９】
本発明の好適な態様において、属性情報は、指定音の音量を示す音量情報を含み、表示制御手段は、音量情報が示す音量に応じた態様の音指示子（例えば図４の音指示子ＰA）を表示装置に表示させる。以上の態様においては、音指示子が音量情報に応じた態様で表示されるから、各指定音の音量を利用者が容易に把握できるという利点がある。具体的な態様において、表示制御手段は、音量情報が示す音量に応じて階調の濃淡が設定された音指示子を表示装置に表示させる。
【００１０】
本発明の好適な態様において、属性情報は、相前後する各指定音のレガートに関するレガート情報を含み、表示制御手段は、レガートの先行音の音指示子（例えば図４の音指示子ＰC1）と後続音の音指示子（例えば図４の音指示子ＰC2）とを連結する形状の連結部を表示装置に表示させる。以上の態様においては、レガートで連結される先行音および後続音の各々の音指示子が相互に連結されるから、各指定音の相互間のレガートの有無を利用者が容易に把握できるという利点がある。
【００１１】
本発明の好適な態様において、属性情報は、指定音の発音文字を示す文字情報を含み、表示制御手段は、文字情報が指定する発音文字に対応する各音単位の境界線（例えば図８から図１０の境界線ｂ）を、利用者から指示された可変の位置に表示させる。以上の態様においては、各指定音の発音文字に対応する音単位の境界を利用者が容易に調整できるという利点がある。なお、音単位とは、境界線で区切られる単位を意味し、典型的には発音文字（音節）や音素（音韻）や音声素片（音素または音素連鎖）である。なお、以上の態様の具体例は第３実施形態として後述される。
【００１２】
本発明の好適な態様において、属性情報は、指定音の発音文字を示す文字情報を含み、表示制御手段は、文字情報が指定する発音文字の分類毎に相異なる態様で音指示子を表示装置に表示させる。以上の態様においては、各指定音の発音文字の分類毎に相異なる態様で音指示子が表示されるから、各指定音の発音文字の分類を利用者が容易に把握できるという利点がある。なお、以上の態様の具体例は第２実施形態として後述される。
【００１３】
以上の各態様に係る音楽情報処理装置は、音楽情報の処理に専用されるＤＳＰ（Digital Signal Processor）などのハードウェア（電子回路）によって実現されるほか、ＣＰＵ（Central Processing Unit）などの汎用の演算処理装置とプログラムとの協働によっても実現される。本発明に係るプログラムは、指定音の音高および発音時点を示す基本情報と当該指定音の属性を示す属性情報とを指定音毎に含む音楽情報を記憶する記憶手段を具備するコンピュータに、基本情報が示す音高に応じて第１軸の方向の位置が決定されるとともに基本情報が示す発音時点に応じて第２軸の方向の位置が決定された音指示子を当該指定音の属性情報に応じた態様で指定音毎に表示装置に表示させる表示制御処理を実行させる。以上のプログラムによれば、本発明に係る音楽情報処理装置と同様の作用および効果が実現される。本発明のプログラムは、コンピュータが読取可能な記録媒体に格納された形態で利用者に提供されてコンピュータにインストールされるほか、通信網を介した配信の形態でサーバ装置から提供されてコンピュータにインストールされる。
【図面の簡単な説明】
【００１４】
【図１】第１実施形態に係る音楽情報処理装置のブロック図である。
【図２】音楽情報の模式図である。
【図３】基本情報および属性情報の模式図である。
【図４】音楽情報画像の模式図である。
【図５】ビブラートが指定された場合の音指示子の模式図である。
【図６】音指示子の具体例である。
【図７】第２実施形態における音楽情報画像の模式図である。
【図８】第３実施形態における音指示子の模式図である。
【図９】第３実施形態の変形例における音指示子の模式図である。
【図１０】第３実施形態の変形例における音指示子の模式図である。
【図１１】変形例に係る音指示子の模式図である。
【図１２】変形例に係る音指示子の模式図である。
【図１３】操作画像の模式図である。
【発明を実施するための形態】
【００１５】
＜Ａ：第１実施形態＞
図１は、本発明の第１実施形態に係る音楽情報処理装置１００のブロック図である。音楽情報処理装置１００は、歌唱音などの様々な音声（以下「合成音」という）を合成する装置であり、図１に示すように、制御装置１０と記憶装置１２と入力装置１４と表示装置１６と放音装置１８とを具備するコンピュータシステムで実現される。
【００１６】
制御装置（ＣＰＵ）１０は、記憶装置１２に記憶されたプログラムＰGの実行で、音声信号ＳOUTの生成に必要な複数の機能（情報生成部２２，音声合成部２４，表示制御部２６）を実現する。音声信号ＳOUTは、合成音の波形を表す信号である。なお、制御装置１０の各要素を専用の電子回路（ＤＳＰ）で実現した構成や、制御装置１０の各要素を複数の集積回路に分散した構成も採用され得る。
【００１７】
入力装置１４は、利用者からの指示を受付ける機器（例えばマウスやキーボード）である。表示装置（例えば液晶表示装置）１６は、制御装置１０から指示された画像を表示する。放音装置（例えばスピーカやヘッドホン）１８は、制御装置１０が生成する音声信号ＳOUTに応じた音波を放射する。
【００１８】
記憶装置１２は、制御装置１０が実行するプログラムＰGや制御装置１０が使用する各種のデータ（ＤV，ＳD）を記憶する。半導体記録媒体や磁気記録媒体などの公知の記録媒体が記憶装置１２として任意に採用される。図１に示すように、記憶装置１２は、合成音の素材として利用される音声データＤVと、合成音を構成する各音（指定音）の特性を示す音楽情報（スコアデータ）ＳDとを記憶する。
【００１９】
音声データＤVは、相異なる音声素片に対応する複数の素片データ（例えば音声素片の時間波形や特徴量を示すデータ）を含んで構成される。音声素片は、音声を聴覚的に区別し得る最小の単位に相当する音素、または複数の音素を連結した音素連鎖である。
【００２０】
音楽情報ＳDは、図２に例示するように、相異なる指定音に対応する複数の単位情報Ｕの集合である。複数の単位情報Ｕの各々は、基本情報ＵAと属性情報ＵBとを含んで構成される。図３に示すように、基本情報ＵAは、指定音の音高を示す音高情報（ノートナンバ）Ａ1と、指定音の発音の時点を示す時間情報Ａ2とを含む。時間情報Ａ2は、例えば指定音の発音の始点および終点の時刻（あるいは発音の始点の時刻と発音を継続する時間長）を示す。
【００２１】
属性情報ＵBは、指定音の音楽的な属性を示す情報である。本実施形態の属性情報ＵBは、図３に例示するように、文字情報Ｂ1と音量情報Ｂ2とビブラート情報Ｂ3とレガート情報Ｂ4とのうちの１種以上の情報を含み得る。文字情報Ｂ1は、指定音の発音文字（典型的には歌詞）を示す。発音文字は、音声を区分した言語的な最小単位（音節）に相当する。音量情報Ｂ2は、指定音の音量（ダイナミクス）を示す。音量情報Ｂ2は、１個の指定音について１種類の音量を示すほか、１個の指定音の始点から終点までの区間にわたる音量の変化を示し得る。
【００２２】
ビブラート情報Ｂ3は、指定音に付加されるビブラートの特性を示す情報であり、遅延時間ｖ1とビブラート深度ｖ2とビブラート速度ｖ3と継続時間ｖ4とを含んで構成される。遅延時間ｖ1は、指定音の始点からビブラートが開始するまでの時間を意味する。ビブラート深度ｖ2は、ビブラートによる音高の変動幅に相当し、ビブラート速度ｖ3は、ビブラートによる音高の変化の速度（周波数）に相当する。また、継続時間ｖ4は、ビブラートが継続する時間長を意味する。
【００２３】
レガート情報Ｂ4は、相前後する指定音間のレガートを示す。レガートは、音高が相違する２個の指定音を滑らかに連続させる音楽的な表現である。本実施形態のレガート情報Ｂ4は、レガートで連結される先行音／後続音を指定音毎に示す情報である。なお、ビブラートやレガートが付加されない指定音の属性情報ＵBにはビブラート情報Ｂ3やレガート情報Ｂ4は含まれない。
【００２４】
図１の情報生成部２２は、入力装置１４が利用者から受付けた指示に応じて音楽情報ＳDを生成および更新する。音声合成部２４は、記憶装置１２に格納された音楽情報ＳDが示す指定音を時系列に配列した合成音の音声信号ＳOUTを生成する。具体的には、音声合成部２４は、記憶装置１２に記憶された音声データＤVのうち音楽情報ＳDの各指定音の文字情報Ｂ1に対応する素片データを、当該指定音の基本情報ＵAの音高情報Ａ1が指定する音高と時間情報Ａ2が指定する時点および時間長に調整して相互に連結することで音声信号ＳOUTを生成する。
【００２５】
各指定音（素片データ）には、音楽情報ＳDの属性情報ＵBに応じた属性が付与される。例えば、音声合成部２４は、各指定音の音量（強度）を音量情報Ｂ2に応じて調整する。また、音声合成部２４は、ビブラート情報Ｂ3に応じたビブラートが付加されるように各素片データを加工し、レガート情報Ｂ4が示す各指定音（先行音，後続音）が滑らかに連続するように各素片データを加工する。音楽情報ＳDを利用した音声信号ＳOUTの生成（素片データを利用した音声信号ＳOUTの生成や属性情報ＵBに応じた属性の付加）には公知の技術が任意に採用される。
【００２６】
図１の表示制御部２６は、音楽情報ＳDを可視化した音楽情報画像４０を生成して表示装置１６に表示させる。利用者は、音楽情報画像４０を確認しながら入力装置１４を適宜に操作することで音楽情報ＳDを生成または編集する。図４は、音楽情報画像４０の模式図である。図４の例示のように、音楽情報画像４０は、音高に対応する縦軸（音高軸）と時間に対応する横軸（時間軸）とが設定されたピアノロール型の作業領域４２を含んで構成される。
【００２７】
利用者は、音楽情報画像４０を視認しながら入力装置１４を適宜に操作することで指定音の音高と発音の始点および終点とを指示する。表示制御部２６は、利用者から指示された指定音に対応した音指示子Ｐ（ＰA，ＰB，ＰC1，ＰC2）を作業領域４２内に配置する。音高軸の方向における音指示子Ｐの位置は利用者が指示した音高に応じて決定され、時間軸の方向における音指示子Ｐの位置は利用者が指示した発音の始点（または終点）に応じて決定される。また、時間軸の方向における音指示子Ｐの寸法は、利用者が指示した指定音の時間長に応じて決定される。情報生成部２２は、利用者が指示した指定音の音高情報Ａ1と時間情報Ａ2とを含む単位情報Ｕを生成して記憶装置１２に格納する。以上の処理が反復されることで、利用者から指示された複数の指定音の各々について、単位情報Ｕ（基本情報ＵA）が記憶装置１２に格納されるとともに音指示子Ｐが音楽情報画像４０の作業領域４２内に配置される。
【００２８】
利用者は、各音指示子Ｐを選択して入力装置１４を適宜に操作することで、その音指示子Ｐの指定音に対する所望の属性（発音文字，音量，ビブラート，レガート）の付加や既定の属性の変更を指示する。情報生成部２２は、音楽情報ＳDのうち利用者が選択した指定音の単位情報Ｕの属性情報ＵBを利用者からの指示に応じて生成または更新する。そして、表示制御部２６は、各指定音の属性情報ＵBに応じた態様で音指示子Ｐを表示させる。具体的には以下の通りである。
【００２９】
表示制御部２６は、音量情報Ｂ2が示す音量に応じて各音指示子Ｐの階調の濃淡を可変に設定する。例えば、音量情報Ｂ2の示す音量が大きいほど音指示子Ｐは濃い（暗い）階調に設定される。また、音量情報Ｂ2の示す音量が１個の指定音の始点から終点にかけて経時的に変化する場合、図４の音指示子ＰAのように、音指示子ＰAの前端から後端にかけて階調が徐々に変化するように音指示子ＰAの階調が設定される。図４では指定音の音量が経時的に減少する場合を想定しているため、音指示子ＰAの階調は、前端から後端にかけて徐々に明るく（淡く）なるように変化する。以上のように音量情報Ｂ2を視覚化した音指示子ＰAを視認することで、利用者は、指定音の音量（特に音量の変化の様子）を容易に把握することが可能である。
【００３０】
属性情報ＵBがビブラート情報Ｂ3を含む場合、表示制御部２６は、図４に示すように、ビブラート情報Ｂ3が示すビブラートの波形を模式的に図形化した形状の音指示子ＰBを表示装置１６に表示させる。図５は、音指示子ＰBを拡大した模式図である。図５に示すように、音指示子ＰBは、ビブラートが付加された音声の波形を模擬した波状の輪郭線Ｌを含んで構成される。
【００３１】
音指示子ＰBの前端（左端）から輪郭線Ｌの始点までの寸法ｄ1は、ビブラート情報Ｂ3内の遅延時間ｖ1に応じて可変に決定される。具体的には、遅延時間ｖ1が長いほど寸法ｄ1は増加する。また、輪郭線Ｌの振幅ｄ2はビブラート深度ｖ2に応じて可変に設定され、輪郭線Ｌの波長（周期）ｄ3はビブラート速度ｖ3に応じて可変に設定される。具体的には、ビブラート深度ｖ2が大きいほど振幅ｄ2は増加し、ビブラート速度ｖ3が大きいほど波長ｄ3は減少する。さらに、輪郭線Ｌの全長ｄ4は、ビブラート情報Ｂ3内の継続時間ｖ4に応じて可変に設定される。具体的には、継続時間ｖ4が長いほど寸法ｄ4は増加する。以上のようにビブラート情報Ｂ3を模式化した音指示子ＰBを視認することで、利用者は、指定音に付加されるビブラートの特性を容易に把握することが可能である。
【００３２】
属性情報ＵBがレガート情報Ｂ4を含む場合、表示制御部２６は、図４に示すように、レガート情報Ｂ4が示す先行音の音指示子ＰC1とレガート情報Ｂ4が示す後続音の音指示子ＰC2とを連結して表示装置１６に表示させる。具体的には、音指示子ＰC1の後端と音指示子ＰC2の前端とを連結する所定幅の形状の連結部Ｃが、音指示子ＰC1および音指示子ＰC2とともに表示装置１６に表示される。以上のようにレガート情報Ｂ4を視覚化した音指示子Ｐ（ＰC1，ＰC2）を視認することで、利用者は、各指定音の間のレガートの有無を容易に把握することが可能である。
【００３３】
属性情報ＵBが複数種の属性の指示を含む場合、表示制御部２６は、各属性に対応する複数の態様を組合わせた音指示子Ｐを表示装置１６に表示させる。例えば、属性情報ＵBが音量情報Ｂ2とビブラート情報Ｂ3とレガート情報Ｂ4とを含む場合、図６に示すように、レガート情報Ｂ4に応じて相互に連結して表示された音指示子ＰD1（指定音Ｎ1）および音指示子ＰD2（指定音Ｎ2）について、音量情報Ｂ2に応じて階調の濃淡が決定されるとともにビブラート情報Ｂ3に応じて輪郭線Ｌの形状が決定される。図６の例示から理解されるように、図６では、音指示子ＰD1の指定音Ｎ1（先行音）と音指示子ＰD2の指定音Ｎ2（後続音）とのレガートをレガート情報Ｂ4が示し、指定音Ｎ1の音量情報Ｂ2が経時的な音量の増加を示すとともに指定音Ｎ2の音量情報Ｂ2が経時的な音量の減少を示し、かつ、指定音Ｎ2に対するビブラートの付加をビブラート情報Ｂ3が示す場合が想定されている。
【００３４】
以上のように本実施形態においては、各指定音の音指示子Ｐが属性情報ＵBに応じた態様で表示される（すなわち、属性情報ＵBが音指示子Ｐと一体的に表示される）から、属性画像を音指示子とは別個に配置する特許文献１の技術と比較して音楽情報画像４０が簡素化される。したがって、各指定音の属性情報ＵBを利用者が容易に確認できるという利点がある。各指定音に多数の属性が指示された場合を想定すると、第１実施形態では、図６の例示のように多数の属性が音指示子Ｐの態様として一体的に表示されるから、多数の属性画像が１個の音指示子の近傍に密集する特許文献１の構成と比較して、音楽情報画像４０が簡素化される（さらには属性情報ＵBの確認が容易化される）という効果は格別に顕著である。
【００３５】
＜Ｂ：第２実施形態＞
次に、本発明の第２実施形態について説明する。なお、以下の各例示において作用や機能が第１実施形態と同等である要素については、以上と同じ符号を付して各々の詳細な説明を適宜に省略する。
【００３６】
図７は、第２実施形態における音楽情報画像４０（作業領域４２）の模式図である。図７に示すように、表示制御部２６は、各指定音の文字情報Ｂ1が示す発音文字（歌詞）を、その指定音の音指示子Ｐに重ねて表示装置１６に表示させる。さらに表示制御部２６は、文字情報Ｂ1が示す発音文字（音節）の分類毎に相異なる態様（本形態では表示色）で各音指示子Ｐを表示させる。発音文字の分類の仕方は任意であるが、例えば、鼻音や鼻濁音や破裂音などの音声学的な分類、または、ア行音やカ行音などの言語的な分類が好適に採用される。図７では、文字情報Ｂ1の示す発音文字が鼻音に属する指定音（発音文字「み」および「も」）の音指示子Ｐが他の音指示子Ｐとは別個の表示色（色相や彩度）で表示された場合が例示されている。発音文字以外の属性に応じた音指示子Ｐの態様は第１実施形態と同様である。
【００３７】
以上の形態によれば、第１実施形態と同様の効果が実現される。また、発音文字の分類に応じた態様で各音指示子Ｐが表示される（すなわち発音文字の分類が音指示子Ｐと一体的に表示される）から、発音文字の分類を各音指示子Ｐとは別個に表示する場合と比較すると、音楽情報画像４０が簡素化されるという利点がある。
【００３８】
＜Ｃ：第３実施形態＞
次に、本発明の第３実施形態について説明する。図８は、属性情報ＵBのレガート情報Ｂ4でレガートが指示された各指定音の音指示子Ｐ（ＰE1，ＰE2）の模式図である。表示制御部２６は、第１実施形態と同様に、先行音の音指示子ＰE1と後続音の音指示子ＰE2とを連結部Ｃで相互に連結して表示し、第２実施形態と同様に、文字情報Ｂ1が示す発音文字を各音指示子Ｐに重ねて表示する。図８では、音指示子ＰE1に対応する指定音の文字情報Ｂ1が発音文字「は（ha）」を示し、音指示子ＰE2に対応する指定音の文字情報Ｂ1が発音文字「な（na）」を示す場合が想定されている（後掲の図９および図１０でも同様である）。
【００３９】
図８に示すように、表示制御部２６は、レガートで連結される各指定音の発音文字の境界線ｂを各音指示子Ｐまたは連結部Ｃに重ねて表示し、入力装置１４が利用者から受付けた指示に応じて境界線ｂを横軸（時間軸）の方向に移動させる。すなわち、利用者は、先行音の発音文字と後続音の発音文字との境界の時点（各音節の時間的な比率）を適宜に変更することが可能である。
【００４０】
音声合成部２４は、先行音の発音文字と後続音の発音文字との時間的な比率を境界線ｂの位置に応じて可変に設定して音声信号ＳOUTを生成する。具体的には、音声合成部２４は、境界線ｂが先行音側（時間が遡及する方向）に移動した場合には、先行音の素片データの短縮と後続音の素片データの伸長とを実行したうえで両者を連結し、境界線ｂが後続音側（時間が経過する方向）に移動した場合には、先行音の素片データの伸長と後続音の素片データの短縮とを実行したうえで両者を連結する。以上の構成によれば、第１実施形態と同様の効果に加えて、レガートで連結された各指定音の発音文字の時間的な比率を利用者が容易に把握しながら調整できるという利点がある。
【００４１】
なお、以上の例示においては各指定音の発音文字の境界線ｂを調整したが、境界線ｂによる調整の単位（以下「音単位」という）は発音文字（音節）に限定されない。例えば、図９に示すように、指定音の発音文字を構成する各音素（［h］，［a］，［n］，［a］）の境界線ｂを表示制御部２６が表示装置１６に表示させる構成や、図１０に示すように、指定音の合成に使用される各音声素片（［h］，[ha]，[a]，[an]，[na]，[a]）の境界線ｂを表示制御部２６が表示装置１６に表示させる構成が採用され得る。図９の構成では音素が音単位に相当し、図１０の構成では音声素片（音素データ）が音単位に相当する。図９および図１０の何れの構成においても、利用者からの指示に応じて各境界線ｂの位置が可変に設定され、境界線ｂの前後の音単位の時間的な比率が境界線ｂの位置に応じて可変に制御される。具体的には、音声合成部２４は、境界線ｂが前方（時間が遡及する方向）に移動した場合には当該境界線ｂの直前の音単位を短縮するとともに直後の音単位を伸長し、境界線ｂが後方（時間が経過する方向）に移動した場合には当該境界線ｂの直前の音単位を伸長するとともに直後の音単位を短縮する。
【００４２】
＜Ｄ：変形例＞
以上の各形態は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様は適宜に併合され得る。
【００４３】
（１）変形例１  
以上の各形態においては、音量情報Ｂ2に応じた音指示子Ｐの階調の制御と、ビブラート情報Ｂ3やレガート情報Ｂ4に応じた音指示子Ｐの形状の制御と、文字情報Ｂ1に応じた音指示子Ｐの表示色の制御（第２実施形態）とを例示したが、属性情報ＵBが指定する属性の種類（例えば以上の例示における音量，発音文字，ビブラート，レガート）と属性に応じて変化する音指示子Ｐの態様の種類（例えば以上の例示における形状，階調，表示色）との組合せは任意に変更される。
【００４４】
例えば、図１１の例示のように、ビブラート情報Ｂ3に応じて音指示子Ｐの階調の濃淡を制御する構成が採用される。図１１の音指示子Ｐの部分ｐは、ビブラートが付加された音声の波形を階調の濃淡で模擬した部分である。具体的には、音指示子Ｐの前端から部分ｐまでの寸法ｄ1がビブラート情報Ｂ3の遅延時間ｖ1に応じて決定され、部分ｐの寸法ｄ4が継続時間ｖ4に応じて決定される。また、部分ｐの階調の濃淡差（最低階調と最高階調との差分）がビブラート深度ｖ2に応じて決定され、部分ｐの階調の濃淡の周期ｄ3がビブラート速度ｖ3に応じて決定される。
【００４５】
また、図１２の例示のように、音量情報Ｂ2に応じた形状の音指示子Ｐを表示する構成も好適である。具体的には、音量情報Ｂ2が示す音量に応じて音指示子Ｐの幅（音高軸の方向の寸法）が可変に設定される。例えば、音量情報Ｂ2の示す音量が指定音の始点から終点にかけて減少する場合、図１２に示すように、前端から後端にかけて幅が減少する形状（三角形や台形）に設定された音指示子Ｐを、表示制御部２６は表示装置１６に表示させる。
【００４６】
（２）変形例２  
指定音の属性の種類と当該属性の表示に適用される音指示子Ｐの態様（属性に応じて変化する態様）との組合せを利用者が適宜に変更できる構成も好適である。例えば、表示制御部２６は、図１３の操作画像５０を表示する。操作画像５０は、音指示子Ｐの表示色に応じて区別される属性を利用者が選択するための画像であり、複数の操作子（チェックボックス）５１〜５５を含んで構成される。利用者は、入力装置１４を適宜に操作して複数の操作子５１〜５５の何れかを選択する。
【００４７】
操作子５１（歌詞分類）が選択された場合、表示制御部２６は、第２実施形態として例示したように、文字情報Ｂ1が示す発音文字の分類に応じた表示色で音指示子Ｐを表示する。操作子５２（音量）が選択された場合、表示制御部２６は、音量情報Ｂ2が示す音量に応じた表示色（例えば音量が大きいほど高彩度の色彩）で音指示子Ｐを表示する。
【００４８】
操作子５３を選択した場合、利用者は、表示色の制御が適用される属性（コントロールチェンジ）を操作子５６または操作子５７の操作で選択する。具体的には、利用者は、複数の候補（例えばビブラート）から所望の属性を操作子５６の操作で選択し、または、所望の属性に割当てられた番号を操作子５７の操作で指定することが可能である。表示制御部２６は、利用者が選択した属性に応じた表示色（例えばビブラート深度やビブラート速度に応じた表示色）で音指示子Ｐを表示する。
【００４９】
操作子５４が選択された場合、表示制御部２６は、音指示子Ｐの表示色を属性の表示に適用しない。なお、表示制御部２６は、操作子５５に対する操作の有無に応じて、音楽情報画像４０における発音文字（歌詞）の表示の有無を切替える。なお、以上の例示では、音指示子Ｐの表示色に応じて表示する属性を利用者に選択させたが、操作画像５０で選択された属性の表示に適用する音指示子Ｐの態様（表示色や形状や階調）を利用者が任意に選択できる構成も採用される。以上の構成によれば、個々の利用者にとって把握し易い態様を各属性の表示に適用することが可能である。
【００５０】
（３）変形例３  
以上の各形態においては、音楽情報画像４０を利用者に提示したうえで音楽情報ＳDの作成または編集（情報生成部２２）と音声信号ＳOUTの生成（音声合成部２４）とを実行する音声合成装置としての音楽情報処理装置１００を例示したが、既存の音楽情報ＳDを利用者による確認のために音楽情報画像４０として表示する情報提示装置としても本発明の音楽情報処理装置は利用され得る。既存の音楽情報ＳDは、例えば、可搬型の記録媒体や通信網を介して記憶装置１２に格納される。以上の説明から理解されるように、音楽情報ＳDの生成または編集や音声信号ＳOUTの生成は本発明において必須ではない。すなわち、以上の各形態における情報生成部２２や音声合成部２４は省略され得る。また、音声信号ＳOUTの出力先は放音装置１８に限定されない。例えば、音声信号ＳOUTを記憶装置１２（または他の記録媒体）に格納する構成や、音声信号ＳOUTを通信網に送信する構成も採用される。
【符号の説明】
【００５１】
１００……音楽情報処理装置、１０……制御装置、１２……記憶装置、１４……入力装置、１６……表示装置、１８……放音装置、２２……情報生成部、２４……音声合成部、２６……表示制御部、４０……音楽情報画像、４２……作業領域、５０……操作画像、Ｐ（ＰA，ＰB，ＰC1，ＰC2，ＰD1，ＰD2，ＰE1，ＰE2）……音指示子、Ｃ……連結部、ｂ……境界線、ＳD……音楽情報、ＵA……基本情報、Ａ1……音高情報、Ａ2……時間情報、ＵB……属性情報、Ｂ1……文字情報、Ｂ2……音量情報、Ｂ3……ビブラート情報、Ｂ4……レガート情報。
【図１】
0005636665.tif 000002
【図２】
0005636665.tif 000003
【図３】
0005636665.tif 000004
【図４】
0005636665.tif 000005
【図５】
0005636665.tif 000006
【図６】
0005636665.tif 000007
【図７】
0005636665.tif 000008
【図８】
0005636665.tif 000009
【図９】
0005636665.tif 000010
【図１０】
0005636665.tif 000011
【図１１】
0005636665.tif 000012
【図１２】
0005636665.tif 000013
【図１３】
0005636665.tif 000014