(57)【特許請求の範囲】
【請求項１】
子音を示す構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データとを記憶する記憶手段と、
前記子音を示す構えの身振りを口及び手の組合せで表す第１の調音データから、前記母音の口形を口及び手の組合せで表す第２の調音データに切り替わるまでの時間を設定する変数フラグと、
前記第１の調音データ及び前記第２の調音データを指定する指定手段と、
前記変数フラグを設定する設定手段と、
前記指定手段により指定された前記第１の調音データ及び前記第２の調音データを、前記記憶手段から読み出し、該読み出した第１の調音データを基に、子音を示す構えの身振りを口及び手の組合せで表示手段に表示する制御を行うとともに、
前記設定手段により設定された前記変数フラグに従って前記表示手段に表示している、子音を示す構えの身振りの口及び手の組合せから、母音の口形を示す身振りの口及び手の組合せになるまで移動させて表示する制御を行う制御手段と
を備えることを特徴とする調音指示装置。
【請求項２】
前記制御手段は、前記表示手段に表示された口及び手の組合せからなる発音表示音に対応する文字、又は該文字をイメージさせる図案を、前記口及び手の組合せと共に該表示手段に表示することを特徴とする請求項１記載の調音指示装置。
【請求項３】
前記制御手段は、前記子音を示す構えの身振りの口及び手の組合せから、母音の口形を示す身振りの口及び手の組合せになるまで移動させる表示動作に対応する手の動きを、前記口及び手の組合せと共に該表示手段に表示することを特徴とする請求項１又は２に記載の調音指示装置。
【請求項４】
調音データの音声を合成する音声合成手段をさらに備え、
前記制御手段は、調音データを表示する場合、前記音声合成手段により該調音データの音声を合成して出力することを特徴とする請求項１記載の調音指示装置。
【請求項５】
子音を示す構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データとを記憶するステップと、
前記子音を示す構えの身振りを口及び手の組合せで表す第１の調音データから、前記母音の口形を口及び手の組合せで表す第２の調音データに切り替わるまでの時間を設定する変数フラグを設定するステップと、
前記第１の調音データ及び前記第２の調音データを指定するステップと、
前記指定された第１の調音データを基に、子音を示す構えの身振りを口及び手の組合せで表示する第1の表示ステップと、
前記指定された第２の調音データを基に、前記設定された前記変数フラグに従って、子音を示す構えの身振りの口及び手の組合せを移動して、母音の口形を示す身振りの口及び手の組合せを表示する第２の表示ステップと
を有することを特徴とする調音指示方法。
【請求項６】
コンピュータを、子音を示す構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データとを記憶する記憶手段と、前記子音を示す構えの身振りを口及び手の組合せで表す第１の調音データから、前記母音の口形を口及び手の組合せで表す第２の調音データに切り替わるまでの時間を設定する変数フラグと、前記第１の調音データ及び前記第２の調音データを指定する指定手段と、前記変数フラグを設定する設定手段と、前記指定手段により指定された前記第１の調音データ及び前記第２の調音データを、前記記憶手段から読み出し、該読み出した第１の調音データを基に、子音を示す構えの身振りを口及び手の組合せで表示手段に表示する制御を行うとともに、前記設定手段により設定された前記変数フラグに従って前記表示手段に表示している、子音を示す構えの身振りの口及び手の組合せから、母音の口形を示す身振りの口及び手の組合せになるまで移動させて表示する制御を行う制御手段とを備える調音指示装置として機能させるためのプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、調音障害者の発音練習に用いて好適な調音指示装置、調音指示方法及び情報処理プログラムを記録した記録媒体に関する。
【０００２】
【従来の技術】
人間の日常生活におけるコミュニケーションの手段として、音声による会話が果たす役割は非常に大きいものである。人間は、肺の呼吸運動によって与えられる肺呼気（空気の流れ）を喉頭の中央にある声帯において振動エネルギに変換し、この振動によって音声の基本となる音（声）を生成する（これを原音と呼ぶ）。一方、原音の周波数は成人男性で約１２０Ｈｚ、女性で約２４０Ｈｚである。人はこの原音を咽頭、鼻腔、口腔等で共鳴させることによって修飾し、さらに唇、舌、頬等で所望の音声波形を生成している。このように、声道の形を変えて、いろいろな言語音を形作る、そのために舌や唇などを動かすことを調音（構音と呼ぶこともある）という。
【０００３】
知的遅れを伴う言語発達障害者（児）や特定の音が正しく発音されず、それが習慣化している構音障害者（児）、聴器に障害を来たしている聴覚障害者（児）、脳損傷や脳病変による失語症者（児）、また、日本語を学ぶ外国人等にとって正しい日本語の音声を習得したり、回復させることは、日常生活におけるコミュニケーションをはかるために非常に重要なことである。
【０００４】
聴覚や言語に障害の無い子供は、幼児期に他人の声と自分の声を耳で聞いて比較し、胸／喉／口などの筋肉を運動させて話すことができるようになる。すなわち、聴覚や言語に障害の無い子供は、いわゆる聴覚へのフィードバックを行って、明瞭な発声や発音を得ている。一方、構音障害を持つ子供は、自分の声を含めて音を捉えることができにくい。このため、聴覚へのフィードバックを行うことができず、明瞭な発声や発音を得ることが難しい。そこで、構音障害を持つ子供に対し、現存聴覚の最大限の活用と、筋肉運動知覚や教具を利用しての言語指導を行い、コミュニケーションが行えるようにしていく。このうち、言語指導のプロセスには諸説があり、また子供の状況により異なってくるが、幼稚部から小学校のカリキュラムとして大枠で捉えれば、息（気息・呼気）、声（発声）、単母音→単語、その他の音節（子音）→単語、単語・会話の韻律（リズム、アクセント、イントネーション等）というようなプロセスが代表的である。また、各々の音節に対する指導の手順は、誘導→活動→評価→定着→評価→運用といった手順が代表的である。
【０００５】
【発明が解決しようとする課題】
しかしながら、このような従来の発音訓練方法にあっては、先生となる者がどのように発音訓練を指導したらよいか明確な方法がなかったため、以下のような問題点があった。
すなわち、発音習得の成果は先生（指導者）の技量によるところが大きく、障害者の誰もが優れた指導者による指導を受けられるとは限らない。また、練習を行う場所は特定の訓練場所（例えば、学校）に行く必要があり、学校等に行けない場合や自発的に自宅等で練習したい場合に適切な練習を行うことは困難であった。
【０００６】
また、舌の位置や動きを図表等で表示しながら練習する方法も行われているが、発音練習者が発音を効果的に練習することは容易ではない。特に、舌や唇などを動かす調音以前の、音を出すこと自体が困難な障害者にとっては図表等を見ながらの練習では効果を上げるのは容易ではなかった。
【０００７】
本発明は、このような課題に鑑みてなされたものであって、生来、人間に備わる器質的、協応作用と日常の経験を通して身に付けた機能的協応運動を基として身振りや口形の動作が発音筋肉運動とごく自然に結びつくよう工夫し、言語発達障害児等が発音訓練を開始する場合、訓練指示を効果的に行うことのできる調音指示装置、調音指示方法及び情報処理プログラムを記録した記録媒体を提供することを目的としている。
また、本発明は、専門家が付き添わなくても簡単に自習したり、独習したりすることができ、発音練習を効果的に行うことのできる調音指示装置、調音指示方法及び情報処理プログラムを記録した記録媒体を提供することを目的としている。
【０００８】
【課題を解決するための手段】
本発明の調音指示装置は、子音を示す構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データとを記憶する記憶手段と、前記子音を示す構えの身振りを口及び手の組合せで表す第１の調音データから、前記母音の口形を口及び手の組合せで表す第２の調音データに切り替わるまでの時間を設定する変数フラグと、前記第１の調音データ及び前記第２の調音データを指定する指定手段と、前記変数フラグを設定する設定手段と、前記指定手段により指定された前記第１の調音データ及び前記第２の調音データを、前記記憶手段から読み出し、該読み出した第１の調音データを基に、子音を示す構えの身振りを口及び手の組合せで表示手段に表示する制御を行うとともに、前記設定手段により設定された前記変数フラグに従って前記表示手段に表示している、子音を示す構えの身振りの口及び手の組合せから、母音の口形を示す身振りの口及び手の組合せになるまで移動させて表示する制御を行う制御手段とを備えることを特徴としている。
また、より好ましくは、前記制御手段は、前記表示手段に表示された口及び手の組合せからなる発音表示音に対応する文字、又は該文字をイメージさせる図案を、前記口及び手の組合せと共に該表示手段に表示する。また、前記制御手段は、前記子音を示す構えの身振りの口及び手の組合せから、母音の口形を示す身振りの口及び手の組合せになるまで移動させる表示動作に対応する手の動きを、前記口及び手の組合せと共に該表示手段に表示する。
また、より好ましくは、調音データの音声を合成する音声合成手段をさらに備え、前記制御手段は、調音データを表示する場合、前記音声合成手段により該調音データの音声を合成して出力するものであってもよい。
【０００９】
本発明の調音指示方法は、子音を示す構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データとを記憶するステップと、前記子音を示す構えの身振りを口及び手の組合せで表す第１の調音データから、前記母音の口形を口及び手の組合せで表す第２の調音データに切り替わるまでの時間を設定する変数フラグを設定するステップと、前記第１の調音データ及び前記第２の調音データを指定するステップと、前記指定された第１の調音データを基に、子音を示す構えの身振りを口及び手の組合せで表示する第1の表示ステップと、前記指定された第２の調音データを基に、前記設定された前記変数フラグに従って、子音を示す構えの身振りの口及び手の組合せを移動して、母音の口形を示す身振りの口及び手の組合せを表示する第２の表示ステップとを有することを特徴としている。
【００１０】
さらに、本発明は、コンピュータを、子音を示す構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データとを記憶する記憶手段と、前記子音を示す構えの身振りを口及び手の組合せで表す第１の調音データから、前記母音の口形を口及び手の組合せで表す第２の調音データに切り替わるまでの時間を設定する変数フラグと、前記第１の調音データ及び前記第２の調音データを指定する指定手段と、前記変数フラグを設定する設定手段と、前記指定手段により指定された前記第１の調音データ及び前記第２の調音データを、前記記憶手段から読み出し、該読み出した第１の調音データを基に、子音を示す構えの身振りを口及び手の組合せで表示手段に表示する制御を行うとともに、前記設定手段により設定された前記変数フラグに従って前記表示手段に表示している、子音を示す構えの身振りの口及び手の組合せから、母音の口形を示す身振りの口及び手の組合せになるまで移動させて表示する制御を行う制御手段とを備える調音指示装置として機能させるためのプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体である。
【００１１】
【発明の実施の形態】
以下、添付図面を参照しながら本発明の好適な調音指示装置及び調音指示方法の実施の形態について詳細に説明する。
図１は、本発明の第１の実施の形態の調音指示装置の構成を示すブロック図である。調音指示装置として、パーソナルコンピュータ（パソコン）に適用した例である。
【００１２】
図１において、パソコン１０（調音指示装置）、ＣＰＵ１１（制御手段）、ＲＯＭ１２、ＲＡＭ１３（記憶手段）、ＶＲＡＭ１４、グラフィックコントローラ１５、調音データを表示する表示装置１６（表示手段）、キーボード及びマウス等のポインティングデバイスからなる入力装置１７、マイク１８、ＣＯＤＥＣ部１９（音声合成手段）、スピーカ２０、ハードディスクドライブ（ＨＤＤ）等の外部記憶装置２１、及び文字表示プログラムを記録したＣＤ−ＲＯＭ２３の読み取り装置であるＣＤ−ＲＯＭドライバ２２から構成される。
【００１３】
ＣＰＵ１１は、装置全体の制御を行う制御部であり、ＲＡＭ１３上のプログラム３１に従い、演算に使用するデータを記憶したメモリを使用して文字表示処理等各種処理を実行する。
ＲＯＭ１２は、プログラムや文字コードと文字コードに対応するフォントデータ等の固定データを格納する読出し専用の半導体メモリである。
【００１４】
ＲＡＭ１３は、文字表示に関するデータや演算に使用するデータ及び演算結果等を一時的に記憶するいわゆるワーキングメモリとして使用され、ＲＡＭ１３の一部には、ＣＰＵ１１により実行されるプログラム処理において利用されるプログラム３１、構えの身振りを口及び手の組合せで表すことを示すフラグであるＳｈｉｉｎＦ３２、上記子音決定後の時間経過で母音の口形まで動く、すなわち口及び手の移動を行うことを示すフラグであるＭｏｖｅＦ３３、上記時間経過の速度を示す数値変数バッファであるＴｉｍｅＲ３４の格納領域、発音を収録した調音データ３５を備える。収録調音データ３５の詳細については、図２により後述する。さらに、音声合成を行うか否かを指定する音声フラグを備える。
【００１５】
なお、このプログラム３１は、制御プログラムとしてＲＯＭ１２に格納されるものでもよい。また、このＲＡＭ１３の所定の記憶領域も電源ＯＦＦ後も設定条件の保持を必要とするならば、例えばこの記憶領域を電源バックアップするか、あるいはＥＥＰＲＯＭ（ｅｌｅｃｔｒｉｃａｌｌｙ  ｅｒａｓａｂｌｅ  ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）やフラッシュメモリ等の不揮発性メモリにより構成するものであってもよい。
【００１６】
ここで、ＣＰＵ１１は、表示画面に対し、調音データを表示可能な表示領域と該表示領域以外の口及び手の組合せ領域とを、ＲＡＭ１３のフラグＳｈｉｉｎＦ３２、フラグＭｏｖｅＦ３３及び数値変数バッファＴｉｍｅＲ３４を用いて逐次設定するとともに、後述する処理プログラムに従って調音データを表示する場合、子音を示す構えの身振りを口及び手の組合せで表示し、所定時間経過後に母音の口の形状になるように口及び手を移動して表示する制御を行う。
【００１７】
ＶＲＡＭ１４は、ＣＰＵ１１から出力された表示画像のデータを書き込むビデオメモリである。
グラフィックコントローラ１５は、ＣＰＵ１１から描画の命令を受けてＶＲＡＭ１４の内容を書き換え、それを表示装置１６へ出力する。
表示装置１６は、例えば８００×６００ドットの表示画面１６ａ（図４）を有する液晶表示装置であり、口及び手の身振りからなる調音データを表示する。また、表示装置１６上に、タッチ操作によりデータ入力が可能な液晶タッチパネルを用いてもよい。タッチパネルを採用した場合、パソコン１０への文字入力は、キーボードのほか、このタッチパネルにより行われる。
【００１８】
入力装置１７は、文字入力を行うための英数キー等からなるキーボード及びポインティングデバイスであるマウス等であり、口及び手の組合せの移動速度等の各種設定を行う。マウスには、左スイッチと右スイッチがあり、１回だけスイッチを押すシングルクリックと２回続けてスイッチを押すダブルクリックの操作がある。
マイク１８は、ユーザの音声を電気変換する。
【００１９】
ＣＯＤＥＣ部１９は、パソコンに搭載される音声コーデックとして専用音声ＣＯＤＥＣ集積回路を用い、リアルタイムな信号処理を実現している。ＣＯＤＥＣ部１９は、ＣＰＵ１１から与えられる音声データに従って音声合成し、スピーカ２０より音声として出力する。
スピーカ２０は、ＣＯＤＥＣ部１９からの出力に従って音声を、例えば単音で発声する。
【００２０】
図２は、収録調音データ３５のデータフォーマットを示す図である。
図２において、３５ａは調音データ検索用テーブル、３５ｂは調音データの格納アドレステーブル、３５ｃは調音データである。
調音データ検索用テーブル３５ａは、キーボード等のキー入力部により入力された文字から調音データを検索するためのアドレスを格納しており、入力された文字と比較することにより、該当する調音データを検索でき、先頭からのテーブル数より調音のワードＮｏ．を得ることができる。
【００２１】
調音データ格納アドレステーブル３５ｂは、調音のワードＮｏ．から該当する調音データの格納アドレスを得ることができる。
調音データ３５ｃには、構えの身振りを口及び手の組合せで表す第１の調音データと、該子音決定後の時間経過の母音の口形を口及び手の組合せで表す第２の調音データが格納されている。この第１の調音データと第２の調音データの組合せにより５０音の任意の音が指定される。口及び手の組合せで表される調音データの具体例は、後述する図６乃至図１０で示される。
【００２２】
図３は、入力装置１７のマウス操作（ポインティングデバイススイッチ操作）による設定動作と該操作により設定されるフラグＳｈｉｉｎＦ３２及びＭｏｖｅＦ３３との関係をまとめた図である。この図は、５０音を表示した後の、入力装置１７のマウスのスイッチ操作による動作をまとめたものである。
ＲＡＭ１３には、子音を口及び手の組合せで表示することを表すフラグＳｈｉｉｎＦ３２が設定され、口及び手の組合せが徐々に移動することを表すフラグＭｏｖｅＦ３３が設定されている。また、口及び手の組合せが移動する速度を増減させるための変数ＴｉｍｅＲ３４が設定されている。
【００２３】
ＳｈｉｉｎＦ３２、ＭｏｖｅＦ３３、及び変数Ｉの初期値は、０とする。ＴｉｍｅＲ３４の初期値は、最初は１．００とするが、以後変更した場合はそのときの値を保持するものとする。これらフラグは、マウス操作によって設定・変更され、簡単な操作で口及び手の動き速度の調整、発音練習音の指定が可能である。したがって、パソコンの知識がほとんどなくても、マウス操作のみで発音練習ができる。
【００２４】
以下、上述のように構成された調音指示装置の動作を説明する。
図４は、上記表示装置１６の表示画面の表示例を示す図であり、「か」の調音データに基づく表示例を示す。
図４において、ある発音練習音の表示が指示されると、表示画面１６ａに、該当する発音練習音を、まず、子音を口及び手の組合せで表す顔の表示例（表示例１）が表示され、該子音の表示例に続いて、母音の口形まで動く表示例（表示例２）が動きを伴って表示される。例えば、図４の「か」の場合には、５０音の「か行」の構えの身振り（「顔は少し上向きにし、口は中間の大きさ、喉を手のひらで押さえる」）である表示例１から、続いて、「か行」のうちの「か」を発音する母音の口形を示す身振り（「顔は少し上向きにし、口は最も大きく、喉を手のひらで押さえる」）である表示例２を表示する。図４の表示例４１は、この「か」を発音する人の身振りを表示している。この口及び手の組合せによる調音指示表示４１に加えて、本実施形態では、表示画面１６ａの左上に発音練習音（ここでは、「か」）が大きく太文字表示される。この文字表示４２は、指定により表示を消すこともできる。また、より分りやすい表示として、文字表示に替えて絵文字（例えば、「か」の場合はカラスの図案）としてもよい。
【００２５】
図４では、５０音の「か行」のうちの「か」を発音する母音の口形を示す身振りの表示例を示したが、後述する図６に示すように、「か行」のうちの「き」の発音の場合には、上記表示例１に続いて、「き」を発音する母音の口形を示す身振り（「顔は少し上向きにし、口は横に伸ばし、喉を手のひらで押さえる」）である表示例２を表示する。同様に、「か行」のうちの「く」の発音の場合には、上記表示例１に続いて、「く」を発音する母音の口形を示す身振り（「顔は少し上向きにし、口は小さく、喉を手のひらで押さえる」）である表示例２を表示する。以上は、５０音の「か行」の構えの身振りである表示例１から、続いて、「か行」のうちの任意の音を発音する母音の口形を示す表示例２を表示する例を示したが、図６乃至図１０に示すように、５０音の全てについて、発音が困難な人であっても直感的かつ理解が容易な方法で調音が配列されている。
【００２６】
また、図４の口及び手の組合せによる表示例４１の隣には、発音動作をより分りやすくするための手の動きが表示される。この手の動き表示４３は、口及び手の組合せによる表示例４１をもっと強調して表示する場合や、濁音、拗音、促音、長音を表現（発音）するときの指示表示となるものである。例えば、図４では、表示例４１の表示動作に合わせて、手を下から上へ跳ねるように上げる動作を表示４３で併用することで、「か」の促音「かっ」をより分りやすく表現している。同様に、図４に示す手の表示４３を、手前に差し出すような動作とすれば「か」の長音「かあ」をより分りやすく表現することができる。なお、これらの手の動き表示４３を使用せずに、口及び手の組合せによる表示例４１で用いた手（図４では、喉に当てた手）をそのまま手の動き表示４３として表示してもよい。
【００２７】
また、本実施形態では、図４の表示画面１６ａの右下に、５０音表４４及び操作ボタン４５をソフトキーとして表示し、利用者にＧＵＩ（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）又はアイコンで認識させる方法を用いる。表示画面１６ａ上に表示された操作ボタン４５をマウスでクリックすることにより、再生ボタンでは繰り返し練習（リピート）、ストップボタンでは子音の口及び手の身振りでの一時停止、早送りボタンでは次音又は押し続けると５０音の先頭への復帰がそれぞれ指定できる。また、発音練習途中で５０音表４４のボタンを押すと、５０音表（濁音、拗音等の表示を含む）が表示され、発音練習途中でない場合には各種設定画面が表示される。表示画面１６ａ上に、図６乃至図１０に示す５０音の調音データを一覧表示した場合には、口及び手の動作の相互の関係が明らかとなり全体把握が容易となる。
【００２８】
次に、図５に示すフローを参照することにより、具体的な調音指示、表示動作について説明する。
図５は、調音指示処理を示すフローチャートであり、本フローはＣＰＵ１１において実行される。図中、Ｓはフローの各ステップを示す。
まず、ステップＳ１でキーボード又はマウス操作で発音練習音に対応する文字が入力されるのを待ち、ステップＳ２で調音データ検索用テーブル３５ａから入力された発音練習音の格納アドレスを求める。この発音練習音は、入力装置１７のキーボート上の文字を押した後、実行キーを押してもよいし、図４の５０音表４４から操作ボタン４５で文字（音）を指定してもよい。
【００２９】
次いで、ステップＳ３で調音データ格納アドレステーブル３５ｂから該当発音練習音の調音データを取得し、ステップＳ４で取得した調音データのうち、子音である第１の調音データに基づいて口及び手の組合せの表示を行い、ステップＳ５で所定の設定時間が経過したか否かを判別し、設定時間が経過したときはステップＳ６で取得した調音データのうち、母音の口形となる第２の調音データに基づいて口及び手の組合せの表示を行う。例えば、図４に示す「か」の発音練習では、５０音の「か行」の構えの身振り表示に続いて、「か」を発音する母音の口形を示す身振りが表示される。上記設定時間は、発音練習の達成度等に応じて、マウスのスイッチ操作によりデォルト値からフラグ・変数ＴｉｍｅＲ３４（図３）を変え、適当な動きに設定する。また、子音の構え又は母音の口形で一時停止も可能である。
【００３０】
ステップＳ７では、発音を許可する発音フラグが設定されているか否かを判別し、発音フラグが設定されていれば上記発音練習音に対応する音データをＣＯＤＥＣ部１９に出力し、音を合成してスピーカ２０により発音する。発音フラグが設定されていなければ、パソコン１０による発音は行わずステップＳ９に進む。初期設定では、発音フラグは非設定（フラグを立てない）であり、発音はされない。
【００３１】
ステップＳ９では、上記発音練習を繰り返すか否かを判別し、例えばキーボードで実行キーが押される、マウス等で実行を指定するアイコンがクリックされる場合には発音練習の繰り返しと判断してステップＳ４に戻り調音指示処理による発音練習を繰り返す。発音練習を繰り返す指示がないときは本フローを終了する。
【００３２】
図６乃至図１０は、調音データの一例を示す図であり、図６及び図７は５０音の例、図８は濁音の例、図９及び図１０は拗音の例である。キーボード等によって発音練習音が指定されると、メモリに格納された上記調音データから該当する音の調音データが読み出され、読み出した調音データに基づき発音練習のための表示が行われる。
【００３３】
本発明者は、子音を表示するための身振りを、行によって１つの日常的な人のしぐさを共通な身振りから採り入れている。すなわち、知的遅れを伴う言語発達障害者（児）や幼児等であっても直感的に理解しやすく、かつその動作（身振り）をすれば自然に該当する音が発音できてしまうような動作としている。例えば、図６に示す「か」は、「顔は少し上向きにし、口は中間の大きさ、喉（声帯）を手のひらで押さえる」ようにすれば、自然と「か行」の発音になる。また、図６に示す「し」は、「口の前で人差し指を立てる」動作であるが、これは静かにしなさいを伝える、いわゆる「シー」の動作である。
【００３４】
また、図６に示す「た」は、舌が口蓋の上に一瞬あたるので「上唇の中央を人差し指で指示する」動作としている。これに対して、図６に示す「な」は、舌が口蓋の上に留まるので「口の上に両手横にする」ことでベタッとした様子を表現する動作としている。
また、図６に示す「は」は、唇で狭い隙間をつくり「いき」を勢いよく出すので「ややうつむき加減で突き出したあごに手のひらを副える」動作としている。
【００３５】
また、図７のＷに示すように、人差し指を両唇の中央で挟んで押さえて「う」の口形をつくり、加えた指を口からパッと出した後に「あ」の口形を連続させることで「わ」の動作としている。また、図８乃至図１０に示す濁音、半濁音、拗音は、図６及び図７の基本の身振りに加えて、他方の手の身振りを特徴的に加えることにより直感的に理解しやすいものとしている。
【００３６】
例えば、濁音の身振りは「喉（声帯）を手のひらで押さえる」であるが、この身振りで、この部分でいきみの状態を誘導し、声帯を振動させて有声音である濁音を発音する。
また、半濁音の身振りは「つぼめた手指をパッと開く」であるが、この動作で、まず唇を閉じて息を閉鎖し、口を急に開いて息を両唇で破裂する状態を誘導し、声帯を振動しない無声音のパ行を発音する。
【００３７】
また、拗音は「カ・サ・タ・ナ・マ・ラ・ガ・ザ・ダ・バ・パ」の１２行の各イ段の仮名に小さい「ゃ・ゅ・ょ」を添えた２文字が表している１音節音である。最初の文字の子音の身振りと「い」の口形（マ行とラ行は除く）と「や・ゆ・よ」の身振りと口形を素早く変化させることで拗音を発音する。
【００３８】
図１１は、全ての子音を示す身振りの具体例と該身振りによって誘導が期待される筋肉運動を表にして示す図である。
例えば、図１１の子音Ｋに示す身振り（「顔を上向きにして片方の手のひらで喉を押さえる」）は、調音法「破裂音」，調音点「軟口蓋音」で、誘導される筋肉運動は「舌先が歯茎につかないで奥舌が軟口蓋につく」筋肉動作であり、日常のしぐさでは「うがい」動作がこれにあたる。また、例えば図１１の子音Ｍに示す身振り（「正面を向いて口を閉じるとともに、指先をとじる」）は、調音法「鼻音」，調音点「硬口蓋音」で、誘導される筋肉運動は「唇を閉じ鼻で息を吐く状態をつくる」筋肉動作であり、日常のしぐさでは「おすましをする」動作がこれにあたる。このように、手の身振りや口形の動作模倣によって調音の理解とともに、調音に必要な筋肉運動をも併せて誘導されることになり、特にことばの習得が活発な幼児期において正しい発音練習が可能になる。
【００３９】
以上のように、本実施の形態のパソコン１０により実現される調音指示装置は、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、ＶＲＡＭ１４、グラフィックコントローラ１５、調音データを表示する表示装置１６、キーボード及びマウス等のポインティングデバイスからなる入力装置１７、マイク１８、ＣＯＤＥＣ部１９、スピーカ２０、ハードディスクドライブ（ＨＤＤ）等の外部記憶装置２１、及び文字表示プログラムを記録したＣＤ−ＲＯＭ２３の読み取り装置であるＣＤ−ＲＯＭドライバ２２を備え、ＣＰＵ１１は、表示画面に対し、調音データを表示可能な表示領域と該表示領域以外の口及び手の組合せ領域とを、ＲＡＭ１３のフラグＳｈｉｉｎＦ３２、フラグＭｏｖｅＦ３３及び数値変数バッファＴｉｍｅＲ３４を用いて逐次設定するとともに、調音データを表示する場合、子音を示す構えの身振りを口及び手の組合せで表示し、所定時間経過後に母音の口の形状になるように前記口及び手を移動して表示する制御を行うので、発音が困難な人であっても直感的かつ理解が容易な方法で発音を行うことができ、発音練習を効果的に行うことができる。
【００４０】
なお、上記実施の形態に係る調音指示装置及び調音指示方法を、上述したようなパソコン等に適用することもできるが、勿論これには限定されず、調音データを表示可能な表示部を有するものであれば全ての装置（例えば、携帯情報端末）に適用可能である。例えば、携帯情報端末に、適用するようにすれば、場所や時間にとらわれず発音練習することが可能になる。
【００４１】
また、上記実施の形態では、調音指示装置及び調音指示方法の名称を用いているが、これは説明の便宜上であり、例えば発音訓練装置、発音練習訓練装置、発音練習システム、構音（調音）練習方法等どのようなでもよい。また、子音の構えの第１の調音データから適宜変形（モーフィング）しながなら第２の母音の口形に変えるものであってもよい。
【００４２】
また、上記調音指示装置を構成する各部の種類、表示部の表示サイズなどは前述した実施の形態に限られない。また、調音データには文字以外の図形なども含まれる。
また、本実施形態では、図４で「か」の発音練習例を例にとり説明したが、他の音であっても同様であり、図６乃至図１０に示したような口及び手の組合せが表示される。例えば、濁音の練習で「が」であれば、図８のＧに示すように、「が行」の構えの身振り（「顔は少し上向きにし、口は中間の大きさ、喉（声帯）を手のひらで押さえ、他方の手を喉の横に副える」）から、続いて、「が」を発音する母音の口形を示す身振り（「顔は少し上向きにし、口は中間の大きさ、喉（声帯）を手のひらで押さえ、他方の手を喉の横に副える」）が表示される。
【００４３】
また、上記実施の形態において、８００×６００ドットの液晶表示装置に、発音練習音を表示する例について説明したが、他の表示例でもよい。例えば、ＲＧＢ信号出力端子を備えたパソコンにより、上記調音データをテレビ画面上に表示するようにすれば、より大画面で練習することができる。
さらに、上記調音指示装置を構成する各回路部、例えばＲＯＭ、ＲＡＭ等の種類、数及び接続方法などは前述した実施の形態に限られない。
【００４４】
以上説明した調音指示装置は、この調音指示装置を機能させるためのプログラムでも実現される。このプログラムはコンピュータで読み取り可能な記録媒体に格納されている。本発明では、この記録媒体として、メインメモリそのものがプログラムメディアであってもよいし、また外部記憶装置としてプログラム読み取り装置が設けられ、そこに記録媒体を挿入することで読み取り可能なプログラムメディアであってもよい。いずれの場合においても、格納されているプログラムはＣＰＵがアクセスして実行させる構成であってもよいし、あるいはいずれの場合もプログラムを読み出し、読み出されたプログラムは、図示されていないプログラム記憶エリアにダウンロードされて、そのプログラムが実行される方式であってもよい。このダウンロード用のプログラムは予め本体装置に格納されているものとする。例えば、家庭用ＤＶＤプレーヤーやＤＶＤ−ＲＯＭを用いた家庭用ゲーム機において実現してもよい。
【００４５】
ここで、上記プログラムメディアは、本体と分離可能に構成される記録媒体であり、例えばＰＣカード（ＳＲＡＭカード）のほか、磁気テープやカセットテープ等のテープ系、フロッピーディスクやハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ等の光ディスクのディスク系、ＩＣカード／光カード等のカード系、あるいは口及び手の組合せデータを格納するＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュＲＯＭ等による半導体メモリを含めた固定的にプログラムを担持する媒体であってもよい。
【００４６】
さらに、外部の通信ネットワークとの接続が可能な通信装置を備えている場合には、その通信装置を介して通信ネットワークからプログラムをダウンロードするように、流動的にプログラムを担持する媒体であってもよい。なお、このように通信ネットワークからプログラムをダウンロードする場合には、そのダウンロード用プログラムは予め本体装置に格納しておくか、あるいは別な記録媒体からインストールされるものであってもよい。なお、記録媒体に格納されている内容としてはプログラムに限定されず、データであってもよい。
【００４７】
【発明の効果】
以上、詳述したように、本発明によれば、専門家が付き添わなくても簡単に自習したり、独習したりすることができ、発音練習を効果的に行うことができる。具体的には、以下のような優れた効果を得ることができる。
【００４８】
（１）言語発達障害児が発音訓練の指示を理解し実行するための知的発達を待たなければならないため、従来は訓練開始年齢が高年齢にならざるを得なかったが、本発明によって身振りの模倣が可能になりさえすれば、手の身振りや口形の動作模倣によって調音に必要な筋肉運動が誘導され、正しい発音が可能になることが期待でき、ことばの習得の活発な幼児期に発音練習を始めることが可能になる。
【００４９】
（２）一度学習した発音が崩れたり消失したりせず、長く正しい発音を記憶維持するためには、発音だけではなく発音と身振りを結びつけて記憶の強化を図ることが重要である。本発明によれば、手の身振りや口形の動作が発音動作と結びついているため、記憶の強化を図ることができ、反復練習によって、一音節から二音節以上のことばへ、一語文から二語文へ、また次へとことばの学習が広がっていくことが期待できる。
【００５０】
（３）全ての日本語の一音節の音声に、１つの特定の身振りと口形が対応している。また、子音を表示するための身振りは、「か行」「さ行」等、行によって１つの日常的な人のしぐさを共通な身振りとしたこと、また母音の口形は特徴的であることから日本語の発音、文字を系統的に理解することができる。
【００５１】
（４）言語治療の専門家でなくとも、身近な人（親等）が身振りや口形の見本を示したり、誤りを訂正したりすることが容易にできる。
（５）一般の障害のない人にとっても、この身振りと口形の音声表現方法は簡単で覚えやすく、声が出なかったり、発音の不明瞭な人が身振りと口形を示すことによって互いのコミュニケーション手段となりえる。
【図面の簡単な説明】
【図１】本発明の実施の形態の調音指示装置の構成を示すブロック図である。
【図２】本実施の形態の調音指示装置の収録調音データのデータフォーマットを示す図である。
【図３】本実施の形態の調音指示装置の入力装置のマウス操作（ポインティングデバイススイッチ操作）による設定動作と該操作により設定されるフラグＳｈｉｉｎＦ及びＭｏｖｅＦとの関係をまとめた図である。
【図４】本実施の形態の調音指示装置の表示装置の表示画面の表示例を示す図である。
【図５】本実施の形態の調音指示装置の調音指示処理を示すフローチャートである。
【図６】本実施の形態の調音指示装置の調音データの表示の一例を示す図である。
【図７】本実施の形態の調音指示装置の調音データの表示の一例を示す図である。
【図８】本実施の形態の調音指示装置の調音データの表示の一例を示す図である。
【図９】本実施の形態の調音指示装置の調音データの表示の一例を示す図である。
【図１０】本実施の形態の調音指示装置の調音データの表示の一例を示す図である。
【図１１】本実施の形態の調音指示装置の全ての子音を示す身振りの具体例と該身振りによって誘導が期待される筋肉運動を表にして示す図である。
【符号の説明】
１０  パソコン（調音指示装置）
１１  ＣＰＵ（制御手段）
１２  ＲＯＭ
１３  ＲＡＭ（記憶手段）
１４  ＶＲＡＭ
１５  グラフィックコントローラ
１６  表示装置（表示手段）
１７  入力装置
１８  マイク
１９  ＣＯＤＥＣ部（音声合成手段）
２０  スピーカ
２１  外部記憶装置
２２  ＣＤ−ＲＯＭドライバ
２３  ＣＤ−ＲＯＭ
【図１】
0003609330.tif 000002
【図２】
0003609330.tif 000003
【図３】
0003609330.tif 000004
【図４】
0003609330.tif 000005
【図５】
0003609330.tif 000006
【図６】
0003609330.tif 000007
【図７】
0003609330.tif 000008
【図８】
0003609330.tif 000009
【図９】
0003609330.tif 000010
【図１０】
0003609330.tif 000011
【図１１】
0003609330.tif 000012