(57)【要約】【課題】  プレゼンテーション等、聞き手が不特定又は多数である場面において、話し手に視線の切替を要求することなく、ノンバーバル情報としての感覚情報を話し手に与え、適切な身体的引き込み現象をもたらす。【解決手段】  話し手に所持させて感覚情報を与える振動単位10又は発光単位11と、この振動単位10又は発光単位11を駆動させる駆動部14と、この駆動部14の動作タイミングを算出する演算部15と、この演算部15へ話し手の音声の信号を取り込む信号入力部16とからなり、演算部15は信号入力部16から取り込まれた話し手の音声の信号から推定される動作予測値が予め定めた動作閾値を越えた時点を動作タイミングとして算出し、駆動部14は前記動作タイミングで振動単位10又は発光単位11を駆動させて話し手に動作タイミングを教示して、聞き手に対する身体的引き込み現象を話し手にもたらす身体リズム生成装置である。【選択図】  図１
2005250421.tif 000002
【特許請求の範囲】
【請求項１】
聞き手が不特定又は多数である場面で、聞き手に対する身体的引き込み現象を話し手にもたらす装置であって、話し手に所持させて感覚情報を与える感覚付与単位と、該感覚付与単位を駆動させる駆動部と、該駆動部の動作タイミングを算出する演算部と、該演算部へ話し手の音声の信号を取り込む信号入力部とからなり、演算部は信号入力部から取り込まれた話し手の音声の信号から推定される動作予測値が予め定めた動作閾値を越えた時点を動作タイミングとして算出し、駆動部は前記動作タイミングで感覚付与単位を駆動させて話し手に動作タイミングを教示して、聞き手に対する身体的引き込み現象を話し手にもたらす身体的引き込み現象を利用した身体リズム生成装置。
【請求項２】
動作予測値は、話し手の音声の信号の移動平均により推定される請求項１記載の身体的引き込み現象を利用した身体リズム生成装置。
【請求項３】
感覚付与単位は、話し手に所持させて振動を与える振動単位であり、駆動部は前記振動単位を振動させる請求項１記載の身体的引き込み現象を利用した身体リズム生成装置。
【請求項４】
感覚付与単位は、話し手が使用するポインタのグリップに設けた振動単位であり、駆動部は前記振動単位を振動させる請求項１記載の身体的引き込み現象を利用した身体リズム生成装置。
【請求項５】
感覚付与単位は、話し手が使用するポインタの先端に設けた発光単位であり、駆動部は前記発光単位を振動させる請求項１記載の身体的引き込み現象を利用した身体リズム生成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、聞き手が不特定又は多数である場面で、話し手に身体的引き込み現象をもたらすノンバーバル情報として感覚情報を与えることにより、聞き手に対する身体的引き込み現象を話し手にもたらす身体リズム生成装置に関する。
【０００２】
本発明に言う「感覚情報」とは、視覚的、触覚的等、人間の五感によって感得できる外部情報を意味する。
【背景技術】
【０００３】
会話によりコミュニケーションを図る話し手及び聞き手は、自分又は相手の音声(バーバル情報)を聞き取ると共に、自分又は相手の身体動作をはじめとした感覚情報 (ノンバーバル情報)を五感で感得して身体リズムを共有し、より話しやすい又は聞きやすい状態を作り出して、会話に引き込まれていく。こうした身体リズムの共有により会話に引き込まれていく現象を、「身体的引き込み現象」と呼ぶ。これから、聞き手に代わって話し手に身体的引き込み現象をもたらす装置又はシステム、また話し手に代わって聞き手に身体的引き込み現象をもたらす装置又はシステムがあれば、話し手又は聞き手に、それぞれ身体的引き込み現象をもたらすことができる。
【０００４】
こうした身体的引き込み現象を利用した装置としては、例えば特許文献１がある。この特許文献１は、ノンバーバル情報として視覚的な感覚情報、すなわちロボットの身体動作により、このロボットに話しかける話し手、又はロボットから流れる音声を聞く聞き手に身体的引き込み現象をもたらす。ここで、前記身体動作は、口の開閉動作、目の瞬き動作又は身体の身振り動作の選択的な組み合わせからなるが、各部の動作は頭の頷き動作の動作タイミングを基準として決定される。この頷き動作タイミングは、聞き手の反応が最も顕著に現れると推定される時系列上の特定時点であり、この特許文献１では音声から推定される頷き予測値が予め定めた頷き閾値を越えた時点としている。ここで、ロボットに代えて、コンピュータ画像によるキャラクタであってもよい。
【０００５】
【特許文献１】特開2001-009169号公報(２頁〜６頁、図１)
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上記特許文献１の装置は、目前に相手方がいない会話を想定し、ノンバーバル情報としてロボットの身体動作からなる視覚的な感覚情報を与え、話し手又は聞き手に身体的引き込み現象をもたらしている。しかし、例えばプレゼンテーション等、聞き手が不特定又は多数である場面では、話し手と聞き手以外にロボットを用意し、話し手に身体的引き込み現象をもたらすことは難しい。通常のプレゼンテーションでは、全体として暗くされ、話し手が発表内容の表示画面の説明個所をポインタで指示しながら説明されるため、別にロボットを用意すれば、話し手に不要な視線の切替を要求することになる。
【０００７】
特許文献１の装置は、頷き動作を中心としたロボットの身体動作を視覚的な感覚情報として特定の動作タイミングで実行している点に、身体的引き込み現象をもたらす働きがある。これから、ノンバーバル情報としての感覚情報を、特定のタイミングで話し手に与えることさえできればよく、感覚情報の形態は特定されないことになる。そこで、プレゼンテーション等、聞き手が不特定又は多数である場面において、話し手に視線の切替を要求することなく、ノンバーバル情報としての感覚情報を話し手に与え、適切な身体的引き込み現象をもたらすことができる装置を開発するため、検討した。
【課題を解決するための手段】
【０００８】
検討の結果開発したものが、聞き手が不特定又は多数である場面で、聞き手に対する身体的引き込み現象を話し手にもたらす装置であって、話し手に所持させて感覚情報を与える感覚付与単位と、この感覚付与単位を駆動させる駆動部と、この駆動部の動作タイミングを算出する演算部と、この演算部へ話し手の音声の信号を取り込む信号入力部とからなり、演算部は信号入力部から取り込まれた話し手の音声の信号から推定される動作予測値が予め定めた動作閾値を越えた時点を動作タイミングとして算出し、駆動部は前記動作タイミングで感覚付与単位を駆動させて話し手に動作タイミングを教示して、聞き手に対する身体的引き込み現象を話し手にもたらす身体的引き込み現象を利用した身体リズム生成装置である。
【０００９】
上記動作タイミングは、感覚付与単位を駆動させる時系列上の特定時点であるが、身体的引き込み現象との関係で言えば、感覚付与単位の動作タイミングは、聞き手の反応が顕著に現れると推定される時系列上の特定時点を意味する。すなわち、本発明の身体リズム生成装置は、聞き手の反応が最も顕著に現れると推定される時系列上の特定時点で、感覚付与単位を駆動させて何らかの感覚情報を話し手に与えることにより、聞き手に対する身体的引き込み現象を話し手にもたらすわけである。
【００１０】
話し手の音声の信号から推定される動作予測値は、現在から一定時間範囲の過去に取得した音声の信号の現在に対する影響の度合いを積算して算出するとよい。前記影響の度合いは、現在と過去とを線形結合、非線形結合又はニューラルネットワーク等で関係づけることにより導き出すことができる。例えば、現在から一定時間範囲の過去に取得した話し手の音声の信号の現在に対する影響の度合いを線形結合で導きだす場合、動作予測値は話し手の音声の信号の移動平均(Moving Average)により算出する。前記移動平均は、例えば次式を用いる。数１中、ｙ(ｉ)は動作予測値、ａ(ｊ)は予測係数、そしてｘ(ｉ−ｊ)は話し手の音声の信号を表す。
【００１１】
【数１】
2005250421.tif 000003
【００１２】
感覚付与単位は、話し手に五感で感得できる何らかの感覚情報を発することのできるものであればよい。最も簡易には、触覚的な感覚情報を与えるもので、話し手に所持させて振動を与える振動単位であり、駆動部は前記振動単位を振動させる感覚付与単位がある。具体的には、前記感覚付与単位は、話し手が使用するポインタのグリップに設けた振動単位であり、駆動部は前記振動単位を振動させる構成を例示できる。これは、プレゼンテーションの場面で話し手がよく使用するポインタに、振動単位を組み込んだ構成である。ここで、駆動部は感覚付与単位を駆動させる部分を意味し、例えば小型振動モータでは、振動用錘を 振動単位、モータを駆動部と考えてもよいし、振動用錘を取り付けたモータを一体の振動単位とし、前記モータに駆動信号を送り出す部分を駆動部と考えてもよい。
【００１３】
ポインタを利用できる場合、感覚付与単位は、話し手が使用するポインタの先端に設けた発光単位であり、駆動部は前記発光単位を発光させる構成にすることもできる。ポインタは、プレゼンテーションの表示画面上、特定部分を指し示すもので、前記指示部位であれば、話し手は視線をそらさずに視覚的な感覚情報を得ることができる。振動単位及び発光単位は、それぞれ独立して感覚付与単位として利用してもよいし、組み合わせて一体の感覚付与単位として扱ってもよい。
【発明の効果】
【００１４】
本発明により、プレゼンテーション等、聞き手が不特定又は多数である場面において、話し手に視線の切替を要求することなく、ノンバーバル情報としての感覚情報を話し手に与え、適切な身体的引き込み現象をもたらすことができる。特に、プレゼンテーションの場面における話し手が用いるポインタに、振動単位又は発光単位として感覚付与単位を組み込むと、話し手に視線の切替を要求しないばかりではなく、確実に話し手に適切なタイミングで触覚的又は視覚的な感覚情報を与えることができる。これにより、本発明は、話し手が話しやすいプレゼンテーションを実現する効果を有する。
【００１５】
ここで、発光単位からなる感覚付与単位を組み込んだポインタの場合、この発光単位の発光は、話し手のみならず聞き手も見ることになる。発光単位は、聞き手に対する身体的引き込み現象を話し手にもたらす時系列上の特定時点で発光するため、この発光単位を見る聞き手は発光のタイミングに同期することで、話し手とタイミングを共有することにもなる。この結果、話し手に対する身体的引き込み現象を聞き手にもたらすことができるようになる。このように、本発明の身体リズム生成装置は、話し手ばかりでなく、聞き手にも身体的引き込み現象をもたらすことで、話し手及び聞き手双方が集中できるプレゼンテーションを実現する効果がある。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の実施形態について図を参照しながら説明する。図１は感覚付与単位として振動単位10及び発光単位11を備えたポインタ１の構成図であり、図２は同ポインタ１を用いた場合の働きを説明する概念図である。本例では、聞き手が不特定又は多数である場面としてプレゼンテーションの場面を想定して、発表者を話し手、聴衆を聞き手とし、聴衆の反応が顕著に現れると推定される時系列上の特定時点を、ポインタ１の発光又は振動によって発表者に感得させる例である。
【００１７】
プレゼンテーションでは、会場が暗くされること等から、発表者が聴衆の反応を確認できず、話しづらい場合が多い。これは、聴衆にとっても聞きにくい話を聞くことになる。こうした場合に、聴衆の反応が顕著に現れると推定される時系列上の特定時点を発表者に教えることで、発表者は聴衆が聞きやすい話ができると期待される。しかし、発表者及び聴衆の視線は、それぞれ発表内容が表示される表示画面に向けられるため、発表者に視覚的な感覚情報により前記特定時点を教えることは難しい。本例のポインタ１は、それぞれポインタ先端12の発光又はグリップ13の振動によって、視覚的又は触覚的な感覚情報を発表者に感得させる。
【００１８】
ここで、ポインタ１を話し手に所持させるには、次の点に留意する必要がある。まず、小型かつ軽量で、構造が単純であり、感覚付与単位を駆動させる駆動部14は、簡略できることが望ましい。また、感覚付与単位は適切な動作タイミングで駆動する必要から、動作タイミングを算出する演算部15は高速な演算処理を可能とし、装置全体としての反応速度が速くなければならない。そして、感覚付与単位の振動又は発光が周囲へ不要な影響を与えない具体的な振動単位10や発光単位11を構成するほか、振動音や発光量を抑える等の工夫が必要になる。このほか、ポインタ１のように、プレゼンテーションの場面で長時間使用される可能性がある場合、装置全体として低消費電力であることが望ましい。
【００１９】
本例のポインタ１は、図１に見られるように、聴衆の反応が顕著に現れると推定される時系列上の特定時点を動作タイミングとして駆動する感覚付与単位として、先端12に発光ダイオードからなる発光単位11を、グリップ13に小型振動モータからなる振動単位10を内蔵している。発光単位11及び振動単位10は同期して駆動させるが、実際に同じだけ駆動するとは限らない。例えば、本例の振動単位10である小型振動モータによる振動は、発光単位11である発光ダイオードの発光から遅延して、感得される。これから、両者が同期して駆動していると感得させるには、少なくとも小型振動モータによる振動が感得できるまで発光ダイオードを発光させる必要がある。これから、例えば本例のポインタ１における発光単位11及び振動単位10の駆動時間は、前記小型振動モータによる振動が感得されるまでの遅延時間にするとよい。
【００２０】
身体リズム生成装置では、上記発光単位11及び振動単位10のほか、各感覚付与単位を駆動する駆動部14、駆動部14を駆動させる動作タイミングを算出する演算部15、そして動作タイミングを算出する基礎となる発表者の音声の信号を取り込む信号入力部16が必要であるが、駆動部14及び演算部15はコンピュータ17で構成し、信号入力部16として前記コンピュータ17に接続するマイクを用いることができる。この場合、コンピュータ17で構成する駆動部14と発光単位11又は振動単位10とを接続するための各種インタフェース機器を用いるとよい。
【００２１】
発光単位11の発光又は振動単位10の振動によって発表者に視覚的又は触覚的な感覚情報を与え、聴衆に対する身体的引き込み現象をもたらすには、前記発光単位11又は振動単位10を駆動させる動作タイミングの算出が重要である。ここで、発表者の音声の信号から推定される動作予測値が予め定めた動作閾値を越えた時点を動作タイミングとして算出するため、動作タイミングの算出で重要なものは動作予測値の推定であることが分かる。本例では、次式で表される発表者の音声の信号の移動平均(Moving Average)により動作予測値を推定している。数２中、ｙ(ｉ)は動作予測値、ａ(ｊ)は予測係数、ｘ(ｉ−ｊ)は発表者の音声の信号、そしてｗ(ｉ)はノイズを表す。
【００２２】
【数２】
2005250421.tif 000004
【００２３】
移動平均は、動作予測値と発表者の音声とを線形結合で結びつけて推定するもので、比較的簡単な算出式のため、演算部15の負担を少なくしながら、身体的引き込み現象をもたらすに適切な動作タイミングの算出を可能にしている。実際の計算量は、現時点から遡る時間幅と、前記時間幅における分割数(Ｊ)とにより増減する。ここで、動作予測値と発表者の音声との関係づけのみであれば、上記ノイズは必要ないが、ノイズを加えることで、聴衆個々で異なる身体リズムによる揺らぎを動作タイミングの算出に盛り込むことができる。
【００２４】
こうしたポインタ１を所持する発表者は、図２に見られるように、発表内容を表示する表示画面２をポインタ先端12で指し示しながら、音声を聴衆に伝える。ここで、発表者の音声を聞いた聴衆の反応が見えれば、この聴衆の反応によって聴衆に対する身体的引き込み現象を発表者にもたらすことができる(図２中手前矢印参照)。しかし、会場が暗かったり、広かったりすると、身体的引き込み現象をもたらす程度の反応を発表者が捉えることが事実上不可能である。本例のポインタ１は、聴衆の反応が顕著に現れると推定される時系列上の特定時点を動作タイミングとして、グリップ13を握る発表者の手に振動を与え、また先端12を発光させることにより、聴衆の反応、すなわちノンバーバル情報を発表者に与え、聴衆に対する身体的引き込み現象を発表者にもたらす。
【００２５】
ポインタ１のグリップ13における振動は、発表者しか感得できない触覚的な感覚情報であるが、先端12における発光は、発表者のみならず聴衆も見ることができる。この発光単位11は、本来話し手である発表者に身体的引き込み現象をもたらすため、聴衆の反応が顕著に現れると推定される時系列上の特定時点を動作タイミングとして発光させる。よって、発光単位11の発光は、聴衆個々に直接的な身体的引き込み現象をもたらすものではないが、発光単位11の発光が自分以外の聴衆の反応と捉えることで、結果として発表者に対する身体的引き込み現象を聴衆全体にももたらすことができる。そして、発表者及び聴衆が同じ動作タイミングを視覚的又は触覚的な感覚情報で感得することで、身体リズムが共有され、発表者には話しやすく、聴衆には聞きやすいプレゼンテーションを実現できる。
【実施例】
【００２６】
上記例示のポインタ(図１参照)を実際に作成し、数人の聴衆に対して発表者が簡単なスライドを用いて発表する場面で使用させるモニタ試験を実施した。使用したポインタからなる身体リズム生成装置の構成は、図３に示す。ポインタ１は、市販の伸縮タイプのものを改造し、感覚付与単位として発光ダイオードからなる発光単位11を先端12に、小型振動モータからなる振動単位10をグリップ13に内蔵させている。コンピュータ17は、実際の使用を想定して可搬性に優れるノートパソコン(IBM社製、CPU：Pentium(登録商標)III-700MHz)を使用し、演算処理プログラム及び駆動処理プログラムをそれぞれ実行させて、演算部15及び駆動部14を構成している。駆動部14からの駆動信号は、信号増幅器を内蔵する自作したUSBインタフェース18を介して発光ダイオード及び小型振動モータへ伝達される。発表者には市販のピンマイク19を装着してもらい、発表者の音声を拾いやすくしている。このピンマイク19は、コンピュータ17の音声入力端子へ接続して信号入力部16を構成し、演算部15へ発表者の音声の信号を受け渡している。発光ダイオードの発光時間と小型振動モータの振動時間は等しく、本例では小型振動モータによる振動が感得されるまでを前記発光時間及び振動時間に定めている。
【００２７】
発光ダイオードを発光させたり、小型振動モータを振動させる動作タイミングを算出するための動作予測値は、次式に示される発表者の音声の信号の移動平均(Moving Average)により推定した。数３中、ｙ(ｉ)は動作予測値、ａ(ｊ)は予測係数、ｘ(ｉ−ｊ)は発表者の音声の信号、そしてｗ(ｉ)はノイズを表す。
【００２８】
【数３】
2005250421.tif 000005
【００２９】
ここで、発表者の音声の信号ｘ(ｉ−ｊ)は、現時点から過去２secの範囲の信号を60分割、すなわちＪ＝１〜60として、1/30sec単位の値を用いている。この度のモニタ試験では、予測係数ａ(ｊ)に前記1/30sec単位の時間間隔で予め定めた定数を用いている。また、ノイズｗ(ｉ)は乱数により、動作予測値ｙ(ｉ)を算出する度に異なる値を用いることにしている。これにより、動作予測値ｙ(ｉ)に自然な揺らぎが加味され、動作タイミングの決定から不自然な規則性を除外することができる。
【００３０】
予断を排除するため、発表者にはポインタ１の振動単位10及び発光単位11の働きを教えていない。このため、発表者は、使用開始直後に振動するグリップ13や発光する先端12に少し戸惑いを感じながらも、振動又は発光を触覚的な感覚情報又は視覚的な感覚情報として感得できるようになると、「ポインタのグリップの振動や先端の発光が、聴衆の頷いている様として感じられ、話しやすかった」、「ポインタのグリップの振動や先端の発光に慣れると、現在の振動又は発光の程度では物足りない気がする」等の肯定的な回答を見せた。また、発光単位11を視認できる聴衆からも、従来のプレゼンテーションよりも話が聞きやすかったとの回答が得られた。現在のところ、身体的引き込み現象の定量解析手法が存在しないため、こうしたモニタ試験による評価でしか是非を論ずることはできないが、本発明の身体リズム生成装置について、少なくともプレゼンテーションの場面において発表者の話しやすさを助け、聴衆を引きつける効果を確認できたと思われる。
【図面の簡単な説明】
【００３１】
【図１】感覚付与単位として振動単位及び発光単位を備えたポインタの構成図である。
【図２】同ポインタを用いた場合の働きを説明する概念図である。
【図３】モニタ試験に使用したポインタからなる身体リズム生成装置の構成図である。
【符号の説明】
【００３２】
１  ポインタ
10  振動単位
11  発光単位
12  ポインタ先端
13  グリップ
14  駆動部
15  演算部
16  信号入力部
17  コンピュータ
18  USBインタフェース
19  ピンマイク
２  表示画面
【図１】
2005250421.tif 000006
【図２】
2005250421.tif 000007
【図３】
2005250421.tif 000008