魔法のプロジェクト２０１８
魔法のダイアリー
成果報告会

Pepperと一緒ならいろいろな表現ができる～自分のやりたいことをPepperを通して実現～

千葉県立東金特別支援学校

押塚 雄史

大空まで響く 明るい
笑い声は 輝く目
光る汗 ワッハッハ♪
作詞・作曲 はなわ

自立をめざして、かがやく瞳、ひかる汗創立４５周年（小中高１５１名 寄宿舎有）

千葉県の形のチーバくん
東金はここ防災功労者内閣総理大臣表彰を受賞

Ａさんについて・高等部3年生（高等部より本校に入学）・知的障がいいわゆる「デコボコの発達」

・家庭ではよく話すが、学校では話さない
場面かん黙状態

・筆談で意思表示する・学習時に集中が途切れやすい・ローマ字入力ができるＡさんのコミュニケーション
・筆談で自分から話しかける

・自分の好きな話題を振るので相手は困ってしまう※以前「音声化」に取り組んだが本人が関心を示さなかった

筆談で伝えることは…
・「必要なこと」や「会話」よりも「自分が興味のあること（単語のみ）」が多い。
例：車の名前好きなアーティストの曲名⇒周りはあまり関心をもってくれない

コミュニケーションが成立しにくいしかし！作文は得意！
・作文などで気持ちを表現することはできる。

・しかし、筆談で、友達と関わろうとするときは、「文章」ではなく「単語」が多い。
⇒内言語・語彙力はかなりあるのでは？

Pepperの導入で・・・◎魅力のあるPepperだからこそＡさんの思いを叶えることができるのではないか⇩「言葉を投げかけてもらう機会」「聞いてもらえること」を増やす
Pepperが契機となり、双方向の「会話」が成り立ち、コミュニケーションスキルが高まることを期待はじめに使ったアプリ

ペッパーコントローラー

打ち込んだ文章を、ペッパーが代読・自分が打ち込んだ言葉や、動きをPepperが表現する⇒・自分の気持ちの代弁者として・自分では言えないことをPepperで・Pepperを介して会話ができる
・これまで人に頼んでいた「発表」を自分でペッパーコントローラーを使って初めて打ち込んだ言葉は・・・「TOYOTA８６」

Pepperを導入直後
 周りは、正直ガッカリ⇩

筆談時と一緒！！

でも・・・
自分の入力した言葉がどう音声化されるか確かめていた？
⇒周りの人に、Ａさんが打ち込んだ言葉に対して、受け答えをしてもらうように依頼

Pepperを導入直後
 周りからの注目が増え、Ａさんに対して話しかける友達・教師が増えた。
⇩「Pepperを介してのコミュニケーション」の増加
まだ「会話」としては成立していない

Pepper導入数日後
 自分からPepperを使って呼びかける
 「◯◯先生」
 「教頭先生、こんにちは」⇩

導入前（筆談使用時）には見られなかった姿

はじめての会話

小学部の児童が教室に遊びに来た時の出来事

小学部の児童が教室に遊びに来た時の出来事
Ａさん「◯◯君、３年１組にようこそ」
小学生「こんにちは」
Ａさん「デイサービスは楽しいですか？」
小学生「楽しいよ」
Ａさん「◯◯君の好きな遊びは？」
小学生「仮面ライダー。名前なんだっけ？」
Ａさん「園芸班の◯◯◯です」⇩
 初めてPepperを通して会話をする

小学部の児童が教室に遊びに来た時の出来事
小学生「名前なんだっけ？」
Ａさん「園芸班の◯◯◯です」⇩
 「Pepperです」ではなく自分の名前を伝えた⇒Pepperを通して「自分」として会話をしている

これまでとの差はなんだろう？

今までだったら「TOYOTA８６」と言っていたはず…
元々「コミュニケーションしたい」という欲求はある⇒Pepperを通じると「即時の会話」ではなく入力することによって話したいことを考えることができる。見ることもできる←Pepperの導入で変わったことPepperを導入したことで
 Pepperがいることで、少しずつ短い会話ができるようになっていく 周りも「ＡさんはPepperを通して会話をする」というイメージをもち、Ａさんに興味をもって接するようになっていく 「朝の会」の進行や発表などをPepperを通して一人で行えるようになっていく人前での発表が増える

Pepperを導入したことで

 「代読」ではなく「自分で」やる経験が増えた。
⇒「発表」も「会話」も一方で、課題も・・・
 入力のスピードが遅く、会話の相手が待てない 事前に準備ができるもの（発表など）では十分対応できるが、日常生
活では、対応できないことがあるスムーズな会話を成立させるために・単語登録を行い、「よく使う言葉」を登録⇩
・より早く、スムーズな会話ができるように・従来までの筆談と、Pepperを場面で使い分ける

筆談とPepper
どっちがいい？と聞くと・・・⇩
本人はPepperを使いたいなぜ「Pepper」なのか？

周りのリアクションの違い（車の名前を伝えた時）聞いてもらえるようになったアドリブにも対応

Pepperにも慣れてきて…
取り組みⅠ

取り組みⅡ

音声での表出
会話代替

入力の練習

Pepperにも慣れてきて…ある日のこと

・販売会の実行委員になり、Pepperを使って準備も万全
・販売会報告会の「実行委員の感想」と「終わりの言葉」をPepperを使って行うことになっていた

原稿は自分で・原稿作りは得意なので、事前に書いたものをPepperに打ち込んで発表の準備

無事、感想発表を終えるつもりが…
終わりの言葉で話す内容を、間違えて「感想発表」の後に話してしまった・・・
しかも２回も・・・

周りからも間違えたことで笑いが起き、Pepperを使って初めての失敗経験。

販売会報告会の場面でなんと！！
「失敗」を「ユーモア」で跳ね返すことができた

発表・コミュニケーションへの自信承認欲求から誰かのために突然・・・・・絵本のセリフを入力

絵本が好きなクラスの友達のために、絵本のセリフを打ち込み、読み聞かせをしてあげようとしていた自分のための「Pepper」から友達のためにも「Pepper」を！！

自分がしてあげたいことを、Pepperを通してやっているここまでが１学期

Ａさんは「Pepperだからこそ」会話ができるはず！！
 Ａさんが、以前「音声化」を試した際は受け容れなかったが、「Pepperでの音声化」では、受け容れ、意欲的に取り組んだことに着目。

 Pepperを使っての友達とのやりとりや発表を継続して行う。
⇨Pepperを通して発言することが「日常」になっていく変化とエビデンス

変化とエビデンス「単語」での関わりが減少「会話」が増えたPepperを通した表出について 初対面の人であったり、関係を築けていない人（教育実習生や介護等体験生）に対しては、単語や自分の好きなことについての「単語」で話しかける よく知っている人や、自分が関わりたい人に対しては「簡単な会話」をする

コミュニ⇨４月から比べて「会話」が増えていることは、ケーションの広がり「関係がとれている人」も増えている

会話の内容に変化も５月

１２月
・自分の好きなことだけ伝える頻度が減っている・相手の話題に合わせることができるようになってきているＡさんにとってのPepperの存在の変化
音声表出ツール
コミュニケーション代替ツール

自分の分身（アバター）
Ａさん撮影

発表場面での変化
 発表場面でも明らかな変化がでてきた
 学年の代表で発表することも増える 事前にセリフをタブレットに打ち込むことも一人で行う
 友達や教師の手伝いも減っていく発表場面での変化

発表場面での変化

発表場面での変化
 Pepperの入場（操作）から発表まで全て一人で行っている。
 以前は、下を向いてタブレット画面しかみていなかったが、周りの反応をみながら発表できている。
 発表後の嬉しそうな表情。

Pepperの操作
発表への自信ＡさんとPepper、友達の距離感（導入初期）
友達の輪から距離を置いてPepperを中に入れて反応を伺う

ＡさんとPepper、友達の距離感（ １学期頃）
Pepperの後ろに隠れながら友達の輪に入っていき周りの反応を見る

ＡさんとPepper、友達の距離感(２学期)

Pepperの横で「Pepperが話すことは自分が発信していることを示せるようになる２学期後半になってPepperでは、打ち込む時間があり少し会話が遅くなる。
「すぐ」答えたいのではないかと思わせるような場面が増える。

受け止めてもらえる安心感
次の発信への意欲「今」聞いたことに「今」答えたい？
これは「喋りたい」のではないか１２月上旬のこと
教員「Pepperと過ごせるのもあとちょっとになっちゃったね」
Ａさん「・・・（うなづく）」
教員「Pepperを貸してくれた人達にメッセージを送ろうよ」
Ａさん「（うんうん）」
教員「じゃあ手紙を書いておいてね。Pepper君に読んでもらってもいいね」
Ａさん「・・・（考える）」
教員「・・・・・自分でしゃべる？」Ａさん「（苦笑い）」

そして次の月曜日・・・
Ａさんは家で撮影をした動画をもってきてくれました

Ａさん本人が撮影してきた動画をご覧下さい「初めて声を聞いた」「Ａさんこんなにしゃべるんだ」「もう一回見せて」
ｂｙ.本校高等部職員

ビデオから・「Pepperを通して伝える」のでなく、自分の言葉と声で伝えることができた。
・Pepperを貸してくれたこと、友達と話ができるようになったこと、そしてPepperへの感謝⇨Pepperがいたからできたことがあることを本人も理解している

「Pepper君を使って友達と喋れて嬉しかったです」
 「楽しかった」ではなく「嬉しかった」という言葉⇨
本人が望んだことができたからではないか⇨
本当は話がしたい今後（卒業後）に向けて 卒業まで残り２ヶ月

 友達や職員とコミュニケーションをとることに喜びを感じることができるようになったＡさん
が、新たな環境で良い人間関係を構築できるよ
うに支援していきたい 卒業までに学校の友達に向けたビデオメッセー
ジを撮影して見せることができないか（という期待）ご清聴ありがとうございました