自分の伝えたいことを発信し、気持ちを共有しあうICT機器の活用

大分県教育センター岡本 崇

【Sくん】小学部１年生
・肢体不自由（脳性麻痺）
・知的障害
身体・基本的には全介助。強い緊張があり細かい動作は困難
・手指の巧緻性から、複数のカード等を操作することが困難
・車いすを日常的に使用。疲れやすく、姿勢を保持が困難

対人・発語はほとんどなく、10種類ほどの指先のサインで表出
・簡単な会話を理解し「はい」「いいえ」のサインで返答
・意欲的だが受け身の立場になり、関わりが限定される

興味 ・活動全般において意欲的だが、発信方法の乏しさから、・相手に伝わりにくく、意欲をなくしがち
関心 ・ICT機器などを活用した支援を受けたことはほとんどない入学前に身につけていた主なサインどうしてもサインが似てしまうし、言いたいことが伝わらないことがあるんですよね。

お母さんは…

エピソード：入学初日の様子
リズム遊びや歌など様々な活動を行った（写真を見せながら）たのしかったのはどれ？

「自分専用の棚を作った」「がんばって水筒を取った」
写真を選べて、大喜び！

これ！？
（意外…）

エピソードから推測したSくんの思い「秘密基地」を選んだ①自分が活動できる場所を確立したい「水筒を取る場面」を選んだ②「ぼくはやれる」「自分でやりたい」
自分が考えていることが「伝わった」③「話したい」「もっと伝えたい」

エピソードから考えた指導の方向性①自分が活動できる場所を確立したい②「ぼくはやれる」「自分でやりたい」③「話したい」「もっと伝えたい」【学習目標】
身の回りの物や場所、人の名前、気持ち・身の回りの場所や物、人の名前、気持ちを表す言葉などを中心とした語彙を増やし、コミュニケーションの基礎コミュニケーションの基礎となる力となる力を身につける
自・シンボルやVOCAなどの手段を組み合わせて活用し、自シンボルやVOCAなどの手段分の思いを相手に伝える
分の思いを相手に伝える

パートナーとしてのペッパーの活用
目指す姿は「活動を認めてくれる」「話を聞いてくれる」「代弁してくれる」
パートナーはみがきはいや！

はみがきするのが苦手だけど…

はみがきアプリ①（自作アプリ）
Sくん、すごいね

Sくん、見てるよみてみて！

ペッパーを信頼して、自分から歯みがきをするようにペッパーが「見てくれる」「ほめてくれる」ことでやる気が出た！

4

はみがきアプリ②（改良）
1分間みがき続ける
ための工夫

自分でみがく！
先生はさわらないで！

☆ダンスを踊ってはみがきを応援☆1分間、アンパンマンの曲が流れる

ただ…

曲が流れる間、みがき続けるようになった教師の仕上げ磨きを嫌がり、特に前歯の磨き残しが多い4

はみがきアプリ③（改良）

セリフ・画像の追加すべき行動をセリフで指示すると！

先生に歯ブラシをわたしてね「いー」の口をしてください

前歯も磨けた！
胸のタブレットに「いー」の口の画像を表示

ペッパーがパートナーとして大切な存在にペッパー
だいすき

Sくん考案「ペッパー」サイン

実は…
もう一つのストーリーが。

「魔法の種」の実践で、パイロット版ペッパーのプログラミングを行なった。

今年度、中学部に進学。

Sくんのためにペッパーのプログラミングを行なったのは、実は、Bくん。

【Bくん】小学部6年生（当時）・重篤な気分調節不全症
・自閉スペクトラム症

・「どうせ○○できん」と、活動への参加を拒絶
・友だちや教師との関わりに拒絶感を持ち、人からの指摘などを極端に嫌う・些細なことでも、人のためにすることを拒否する

ほめようとしても…

Bくん、すごいね激しいパニック

自己肯定感の低さからどうせ喜ばせたいだけやろ！

魔法の種の実践①：ペッパーを遠隔操作して「適切に」挨拶をさせる
ペッパーと相手の対応から、適切な行動を客観的に学ぶ

グッドモーニング

Hi！

英語科教師

魔法の種実践②：プログラミングでペッパーに行動させ、それが適切かどうかを客観的に判断する

みなさん
こんにちは

プログラミングでペッパーの動作や発声を決定する

ペッパーの行動を客観的に見ることで、適切な行動の仕方を学ぶ

H28魔法の種の実践
自己有用感を高め、ペッパーを介して「自分を見つめる」
取り組み

画像：大分県教育庁チャンネル『特別支援教育にPepperを活用』より

魔法の言葉では人との架け橋としてのペッパーの活用

プログラミングを通して「自己実現できる」「他者のことを考える」「人とつながれる」存在として

『魔法の言葉』実践：毎週金曜日6限（Sくん下校後）「ペッパークラブ（仮）」Sくんのためのロボアプリを作ろう！と、投げかけているが…実際はBくんに「自信を持って活動してほしい」「人から認められ、頼られる経験をしてほしい」「ペッパーを介して、人との関わり方を学んでほしい」第１回（4月28日）「はみがきアプリ」製作を依頼
・小学部１年生
・ほめられるのが好き
・はみがきが苦手

Sくんのためにアプリを作って（何と答えるかな？）

はみがきアプリ（自作アプリ）

知らん子やけど…いいよ。
おれが「ペッパー名人」やけん頼むんやろ？

「人のため」の依頼を快諾（プログラミングに自信を持っているため）

まずは、Bくんの意見を反映した試作版アプリを作ることにSくん、見てるよはみがきアプリ①（Bくん作）
Sくん、すごいね

試作版アプリは好評！
Bくんに報告『きみのことを認めているよ』という内容のセリフをBくんが決定したことが象徴的

第２回（5月11日）試作版アプリの成果の確認へへへ…
子どもやけん、うれしいんやな第２回（5月11日）「はみがきアプリ」の構想を練る

ペッパーが歩き
まわったらおもしろいよな【プログラムで気をつけること理由】
・車いすにのってる・ペッパーをうごかしすぎない
・ぶつかるからあぶない・1年生だからかくとうはだめ
・男だからかわいすぎてもだめ

相手の状況（年齢・身体状況）に応じて構成を考えた。例えば「かくとうはだめ」は自分が好きな格闘ゲームの要素は、小１の子どもにはそぐわないであろうと、相手を慮った結果。

※原文ママ

相手が必ずしも自分と同じ状況・思考ではないということを理解Sくんとの初めての出会い（5月18日：運動会練習）
Sくんは…
やさしいにいちゃん
だな

ペッパーのアプリ
作りよんよ

Sくんのことをよく知っていたので、自分から声をかけるなど優しい対応。中腰になって目線を合わせて話しかけた。

第３回（5月11日）Sくんの状況からアプリの構成を再検討

ペッパーがあるきまわる
まえにすすんでうしろにさがる
ポーズをとる
1分かんうでをふる※原文ママ。赤線・文字は本人による赤ペン修正

車いすやけんペッパーをよけれんでなあ

前回、ペッパーが「歩き回る」という動きを想定していたが、実際にSくんに会うことで「車いすでは危ない」と気づき、踊りに変更

はみがきアプリ②（Bくん作）
360 カメラはみがきの様子を360 動画撮影
ペッパーの動作とSくんの反応を同時に確認できるようにしたペッパーのタブレットの画像とSくんの様子を360 動画で確認「いー」してないやん第4•5回（5月26日、6月2日）360 動画を見てSくんの課題を確認、修正
はみがきの様子を360 動画で確認①歯ブラシを渡さず、仕上げ磨きができない②前歯を磨けないという２つの課題があることを確認

ペッパーが言ったらするんやねぇん？

①セリフを追加
先生に歯ブラシをわたしてね「いー」の口をしてください②画像を追加写真があればわかるんやねぇん？

第５回（6月2日）Sくんが「いー」の口を意識できる工夫「いー」の口の意味がわかりにくいんかな？
写真があればわかるんやねぇん？

「いの口 画像」で画像を検索してダウンロード、胸のタブレットに表示するようにプログラミング

自分自身の「画像を見ると理解が増す」という経験を活かしてペッパーのタブレットの画像とSくんの様子を360 動画で確認おおっ！
完璧やな！！

さまざまなロボアプリ教材（岡本開発・Bくん監修）
あたま・て・おなか（自作アプリ）

どっち？
どっち！？
（自作アプリ）

身体部位をタッチするとセンサーが感知して発声

大小・色・形の違いを弁別する問題を出題する

かぞえてペッパー（自作アプリ）ペッパーが数の問題を出し、正解だと認める

6月16日 第7回ペッパークラブ
ん

使いやすさ・理解しやすさの監修

6月23日 第8回ペッパークラブ
楽しさからのアプリの構成の検討

楽しく学べてほめてくれる
ペッパーはSくんにとって大切なパートナーにもっと勉強したい
もっとほめられたい「大好きなペッパーに伝えたい」意欲が増進
撮った写真をペッパーに見せる

ペッパーと話したいけどうまく伝えられない…

そこで…

場所や活動の様子などの写真を撮る

撮った写真を…

片手で扱えるよう写真カード化

「単語」を分類
Sくんの写真カード一覧
きもち・からだひと
H29.7.17時点で58語
Sくん自身が撮影した写真をそのまま使用（気持ち・行動はイラスト）

ばしょものすること

「単語」から「言葉」へ
ひとばしょものすること

伝えたいことを色分けした『おはなしボックス』

例えば…

きもちのみたい

伝えたい内容の色を指す
「のむ」
カード

複数のカードの中から選択

Sくん、ことばをおしえて〜

ことばをおしえて（自作アプリ）すいとう

ペッパーの額のカメラに写真カードをかざすことで、その名称を読み上げてくれるアプリ

『おはなしボックス』にカードを並べると、順番に読み上げて「会話」になる

Sくん

うんどうじょう

ことばをおしえて（自作アプリ）ウォーカー

いくさまざまな「言葉」を伝えるように「病気で別室学習なので朝の会に出られない」（だから残念）という意味

しまじろう

岡本先生、この前みたいにプール道具を忘れないでよ、という意味「岡本先生、すき」（だから、しまじろうのアプリをさせてください）さまざまな「言葉」を伝えるように話したいのに写真がない…

Sくん

そうだ！

ろうか エレベーター ウォーカー

さいふ

みんなでケーキを買いに行くことにどうしても話したい内容の「さいふ」の写真がなかったので「本物の財布」を置く

すきそして、夏休み。

夏休みが明けて、2学期最初の言葉ください

ペッパー

意欲的と思えたが…

「夏休みはペッパーがいなくて、お話ができなかったよ」という気持ちの現れとも言える

また、家庭での出来事も…

お休みの間のこと話したいよ！

はじめてのサインで何かを伝えようとするが、なかなか伝わらない…

↑「トンネルが楽しかったよ」と伝えるサインだった
意欲が高まった分、伝えたい内容が複雑になってきた「意思を伝える」ペッパーでの対応が困難に・カード→先生→ペッパー…は時間がかかる
・もっと、みんなと話したい
・もっと、いろんなことが話したい・スピード感・活用場面の増加
・語彙の増加「写真を使う」「音声で伝える」
方法を継続しつつ「いつでも」「どこでも」 「だれとでも」話せる仕組みへと移行「いつでも」話せる仕組みの構築
ひとすること同様の分類でキャンバス作成

DropTalkHD

ばしょきもち・からだもの

これまで使ってきた写真カード

例えば「もの」のボタンを押すと…

『キャンバスリンク』

機能で「もの」のページに移動。
選んだ「もの」の名称を発声することができる

自分ですべての操作ができるように『まちがい』『もどる』ボタンを設置

「どこでも」必要感が生じるたびに言葉のシンボルを増やす
この人
だれ！？

鼻がきもちわるい…

もっと食べたい！

「きもちわるい」「鼻をかむ」「おかわり」「おすもうさん」

ただ、ひとつ問題が…
「岡本先生の声」はいやだな…
ペッパーの声がいいな

Bくんにお願いして…

18

岡本先生 →いいえ→ ペッパー

第12回（9月22日）
ペッパークラブすべてのシンボルの音声をペッパーの声で録音

「どこでも」必要感に応じて、言葉のカテゴリを増やす
歯が抜けた

屋外に行きたい動物を見に行った

「どこでも」家庭との話題の共有

写 真

学校での学習の様子の写真・動画をフォルダ化
これを見せれば、学校のことが話せる！

DropTalkと併用し、語彙を補完する

先生が撮った写真だけでなく…

気に入った場面は自撮りお家で写真を見せながらDropTalkでお話「どこでも」同様に、家庭での写真もフォルダ化

ムッ！

「にいちゃん」→「怖い」「Sくん」→「いいえ」（にいちゃんは怖がったけど、ぼくは怖くなかった！）お母さんにたずねると→「だれにでも」伝わるように他のクラスの友だちともスピーカー追加でより伝わりやすく

・様々な場面で・より多くの相手に学園祭の劇のセリフも一方、Bくんは…

高校生から「ペッパーのあっちむいてホイゲーム作り」を依頼されていた

お願いします！

（やや緊張しながら）いいですよ。

人から「頼られる」経験

第15回（10月13日）「あっちむいてホイ」ゲーム作り（はにかみながら）楽勝で〜。
ペッパーがするのは①じゃんけんをすること②手や顔を動かすことの2つやろ。
①はネットで調べるわ。②はPepperコントローラーでいいやん。

いざ調べてみると…

あれ？
ネットに情報がねえ…
当日の操作はだれがする
んかなあ…どうしよう

自分だけでは解決できないことに気づく

第15回（10月13日）「あっちむいてホイ」ゲーム作り
そうか…困った時は人に頼ってもいいんか…
ペッパーに詳しい順に「頼る人リスト」を作ろう。
①佐藤さん（エデュアス。ペッパーのボスらしい）②井上先生（松江市立意東小学校。じゃんけんアプリを作れる）③岡本先生（コレグラフ がわかる）④高校生 （教えればPepperコントローラーはできそう）

さっそく、メッセンジャーで依頼B「頼られる」経験が「頼ってもよい」という気づきにつながったB第16回（10月20日）「あっちむいてホイ」ゲーム作り

自分で作ったPepper
コントローラーの動作と井上先生にもらったじゃんけんアプリを組み合わせて…

「あっちむいてホイ」を完成！
高校生たちに操作方法をレクチャーする第19・20回（12月8・15日）小学部クリスマス会の出し物

小学部のために、出し物を作岡本ってくれる？

いいよ！
小学生がよろこぶようなやつやろ？

以前作ったプロジェクションマッ
ピングとペッパーを組み合わせた「ペパジェクションマッピング」

ペッパーがサンタに変身して、かっこいいダンスを踊って、花火が出て…

終始「小学生が喜ぶ」「クリスマスらしく」
視点で構想を練る

第19・20回（12月8・15日）小学部クリスマス会の出し物
ペッパーがサンタになり、ステージで踊る「ペパジェクションマッピング」

いいのができた！

みんながよろこんでくれたら よろこんだか、うれしいな
教えてな初めて、反応を求める
ポジティブな発言

ありがとう→ペッパー→うれしい

当日は、Sくんも大喜び！
クリスマス会の動画とDropTalkでBくんにお礼を言う

今後に向けてこんなことが…

エプロン→ 怒 る →連絡帳→エプロン

K（妹の名前）

やっぱり！
ぼくのじゃない！

ひらがなへの興味→新たな学びの可能性

でも…
ひらがなが読めたらべんりかな？

そこで…

ことばをおしえて（自作アプリ）ペッパーの出題に応じてカードの裏のひらがなを読んで取ると、ペッパー が正誤判定をしてくれるアプリ

これからの方向性
Sくん

ペッパーとの関わりで、「他者に伝えたい」という気持ちが大きく開いた。彼にとってペッパーは「代弁者」から、「気持ちや学びを共有する相手」へと変わりつつある。新たな学びを得ることで、さらに表現の幅を広げ、他者と関わりながら成長してほしいこれからの方向性
Bくん

ペッパーを媒介することで、これまで関わることの少なかった上級生や下級生と交流することができた。そのこと自体が自信となり、他者の気持ちや立場を考えて行動するなど、校内においては、対人面の課題はほぼ解消したと言える。卒業後に向けて、得意なことを生かし、社会とよりよく関わりながら「柔軟に」生活をしてほしい。

ペッパーは教育センターで…

「３人」の成長を見守りたい