AITCシニア技術者勉強会「魔法のランタン」
2017年11月11日
先端IT活用推進コンソーシアム
シニア技術者勉強会
ランターン
Copyright © 2016 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

はじめに• 魔法のランタンは、絵本の読み聞かせに合わせて「光」と「音」によるリッチな体験を演出するアイテムです。
• 魔法のランタンは、未来ある子供の心と創造力を育てる「夢」ある企画です。

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

2

はじめに
• これより、この「ささやかな夢」の実現に奮闘したランターンの成果を発表します。

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

3

アジェンダ• 魔法のランタンとは• デモ• システム仕様– システム構成図– 採用技術の説明• ハードウェア• ソフトウェア／クラウドサービス• 現状の課題• メンバーの感想

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

魔法のランタンとは❏ 絵本の読み聞かせをもっともっと楽しくしたい！
❏ 何度も繰り返し読まされるお気に入りの絵本を楽しく読みたい！
❏ 読み聞かせの最中に安心して笑顔ですっと眠りに落ちるよ
うな幸せな時間増やしたい！
そんな想いから閃いた魔法のランタンは絵本の読み聞かせに合わせて「光」が変わり「音」が出ます。

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

5

デモ• 実際の動作をご覧ください。
Lanturn No.1
（Google Cloud APIバージョン）

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

Lanturn No.2
（Juliusバージョン）

6子どもの反応（田原家）
絵本の内容に合わせて音が鳴るので大喜び！
でも絵本よりランタンの方に興味が行って読み聞かせにならなくなってしまいました。。。。
読み聞かせは演出が多いとそちらに気を取られお話しに集中できなくなるから「感情を込めずに読むほうがよい」ぞ。
（筑波大学の調査結果より）でもご褒美貰えました。

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

7

システム構成図• 使用している各パーツは次のように接続しています。（各パーツの詳細は後述）
フレキシブルケーブル

フルカラー
LEDテープ

光の演出

カメラ

絵本の認識

USBケーブル
音声の認識

マイク

ジャンパーケーブル
USBケーブルジャンパーケーブル

音の演出

ブレッドボード

スピーカー
Raspberry Pi 3

microUSBケーブル

モバイル
アダプター

電源供給

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

8

Lanturn No.1 Hardware
3D-CAD

3DプリンタCopyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

実物9

Lanturn No.1 Sound Software

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

10Lanturn No.1 Lighting Software

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

11

Lanturn No.2 Hardware
Google Cloud Vision（画像認識）

画像データ

Lanturn Client
音声データ

Julius Server（音声認識）

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

12

Lanturn No.2 Sound Software

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

13

現状の課題【Lanturn No.1の課題】● クラウドサービスを利用しているため、動作が遅い（特に初動に時間がかかる）● 連続して音声認識を実施すると、認識できなくなる（3回目以降認識できなくなる）
Lanturn No.1の課題を解決するため、音声認識を
Google Cloud SpeechからJuliusに置き換えたのが Lanturn No.2

だけど・・・【Lanturn No.2の課題】● 音声認識率が低く、誤認識が多い
Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

メンバーの感想
田原
●
●
●
●
●

いろいろな実験（画像認識、音声認識、 IoTなどなど）ができてとても楽しかったです。
その中でも Google Cloud APIの精度の高さに驚きました。（実用レベルですね。）
あと皆さん、とても積極的でいろいろと勉強ができました。ありがとうございました。
m(_ _)m

横田
●
●
●

太田●
●
●

普段は職場から出ることがないので、職場外の方とお話できる良い機会でした。参加者のみなさんの推進力に驚かされました。短い間でしたが、ありがとうございました。

ランタン自体は目的ではなく、それを通して様々な知見が得られることを目的としていたので、途中で各人の開発色が出てきたときに、とても勉強になった。

近藤
●
●
●

●

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

必要な技術要素が多く、また初めて触れるものばかりだったので、毎回の活動がとても新鮮でした。
Google Cloud APIの精度に感服しました。が、応答速度を考えると一長一短あることを身をもって知ることができました。

ご清聴
ありがとうございました

Copyright © 2017 Advanced IT Consortium to Evaluate, Apply and Drive All Rights Reserved.

16