情報処理学会 インタラクション 2015
IPSJ Interaction 2015

A58
2015/3/5

身体活動量情報を用いた音楽イベントにおける盛り上り感の共有平林 真実†1

概要：クラブやライブ音楽会場において観客らが音楽に合わせて踊る/体を動かすなどの身体活動を収集し，それらの活動量に応じた映像/照明として提示することにより観客が盛り上り感を共有するシステムを試作した．近年スマー
トフォンや Bluetooth デバイスで広がりつつある身体活動センシングを音楽会場に適用することで，音楽体験の向上をめざす

An Approach to Share Emotion of Audiences in Music Venues withan Activity Monitor
MASAMI HIRABAYASHI†1
Abstract: I made a system that acquires motion of an audience (dancing jumping etc.) at music venues with activity monitors
to share emotion of an audience. I try to enhance music experiences by sharing emotion of audiences by utilizing popular activity
monitors.

1.

はじめにった nike+ fuelfest[8]がある．我々も NxPC.Lab の活動において，スマートフォンを動かすことで会場内に VJ 映像と何十年も大きな変化がなかった音楽会場における音楽して共有できる iPhoneVJ[3]や高可聴域音を利用して DJ がの楽しみ方に対して，近年，徐々にメディア技術が導入さ観客のスマートフォンの映像を制御する Cryptone[5]などれはじめ，会場におけるリアルタイムの反応や参加性を生の開発を行っている．観客同士で動作を共有するためのもかした仕組みが注目されてきている．我々は，アートの分のとしては，ペンライトの振り方の教示[9]する例がある．

野で先行しているインタラクティブな表現形態やメディア技術を音楽会場における体験へ持ち込むことで，新しい音3.

身体活動としての盛り上り感の共有

楽の楽しみ方や新しい音楽体験をもたらすことを目指した

音楽会場における観客の盛り上りの形態としては，アイ研究活動を行っている．音楽会場における体験をパフォードルや JPOP などで歌に合わせてペンライトを振ったりすマ/アーティスト，観客，会場空間の相互インタラクションるような一定の約束事に則り会場全体を盛り上げていくタととらえ，NxPC.Lab[2] という活動において音楽イベントイプと，クラブやロック系ライブのように各自に自由に動を実施し実験を行いながら，音楽体験を拡張するための実き回りながら踊ったり，飛び跳ねたりするようなタイプの践的な研究を行っている[3][4][5][6]．

主に２つがある．本システムは，盛り上りを示す身体的行

本稿では，音楽会場における観客の動きを共有すること

動が個々人に由来し，会場全体で共有されることが少ないで，会場内での盛り上りを判定し，会場内の照明や映像にクラブやライブハウスにおいて，高揚感や一体感を照明やより提示することで盛り上り感や一体感を向上させること映像として提示することで，観客同士さらには観客とパフを目指したシステムを実装した．観客の動きの取得には，ォーマとで共有することで，音楽体験をさらに充実させる

急速に普及しているスマートフォン自体あるいはことを目指している．

Bluetooth LE で接続する活動量計を利用すること想定し，iPhone 内蔵の活動量計を用いて実装を行った．

2.

関連事例

我々は，これまで音楽会場における音楽体験を拡張するために手法として，アーティストから観客への働きかけ[5]，観客からアーティストへの反応の提示[6]などを行ってきたが，本システムでは観客同士のインタラクションを対象

音楽会場における一体感を演出するための方法としてとして，音楽会場で踊る/動くことで一体感を誘導すること

は，無線制御のペンライト[7]やリストバンドなどが実際のを目的としている．クラブやライブハウスなどの会場におコンサートなどで利用されるようになってきている．また，ける音楽に合わせた身体的な動きは，激しく踊ったり飛び活動量計を利用したイベントしては，NIKE fuelband を使跳ねたりといったこともあるが，一般的には観客は立った†1 情報科学芸術大学院大学
Institute of Advanced Media Arts and Sciences© 2015 Information Processing Society of Japanまま足，頭，手などでリズムを取りながら軽く動くことが377

多い．そこで，活動量計の歩行に類する活動として音楽会体として各スマートフォンの活動量情報を共有する．これ場の動きを取得することを試みることとした．

らの活動量情報は同時に PC でも取得され，会場内に設置会場全体での盛り上りとして考えると，一人の人が激しされたシリアル LED テープ(adafruits NEOPIXEL)を制御す

く踊るよりは多くの人が一定の動きを伴って活動する方がることで会場内の照明を制御する．同時に WiFi 経由で盛り上りとしての指標として適していると考えられる．まOpen Sound Control(OSC)により DMX 照明装置が接続された，会場で音楽を楽しんでいるときは，スマートフォンはた PC と通信を行うことで，照明装置の制御も行うことがたまに見る程度でほとんどはポケットなどに入れたままにできるようになっている．

しておくことが多いため，スマートフォン本体での活動量

スマートフォンアプリとして実装したシステムは，や盛り上りの提示は最低限にとどめ，全体としての活動量

Bluetooth LE による通信により，周辺の同アプリを起動しすなわち盛り上りを会場における照明や映像として提示すているスマートフォンの数と各スマートフォンの活動量

る，今回は会場デコレーションとしての LED 照明装置を用（歩行数）を取得する．端末の数と活動量の積を全体としいて会場内に提示する．ての「盛り上り値」として，スマートフォン画面での３段4.

階の色表示として表示する．PC 側では，「盛り上り値」にシステム概要応じて会場内に設置したシリアル LED テープの発光パタシステム開発にあたって，クラブやライブハウスは地下ーンを変更することで盛り上りを演出する．など携帯電話の通信状況が良くない状況が多いこと，場所

5.

により携帯電話の電波が届かない場所のあるローカル鉄道

システムによる実施実験と今後の展開（樽見鉄道）での音楽イベントとして実施することなどの本システムは，2014 年 12 月 20 日に岐阜県大垣市と岐阜条件を考慮し，携帯電話会社の提供する 3G や LTE などの県本巣市樽見をつなぐローカル鉄道である樽見鉄道と共同通信手段やインターネット接続に依存しないことを前提とで行うイベント列車「クラブトレイン」という音楽イベンした．システムの概要を図１に示す．

トにて実験を実施する予定になっている．実験を踏まえて，さらに今後予定されている音楽イベントにて実証実験を行っていく予定である．この実験ではローカル鉄道内の車内という非常に狭い空間内での実施であるため，Bluetooth LEの通信距離は問題とならないが，より広い会場への対応のための P2P 的なデータ共有の仕組みや音楽会場での踊りや動きを活動量計にて取得する際の適切な判定方法について考察と改良を行っていく予定である．

参考文献
1)

図1
Figure 1

システム概要System Overview

開発は，iOS7.1 以上が動作している M7 コプロセッサを搭載した iPhone5s 以降のスマートフォンを対象とした APIを利用し，Objective-C により記述している．
各々のスマートフォン(iPhone)は，活動量情報を iOS のCoreMotion API に含まれる歩行数カウント機能を用いて観客の動きを取得する.スマートフォン同士は，Bluetooth LEにより通信を行うことでお互いの活動量情報を共有する．
スマートフォンは Bluetooth LE におけるデバイス側としてアドバタイズパケットをブロードキャストし接続するホス

NxPC.Lab: http://nxpclab.info
2) 白井大地， 白鳥啓， 岡村綾子， 平林真実: iPhone による観客と VJ のセッションシステム， インタラクション 2011， インタラクティブ発表， 20113) 當間忍， 清水基， 大総佑馬， 藤吉功光， 平林 真実: CJmix(Cloud media Jockey Mix)， インタラクション 2011， インタラク
ティブ発表， 2011
4) Masami Hirabayashi，，Motoi Shimizu :Cryptone: Interaction
between Performers and Audiences With Inaudible DTMF Sounds，
SIGGRAPH ASIA 2012 Emerging Technology，Article No.5，2012
5) 平林真実，清水基: Cryptone:音楽会場におけるパフォーマと観客の相互インタラクションのためのシステム，インタラクショ
ン 2013，インタラクティブ発表，2013
6) Sony Music Communications Inc. FreFlow(フリフラ)®，https://www.youtube.com/watch?v=mZTrVz0_d0o7) Nike+ FuelFest， http://www.rga.com/work/nike-fuelfest/8) ホーソーン ルーク，吉井 貴映，新田 英雅，浅野 剛司，
田辺 晃弘，平山 貴之，木田 純平，松下 宗一郎: 音楽ライブ会
場におけるリズム教示インタフェースの提案， インタラクション
2014 ，インタラクティブ発表， 2014

トからのコネクションを待つモードと，ホスト側としてデバイス側からのアドバタイズパケットを受け取り，コネクションを張るモードを一定時間ごとに繰り返すことで，全© 2015 Information Processing Society of Japan378