HumSter: 光走査線と身体表現を用いた円筒型作曲空間
駒込大輔
小野三島木哲雄

一磨
戸田代蔵

巧真志

HumSter: A cylinder-shaped composing space by scanning bodies
DAISUKE KOMAGOME†KAZUMA MISHIMAGI†TAKUMI SHIROKURA‡TETSUO ONO‡
MASASHI TODA‡

1.

はじめに

我々は作曲行為の新たな試みとして、複数人が即興的な身体表現で音楽を生み出す作曲空間を提案する。

体をカメラで映し、エリア分けされた領域に身体が入ることによって音に変換するシステムであるが、時間の流れを意識することができない[3]。
我々は、新たな作曲表現を生み出し、プレイヤー間本研究の大きな目的は以下の２つである。に「楽しい」コミュニケーションを誘発する要素を、・ユーザに新しい作曲体験を提供する①身体的躍動 ②集団的共有 ③即興的表現 ④偶発的・作曲過程に生じるインタラクションを観察する

秩序 であると考え、それらのコンセプトを元に新た

近年、様々な電子楽器の登場により作曲活動が用意な作曲メディアを図 1 のように設計した。

かつ手軽になってきたといえるが、その多くは指などの身体の一部分しか用いていない。元々音楽と身体は密接な関係があり、リズムやメロディをダンスなど身体全体で表現する文化がある。また、音楽は身体を通じて、他者と共有されやすい性質を持っている。音楽は時として振り付けや楽譜などのルールを逸脱し、即興的なパフォーマンスが集団の身体を共鳴させる。
様々な音楽的表現が混ざり合う中で、イメージが集団に共有されてゆく過程は興味深い。Cage はそのことについて一回性の音楽・偶然性の音楽という考え方を述べており、自然の中から偶発的に生まれた音がそれぞれの心の中で秩序ある音楽として生成されると主張する[1]。

図1 HumSter のシステム全体図

現在までに、身体を用いた様々な作曲メディアが提案されている。The Music Table は音符の代わりにキューブブロックを用いており、子供でも簡単なフレーズを作成することができる[2]。しかし、テーブルを操作フィールドとしているため、身体全体を用いた表現が難しく、楽譜上の流れがテーブルの端（終わり）から端（始まり）に飛ぶことで音符のつながりが非連続的になってしまう。また、神楽-KaGuRa-は人の身

2.

HumSter の設計 ・実装

2.1

デ ザイ ン ポ リ シ ー

我々は HumSter を構築するにあたり、以下の条件を満たすように設計・実装した。
□ グル ー プ で プ レイ で き る こ と各プレイヤーが身体的な躍動感を表現できるように、広いフィールドと走り回れるスペースを確保した。
□ 偶然 性 を 誘 発 する こ と

公立はこだて未来大学大学院
Graduate School of Future University-Hakodate
公立はこだて未来大学
Future University-Hakodate

各プレイヤーが順番に音を鳴らす仕組みによって、個人の意図しない方向へとメロディが進む。また、その過程で図２にような「笑い」や「遊び」といった行

情報処理学会 インタラクション 2009

動が生まれやすくする。

る。ソフトウェアは OpenCV を利用した Visual C++で□ プロ セ ス が 楽 しく 、 リ プ レ イ可 能 な こ と実装されており、音源はあらかじめ用意した wav フ

プレイが終わると、音を鳴らしたときのポーズが時ァイルを用いている。プレイ中は BGM が流れており、系列にならんだ「楽譜」が印刷される。それによって、そのリズムに合わせてプレイヤーはポージングする。

曲の再現や更なる完成度を目指すことができる。

3.

HumSter の実験 的検証

3.1

パ ーソ ナ ル サ ウ ンド の 利 用 法

身体の大きさや形、その日にたまたま来てきた服装などは、個人を表すユニークな属性である。本研究では、それらの属性値によって音の表現ルールを規定する。様々な個人の表現音域（“その人にしか出せない
図2 HumSter による作曲風景

2.2

ハ ード ウ ェ ア音”）が集団での作曲行為および楽曲にどのように影響を及ぼすのかを検証する。
3.2

回 転す る 光 の 走 査線 が 生 む 効 果

HumSter は半径 3m、高さ 2.5m の円柱状の外壁（白回転する光の走査線が強制的に時間の流れと身体のい布）とその中央にスリットチューブと光源があり、動きを生み出し、空間を走り回りながら即興的なポー外壁上にスリットから出た光を移しながら回転し、光ズで音を表現することを促す。プレイヤーは作曲者・に照らされた面積を撮影する Web カメラで構成され奏者・聴者という役割を交代で演じることとなる。そている（図１）。回転台は約 3RPM で回転しており、の構造が、各プレイヤーに集団の一部として音楽につ

カメラはフレームレート 1fps で光の中のオブジェクながりや一貫性を持たせるかを検証する。

トを認識して音が鳴る。スリットチューブはアルミで3.3できており、放熱処理されている。光源は全光束約

本来、作曲とは個人の主体的意識による行為である。

集 団か ら 偶 発 的 に生 ま れ る 秩 序

2700lm の電球型蛍光灯を用いている。光に照らされHumSter を用いることで、つまり一人の人間がコントた人の姿は Web カメラによってキャプチャされ、そロールできない状況から音楽的イメージが他者と共有の身体の形状に従って音へ変換される。スピーカーはされ、秩序あるメロディが集団の中で創発されるかを外壁のさらに外側に４つは位置され、中央で処理され検証する。

た画像データ数値を受け取り音に変換する。複数のプ

3.4

レイヤーはこの空間内をぐるぐる走り回り、互いのプ楽譜などの構成的なアプローチの対極として Cageレイヤーが生み出した音を意識しながら作曲する。の一回性の音楽、もしくは偶然性の音楽が挙げられる。

身 体で 再 現 さ れ る楽 譜本研究では、作曲を通じて図４に示す身体楽譜を生成する。身体楽譜を用いた作曲とリフレクションの反復によって「偶然生まれた音楽」が「秩序を持つ音楽」へと洗練されてゆく過程を観察する

図4 生成される身体楽譜
図3 画像から音への変換方法

2.3

ソ フト ウ ェ ア

Web カメラから入力された画像は、2 値化とエッジ検出することでオブジェクト（身体）を認識する。そのオブジェクトの面積を音量、最大幅を音の長さ、最大高さを音の高さに変換する。音量、音の長さ、高さは音色ごとにそれぞれ対応域が設定されている（図３）。ポーズのカタチと音表現をシンプルに対応づけることでユーザにとってわかりやすい作曲が可能とな

参考文献

1) John Cage, “SILENCE”, Wesleyan University Press(1961).
2) 牧野真緒, 大島千佳, Rodney Berry, 樋川直人, 西本一志, 鈴木雅美, 萩田紀博, “子供の音楽創作意
欲を高めるための「音に触って聞く」作曲シス
テ ム の 提 案 ”, 日 本 知 能 情 報 フ ァ ジ ィ 学 会 誌 ,Vol.17, No.2, pp.164-174 (2005).
3) 中村俊介, “身体 の動きを音 楽と映像に変 える『神楽 -KaGuRa-』”, WISS2005 予稿集 (2005).