情報・システムソサイエティ誌 第 27 巻第 2 号（通巻 107 号）【フェローからのメッセージ】

技術が切り拓く音楽体験の未来
フェロー 後藤 真孝
産業技術総合研究所

技術の発展は，新たな音楽文化・表現を生みそこで，音楽のビート（時間構造），メロディ出す．技術の力で生まれたピアノやギターは多（周波数構造），サビ（大局的構造）等の主要な様な音楽を生んだが，楽音合成技術も既に音楽要素を推定する音楽理解技術を 1990 年代から時制作では不可欠となり，2007 年以降は新たに歌代に先駆けて研究開発してきた．更にその応用声合成技術が注目を集めてきた．衝撃的なのは，事例として，「音楽理解技術が人々の音楽体験を「人間の歌声でなければ聴く価値がない」というどのように豊かにできるか」を明らかにすべく，旧来の価値観が打破され，「合成された歌声がメ楽曲の構造を意識しながら盛り上がるサビだけインボーカルの楽曲を積極的に楽しむ文化」がを聴いたり，膨大な楽曲から好みの楽曲を探し誕生したことである [1]．同様に今後も，技術のたりできる様々なインタフェースを，「能動的音発展が別の既存の価値観を打破し，更に新たな楽鑑賞インタフェース」[4], [5] と名付けて実現し文化・表現を生み出していく．いつかは「人間のてきた．そうして「技術の使われ方も提示する」作品でなければ聴く価値がない」「人間の聴衆でことで，音楽理解技術が切り拓く新たな音楽体なければ聴いてもらう価値がない」という価値

験を人々がイメージしやすくなる．しかし，イ観すら変容したり [2], [3]，人間拡張技術によっンタフェースに関して論文発表をし，講演や展て拡張された聴覚器官が楽しめるように音楽表

示，動画等で紹介することはできても，人々の現が大きく変化したりする可能性がある．

日常生活で直接使ってもらうことは難しかった．

音楽の聴き方も技術の発展と共に大きく変わそこで「技術を直接利用可能にする」ためり，音楽コンテンツのデジタル化が進んで膨大に，一般の人々がインターネット上で気軽にに蓄積された結果，音楽配信等によってそれら利用できる Web サービス群として一般公開すを好きなときに好きなだけ楽しめる時代が到来

る研究活動を始めた．例えば，2012 年にプレした．しかし従来は，膨大な楽曲に受動的にアス発表した能動的音楽鑑賞サービス「Songle」

クセスできる量的な変化（楽曲の数が増える変(https://songle.jp) では，ニコニコ動画やピア化）が中心で，その潜在的な可能性はまだ十分

プロ等の投稿サービス上で公開されている 200には引き出されていなかった．蓄積された音楽万曲以上を音楽理解技術で自動解析し，音楽のをファイルとして配信するだけでなく，その中中身を可視化することで人々が音楽をより深く身に踏み込んで計算可能にし，音楽の楽しみ方理解して能動的に楽しめるようにしている（前がより能動的で豊かになる質的な変化（体験の述の「サビだけを聴いたり」のインタフェース質が変わる変化）こそ，デジタル化がもたらすも体験できる）．その上で，音楽理解技術で新た真の価値である．そして，その変化を起こす鍵な価値を生み出して貢献するための中核となるとなるのが，音楽の音響信号の中身を解析するプラットフォームを目指して，Songle の解析結

「音楽の自動理解技術」（音楽理解技術）である．

果を外部から利用できる Web API を開発・提供
9【フェローからのメッセージ】

情報・システムソサイエティ誌 第 27 巻第 2 号（通巻 107 号）

することで，他の研究者・技術者・企業等が我々歌声情報処理を研究している後藤』が主人公のの技術を利用して「他の技術を創出可能にする」一人として登場していて，それを出版後に知っことにも挑戦してきた．実際に，以下で紹介すた驚きと喜びは，研究者として最も予想しなかっる他のサービス群や，スマホアプリ「NicoBox」た出来事だった．

等で活用されている．

以上を含む「音楽情報処理」[2], [3] の研究開

楽曲の数が膨大になると，視聴者にとっては発を 1992 年から推進し，多くの方々と一緒に生好みの楽曲の発見が難しくなり，クリエータにみ出した成果・貢献が評価され，2021 年 3 月にとっては自分の楽曲が埋もれやすくなる問題が電子情報通信学会から，更に同年 6 月に情報処生じる．そこで 2019 年にプレス発表した音楽発理学会から，「音楽の自動理解技術とその応用に掘サービス「Kiite」(https://kiite.jp) は，音楽推関する先駆的研究」の業績でフェロー称号を受

薦技術や他のユーザが薦める楽曲をサビ区間の称した．大変うれしく，励まされている．研究

み効率良く試聴することで，次々と新たな楽曲には決して一人の力でできるものではなく，一緒出会うことを可能にした．他にも，2013 年にプに研究開発に取り組んできた多くの仲間や，御レス発表した音楽視聴支援サービス「Songrium」

指導・応援して下さった多くの先生・先輩の皆(https://songrium.jp) は，膨大な楽曲の関係性様，我々の技術を活用頂く企業や利用者の皆様，を可視化して俯瞰可能にすることで新たな出会学会・研究資金・所属組織等も含めた研究環境いを可能にした．の全てに深く感謝している．これからも多くの更に，音楽は聴いて楽しむだけでなく，音楽方々と力を合わせて，ワクワクする未来を切りに連動させて様々な機器を制御することで，映拓いていけるよう全力を尽くしたい．

像や照明が変化したり，ロボットが踊ったりす

参考文献

る一体感のある音楽体験を創出することがで[1] 後藤真孝，“初音ミク，ニコニコ動画，ピアプロがきる．そこで 2017 年にプレス発表した大規模” 情報処理，vol.53, no.5,
切り拓いた CGM 現象，

音楽連動制御プラットフォーム「Songle Sync」(https://api.songle.jp/sync) は，多数の来場者のpp.466–471, May 2012.
[2] 後藤真孝，“未来を切り拓く音楽情報処理，” 情処研
報 音楽情報科学，2013-MUS-99, pp.1–9, May 2013.

スマートフォンが一斉に連動してアニメーシ[3] M. Goto, “Frontiers of Music Information Re-

ョンを表示するような新たな演出や体験を可

search Based on Signal Processing,” Proc. of

能にし，音楽ライブやイベント，花火大会等で活用されてきた．2015 年にプレス発表した
リリックビデオ制作支援サービス「TextAlive」IEEE ICSP 2014, pp.7–14, Oct. 2014.
[4] 後藤真孝，“音楽音響信号理解に基づく能動的音” 情処研報 音楽情報科学，楽鑑賞インタフェース，2007-MUS-70-9, pp.59–66, May 2007.

(https://textalive.jp) は，音楽に同期した歌詞の[5] M. Goto, “Active Music Listening Interfaces

アニメーションを手軽に制作可能にし，TextAl-

Based on Signal Processing,” Proc. of IEEEive を用いた作品を多くのクリエータが発表したり，様々な音楽ライブで活用されたりしてきた．
他にも，「歌声情報処理」[6] と名付けた分野を推進し，歌声合成技術に基づく「VocaListener」「初音ミク NT」等の製品にも貢献してきた．自分の知らないあいだに，SF 小説 [7] に『産総研で10ICASSP 2007, pp.1441–1444, April 2007.
[6] 後藤真孝，齋藤 毅，中野倫靖，藤原弘将，“歌声” 情処
情報処理：歌声を対象とした音楽情報処理，
研報 音楽情報科学，2010-MUS-86, pp.1–9, July
2010.
[7] 野尻抱介，南極点のピアピア動画，早川書房，東京，2012.