技術

探索「初音ミク」はなぜ注目されているのか

後藤 真孝
産業技術総合研究所

歌声合成，歌声情報処理，初音ミク，CGM，ニコニコ動画

してさまざまな研究者が，歌声合成ソフトウェアでかつキ1．はじめにャラクタでもある初音ミクを発端とした CGM 現象に注目

2007 年 8 月 31 日に，歌声合成ソフトウェア「初音ミしているのかを議論する。初音ミク現象の発展では二次創（1）ク」 がクリプトン・フューチャー・メディア（株）から作が本質的であるが，本稿も筆者自身による「初音ミク，発売され，活発な創作活動と連鎖反応の源泉となった。こ（3）
ニコニコ動画，ピアプロが切り拓いた CGM 現象」の二のソフトウェアには音楽のクリエータ以外も関心を持つさ次創作として位置づけられ，初音ミク現象や技術についてまざまな工夫がなされており，「初音ミク」という名前のの初歩的な解説などを加筆して構成されている。また，今仮想の歌手をイメージしたアニメ風のキャラクタのイラス

日では初音ミク以外にもさまざまな声質や原理の歌声合成

トがソフトウェアパッケージの箱に描かれ，年齢やプロフソフトウェアが流通しており，下記の解説にはそれらにもィールなども設定されていた。その歌声合成の手軽さと特当てはまる記述が多いが，便宜上，「初音ミク」を用いる。

徴的な歌声，キャラクタなどが人気を呼び，多くの人々が初音ミクやその周辺の技術・文化・現象に興味を持って多彩な活動をしたことで，未来を切り拓く画期的な素晴らしい現象が起き続けている。

2．歌声合成独特の表現を含む音楽文化の誕生
歌声合成技術による歌声は，単なる人間の歌声の代用だ
けではない新たな音楽表現を生み出し始めている。これ

この「初音ミク」のソフトウェアを購入すれば，誰でもは，楽音合成技術（シンセサイザ）による楽器音が，単な自分の楽曲を歌わせることができるため，アマチュアを中る既存の楽器の再現だけではない新たな音楽表現を生み出心とした多くのクリエータによって，次々と楽曲が発表さしてきたのと同様である。ただし楽器音とは異なり，歌声れてきた。そして，それ以上にこの現象が特徴的なのは，合成の場合には技術自体の進歩だけでは不十分で，キャラ発売元が的確に権利を解放したことで，多様な連鎖反応がクタという身体性を合成歌声に持たせたことがその普及の起きたことである。例えば，キャラクタや楽曲のイメージために本質的役割を果たした。のイラストを描いたり，他のクリエータが作った楽曲に対2.1

歌声合成技術 VOCALOIDして新たな映像を付けて動画にしたり，キャラクタのイラ「初音ミク」はヤマハ（株）の歌声合成技術「VOCALOID

ストをスライドショーのように自分の曲に付けて動画にし（4）〜（6）2」に基づいた製品である。VOCALOID 2 では，メたりする二次創作（派生した著作物の創作）が盛んに取りロディの音符を画面上で並べて歌詞を入力すると，人間の組まれた。こうした一般の人々が活発に創作活動を繰り広歌声を収録したデータベース「歌手ライブラリ」に基づいげて内容が生成されていくメディアは CGM（Consumerて歌声を出力することができる。歌声ライブラリを変えれGenerated Media，消費者生成メディア）と呼ばれ，クリば異なる個人性（声質）を持つ歌声を合成でき，さまざまエータだけでなく視聴者も増え続けている。

な企業がそうした製品を出している。従来よりも自然な歌

この初音ミクの登場が「人間の歌声でなければ聴く価値声の合成が可能になり，ユーザインタフェースが改善さがない」という旧来の価値観を打破し，「合成された歌声れ，声の高さや大きさなどをパラメータとしてユーザが細がメインボーカルの楽曲を積極的に楽しむ文化」が世界でかく調整できることが，人気が出る技術的な要因となった。

初めて日本に誕生した。これは初音ミク発売以前には考え歌声合成技術自体は，1950 年代後半からさまざまな研られなかった快挙である。歌声合成技術の研究者自身です

究開発がなされ（7），計算機や信号処理の進歩とともにそのら，その用途として，人間の歌声に合わせるコーラスや，品質・機能も向上し続けてきた（6）。例えば，録音した歌声人間が吹き替える前の制作段階の仮歌としての使用を想定の断片（素片）を変形しながらなめらかに接続して合成すしていた。しかし今日では，歌声合成技術が普及することる方式や，人間の発声機構を物理モデルでシミュレーショ

（2）は歴史的必然であると確信できる状況となった 。

ンして合成する方式，歌声の生成過程を声帯振動（ソー本稿では，こうした過去 5 年間の新しい現象について解ス，励振源）と声道共鳴（フィルタ）に分けてモデル化す

説し，なぜこれほどまでに異なる分野の多くの人々が，そるソースフィルタモデルに基づく合成方式，歌声の周波数630© 2012 The Institute of Electrical Engineers of Japan.

IEEJ Journal, Vol.132 No.9, 2012

成ソフトウェアのキャラクタ（声質）が，さまざまな企業モデル化して合成する方式などが提案されている。商用のの貢献により「鏡音リン」，「鏡音レン」，「がくっぽいど」，歌声合成技術は，「VOCALOID 2」以前にも，NTT AT「巡音ルカ」，「Megpoid」，「氷山キヨテル」，「歌愛ユキ」，（株）の歌声合成エンジン「ワンダーホルン」やヤマハ「SF─A2 開発コード miki」などと増えていくにつれて，表（株）のフォルマントシンキングプラグインボード「PLG─

現も多彩になり，キャラクタ間の関係性を表現した歌詞な100SG」，古くは日本電気（株）のパソコン「PC─6601」のども登場している。
こうして，人間の代わりに歌声合成を用いるのではな

歌声合成コマンドなどが存在していた。
ヤマハ（株）の「VOCALOID」は，録音した歌声の素く，歌声合成でなければならない表現を含む音楽文化が誕片を接続する合成方式に基づいており，2003 年に発表さ生した。

れて 2004 年に最初の製品が発売された。2007 年に発売さ2.3 積極的に歌声合成を使うクリエータの増加れた「VOCALOID 2」までは，ある音素から別の音素へクリエータにとっては，歌声合成技術を用いることで，の変化部分のような 2 音素の連鎖を素片としていたが，自分の思いどおりの表現を追求しやすくなる。人間の歌手

2011 年に発売された「VOCALOID 3」では 3 音素の連鎖に自分の曲を歌ってもらおうとすると，その機会を得るだも扱えるようになっている（5）。歌声合成では話し声の音声

けで大変であり，自分の望む声で思いどおりの表現をして合成と異なり，言葉を伝えるだけでなく，楽譜に応じてさくれるとは限らない。それが，初音ミクの歌声で，納得のまざまな音高で異なる長さの音符に対応した歌声を合成すいく表現が得られるまで何度でも修正しながら再現性高くる必要がある。そこで，音高が異なれば声色も異なるた合成できるのは，大きな利点である。結果的に，初音ミク

め，複数の異なる音高の素片を用意し，伸ばした母音を高という同一歌手の曲が数万曲生まれた。そこから淘汰され品質に合成する工夫がなされている。さらに歌声の歌詞がて多くの視聴者に聴かれるようになった有名曲は，ポピュ適切なタイミングで聞こえることも必須であり，例えば日ラリティの高い良質な作品である。そうした作品がさらに本語の「さ」（/s a/）のような「子音＋母音」を合成する

人気を呼んで，初音ミクに歌わせれば聴いてもらえる可能場合には，音符の開始時刻に母音が鳴るように子音はその性が高まり，彼女を歌わせたいという動機をクリエータに（6）前にずらすタイミング調整機構を持っている 。

与えるという連鎖反応が起きている。これは，人間の歌手2.2 キャラクタという身体性が果たす本質的役割ではあり得ない現象である。

いくら歌声合成技術が進歩しても，それだけでは歌声合成技術がメインボーカルとして広く利用されるのは難しか3．N 次創作の連鎖反応った。「初音ミク」が画期的だったのは，女性声優の声のこのように「初音ミク」では歌声だけでなく，キャラクデータベースを高品質に収録したことに加え，それとイメタも重要であるが，それを誰でも合法的に非商用利用できージが合致するキャラクタという身体性を合成歌声に持たるようにライセンスが整備されたことで，創作活動の連鎖せたことである。このクリプトン・フューチャー・メディ反応が持続した。さらに，創作を促進し連鎖反応が盛り上

ア（株）の本質的な貢献により，初めて，「誰が歌っているがる場として「ニコニコ動画」が貢献したことで，人気がのか」，「誰に歌わせたいのか」が明確になった。

加速した。

これにより，初音ミクの発売直後から，初音ミクにしか3.1 権利を解放するためのライセンスの重要性

歌えない曲が次々と発表され始めた。例えば，キャラクタ初音ミクの歌声は自分の作品で自由に使えても，そのキ側の視点から，クリエータとの関係性を感情表現した歌詞

ャラクタのイラストは，通常であれば権利的に自由には使（歌声合成の立場でどういうふうに歌わせてほしいかを述えない。歌声合成ソフトウェアは楽器の位置づけだが，キべた歌詞＊1や，実在せず歌うことしかできないと語る歌

ャラクタの再利用は著作権の制約を受けるからである。そなど）が登場した。人間には歌うのが困難な高速なこでクリプトン・フューチャー・メディア（株）は，「初音歌詞や広い声域の楽曲なども登場した。これにより，初音ミク」発売の 3 か月後にいち早く，「キャラクター利用のミクのために曲を作る文化が誕生した。ここで，クリエーガイドライン」＊3 を宣言し，二次創作を応援する CGM 型

タの側には「このキャラクタ（歌手）に歌わせたいから曲コンテンツ投稿サイト「ピアプロ」＊4 を 2007 年 12 月 3 日を作る」という強い動機が生まれ，視聴者の側には「このに立ち上げた。そして「ピアプロ・キャラクター・ライセ

キャラクタ（歌手）の歌だから聴きたい」という積極的なンス（PCL）」＊5 を発行することで，個人の創作意欲を引詞＊2楽しみ方が生まれたことが重要である。ほかにも，歌声合＊1

http://www.nicovideo.jp/watch/sm1050729＊2
http://www.nicovideo.jp/watch/sm1274898

電学誌，132 巻 9 号，2012 年＊3

http://piapro.jp/license/character̲guideline
http://piapro.jp/＊5
http://piapro.jp/license/pcl/summary
＊4631

技術探索

スペクトルなどの変化を隠れマルコフモデル（HMM）でき出し，誰でも合法的に非商用利用することを可能にしこのニコニコ動画は最適であった。動画作品を投稿する（1）と，時刻同期コメントが視聴者から得られ，クリエータのこれはとても重要で，このおかげでアマチュアを中心と励みになるからである（8）。作品全体に対する通常のコメンしたクリエータは権利問題を心配せずに，初音ミクのキャトに比べ，時刻同期コメントはその内容が質的に異なり，ラクタを使って安心して創作し，発表できるようになっその瞬間ごとの感情をより多く表現する傾向がある。そのた。こうした権利の開放により自由な環境が意図的に整えため，「ここが良い」，「ここをこう変えては？」というよられた意義は大きく，ほかの歌声合成ソフトウェアにも波うな感想・提案も含めて，創作活動にさまざまなフィード及して，この現象の発展を決定づけた。

バックが得られる環境になっており，クリエータのやる気た 。つまり，積極的に権利を開放したのである。

この権利開放の結果，初音ミク発売元は数パターンのイが引き出されやすい。さらに，現在の歌声合成技術を用いラストしか公表していないにもかかわらず，アマチュアをた楽曲では歌詞が聴き取りにくい場合があるが，動画中の中心としたさまざまなクリエータが描いた十数万通りの初字幕やコメントで歌詞が表示されると聴き取りやすくなる音ミクのイラストが創作された。また，キャラクタを中心利点もある。とした動画制作を容易にする三次元 CG（コンピュータグ

このニコニコ動画の場で，クリエータと視聴者の創意工ラフィクス）ソフトウェア「MikuMikuDance（MMD）」＊6

夫の相乗効果により多様な二次創作が生まれた。例えば，等も無償公開されて大きな貢献を果たし，音楽に連動した歌声合成による元楽曲を人間が歌ったり，演奏したり，踊動画作品が多数生まれた。

ったりする実写動画や，その実写の踊りをさらに CG キャ

しかし，それはあくまでキャラクタを非商用利用できるラクタで再現した動画なども発表されている。既存動画をだけで，他のクリエータの作品から二次創作する権利まで切り貼りして新しい動画を作る活動も活発であり，例えは含まれない。その権利を解放することを意図して立ち上ば，多数の動画からランキングを作ったり，音楽に合う映げられ，重要な役割を果たしたのが，CGM 型コンテンツ像を断片的に切り貼りして新たな動画を作ったりしてい投稿サイト「ピアプロ」である。クリエータがピアプロにる。多くの人に見てもらえたり，コメントで感想がもらえ

自分の音楽，イラスト，テキスト（歌詞），3D モデル（三たりするだけで，クリエータはさらに嬉しくなって創作の次元形状モデル）をアップロードする際には，他のクリエ連鎖が起きていく。

ータが非営利に利用することに必ず同意している。つまりこうした創作が創作を呼び起こす連鎖反応（集団的創造

ピアプロ上の作品は，クリエータに感謝の意を示して使用現象）は「N 次創作」と呼ばれる（9）。その本質にはコミュ

報告さえすれば，安心して二次創作で利用できるのであニケーションの要素もあり，「この作品に対して，私はこる。さらに派生作品の親子関係も表示されるので，多数のういう作品を二次創作して応えよう」といった掛け合いの二次創作作品に利用された親作品であることが，人気のバような創作の連鎖が起きている。そして，ニコニコ動画と（1）ロメータにもなっている 。

前述のピアプロでは，再利用可能なコンテンツを集め，コ3.2 クリエータのやる気を引き出すニコニコ動画

ミュニケーションの支援もすることで，こうした N 次創初音ミクの楽曲や動画が多数投稿されている動画コミュ＊7

作をさらに後押ししている。その過程で複数の作品の良いニティサービス「ニコニコ動画」 は，初音ミク現象を支ところが掛け合わされて良質な作品が生まれ，さらに人気え，創作を促進している重要な社会装置である。ニコニコが高まっていった。

動画は，YouTube や Ustream のような従来の動画共有サービスとは異なる先進的な機能を数多く持ち，それがさま4．初音ミク現象の広がりざまな CGM 現象の土壌となっている。動画共有サービス

初音ミクの楽曲や動画を楽しむ視聴者のために，物理空

では，そこに集う人々は動画の視聴を主目的としているの間での大規模なライブコンサートも国内外で開催され，そのに対し，動画コミュニティサービスでは，そこに集う人々

先進性はこれまで初音ミクに興味を持っていなかった人々

はコミュニケーションや共同視聴体験を主目的としていにも大きな衝撃を与えた。歌声合成技術はまだ発展途上でる。動画の視聴を共通体験とした上での，作品内の時刻に今後も性能は向上し続け，新たな未来を切り拓いていく。

同期したコメント（時刻同期コメント）などによるメタレ

4.1 初音ミクのライブコンサート

ベルのコミュニケーションを，視聴者同士が，あるいは動ライブコンサートの歌手が人間ではなく，初音ミクとい画のクリエータと視聴者間で，楽しんでいるのである。

うキャラクタであっても，数千人規模の観客を動員する大初音ミクなどの楽曲や動画の作品を発表する場として，＊6＊7

http://www.geocities.jp/higuchuu4/
http://www.nicovideo.jp/video̲top/

632

型のコンサートが成功するようになったのは画期的である。初音ミク主演のライブコンサートは，国内では 2009年 8 月 31 日，2010 年 3 月 9 日，2011 年 3 月 9 日，2012
IEEJ Journal, Vol.132 No.9, 2012

は歌うことをやめないからである。人は，強制されて歌う

幌 で 開 催 さ れ た。 国 外 で は，2011 年 7 月 2 日 に Los

わけでなく，歌いたいから歌っている。また聴き手も，こAngeles で 5 000 人以上の観客を集め，2011 年 11 月 11 日の人（自分の子供，友だち，好きな歌手）が歌うから，とに Singapore で 2 500 人以上の観客を集めた。特に 2012思って聴く。そこに初音ミクという選択肢が増えるに過ぎ年 3 月の東京公演は 2 日間で 1 万人が来場し，国内外 34ないのである。

か所（日本 24 か所，台湾 7 か所，香港 2 か所，上海 1 か

しかも，歌声合成技術が普及すれば，歌で自己表現する所）の映画館に生中継（パブリックビューイング）されてクリエータが増えていく可能性がある。もし歌手が「歌に大規模に開催された。

よる表現者」を意味するとすれば，そうした歌声合成技術メインボーカルの歌手だけが歌声合成と 3 次元 CG キャラクタで表現され，彼女以外のステージ上の楽器演奏者と観客は全員人間という特殊なコンサートであり，その様子を初めて観ると大きな衝撃を受ける。歌手の声と映像はコンサート前に静的に用意されているにもかかわらず，観客が大きな声援を送らずにはいられないのも興味深い。の使い手も，広義の「歌手」だと呼べる時代が来るのかもしれない。

5．おわりに初音ミクは，ニコニコ動画やピアプロとともに，新たな未来を切り拓き続けている。単に「歌やキャラクタを好むしかも国外でのコンサートや生中継では，演奏された楽人々のための趣味的な世界」だと見なすと，この本質を見曲は日本語の歌詞のままであり，それでも世界に通用する誤る。この現象では，日本の技術・社会・文化のすべての音楽となったことは本当に素晴らしい。アマチュアを中心と強みが結集したと思えるような明るい未来が築かれつつあしたクリエータが制作した楽曲ではあるが，上記の淘汰をり，一度，そのすごさを知ってしまうと，ほかの人に伝え経たポピュラリティの高い音楽であることも寄与している。

ずにはいられない気持ちになってしまう。それゆえ，これ4.2 歌声合成の未来だけ多方面に支持者がいるのである。特に，本現象に魅了

初音ミク現象は単なるブームではなく，持続発展する文されている研究者には，これまでのキャラクタを中心とし化であり，歌声合成技術が普及することは歴史的必然であた文化には馴染みが薄く，初音ミクで初めて議論している（2）

る 。楽音合成技術がポピュラー音楽制作で不可欠となっ人々も多い。

たのと同様，歌声合成技術もいつの日か不可欠になる。そ（10）
音楽情報処理分野の部分領域である「歌声情報処理」

して楽音合成と同様に歌声合成も，独自の表現を生み出では，近年も活発に歌声に関連した研究開発が続いておし，多様な音楽の創造に寄与していくはずである。特に，り，またさまざまな商用利用も進んでおり，それらがさら喉という物理的な制約のない歌声がどのような表現を生みに新たな現象を生んでいくことが期待される。技術の切り出していくのかは興味深い。また，技術の発展によって表拓く未来を描く手段の一つに，SF（サイエンスフィクシ

現手段を得た一般の人々が，アマチュアクリエータとしてョン）小説がある。すでに，SF 小説「南極点のピアピア

CGM 現象に参加する流れは，今後もますます発展してい

（11）
動画」
では，この日本発の現象の本質が切り拓く明るいくと考えられる。

未来の一つの形が描かれている。現実世界の我々は，どの歌声合成技術が発展すると，人間の歌手はいらなくなるような明るい未来を切り拓いていくことになるのかが楽しのだろうか。筆者はそうは思わない。なぜなら，我々人類みである。

文 献（８）戀塚昭彦：「ニコニコ動画の創造性：動画コミュニティサービス「ニコニコ動画」の 5 年間」，情報処理（情報処理学会誌），Vol.53, No.5,pp.483─488（2012）（９）濱野智史：「ニコニコ動画はいかなる点で特異なのか：「擬似同期」「N次創作」「Fluxonomy（フラクソノミー）」，情報処理（情報処理学会誌），Vol.53, No.5, pp. 489─494（2012）（10）後藤真孝，齋藤毅，中野倫靖，藤原弘将：「歌声情報処理の最近の研究」，日本音響学会誌 , Vol.64, No.10, pp.616─623（2008）（11）野尻抱介：南極点のピアピア動画，早川書房（2012）（１）伊藤博之：「初音ミク as an interface」，情報処理（情報処理学会誌），Vol.53, No.5, pp.477─482（2012）（２）後藤真孝：「音楽情報学」，情報処理（情報処理学会誌），Vol.51, No.6,pp.661─668（2010）（３）後藤真孝：「初音ミク，ニコニコ動画，ピアプロが切り拓いた CGM現象」，情報処理（情報処理学会誌），Vol.53, No.5, pp.466─471（2012）（４）H.Kenmochi and H.Ohshita : “VOCALOID─Commercial Singing
Synthesizer Based on Sample Concatenation”, Proc. of Interspeech2007（2007）（５）剣持秀紀：「歌声合成の過去・現在・未来：「使える」歌声合成のためには」， 情 報 処 理（ 情 報 処 理 学 会 誌 ），Vol.53, No.5, pp.472─476（2012）（６）剣持秀紀：「歌声合成システム VOCALOID の開発」，システム／制御／情報，Vol.56, No.5, pp.244─248（2012）（７）P.R.Cook : “Singing Voice Synthesis : History, Current Work, andFuture Directions”, Computer Music Journal, Vol.20, No.3, pp.38─46（1996）

電学誌，132 巻 9 号，2012 年

後藤 真孝
ごとう・まさたか1998 年早稲田大学大学院博士後期課程修了。現在，産業技術総合研究所情報技術研究部門上席研究員兼メディアインタラクション研究グループ長。音楽情報処理を 20 年間研究し，能動的音楽鑑賞サー
ビス http://songle.jp や歌声合成技術「ぼかりす」等を実現。
博士（工学）。

633

技術探索

年 3 月 8 日・9 日に東京で，2011 年 8 月 16 日・17 日に札