WISS 2015

音楽動画視聴時に声援を文字で入力・表示・共有できる
声援コメント共有システム
早川 和輝 ∗†

後藤 真孝 †∗

概要. ライブ公演等の音楽動画の視聴時に，声援が持つ聴衆間の一体感や能動的な参加体験を声を出さずに実現することを目指して，声援をテキストによって表現した「声援コメント」を共有するシステム「乃木コメ」を提案する．従来の動画共有サービスの時刻同期コメント機能では，入力文字列が動画の再生に対して遅れて表示され，しかも横方向に流れて長い時間表示されていたので，声援をテキストで表現するのには不十分であった．そこで乃木コメでは，コメントの各文字ごとに動画内の再生時刻を付与し，(1) 文字単位で自動変換・確定する入力方法，(2) 拡大縮小させて画面に重畳させる表示方法，(3) 文字単位で再生時刻と同期させる共有方法の三つの機能を実現した．これらにより，楽曲の再生に合わせてキーボード入力された各文字がその瞬間に表示されるため，ライブ会場で他の聴衆と一緒に声援しているかのように，聴衆間の一体感や能動的な参加体験を実現することができる．

1

はじめにアイドル歌手のライブ公演（以下，ライブ）では，「コール」と呼ばれる，楽曲に合わせた独特の形式のかけ声による声援が普及し，それが聴衆の一体感や，能動的なライブへの参加意識を生んでいる．声援を行うことは，自己表現手段や，聴衆間のコミュニケーション手段であり [2]，多人数で楽曲のリズムに合わせることで，聴衆間の一体感や高揚感を高める効果がある．
一方，動画共有システムの発展により，ライブ動画を気軽に視聴することが容易になった．さらに，ニコニコ動画のように，時刻同期コメント（動画内の再生時刻に紐付けられた任意のテキスト）によって，感情や感想等の表現や共有され，視聴者間のコミュニケーション手段が実現されている [5]．しかし，従来のコメント機能は，文字列をすべて入力し終わり，確定ボタンを押した時刻のみに，コメントに紐付けられる点や，左右に流れるコメントの表示方法では，表示時間が長く，どの時刻に対するコメントかが曖昧であるために，ライブにおける声援のように，楽曲の各時刻に正確に同期した声援をコメントとして表現・共有することが，実現されていなかった．
そこで本研究では，声援を文字で入力・表示・共有するための方法を明らかにすることを目的とし，声援を文字列で表現した「声援コメント」を入力して共有できる，声援コメント共有システム「乃木コメ」を提案する (http://nogikome.net)．乃木コメ
は，声援コメントの各文字ごとに動画内の再生時刻
Copyright is held by the author(s).
筑波大学大学院†
産業技術総合研究所∗

図 1. 乃木コメライブ画面を付与することで，キーボード入力からでも，声援のように楽曲と同期した入力・表示・共有を可能にする．これにより，ライブ会場に物理的に行かなくても，声援が持つ聴衆間の一体感や能動的な参加体験を実現することができる．

2

声援コメント共有システム「乃木コメ」

乃木コメは，キーボードから入力された声援コメントの，各文字ごとに動画内の再生時刻を付与することで，楽曲と同期した入力・表示・共有を可能にする．これにより，ライブ会場に物理的に行けず，声を出せない状況であっても，声援がもたらす聴衆間の一体感や能動的な参加体験を実現できる．
これらの機能を実装した乃木コメのインタフェー
スを図 1 に示す．乃木コメの処理の流れについて述べる．まず，動画共有サービス「YouTube」の動画を視聴する際に，乃木コメのインタフェースを構築し，動画の URL を元に声援コメントを取得する．そして，動画の再生に従って，取得した声援コメント

WISS 2015を重畳表示することで共有した．さらに，吉田ら [1]は，ジェスチャー認識のできるデバイスによって取得した動画視聴者の骨格位置情報を元に人間を模したモデルを重畳表示することで身体動作を共有した．
これらの研究では非言語的なユーザの情報を付与することを試みていたが，本研究では，言語的行動である声援を文字列として表現することを試みた．

3.2

図 2. 乃木コメの入力・表示例

を画面上のランダムな位置に拡大縮小表示する．さらに，ユーザがコメント入力フィールドにキーボードからアルファベットで文字列を入力すると，図 2のように，平仮名に自動で変換され，変換された平仮名の一文字ごとに画面上に表示される．表示された文字は動画の再生に従って最大サイズまで拡大表示される．続いて入力された文字は一続きに表示され，入力確定処理がされると，一つの声援コメントとして入力を確定し，縮小表示された後，画面上から消える．この時平仮名以外にも，「TY」を「超」，「ZT」を「絶」「，KWI」を「可愛い」というように登録することで，実際によく行われる声援「超絶可愛い」を容易に入力できるなどの辞書の拡張や，色セレクタによって文字の色と文字の影の色を指定することで，ペンライトのように，応援したいパフォーマーに応じた色を選択できるなど，アイドルのライブにおいて声援を行うための機能をもつ．入力された声援コメントは文字ごとに入力時刻が記録され，入力が確定すると動画の URL を元にテキストデー
タと文字ごとの入力時刻をセットにしてデータベースに保存される．
このように，一文字入力する毎に画面上に表示されるため，各文字のタイミングが音楽に合うように入力可能で，さらに他のユーザによる声援コメントの文字ごとの入力の様子が再現できるため，あたかもライブ会場で複数の聴衆が一緒に声援しているかのような擬似体験を生み出すことができる．

3

議論

関連研究に対する本研究の位置づけや，本研究の意義や貢献について議論する．

3.1

関連研究

本研究のように，動画に対して様々な情報を付与し共有する研究がなされている．平山ら [4] は動画画面上に手書きで入力した軌跡を描画時刻と動画時刻とで同期させて，非言語的なアノテーションを共有した．松野ら [3] は動画を視聴している際の視線意義・貢献

本研究は，声で応援するという声援を文字列で表現できるため，スポーツの実況中継においても有用性が高いと考える．また，一文字ごとに再生時刻と同期するため，動画がない状況の音楽を共有するサイトでも，楽曲のリズムに合うようにしたり，歌詞を歌声と合うようにコメントすることができる．さらに，本研究はアイドルのライブに参加するユーザや興味のあるユーザに対して，声援をいつでも行えたり，事前にどのような声援が行われているかを確認できる環境を提供することで貢献できる．

4むすび

声援を文字で入力・表示・共有するための方法を明らかにすることを目的として，声援を文字で表現した「声援コメント」を入力して共有できるシステ
ム「乃木コメ」を実装し，サービスとして公開した．
声援コメントを効果的に表現するために，(1) 文字単位で自動変換・確定する入力方法，(2) 拡大縮小させて画面に重畳させる表示方法，(3) 文字単位で再生時刻と同期させる共有方法の三つの機能を実現した．乃木コメによる声援コメントでは，楽曲のリズムに合うように動画に遅れない入力が可能で，声援が湧き上がるようにコメントが表示され，他のユーザによる声援コメントを文字単位で共有することができる．今後は収集したコメントデータを元に実装を改善しシステムの評価を行う．

参考文献[1] 吉田有花, 宮下芳明. 身体動作の重畳表示による動画上での一体感共有. インタラクション 2012 論文集, pp. 527–532, 2012.
[2] 後藤真孝. 初音ミク, ニコニコ動画, ピアプロが切り拓いた CGM 現象. 情報処理 (情報処理学会誌),
53(5):466–471, 2012.
[3] 松野祐典, 栗原一貴, 宮下芳明. 動画共有サイトでの視線共有の試み. インタラクション 2012 論文集, pp. 611–616, 2012.
[4] 平山慧, 丸山一貴, 寺田実. 手書きを用いた動画上の非同期コミュニケーションシステム. 情報処理学会全国大会講演論文集, 第 72 巻, pp. 171–172,
2010.
[5] 濱野智史. アーキテクチャの生態系 ― 情報環境はいかに設計されてきたか. NTT 出版, 2008.