情報処理学会 インタラクション 2018
IPSJ Interaction 2018

3A04
2018/3/5

ココココラージュ: 顔画像とポーズ画像共有による集合写真生成の検討と試作
長嶋麻里奈†1渡邊恵太†1

概要：集合写真の撮影時において，被撮影者は集合写真全体を俯瞰してみることができず，全体のバランスや一人一人の表情，ポーズについてどのようにしたら良いか迷うことがある．また，誰かが目をつぶってしまう事もあり，参加者全員が納得のいく集合写真を撮ることは難しい．そこで，本研究では，Web ブラウザ上で参加者同士が顔画像とポーズ画像を共有することで集合写真を生成するシステム「ココココラージュ」を提案する．参加者それぞれが，背景画像がセットされたキャンバス上に顔画像をアップロードし，ポーズの選択を行うことで集合写真を作成する．このシステムにより，集合写真全体を俯瞰してみながら，リアルタイムに修正を加えられるようになり，全員が納得のいく集合写真を作成しやすくなる．

1. は じ め に
被撮影者全員が納得する集合写真を撮影することは難し
い．例えば，被撮影者全員がそのフレーム内に入っているかということや，全体の構図，参加者同士のバランス，参加者同士が重なっていないかなどを確かめる必要がある．
また，被撮影者一人一人について，目をつぶっていないかということや表情は自然であるか，ポーズはどのようにするかなど，考慮しなければいけないことが多い．また，たまたま集合写真の撮影に参加できなかった人はその集合写
真には写らずに終わるか，後から四角や丸い枠で囲まれた

図 1

ココココラージュによって作成した集合写真

状態でその時の参加者とは隔離されたように集合写真に合違いに対応可能なまばたき検出を利用したベストショット成されてしまう．このように集合写真の撮影において，多画像の自動生成[2]がある．移動カメラ画像列からの顔領域くの問題がある．のインタラクティブ選択に基づく広角な集合写真の生成でそこで本研究では，これらの問題を解決するために，は，ビデオカメラにより対象を撮影し，イメージモザイキ

Web ブラウザ上で参加者同士が顔画像とポーズ画像を共ングを用いて集合写真を合成する手法をとっており，提示有することで集合写真を生成するシステム「ココココラー

された集合写真からユーザがインタラクティブに指定したジュ」を提案する（図 1）．ココココラージュは，参加者そ人物の顔領域を交換できるシステムを提案している．また，れぞれが本システムを利用し，背景画像がセットされたキ

撮影条件の違いに対応可能なまばたき検出を利用したベス

ャンバス上に，その時自撮りした顔画像をアップロードしトショット画像の自動生成では，全員が目を開いているフ集合写真を仮想的につくるものである．集合写真は共同編

レームが存在しない場合は，閉じた目の画像を別のフレー集画面上で，各自，好きなポーズを選択することで集合写

ムで得られた，目の開いた画像に置き換えることで，全て真を作成する．本システムにより，参加者が集合写真全体の被撮影者が目を開いたベストショット画像を自動的に出を俯瞰してみながら，リアルタイムに修正を加えられるよ力する方法が提案されている．これらの手法が顔の表情やうになり，全員が納得のいく集合写真を作成しやすくなる．

目の開閉に対する問題を解決しているのに対して，本研究また，欠席者が集合写真に写らないことや参加者とは隔離ではそのような問題に加えて，被撮影者の位置やバランスされた状態で合成されるということがなくなる．

についての問題や欠席者の扱いに関する問題も解決される．

2. 関 連 研 究

3. コ コ コ コ ラ ー ジ ュ

集合写真を撮影する時に起こる問題を解決するための研3.1 プ ロ ト タ イ プ の 実 装究として，移動カメラ画像列からの顔領域のインタラクテ

プロトタイプを図 2 に示す．集合写真撮影に参加するユィブ選択に基づく広角な集合写真の生成[1]や撮影条件のーザそれぞれがファイルアップロード画面から，その時自撮りすることで得られた自分の顔画像を共同編集画面上にアップロードする．次に共同編集画面へ行き，そこにある12 種類のポーズ画像の中から自分の好きなポーズ画像を†1 明治大学総合数理学部先端メディアサイエンス学科
Department of Frontier Media Science，Faculty of Interdisciplinary
Mathematic Science，Meiji University© 2018 Information Processing Society of Japan選び，顔画像とポーズ画像を，角度や大きさを調整しながら組み合わせる．参加ユーザがそれぞれそのような操作を

873

情報処理学会 インタラクション 2018
IPSJ Interaction 2018

3A04
2018/3/5

行う．また，背景と集合写真を作成する時間については，類を増やし，どのようなポーズ画像が頻繁に使われるかと最初に集合写真を作成することを企画した人が決定する．

いうことも調査していく予定である．また，背景画像やポーズ画像については，一般のクリエイターから，本システムで作成される集合写真に特化した画像を募集することも考えている．顔画像の切り抜きの部分については，ユーザが，所有している画像編集ソフトによって切り抜く仕様となっているため，今後は自動で顔画像を切り取ることができるような機能を本システム内に実装する予定である．
一般的に，集合写真とはある時ある場所に集まった記念

図 2プロトタイプの実装

3.2 想 定 す る 利 用 シ ナ リ オとして撮るものである．しかし，今回提案したシステムはある場所に集まらないで作る集合写真である．それは集合ココココラージュの利用の仕方は参加者同士に面識があ写真と言えるのかという疑問が生まれるかもしれない．

るかどうかと参加者がいる場所に応じて以下の 3 パターン

日々暮らしている中で，気持ちはそのイベントや出来事にに分かれる．

向かっているのに，都合が悪く行くことができなかったと(1) 知り合いのメンバーと対面しながら使う場合いう場合はよくある．今回作成したシステムでは，そのよ(2) 知り合いのメンバーと対面しないで使う場合うな人も集合写真参加者とみなした．つまり，集合写真の(3) 知り合いではない人と対面しないで使う場合参加者の定義を拡張した．また，本システムにより集合写(1)では，例えば，友達や家族と旅行に行った時や久しぶ

真を作成すること自体が一つのイベントとなっていると言りに会った時に本システムを用いて，旅行先や外出先の風える．そのため，従来の集合写真の，「思い出として残す」景を背景として，参加者全員がある場所に集まり，集合写という側面に加えて，コミュニケーションを生み出すとい真を作成する．(2)については，(1)と同様，参加者は知り合う側面も持ち合わせている．

いであるが，個々が離れた場所にいる状態で集合写真を作

遠隔にいる人々が一つの画面上に集まるシステムとして，成する．時間に制限はあるが，集合写真を作成する場所がビデオチャットがあるが，ビデオチャットは一人一人が線全員同じである必要がなくなり，個々それぞれ都合の良いによって仕切られており，それぞれが違う空間にいるよう場所で集合写真作成に参加することが可能となる．(3)につに感じられる．それに対して，本システムは背景がセットいては，例えば，何かのイベントに参加して，Twitter などされた一つのキャンバスを一つの空間とみなしており，直のハッシュタグで繋がった人同士が作成したり，何かのキ線で仕切られていない．そのような性質が集合しているとャンペーン企画で，芸能人や有名人と作成することも可能いう感覚を生み出していると考える.になる．
また，集合写真作成までの過程も 2 パターンに分かれる．
(a)

5. ま と め と 今 後 の 課 題
本稿では，Web ブラウザ上で参加者同士が顔画像とポー顔画像と背景のみで集合写真を作成する場合(b) 背景，顔画像，ポーズ画像の 3 種類の画像を用いて作ズ画像を共有することで集合写真を生成するシステム「コ成する場合コココラージュ」を提案した．このシステムにより，参加(a)については，背景画像にあらかじめ体の部分が描かれ者は集合写真全体を俯瞰でき，リアルタイムに修正を加えていることが想定されるので，それに合わせて顔画像のみられるようになり，全員が納得のいく集合写真を作成しやを配置する．(b)については，集合写真の作成を企画した人すくなる．今後はこのシステムによって作成された集合写が設定した背景画像を用い，参加者がその背景画像に合わ真の印象や価値について，心理実験を行い，検証を行う予せて，顔画像とポーズ画像を配置する．

定である．

4. 議 論 と 考 察

参考文献

研究室のメンバーに本システムを用いて，実際に集合写真を作成してもらったところ，写真を操作しているときに楽しさを感じたという意見や納得のいく表情をした顔写真を集合写真に用いることができたという意見があった．また，同時に選択できるポーズの種類が少なく，自分が選択

大野木碧，斎藤英雄. 移動カメラ画像列からの顔領域のインタラクティブ選択に基づく広角な集合写真の生成. 電子情報通信学会技術研究報告. HIP, ヒューマン情報処理, 2006,
105.536: 83-88.
[2] 尾崎勇也，今井順一，金子正秀. 撮影条件の違いに対応可能
なまばたき検出を利用したベストショット画像の自動生
成. 映像情報メディア学会誌, 2008, 62.11: 1825-1832.
[1]

したいポーズがなかったという意見や UI の操作性が良くないという意見があった．現状の実装では，選択できるポーズの種類は 12 種類となっているため，今後はポーズの種© 2018 Information Processing Society of Japan874