質問: 動画のデモでsonyのsmart ar技術を使用して乃木坂のメンバーが3D実写されていたのですが、あれはどうやってやってるんでしょうか? 乃木坂メンバーが3Dスキャンとって3Dデータでも得たのでしょうか?しかし、それにしては写真や動画で撮ったような綺麗な映像になっていました。 3DCGモデルなら分かるのですが、3D実写モデルをどうやって扱っているのか知りたいです。 またsony以外にも3D実写表現する方法はありますでしょうか? よろしくお願いします。
回答: LiveAction ARについて少し検索してみましたが、技術的な詳細(どうやって元データを用意しているのかなど)については見つけられませんでした... イベントに参加された方の投稿と思われる動画を見てみたのですが、映像から想像するに3Dスキャンというわけではないように思います(垂直方向の視点移動に十分追従できていないように見えます)。 元データとして被写体の周りをぐるっと一周するように実写映像を撮影しておいて、表示の際には見ている人との位置関係をSmartARの技術で特定し、その方角からの映像をビルボードのような感じで表示しているのではないでしょうかね? これをSony以外の技術でやるとしたら、アプリ上の3D空間と現実の空間の対応付けの部分をSmartARの代わりに他の方法で実現することになるでしょう。AR関連はやったことがなく具体的にご紹介できずすみませんが、Vuforiaなどが使えるかもしれません。