名古屋産業科学研究所 研究部 2013 年度研究年報 巻頭論文

自由視点テレビの開発と国際標準化
自由視点テレビの開発と国際標準化
谷本 正幸 (名古屋産業科学研究所 上席研究員)
上席研究員)

1. まえがき
自由視点テレビＦＴＶ（Free-viewpoint Television）[1]-[18]は，あたかもその場にいるかのように，自由に視点を変えて遠隔地の情景を見ることができる映像メディアである．臨場感あふれる３次元シーンを見ることができるＦＴ
Ｖは，無限の視点を持つ究極の３Ｄテレビであり，世界の映像メディアの頂点に立つ．
ＦＴＶを実現するため，様々な位置に設置した多数のカメラをあたかも１台のカメラのように取り扱う多視点撮影技術や，光線の統合と補間の技術，超多眼ディスプレイ技術など，これまでのテレビにはない，新しい映像技術を開発した[7]-[18]．これによって，シーンの撮影から自由視点画像の生成・表示までの全てをリアルタイムで行うＦＴＶシステムを世界で初めて構築した[19]-[23] ． ま た ， 携 帯 端 末 で の 自 由 視 点 画 像 生 成 [24] や 自 由 聴 点 の 実 装[25],[26]も行った．
２００１年以来，動画像の国際標準を定める組織であるＭＰＥＧ (Motion
Picture Experts Group)において，ＦＴＶの国際標準化を推進している．ＦＴ
Ｖの第１フェーズ[27]として，多数のカメラで撮影した多視点映像の情報を圧縮する技術の標準化が２００９年５月に成立し，３Ｄ映画を記録するブルーレ
イ３Ｄに採用された．２００７年からは，ＦＴＶの第２フェーズ[28]として，少数のカメラで撮影した映像の視点数を増やし，多視点３Ｄディスプレイに表示する仕組みの標準化を行なっている．２０１３年８月には，超多視点３Ｄ表
示とフリーナビゲーションの実現を目指し，ＦＴＶの第３フェーズ標準化[29]を開始した．２０２０年に開催される東京オリンピックでのＦＴＶ実施を目指している．
2. ＦＴＶの技術
ＦＴＶの技術2.1. ＦＴＶ開発の経緯
ＦＴＶ開発の経緯を図１に示す．当初は，３次元空間の光線を過不足なく記述するための光線空間法[30]-[33]や，その圧縮符号化，補間等の理論的な研究を行った．その後，ＦＴＶのシステム構築の研究を進め，図２に示す自由視点鳥瞰システム[19]-[21]，100 台のハイビジョンカメラによる 100 眼撮影システ
ム，図３に示す PC クラスターによるＦＴＶ[22],[23]，デスクトップ PC によるＦＴＶ[24]，携帯端末によるＦＴＶ，図４に示すＦＴＶオーディオ[25],[26]などを実現した．
MPEG-3DAV[MPEG]

[その他]

マトリクス

ライトフィールド

Eye
Vision

MPEG
-MVC

MPEG
-3DV

128/48眼シス
テム[名古屋大学]
光線空間

100眼
シス
テム

自由視点鳥
瞰システム

符号化 / 補間

FTVオー
ディオ

1994 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 year
パソコン
でFTV
を実現

PCクラス
ターでFTV
を実現

図１

図２

図３

ＦＴＶ開発の経緯

自由視点鳥瞰システム

PC クラスターによるＦＴＶ
Microphone

View and listening Point

Camera array plane

Generated view

Graphical user interface of software

図４

ＦＴＶオーディオ

携帯端末
でFTV
を実現

2.2. 撮影
大規模な３次元空間のＦＴＶを実現するため，１００台のハイビジョンカメラからなる１００眼システム[34]を構築した．１００眼システムのカメラ配置
は撮影したい空間に応じて，図５に示すように様々に設定できる．
Linear arrangement

図５

Circular arrangement

Planar arrangement

様々なカメラ配置の１００眼システム

密なカメラ配置を実効的に実現し，光線を高密度に取得できるミラー走査光線取得装置[35]や，１画素で数本の光線を取得できる高能率光線取得システム[36]も開発した．
2.3. 補正
カメラ配置の誤差やカメラ性能の個体差を補正するため，撮影したカメラ画
像の位置補正[37]-[39]と色補正[40]を行う．
位置補正前後のカメラの位置と方向を図６に示す．カメラ画像間の対応点を求めて，補正パラメータを決定した．この測定はカメラ設置後に 1 回行えばよ
い．図６より，カメラの位置と方向が，1 直線上で正面を向いて配置されているように補正されていることが分かる．
Side view

Top view

before geometry
correction

after geometry
correction

図６

位置補正前後のカメラの位置と方向

2.4. 画像生成
撮影した多視点映像から光線の統合・補間処理[41],[42]を行って生成した自由視点映像の例を図７に示す．カメラ間や前進した視点位置で，小さな魚や藻，気泡などを含む複雑なシーンを自然に生成できていることが分かる．更に，
depth（奥行）情報の誤りや信頼性を考慮して，多視点映像から高品質な画像生成を行なうアルゴリズムも開発した[43]-[45]．

図７

視点を前後左右に移動した自由視点映像

2.5. インターフェイス
FTV on a laptop PC
with mouse control

FTV on a mobile player
with touch pane
control

FTV on a 2D display withhead tracking

FTV on an all-around 3D
display

FTV on a multi-view 3D
display without headtracking

FTV on a multi-view 3D
display with headtracking

図８

様々な FTV インターフェイスレイ

図８に示す様々なＦＴＶインターフェイスを構築した．パソコンや携帯端末
では，マウスやタッチパネルで視点を制御する．視点追従 2D ディスプレイは，
見る人の視点の位置を自動検出し，その位置から見た自由視点画像を表示する．
視点追従 3D ディスプレイでは，ユーザの位置に応じた自由視点画像を複数枚生成して表示する．これによって，両眼視差と運動視差が再現され，クロストー
クの削減と視域の拡大が実現された．全周３D ディスプレイ[46]では，多人数が同時に 360 度のどの方向からも３D シーンを観察することができる．
3. 光線再現型ＦＴＶ
３D 空間の全ての光線を取得し，同じ光線を異なる場所や時間で再現する光線
再現型ＦＴＶを構築した．
光線取得に関しては，ミラー走査と高速度カメラを用いて，密な光線を時分割で取得するシステムを開発した．光線の補間を必要とせずに全周３６０度の光線を高密度に取得できるミラー走査全周光線取得装置と取得画像の例を図９に示す[47]．これは，一方の放物面鏡の焦点に置かれた物体から発する光線を，他方の放物面鏡の焦点に集め，それを回転ミラーで反射させて高速度カメラで取得するものである．

High Frame-rate
CameraOpticalImageof Object

Rotating
Mirror(45 deg
Slanted)

Focal Point ofUpper Parabolic
MirrorMotor

Object

Focal Point ofLower Parabolic
MirrorParabolic Mirror x 2

Captured views
from various
directions

図９

0°

90°

180°

270°

ミラー走査全周高密度光線取得装置と取得画像の例

表示に関しては，ディスプレイから発する光線の方向と強度を制御する超多眼表示技術を開発した．開発した全周光線再現３D ディスプレイでは，図１０に示す仕組みによって光線の方向と強度を制御している．
移動
1次元光源アレイ（複数）

パララクスバリア（移動）

図１０

光線再現ディスプレイの光線制御の仕組み

ミラー走査全周光線取得装置と全周光線再現３D ディスプレイをリアルタイ
ムで結合して，図１１に示す全周光線再現ＦＴＶ[48]を構築した．光線取得装
置とディスプレイのデータ構造が異なるため，途中にデータ変換装置が置かれている．データ転送は非圧縮で，転送レートは 20Gbps である．
Metal Halide Lamp

Display
Mirror-Scan

Distortion Correction/
Data Conversion

図１１

High Speed Camera

全周光線再現ＦＴＶ

4. ＦＴＶの国際
ＦＴＶの国際標準化の国際標準化4.1. MPEG における FTV 標準化の経緯
MPEG におけるＦＴＶ国際標準化の経緯を図１２に示す．２００１年１２月から２００４年３月まで，3DAV (3 Dimensional Audio and Video)グループにおいて FTV を含む様々な３次元映像の審議を行った．２００４年３月に３DAV での議論が FTV に収束し，FTV の第１フェーズとして MVC（Multi-view Video
Coding）[27]の標準化を開始した．MVC は２００９年 5 月に H.264/MPEG-4 AVCの拡張規格として成立した．２００７年４月からは FTV の第２フェーズとして
３DV(3D Video) [28]の標準化を進めている．２０１３年８月より FTV の第３フ
ェーズの標準化[29]を開始した．

2001/
12

2002/
12

2003/
10

2004/
10

2005/
07

2006/
01

2007/
07

Proposalof FTV

3DAVseminarCfC on3DAV

CfE
on MVCCfP
on MVC

Evaluationof proposals

Req. onFTV

2004/03
Start MVC (Multi-view Video Coding)

2001/12Start 3DAV

2011/
03

2011/
11

CfP
on 3DV

Evaluationof proposals

time2009/05
MVC completed

MVC (moved to JVT in 2006/07)

3DAV•Requirements on 3DAV
•EEs on 3DAV•CEs onMVC

Targets
converged
on FTV

MVC+D
2007/04
3D-AVC
Start 3DV (3D Video) 3D-HEVC
3DV (moved to JCT-3V in 2012/07)
2009/02
Requirements on 3DV
2013/08
Start FTVFTVFirst phase of FTV

図１２

Second phase of FTV

Thirdphase ofFTV

MPEG におけるＦＴＶ標準化の経緯

4.2. ＦＴＶ第１フェーズ標準化
ＭＶＣの枠組みを図１３に示す．MVC では，視点映像を圧縮，伝送，復元する．
入力と出力の多視点映像の数は同じであり，自由視点画像を生成する視点合成は考慮されていない．MVC は３Ｄ映画を記録するブルーレイ３Ｄに採用された．

MVC
Encoder

Sender side

図１３

Transmission

MVC
Decoder

Receiver side

MVC の枠組み

4.3. ＦＴＶ第２フェーズ標準化
３DV の枠組みを図１４に示す．３DV では，少数の多視点映像と depth（奥行）
情報を圧縮して伝送し，受信部でディスプレイの眼数に合わせた多視点映像を生成して表示する．入力と出力で多視点映像の数が異なることが特徴である．
depth 情報を利用して視点合成を行う機能を持っており，これによって，ユーザの好みやディスプレイのタイプに適合した３D 表示を行う viewing adaptationと display adaptation を実現する．

view
depth

Depth
Estimation

Stereocamera3DV
3DV
Encoder Trans- Decoder
mission

Sender side

View
Synthesis

Receiver side

図１４

Multiview
display

３DV の枠組み

３DV の標準化に当たり，MPEG が定めたＦＴＶ参照モデルを図１５に示す．名古屋大学はテスト画像シーケンス，奥行き推定レファレンスソフトウェア(DERS) [49]，及び画像合成レファレンスソフトウェア(VSRS) [49]を提供した．
Candidate items
for standardization①

FTV
data format

Testsequences
CaptureCorrection/Conversion

FTV
data format
Transmission

Encoder

Decoder

Synthesis

Display

Storage②
Depth Estimation
Reference Software

Multi-Camera

Captured MultiView Images

図１５

Corrected Multi-View
Images and MultiView Depth③
View Synthesis
Reference Software
Reconstructed MultiView Images andMulti-View Depth

Free
Viewpoint
Images

ＦＴＶ参照モデルと名古屋大学の貢献

２０１１年３月に３DV の Call for Proposals[50]を発行した．3DV Call for
Proposals の枠組みと標準化項目を図１６に示す．
MVD (Multi-View + Depth)

2-viewcase

Alternative
Data Format

orFormatConversion(optional)

Encoder

Decoder

View Synthesis

3-viewcase

1. Compression
2. Data Format

図１６
圧縮方式については

Multi-view
3D display

3DV 標準化提案募集と標準化項目

MVC+D (Depth-extension of MVC)
3D-AVC (AVC-based MVD coding)
MV-HEVC (HEVC-based MVC)
3D-HEVC (HEVC-based MVD coding)のトラック毎に標準化が進められている．
データフォーマットに関しては，view と depth のペアを複数枚持つ MVD(multiview plus depth)がデフォルトのデータフォーマットとなっているが，それに代わるデータフォーマットとして，名産研の GVD (Global View and
Depth)[51]とディズニーの Warp が採用された．
代表的な映像データフォーマットを図１７に示す．MV (multi-view)は FTV 第１フェーズのデータフォーマット，MVD は FTV 第２フェーズのデータフォーマッ
トである．
[2DTV] [Stereoscopic TV]
1 view[3DTV]

2 views

MV (multi-view)

1 view+ 1 depth

MVD (multi-view + depth)

GVD(Global View and Depth)

図１７
Left
MVD

映像のデータフォーマット
CenterRight(Multi-View
plus Depth)

Most areas canbe seen from left,
center and right.

hole
masks

Holes denote areasthat can’t be seenfrom center.

GVD(Global View
and Depth)

図１８

Only such areas
are extracted fromleft and right byhole masks.

３視点の場合の MVD データと GVD データ（名産研）

Multi View と Multi Depth 各々の冗長性を取り除いた Global View と GlobalDepth から成る GVD (Global View and Depth)フォーマットは，MVD と同等の情報をコンパクトに表現するデータフォーマットであり，データ量が少なく，処理時間が短い利点がある．right，center，left の３視点の場合について，MVDから GVD への変換を図１８に示す．GVD の left と right の情報は，center から見えない部分のみが residual mask で抽出されており，view と depth のいずれにおいても，冗長性が除去されていることが分かる．residual mask で抽出された部分以外は平均値で埋めているが，これによるデータ量の増加は殆どない．
5. ＦＴＶ第３フェーズ標準化[
ＦＴＶ第３フェーズ標準化[29]29]5.1. 背景と動機
2022ＦＩＦＡワールドカップ日本招致委員会は，サッカースタジアムの感動を再現して世界に配信する技術としてＦＴＶに注目し，図１９に示すＦＴＶによるフリーナビゲーションと高臨場感３D 鑑賞を招致コンセプト[52]の柱とした．高臨場感３D 鑑賞には数百眼以上の超多視点ディスプレイが必要である．

realistic 3D viewing
by super multiview
free
navigation

図１９

FTV によるスポーツ観戦の革新

超多視点撮影技術，及び超多視点表示技術の例を，それぞれ図２０，図２１に示す．既に１００視点を超える撮影，表示技術が実現されている．

100 views, Nagoya Univ. (2002(2002-2006)

CMU (2004)

Stanford Univ. (2005)

図２０

300 views, NICT (2011)

超多視点撮影技術

High-Density Directional (HDD) Display
Prof. Takaki (Tokyo University of Agriculture and Technology)

図２１

超多視点表示技術(Number of pixels)x(Number of views)

Pixel-view product

(×
×106)

1000
Moore’s law

500

Multi camera(300 views)

CaptureHoloVizio (64 directions)Time-multiplexing display

Rotating screen(288 directions)
Multi camera (100 views)

100(360 views)

50
Mirror scan
(45 views)

Rotating cylinder(400 directions)(360 views)

10(300 directions)(128 directions)
Multi camera (128 views)(64 directions)
Directional image display

5

Integral Photography(400 directions)

1
1996

Mirror scan (33 views)
Multi camera (48 views)(72 directions)

1998

2000

Space-multiplexing display

2002

2004

2006

2008

2010

Year

図２２

多視点撮影・表示性能の進歩

更に，図２２に示すように，この多視点撮影・表示性能は，いずれも急速に発展している．ここで，多視点撮影・表示性能は画素視点積で表されている．
赤は撮影技術，青は表示技術である．表示技術には空間分割を利用するものと，空間分割に加えて時分割を利用するものの二つのタイプがある．
5.2. ＦＴＶ第３フェーズの目標
ＦＴＶ第３フェーズの目標[5
目標[53
[53]
このような背景の下に，FTV 第 3 フェーズでは Super multiview と Free
navigation の実現を目指す．
(1) Super multiview
第 3 フェーズでは 100 視点以上の超多視点表示を実現する．超多視点表示には，図２３に示すように，従来と同じ平面型で視点数やサイズが大きいものと，

形状や原理が異なるものがある．
(views≲30)

Secondphase of
FTV

Conventional
multiview
displaySame type
More views
Larger screen(flat screen, horizontal parallax)

Different types

More views(flat screen, horizontal parallax)

Thirdphase of
FTV
(different types of screen,
vertical parallax)

図２３

第３フェーズが目指す超多視点ディスプレイ

形状や原理が異なる超多視点ディスプレイとしては，前述の 360 視点全周ディスプレイ The SeeLinder [46]，図２４，図２５に示す 500 視点 Holo-Table [54]，図２６に示す 400x250 視点インテグラルフォトグラフィー[55]などがある

図２４５００視点全周ポータブルディスプレイ：Holo-Table (3Dragons LLC)

図２５

Holo-Table の表示画像

(a) Displayed 3-D image

図２６(b) Enlarged portion ofelemental images

400x250 視点インテグラルフォトグラフィー(NHK)(2) Free navigation
第３フェーズでは，図２７に示すように柔軟なカメラ配置による広範囲での視点合成技術を開発する．これによって，図２８や図２９に示すフリーナビゲーションアプリケーション[56]-[58]を実現する．
Second phaseof FTV

Third phaseof FTVsynthesized
views

cameracameralinear camera
setup

Flexible camera setup
Much wider range of view synthesis

図２７

図２８

第３フェーズにおけるカメラ配置と画像生成範囲

FTV のモバイルアプリケーション(Orange Labs Poland)

図２９

フリーナビゲーションによるサッカー観戦(KDDI)

5.3. ＦＴＶ国際
ＦＴＶ国際セミナー
国際セミナーのセミナーの開催
ＦＴＶ標準化活動を紹介するため，MPEG は 2014 年 7 月の MPEG 札幌会合において，公開国際セミナー“FTV Seminar～A Viewing Revolution in the Making～”[59]を開催する．ＦＴＶセミナーの講演者と講演題目を以下に示す．
(1) Masayuki Tanimoto (Nagoya Industrial Science Research Institute)“Targets of MPEG FTV”
(2) Marek Domanski (Poznan University of Technology)“Practicing free-viewpoint television: multi-view video capture and processing”(3) Shoichiro Iwasawa (NICT)“REI: A large-screen automultiscopic projection display”(4) Peter Kovacs (Holografika)“HoloVizio 3D light-field displays”(5) Jun Arai (NHK)“Integral three-dimensional television”(6) Jean-François Macq (Alcatel-Lucent Bell Labs Belgium)“Towards network-friendly video representations for free viewpoint navigation”(7) Hiroshi Sankoh (KDDI)“Free-viewpoint video generation for sports scene”(1)はＦＴＶ標準化活動の狙い，(2)はＦＴＶ基盤技術の紹介であり，(3)と(4)は超多視点ディスプレイアプリケーション，(5)はインテグラルフォトグラフィ
ー，(6)と(7)はフリーナビゲーションアプリケーションに関する講演である．
6. むすびＦＴＶは，空間情報の全てを伝達する究極の３DTV であり，写真，映画，テレビと発展してきた映像メディアの頂点に立つものである．無限の眼を持つＦＴ
Ｖは極めて高いセンシングや表現の能力を持つため，産業や生活，社会，学術，
文化，スポーツ等，多くの分野において大きな貢献が期待される．
ＦＴＶの重要性は国際的にも認知され，新たな国際標準化も始まっている．
MPEG のＦＴＶリフレクタ－には
http://lists.uni-klu.ac.at/mailman/listinfo/ftv
より加入できる．
日本発のＦＴＶが世界標準となって実用化される日が近いことを願っている．
謝辞

本研究の一部は総務省 SCOPE，及び JSPS 科研費 25289117 によって行われた．
文

献[1] Masayuki Tanimoto, Mehrdad Panahpour Tehrani, Toshiaki Fujii, Tomohiro Yendo,“Free-Viewpoint TV”, IEEE Signal Processing Magazine, vol.28, no.1, pp.67-76, January 2011.
[2] Masayuki Tanimoto, Mehrdad Panahpour Tehrani, Toshiaki Fujii, Tomohiro Yendo, “FTV for
3-D Spatial Communication”, Proceedings of the IEEE, Vol. 100, No. 4, pp. 905-917 (April2012). (invited paper)[3] Masayuki Tanimoto, “ FTV: Free-viewpoint Television ” , Signal Processing ： Image
Communication, Vol. 27, Issue 6, pp. 555-570 (June 2012). doi:10.1016/j.image.2012.02.016(invited paper)[4] Masayuki Tanimoto, “FTV (Free-viewpoint Television)”, APSIPA Transactions on Signal andInformation Processing, Vol. 1, Issue 1, e4 (14 pages) (August 2012). doi:
10.1017/ATSIP.2012.5 (invited paper)[5] 谷本正幸:“自由視点テレビ”, 三次元映像フォーラム, Vol. 15, No.3, pp. 17-22, 2001 年 9月.
[6] 谷本正幸:“自由視点テレビ”, 映像情報メディア学会誌, 巻頭,Vol. 55, No.12, 2001 年 12月.
[7] 谷本正幸: “自由視点テレビ FTV”, 映像情報メディア学会誌, Vol. 58, No. 7, pp.898-901,
2004 年 7 月.
[8] Masayuki Tanimoto, “Free Viewpoint Television - FTV”, Picture Coding Symposium 2004,
Special Session 5, December 2004.
[9] 谷本：“光線画像工学 －３次元画像メディアの新しいフレームワーク－”，映像情報メディア学会メディア工学シンポジウム, pp. 13-19, 2005 年 3 月.
[10]Masayuki Tanimoto, “ FTV (Free Viewpoint Television) Creating Ray-Based Image
Engineering”, Proc. of ICIP2005, pp.II-25‐II-28, September 2005.
[11]Masayuki Tanimoto，“Overview of Free Viewpoint Television，”Signal Processing：Image
Communication，vol.21，no.6，pp.454-461，July 2006．
[12]谷本 正幸，“自由視点テレビ FTV-｢イ｣の字から 80 年-，”電子情報通信学会誌，vol.89，
no.10，pp.866-870, 2006 年 10 月．
[13]谷本 正幸，“自由視点テレビ FTV，”電子情報通信学会論文誌 A，vol.J89-A，no.11，
pp.866-872，2006 年 11 月．（招待論文）[14]Masayuki Tanimoto; “ Free Viewpoint Television ” , OSA Topical Meeting on Digital
Holography and Three‐Dimensional Imaging, DWD2, June 2007．(Invited Paper)[15]谷本 正幸; "自由視点テレビの開発と国際標準化",名古屋大学情報連携基盤センター
ニュース,Vol.6,No.4, 2007 年 11 月.
[16]Akira Kubota, Aljoscha Smolic, Marcus Magnor, Masayuki Tanimoto, Tsuhan Chen, and Cha
Zhang; " Multiview Imaging and 3TDTV", IEEE Signal Processing Magazine, Vol.24, No.6,
pp.10-21, November 2007.
[17]Masayuki Tanimoto; "FTV (Free viewpoint TV) and Creation of Ray-Based Image
Engineering", ECTI Transaction on Electrical Engineering, Electronics and Communications,Vol. 6, No. 1, pp.3-14 (February 2008).（Invited Paper）[18]Masayuki Tanimoto,"FTV (Free viewpoint TV) and Ray-Space Technology", IBC2008, The
cutting edge, part two (September 2008).
[19]Makoto Sekitoh, Koichi Toyota, Toshiaki Fujii, Tadahiko Kimoto, Masayuki Tanimoto：“Virtual
Bird's-Eye View System based on Real Image”，EVA 2000 Gifu, 8, pp.8-1～8-7, October 2000.
[20]M. Sekitoh, T. Fujii, T. Kimoto, and M. Tanimoto, "Bird’s Eye View System for ITS", IEEE
Intelligent Vehicle Symposium, pp. 119-123, May 2001.
[21]関藤, 沓名, 豊田, 楊, 藤井，木本，谷本: “自由視点リアルタイム鳥瞰図生成システム”,
3 次元画像コンファレンス 2001, pp. 41-44, 2001 年 7 月.
[22]P. Na Bangchang, T. Fujii and M. Tanimoto, “Experimental System of Free Viewpoint
TeleVision”, Proc. IST/SPIE Symposium on Electronic Imaging, Vol. 5006-66, pp. 554-563,
Jan. 2003.
[23]P. Na Bangchang, M. Panahpour Tehrani, T. Fujii, M. Tanimoto, “Realtime System of Free
Viewpoint Television”, The journal of the institute of Image information and Television
Engineers (ITE), Vol. 59, No. 8, pp. 63-701, Aug. 2005.
[24]N. Fukushima, T. Yendo, T. Fujii and M. Tanimoto, “An Effective Partial Interpolation Method
for Ray-Space”, Proc. of 3D Image Conference 2006, pp. 85-88, July 2006.
[25]福嶋慶繁, 丹羽健太, 圓道知博, 藤井俊彰, 谷本正幸, 西野隆典,武田一哉, “多視点・多聴点データ取得システムを用いた自由視聴点映像生成”, 電子情報通信学会論文誌 D,
vol. J91-D, No. 8, pp.2039– 2041, (2008 年 8 月)
[26]Mehrdad Panahpour Tehrani, Kenta Niwa, Norishige Fukushima, Yasushi Hirano, Toshiaki Fujii,
Masayuki Tanimoto, Kazuya Takeda, Kenji Mase, Akio Ishikawa, Shigeyuki Sakazawa andAtsushi Koike, "3DAV Integrated System Featuring Arbitrary Listening-point and Viewpoint
Generation", Proc. of IEEE Multimedia Signal Processing, MMSP 2008, PID-213, pp.
855-860(October 2008). (Best paper award)[27]“Introduction to Multi-view Video Coding”, ISO/IEC JTC1/SC29/WG11 N7328, July 2005.
http://www.chiariglione.org/mpeg/technologies/mp-mv/index.htm[28]Introduction to 3D Video”, ISO/IEC JTC1/SC29/WG11 N9784, May 2008.
http://www.chiariglione.org/mpeg/technologies/mp3d/index.htm.
[29]M. Tanimoto, T. Senoh, S. Naito, S. Shimizu, H. Horimai, M. Domański, A. Vetro, M. Preda
and K. Mueller, “Proposal on a New Activity for the Third Phase of FTV,” ISO/IEC
JTC1/SC29/WG11 MPEG2013/M30229, Vienna, Austria, July 2013.
[30]藤井：「３次元統合画像符号化の基礎検討」，東京大学工学系研究科 博士論文 (1994).
[31]T. Fujii, T. Kimoto, M. Tanimoto, "Ray Space Coding for 3D Visual Communication", Picture
Coding Symposium '96, pp. 447-451, Mar. 1996.
[32]M. Tanimoto, A. Nakanishi, T. Fujii, T. Kimoto, "The Hierarchical Ray-Space for Scalable 3-D
Image Coding", Picture Coding Symposium 2001, pp.81-84, April 2001.
[33]Toshiaki Fujii, Masayuki Tanimoto, "Free-Viewpoint TV System Based on Ray-Space
Representation", SPIE ITCom 2002, Vol. 4864-22, pp.175-189, Aug. 2002.
[34]T. Fujii, K. Mori, K. Takeda, K. Mase, M. Tanimoto and Y. Suenaga, “Multipoint Measuring
System for Video and Sound: 100-camera and microphone system”, IEEE 2006 International
Conference on Multimedia & Expo (ICME), pp. 437-440, July 2006.
[35]Gentaro Takeda, Tomohiro Yendo, Mehrdad P. Tehrani, Toshiaki Fujii, Masayuki Tanimoto,"All-around convergent view acquisition system using ellipsoidal mirrors", Proc. of SPIE
Defense, Security, and Sensing : Three-Dimensional Imaging, Visualization, and Display 2010,
7690A-19 (April 2010).
[36]Keiji Yamashita, Tomohiro Yendo, Mehrdad P. Tehrani; Toshiaki Fujii, Masayuki Tanimoto, "High-efficiency acquisition of ray-space using radon transform", Proc. of SPIE Defense,
Security, and Sensing : Three-Dimensional Imaging, Visualization, and Display 2010,
7690A-18 (April 2010). (invited paper)[37]山本 健詞，圓道 知博，藤井 俊彰，谷本 正幸，“自由視点テレビのためのマルチカメ
ラの画像変換，” 映像情報ﾒﾃﾞｨｱ学会誌 ，vol. 60，no. 2，pp.219-226，2006 年 2 月．
[38]松本健太郎, 圓道 知博, 藤井 俊彰, 谷本 正幸; “自然特徴点を用いたマルチカメラ画
像の幾何補正”, 電子情報通信学会論文誌 D, vol. J90-D, No. 7, pp. 1718- 1720(2007 年 7月)[39]福嶋 慶繁, 松本 健太郎，圓道 知博, 藤井 俊彰, 谷本 正幸; "特徴点軌跡並行化による
2 次元カメラアレイレクティフィケーション", 映像情報メディア学会誌, Vol. 61, No. 4,
pp.564-571 (2008 年 4 月)
[40]Kenji Yamamoto，Tomohiro Yendo， Toshiaki Fujii，Masayuki Tanimoto，“Colour Correction
for Multiple-camera System by using Correspondences，” The journal of the institute of Image
Information and Television Engineers， vol. 61，no. 2， pp.213-222 ，February 2007．
[41]福嶋慶繁，圓道知博，藤井俊彰，谷本正幸，“Multi-Pass Dynamic Programming による光線空間補間”，電子情報通信学会論文誌 D, vol.J90-D, No.7, pp.1721-1725(2007 年 7 月)
[42]Yuji Mori, Norishige Fukushima, Tomohiro Yendo, Toshiaki Fujii, Masayuki Tanimoto,“View
Generation with 3D Warping Using Depth Information for FTV” Signal Processing:Image
Communication, Volume 24, Issue 1-2 pp.65-72 (January 2009).
[43]H. Furihata, M. P. Tehrani, T. Yendo, T. Fujii, and M. Tanimoto, “Novel view synthesis withresidual error feedback for FTV,” Proc. IS&T/SPIE Electronic Imaging, Session on DIBR and
FTV, vol. 7524, Jan. 19, 2010.
[44]L. Yang, T. Yendo, M. P. Tehrani, T. Fujii, and M. Tanimoto, “Artifact reduction using reliability
reasoning for image generation of FTV,” J. Vis. Commun. Image Represent., vol. 21, no. 5–6,
pp. 542–560, July/Aug. 2010.
[45]L. Yang, T. Yendo, M. P. Tehrani, T. Fujii, and M. Tanimoto, “Probabilistic reliability based
view synthesis for FTV,” in Proc. IEEE Int. Conf. Image Processing (ICIP2010), Sept. 2010.
[46]Tomohiro Yendo, Toshiaki Fujii, Masayuki Tanimoto, Mehrdad Panahpour Tehrani, “TheSeelinder: Cylindrical 3D display viewable from 360 degrees”, Journal of visualcommunication and image representation , Vol. 21, Issues 5-6, pp. 586-594, Jul.-Aug. 2010.
[47]K. Manoh, T. Yendo, T. Fujii, and M. Tanimoto, "Ray-Space Acquisition System of All-Around
Convergent Views using a Rotation Mirror", Proc. of SPIE, Vol. 6778, pp.67780C-1-8,

September 2007.
[48]T. Yendo, T. Fujii, M. Panahpour Tehrani and M. Tanimoto: "All-Around Ray-Reproducing
3DTV”, IEEE International Workshop on Hot Topics in 3D (Hot 3D), July 2011.
[49]“Report on Experimental Framework in 3D Video Coding”, ISO/IEC JTC1/SC29/WG11
N11631, October 2010.
[50]“Call for Proposals on 3D Video Coding Technology,” ISO/IEC JTC1/SC29/WG11 MPEG,
N12036, March 2011.
[51]Masayuki Tanimoto, Kazuyoshi Suzuki, “Global View and Depth (GVD) Format for
FTV/3DTV”, Proc. of SPIE, Vol.8738, 8738-4 (April 2013). (invited paper)[52]2022FIFA ワールドカップ日本招致委員会コンセプトビデオ「サッカー観戦を革新する
日本の技術力」
http://dream-2022.jp/jp/our_bid/bid_book/videos/jp02/index.html?keepThis=true&TB_iframe=
true&width=711&height=450[53]“Use Cases and Requirements on Free-viewpoint Television (FTV),” ISO/IEC
JTC1/SC29/WG11 MPEG2013/N14104, Geneva, Switzerland, October 2013.
[54]Hideyoshi Horimai, “360 degree viewable 3D Display “Holo-Table””, Joint Collaborative Teamon 3D Video Coding Extension Development of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC
29/WG 11 (MPEG), JCT3V-C0234, M28301, January 2013.
[55]J. Arai, F. Okano, M. Kawakita, M. Okui, Y. Haino, M. Yoshimura, M. Furuya, and M. Sato,“Integral Three-Dimensional Television Using a 33-Megapixel Im-aging System,” JOURNALOF DISPLAY TECHNOLOGY, VOL. 6, NO. 10, pp.422-430, OCTOBER 2010.
[56]Akio Ishikawa, Sei Naito, Shigeyuki Sakazawa, “Walk-Through and Fly-Through Experience
using 3D model plus texture mapping toward Free Viewpoint TV”, ISO/IEC JTC1/SC29/WG11,
M14952, October 2007.
[57]H. Sankoh, A. Ishikawa, S. Naito, and S. Sakazawa, “Robust Background Sub-traction Method
based on 3d Model Projections with Likelihood,” In 12th Interna-tional Workshop on
Multimedia Signal Processing (IEEE MMSP 2010), pp. 171-176, 2010.
[58]H. Sankoh, M. Sugano, and S. Naito,“Dynamic camera calibration method for free-viewpoint
experience in sport videos,” In 20th International Conference on Multimedia (ACM MM 2012),
pp. 1125-1128, 2012.
[59]“Plan of FTV Seminar at 109th MPEG Meeting,” ISO/IEC JTC1/SC29/WG11
MPEG2014/N14513, Valencia, Spain, April 2014.