（オペレータの目で見た）
MPLSオ
MPLSオペレーションの現状と今後
MPLS
オ レ シ ンの現状と今後オペレーションの現状と今後

NTT Communications
大澤 浩

hiroshi.ohsawa@ntt.com

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.1

Agenda•NTT
NTTコミュニケーションズとコミュニケーションズとMPLS
MPLS
MPLS網の変遷と現状
網の変遷と現状•各MPLS•今後の今後のMPLS
MPLS網
網
•まとめ

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.2

NTTコミュニケーションズとNTT
コミュニケーションズとMPLS
MPLS

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.3

NTTコミュニケーションズのNTT
コミュニケーションズのMPLS
MPLS網
網
NTTコムのMPLS網…
運用部隊 用途で大まかに分けて4種類※（2008年現在）
運用部隊、用途で大まかに分けて4種類※（2008年現在）

Arcstar IP
IP--VPN
Arcstar グローバル
グローバルIP
IP--VPN
ntt.neetntt.n
大澤の専門分野
L2--MPLS ←大澤の専門分野
L2※同種の網に複数の面があるなど、
NW
NWとしてはもっと数が多い
も数が多
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.4

何でNW
何でNWがこんなにあるの？
がこんなにあるの？
MPLS網だけで44種類
MPLS網だけで
ピ アIP
ピュアIP
ピュア
アIP網やイーサ網を含めるともっとずっと沢山
IP網やイ網やイ サ網を含めるとも とず と沢山網やイーサ網を含めるともっとずっと沢山
なぜ？

国内の基幹網は統合するメリット小国内の基幹網は統合するメリット
小・一つのサービスで・一つのサービスで10G
つのサ ビスで10G
ビスで10Gクラスのクラスの中継線や大容量装置を中継線や大容量装置を沢山置くぐらいになると、網統合のメリットは薄い（逆に１サービス内で網を増設する例もあり）
・中継区間はファイバ・WDM
・中継区間はファイバ・
WDMを自前で大量に持っているのでを自前で大量に持っているのでリンクを減らすために高い装置を使うと逆効果

アクセス回線部分やグローバルはできれば統合アクセス回線部分やグロバルはできれば統合
・中継区間のコストが大きい（他社に借りるので）・（比較的）トラフィックが少ないので、一つの装置でいろいろなサービスを収容可能
いろいろなサビスを収容可能
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.5

各MPLS
MPLS網の変遷と現状網の変遷と現状

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.6

Arcstar IPIP-VPNの概要
VPNの概要• 20002000年運用開始
年運用開始、企業向けデータサービスの主力、企業向けデータサービスの主力
国内シェアNo
国内シェアNo.1
No 1のNo.1の1のIP
IP--VPN
VPNサービス
VPNササービス
サビス ※200※20077年3月時点• 国内シェア• SLA
SLA、故障通知など、網品質には非常に力を入れてます、故障通知など、網品質には非常に力を入れてます• IPv6
IPv6、マルチキャスト等に対応、マルチキャスト等に対応（一部トライアル中）（一部トライアル中）VoIP・.PhonePh
IP C
Centrext

セキ リティ
セキュリティ

IPアプリケーション

・MPLS-VPNによる・TV会議システム
・コンテンツ配信

堅牢なセキュリティ
・セキュリティホスティング

ユビキタス
・MOVE
・モバイルアクセスバイ
ク・モバイルコネクト接続機能
・IPsec接続機能

ArcstarAt
IP-VPN
高信頼プラットフォーム

ブロードバンド・イーサ系アクセス・メガデータネッツ
メガデ タネ ツ アクセス・ATM/STM/CR/FRアクセス
・フレッツ系アクセス
・ADSL (ACCA)

・冗長性に配慮した超高速
バックボーン・SLA（ｻｰﾋﾞｽ品質保証）を5項目提供NTTcommunications
NTT communications
Professional TechnoManagement Office
Copyright © 2008 NTT Communications

Page.7

Arcstar IPIP-VPNの特徴
VPNの特徴MPLSルータだけでMPLS
ルータだけで10001000台規模の超大型台規模の超大型MPLS
MPLS網
網
Internetフルルート以上の経路数
Internet
フルルート以上の経路数• シンプル設計、シンプル設計、「「IPIP的」運用的」運用‒ 綺麗なトポロジー、画一的なコスト設定‒ IGPコストで経路制御‒ LSPを意識しない運用‒ （保守用ルータなどの）VPN-PingがOAMの主力‒ 網内パスはPOSで統一‒ ロードバランス無しの0/1運用
ロ ドバランス無しの0/1運用‒ BGP/MPLS-VPN専用‒ RRを階層化

NW構成イメ ジ
NW構成イメージ
コア• バックボーン区間はバ クボ ン区間はFRR
バックボーン区間はFRRン区間はFRR‒ ビル間は全て高速切り替え各拠点
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

各拠点
Page.8

Arcstar IPIP-VPNの変遷
VPNの変遷• ネットワーク構成、オペレーション等の変遷‒ 大規模化•大容量ルータへの転換
大容量ルータへの転換•マルチベンダ化‒ 信頼性向上系•Fast-rerouteの導入（バックボーン）•High Availability系機能の導入‒ Graceful Restart、Non-stop Forwarding、Stateful Switchoverなど•バグつぶし‒ これがこれが一番信頼性向上には大きいかも？
番信頼性向上には大きいかも？

当初より信頼性はすごく上がった‒ 新機能の検討、導入など•Multicast、IPv6などなど• 今の悩みと今後‒ 装置のEOL対応‒ バージョンアップ
•In-serviceでPEをバージョンアップできるのはいつの日か

設計・運用ポリシーは大きな変化無し
品質向上も一段落し 安定期に入っている
品質向上も一段落し、安定期に入っている
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.9

Arcstar グローバル
グローバルIPIP-VPN• 2001
2001年運用開始
年運用開始
グローバルなグロ
バルなIP
バルなIP
IP--VPN
VPN網網• グローバルなIP‒ 159ヶ国/エリアにまたがるグローバルMPLS網‒ 南極も提供可能！（さすがにMPLSルータは置いていない）• サービススペックは（国内）
サ ビススペ クは（国内）A
サービススペックは（国内）Arcstar
クは（国内）Arcstar
At
IP-VPNIPVPNとほぼ同等とほぼ同等

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.10

Arcstar グローバル
グローバルIPIP-VPNの特徴
VPNの特徴サービススペックは国内IP--VPN
サービススペックは国内IP
VPNに近いに近い
多くの国に足を伸ばしたい

NW構成イメージ• NW
NW構成は国内より多少複雑
構成は国内より多少複雑‒ 伝送路の制約‒ 距離遅延が最重要‒ 中継にEthernetを利用

コア

• 国内
国内IP
IPIP
-VPN
VPNを受け継いだ設計
VPNを受け継いだ設計、運用を受け継いだ設計 運用を受け継いだ設計、運用‒ IGPコストで経路制御‒ LSPを意識しない運用• 各国のキャリアと相互接続
エッジ(PE)
ラダ 型コア＋スタ 型エ ジ
ラダー型コア＋スター型エッジ
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.11

Arcstarグローバル
ArcstarグローバルIPIP-VPN
VPNの変遷の変遷• ネットワーク構成、オペレーション等の変遷‒ MPLSルータ設置拠点の拡大
ル設置拠点 拡大
•トポロジーも結構変わった‒ 新機能の検討、導入など•Multicast
Multicast、IPv6などなど（国内と同じ）
IPv6などなど（国内と同じ）•ユーザ要望の細かなカスタマイズ（国内より細かい部分も）‒QoS系のパラメータ
BGP等のル ティング系‒BGP等のルーティング系• 今の悩みと今後‒ 高信頼系•各種高信頼系機能の増強‒ EOL等のメンテナンス

基本的には国内IP基本的には国内IP-VPNと同様
VPNと同様
細かいところは段々違ってきている
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.12

ntt.nentt.netの概要• グローバルグローバルTier1
Tier1 ISP
ISP（（AS2914）
AS2914）‒ ISPトラフィックのTraffic EngineeringにRSVP-TEを使用‒ IPv6関連などの多彩なオプションサービス
関連
多彩ビ‒ 可用性、遅延、ジッタなど、高度なSLA• 2002
2002年から年からMPLS
MPLS使用使用• イーサネットサービス（イーサネットサービス（GSLGSL））のバックボーンとしても利用

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.13

ntt.nentt.n
etの特徴
大容量トラフィックをさばくグローバル
大容量トラフィックをさばくグローバルIP
IP網
網
元々は
元々は非MPLS、MPLS、ピュア
ピュアIP
IP網
網

• 「IPIP網的」運用
網的」運用

NW構成イメージ‒ LSPは全てDynamic• 大容量網としての設計‒ LinkLi k A
AggregationでScalability確保
ti でS l bilit 確保‒ 大容量ルータ使用‒ トポロジー、コストはツールで‒ トラフィック取得は細かめに• コアルータ間フルメッシュのコアルータ間フルメッシュのLSP
LSP‒数
数1000本単位000本単位‒ 経路（ERO）の履歴を取っておく• Pseudowire

基本はラダー構成
基本はラダ構成
伝送路が許す限りシンプルに‒ TunnelはLDP（over RSVP）
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.14

ntt.nentt.n
etの変遷• ネットワーク構成、オペレーション等の変遷‒ 大容量化•Link Aggregation導入•大容量ルータへの転換‒ 信頼性向上系•スタンバイLSP‒ 新機能の検討、導入など•Pseudowire（GSL）
Pseudowire（GSL）‒2005年ぐらいから• 今の悩みと今後‒ 100Gが欲しい•40Gだとイマイチ嬉しさが小さい

設計・運用ポリシーは設計・運用ポリシーは大大きな変化無
きな変化無ししトラフィック増大
トラフィック増大へのへの対応
対応がが大変NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.15

L2L2-MPLS網の概要
MPLS網の概要• 2001
2001年運用開始
年運用開始
サービスのサビスの中継区間にビスの中継区間にL2パスをパスを提供提供するインフラするインフラ網
網• 各サービスの中継区間‒ L2-MPLS（造語です。Pseudowire/Martiniのこと）専用‒ 制御パケット以外にIPルーティングは使わない

Ethernet
ATM

Ethernet

Tunnel LSPATMATM
VLAN

Ethernet

VLAN

IW(*)

L2-MPLS網※Interwork…別種のInterfaceに変換
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.16

L2L2-MPLS網の特徴
MPLS網の特徴
Traffic Engineering
Engineeringを利用し、各サービスにを利用し、各サービスに安く、早く中継パス（L2安く、早く中継パス（L2）を提供）を提供• IP
IPとしての最適化を無視したトポロジーとしての最適化を無視したトポロジー

NW構成イメージ‒ エリア分け無し、フラットな設計‒ IGPコストはデフォルトのまま‒ ファイバ、WDM経路にあわせた中継リンク（OC192が主）最適化‒ トラフィックの伸びに応じて動的に変更• 非IP的、パス網運用
IP的、パス網運用‒ QoSを考慮した細かいTEシミュレーション‒ LSP経路は全てExplicit-strict•Protection用も含む‒ ピュアIPは制御用のみ‒ 全LSPを常時監視、故障時には、「どのパスが被害を受けたか」を真っ先に確認
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

多重リング？構成
Page.17

L2L2-MPLS網の変遷
MPLS網の変遷• ネットワーク構成、オペレーション等の変遷‒ 大規模化•トラフィック傾向にあわせてトポロジー変更‒ 信頼性向上系•High Availability系機能の導入‒Graceful Restart、Non-stop Forwarding、Stateful Switchoverなど•各種故障対応補助ツール•バグつぶし‒ 新機能の検討、導入など•QoS
QoS‒一部帯域保証など•マルチサービス、Interwork‒ATM/VLANなど• 今の悩みと今後‒ 装置のEOL対応‒ バージョンアップ
•In-serviceでやりたい…
Ii でやりたい

ツール系などで運用改善を続けてきたが、そろそろ 段落？
そろそろ一段落？
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.18

各網の各網の特徴
Arcstar
IPIP-VPN

Arcstar
グローバル
IPIP
-VPN

ntt.netntt.neGSL

L2L2-MPLS

MPLSを使う IPMPLSを使う
IP-VPN
主な理由
Protection

IP--VPN
IP

TE
Pseudowire

TE
Pseudowire
Protection

設計、運用 「IPIP的」運用的」運用の特徴「IPIP的」運用的」運用「IPIP的」運用
的」運用

パス網としての運用

トポロジー L3
L3最適化
最適化

L1/L3
L1/L3両方に両方に最適化

L1/L3両方に
L1/L3両方に最適化

L1最適化
L1
最適化

LSP管理
LSP
管理

意識せず

経路やトラフィックの管理

設計時から細かく管理意識せずNTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.19

今後の今後のMPLS
MPLS網
網

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.20

今後のMPLS
今後のMPLS• 既存既存MPLS
MPLS網
網の今後
‒ どれもMPLSの根幹部分には大きな変化は無し
根分
大変化 無し‒ EOL対応、バグ改修、品質向上系の変更は今後も（永遠に？）続く‒ In-service Upgradeは欲しい人が多い• 新技術、新網新技術、新網のの展望‒ マルチキャストMPLS（マルチポイントLSP）•サービス条件の追加などであるかも？

‒ OAM系（MPLS-OAM、Ether-OAMなどなど）•既存網は今の機能で運用できる仕組みが整っているが、故障切り分け、検出方
既存網は今の機能で運用できる仕組みが整っているが 故障切り分け 検出方法の選択肢が増えるのは嬉しい。

注目！

‒ MPLS-TP（T-MPLS）•既存の非MPLS網の効率化で出番有り？
既存の非MPLS網の効率化で出番有り？

※私見です
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.21

MPLSMPLS-TP（TP（T-MPLS）
MPLS）の使い道
赤字：MPLS--TP
赤字：MPLS
TPで改善できるかも？
で改善できるかも？
青字：MPLS
青字：
MPLS--TP
TPは必要無さそう
は必要無さそう・完全スター型（P-P）
・完全スター型（P・STM
STM伝送装置で重畳伝送装置で重畳・EOL
EOL対応の置き換え対応の置き換え

アクセス
ネットワーク・既存網
既存網をを大きくいじる必要低きくいじる必要低・マイグレーション、新・マイグレーション、新サービスサービス・バックボーン網は増やしたくない

・現在の収容効率悪い・マルチサービス必要ビ 必サービス
ネットワーク（国内）グローバルネットワーク

ADSL回線

OCNntt.net（GSL）

Ethernet回線

IP-VPN

IP-VPNe-VLAN

ATM/FR

専用線

専用線

集線
ネットワーク
ネットワ
ク

多重/分配
ATM回線

STM回線

多種なサ ビスとアクセ
多種なサービスとアクセ
スを『つなぐ』役割

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.22

MPLSMPLS-TP網
TP網を集線を集線NW
NWに適用するなら？に適用するなら？
既存装置の置き換えを狙う
専用線など、超高信頼サービス（稼働率専用線など、超高信頼サービス（稼働率99.9999%99.9999%超）にも利用超）にも利用• “馬鹿な”装置、賢い“馬鹿な”装置、賢いOPS
OPS‒ MPLS伝送装置（notルータ）

サービスNW•IPレス（装置そのものの操作以外）•Software起因の不安定さを排除•ノードの制御部が死んでも通信を止めない• 「伝送装置」オペレーション‒ 既存伝送装置と等価な運用保守‒ ほぼ全てのオペレーションをGUIで行えるシステム作り‒ 一度作ったら触らない運用
一度作 たら触らない運用

OPSOP
S

サービスNW

MPLSMPLS
PLS-TP網
TPP網

OPSが経路制御等の頭脳部分を受け持ち• 多様な網の接続

アクセスNW
アクセス
NW‒ OAM Interwork

アクセスNW
アクセス
NW•MPLS-OAM Ether-OAM ATM-OAM•MPLS-OAM、Ether-OAM、ATM-OAM
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.23

まとめ

NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.24

まとめ• NTT
NTTコムはいくつかの
コムはいくつかのMPLS
MPLS網を運用中
網を運用中
• 同じ
同じMPLSMPLSでも結構違うでも結構違う• 利用開始から利用開始から66〜8年、根幹の部分は固まっている
年 根幹の部分は固まっている‒ エッジ部分に新機能追加は多少あり• 品質向上には終わり無し• MPLS
MPLS--TP
TPには「には「1010年使える」装置を期待年使える」装置を期待

ご清聴ありがとうございました
NTTcommunications
NTT communications
Professional Techno Management Office
Copyright © 2008 NTT Communications

Page.25