通信障害の対応状況に関する説明会

2021年11月10日

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

本日のご説明内容

1

通信障害の全体像

2

発生事象と原因3

再発防止に向けた取り組み

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

1通信障害の全体像

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

2

携帯電話のつながる仕組み
携帯電話をつなげるために、あらかじめ「位置登録」を実施し、端末の所在エリアを把握することで、効率的に端末を呼び出すことが可能
端末の所在エリアを事前に把握

位置情報
サーバ
信号交換機

呼び出し
エリア1

音声/パケット交換機
エリア3

エリア2

発信
Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

3通信障害の概要
ご利用できない状況

ご利用しづらい状況

発生日時

2021年10月14日（木）17:37

2021年10月14日（木）16:54解消日時

2021年10月14日（木）19:57

2021年10月15日（金）22:00

影響時間

2時間20分

29時間6分

影響規模

約100万人

音声約460万人
データ830万人以上

影響範囲

全国

全国

工事の切り戻し作業で発生した大量の位置登録信号に対処するための位置登録規制により、一部のお客さまの音声・データ通信がご利用できない事象が発生

左記のご利用できない事象に加え、大量の位置登録信号の輻輳がネットワーク全体に波及したことにより、音声・データ通信がご利用しづらい事象が発生

発生事象（石川県・富山県・福井県・奈良県・和歌山県を除く）

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

（ご利用できない2時間20分を含む）

4

「ご利用できない状況」と「ご利用しづらい状況」
位置登録ができず「ご利用できない状況」と位置登録信号の混雑をきっかけとした「ご利用しづらい状況」が発生ご利用できない状況

ご利用しづらい状況

位置登録の規制に伴い通信ができない状態

位置登録信号の混雑をきっかけとした音声が接続しづらい・データ速度が低下する状態

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

5通信障害の影響規模「ご利用できない状況」の影響は、約100万人と推計「ご利用しづらい状況」は、音声約460万人・データ830万人以上と推計
10/14
16:54 17:37

10/15

19:57

5:05

22:00

29時間6分

時間
２時間20分

4G
5G

全国規制
18分間

影響規模

エリアごとに位置登録100%
規制開始

一部のお客さまは3Gで通信

3G

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

ご利用できない影響
約100万人※
エリアごとに順次位置登録
規制緩和

ご利用しづらい影響
音声：約460万人

4G・5G
音声・データともに回復

4G回復後、順次4Gへ復帰

データ：830万人以上

3G
音声・データともに回復※10/15の記者会見で200万人と公表後、データを再集計して修正

6

発生事象と原因

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

7

IoT位置情報サーバの切り替えで不具合発生
旧設備からの切り替え後、新設備の不具合※1が判明
切り戻し手順の認識齟齬により、IoT端末※2から大量の位置登録信号が発生【原因①】
IoT海外ローミングのソフトウェア仕様の考慮漏れ【原因➁】
切り戻し手順の認識齟齬

切り戻し切り替え
新設備

旧設備

不具合 位置情報

位置情報サーバ

サーバ（一度に大量のIoT端末を旧設備に切り戻し）

信号交換機
音声/パケット交換機
大量の位置登録信号

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

IoT端末※1 ローミングアウトした一部のIoT端末が位置登録できない不具合※2 本資料中で用いる「IoT端末」は、IoT位置情報サーバに収容されているIoT端末のことを指す

8

IoT端末の影響が全国の携帯電話に波及
IoT端末からの大量の位置登録信号により信号輻輳が発生
信号交換機を共用している携帯電話にも影響が波及【原因③】
信号交換機の位置登録リソース枯渇

新設備

旧設備

位置情報
新設備
サーバ

位置情報
サーバ
信号輻輳

信号交換機
信号輻輳

音声/パケット交換機

携帯電話
Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

IoT端末
9

ご利用しづらい状況の長期化
4G/5Gは12時間11分、3Gは29時間6分ご利用しづらい状況が継続
時系列

事 象

16:54

IoT端末からの大量の位置登録信号発生

17:37

4Gの位置登録規制を実施（順次緩和）

10/14 19:57
22:23：

4Gの位置登録規制の緩和完了
4G・5G

12時間11分

05:05
10/15

：

IoT端末の位置登録数調整開始（復旧措置の開始）

5G・4G回復
3G

29時間6分

22:00

3Gに移ったお客さまが4Gへ順次復帰
3G回復※ IoT端末切り戻し工事は継続

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

【原因④】
IoT端末に限定した
位置登録規制ができない【原因⑤】
事前準備不足による作業着手の遅延
4Gへ復帰するための端末操作方法をホームページやSNSなどでご案内10

回復に関する情報が錯綜「ご利用できない状況」が解消したことを「回復」と表現したがお客さまが「ご利用しづらい状況」は解消していなかった【原因⑥】「回復」の表現とお客さま体感の差異

位置登録の全面規制で通信できない状態

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

位置登録の規制緩和を受けて「回復」と表現

11

再発防止に向けた取り組み

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

12再発防止に向けた取り組み
原因切替工事の不具合

携帯電話への影響拡大

影響の長期化回復に関する情報錯綜

再発防止策

時期

① IoT海外ローミングのソフトウェア仕様の考慮漏れ■IoT海外ローミングに対応したソフトウェアの導入■新設備と旧設備の機能差分の再確認

2021年
12月下旬
開発完了

➁ 切り戻し手順の認識齟齬

■作業関係者側の切り戻し手順内容の条件の明確化■作業関係者側の手順も含めた全体手順書の作成

2021年
11月下旬
対応完了

③ 信号交換機の位置登録リソース枯渇■一般ユーザとIoT端末の信号交換機の位置登録処理リソースを分離

2021年
12月下旬
開発完了

④ IoT端末に限定した位置登録規制ができない■IoT端末と携帯電話を区別して位置登録規制できる機能を導入

2022年
1月下旬
開発完了

⑤ 事前準備不足による作業着手の遅延■短時間に復旧措置を実行する事前準備を実施

次回工事までに対応完了⑥ 「回復」の表現とお客さま体感の差異■お客さまのご利用しづらい状況解消後に「回復」を公表■ホームページ更新の迅速化・高頻度化

次回障害発生時より対応

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

13

appendix

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

14

影響規模の推計方法
影響規模推計方法

約100万人

通常稼働時と位置登録100%規制時の位置登録数差分の最大値

音声

約460万人通常稼動時と事象発生時の呼数の差分と一人あたりの平均呼数から算出

データ

830万人以上

通常稼動時と事象発生時の4Gサービスの位置登録数差分の最大値ご利用できない
お客さまご利用しづらいお客さま

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

15

Copyright ©2021 NTT DOCOMO, INC. All Rights Reserved.

16