大規模基幹システムの運用管理を実現するHinemos最新事例
NTTデータ先端技術株式会社© 2022 NTT DATA Intellilink Corporation

目次
1.
2.
3.
4.

はじめに運用管理機能の多重化の重要性
Hinemosミッションクリティカル機能のご紹介
活用事例紹介1. 活用事例 1
2. 活用事例 2
3. 活用事例 3
5. まとめ© 2022 NTT DATA Intellilink Corporation

2

はじめに

© 2022 NTT DATA Intellilink Corporation

3

はじめに
Hinemosは、大規模基幹システムに対応するための多くの機能を備えており、監視、ジョブといった運用管理を無停止で、継続実行を実現しています。
本セッションでは、運用管理機能の多重化の必要性、大規模基幹システムの運用に有効な、Hinemosミッションクリティカル機能、および、大規模基幹システムの運用の課題に対して、Hinemosで解決した事例を紹介いたします。

© 2022 NTT DATA Intellilink Corporation

4

運用管理機能の多重化の必要性© 2022 NTT DATA Intellilink Corporation5

運用管理機能の多重化の必要性
監視やジョブ管理といった運用管理機能についても、様々な場面で高可用性が必要にミッションクリティカルシステム

インフラのオープン化・クラウド化システムの機能全体を多重化
オンプレミス

仮想化

クラウド

Webサーバ・ハードウェア障害

運用管理サーバ
DBサーバ

・ハードウェア障害
・データセンタ障害

運用管理サーバの障害は、運用管理機能の停止に繋がる業務機能を提供するサーバだけでなく監視やジョブ管理を司る運用管理サーバも多重化が必須© 2022 NTT DATA Intellilink Corporation

・ハードウェア障害
・ハイパーバイザ障害

オープン化に伴い単機能単一サーバの構成が主流となり、サーバ数の増大に伴いサーバ単位の障害は頻繁に発生

6

Hinemosミッションクリティカル機能のご紹介© 2022 NTT DATA Intellilink Corporation

7

Hinemosミッションクリティカル機能とは統合運用管理機能を提供するHinemosマネージャの多重化をワンパッケージで提供！
収集・監視・自動化の高可用性を実現
Hinemosミッションクリティカル機能の特徴

簡易構築・低コスト①クラスタリングソフト・共有ディスク不要②マルチプラットフォーム対応

統合運用管理機能の可用性③障害検知と自動系切替による運用継続④系切替中のメッセージロスト防止機構

簡易運用・オンライン復旧⑤オンライン系切戻しによる障害復旧⑥1コマンドによる系切戻し© 2022 NTT DATA Intellilink Corporation8

①クラスタリングソフト・共有ディスク不要

簡易構築・低コスト

通常のOS2台だけで、Hinemosマネージャを多重化！
Hinemosマネージャ
マスタサーバスタンバイサーバ

死活監視（ハートビート）

DB同期

クラスタリングソフトの追加費用が不要

共有ディスクの追加費用が不要

設計・構築時のSE・CEコストを削減

障害発生時にもワンストップサポート

基盤要件がシンプル
マシンを2台用意するだけ

マルチプラットフォーム対応

Hinemos自身がソフトウェアで死活監視とDB同期を実施

ソフト・ハードウェア費用とエンジニア工数を一気に削減© 2022 NTT DATA Intellilink Corporation

9

②マルチプラットフォーム対応

簡易構築・低コスト

オンプレミス・仮想化・クラウド環境を全て同一アーキテクチャで対応
オンプレミス仮想化

クラウド

IAサーバを2台用意するだけ

ハイパーバイザが異なる
仮想マシンを2台用意するだけ

インスタンスを2台用意するだけ
VPC Peer/DirectConnectにも対応

環境が変わっても、Hinemos自身がソフトウェアで死活監視とDB同期を実施するだけプラットフォームが変わっても、同じスキルセットで導入可能© 2022 NTT DATA Intellilink Corporation10

②マルチプラットフォーム対応

簡易構築・低コスト

運用管理製品のクラウド対応の課題

運用管理製品を通常のクラスタ構成で実現すると、クラウドでは様々な課題が出てくる
クラウド上のクラスタ構成の課題

運用管理製品のNWの特徴

課題②

課題①
VPC Peer/DirectConnectでは使用できない

クラスタミドルはクラウド対応しているか
FIP（フローティングIP）

DBサーバ

DNSサーバ

WEBサーバ

クラスタミドル

SMTPサーバ バッチサーバ

運用管理製品

運用管理製品

運用管理製品

課題③

Web/AP/DBサーバの様に特定のサーバ間ではなく全サーバ間との通信が必要となる（異なるNWセグメント、異なるVPC間等）

共有ディスクは何で実現するか

課題④
誰がこの構成をサポートするか

他にもAzureだと、この方式自体を推奨しないとったケースもある© 2022 NTT DATA Intellilink Corporation11

②マルチプラットフォーム対応

ソフトウェアで実現するクラスタ構成

簡易構築・低コスト

クラウドに影響されないアーキテクチャでクラスタを実現
Hinemosマネージャ
マスタサーバVPC Peer/DirectConnect環境でも利用可能（SIPだけで接続可能）

スタンバイサーバ

死活監視（ハートビート）

クラスタリングソフトは不要（Hinemosが機能として保持）
共有ディスクは不要（Hinemos自体でDB同期）

DB同期
構成全体をHinemos保守サポートだけで解決（ソフトウェアで実現するクラスタ構成）

Hinemos自身がソフトウェアで死活監視とDB同期を実施

AWSやAzureなど様々なクラウド上で、可用性構成を簡単に実現© 2022 NTT DATA Intellilink Corporation12

③障害検知と自動系切替による運用継続

運用管理機能の可用性

環境に合った様々な障害を検知し、自動切替を実現
スタンバイマスタ

ネットワーク障害

監視の自動継続
トラップ系監視は系切替中のロストなし

ディスク障害昇格

マスタ障害

✔

▲

【 Linux版オンプレの例】
障害検知：約30～60秒
自動切替：約15～60秒✔

強制停止
サーバ障害

ジョブ制御の自動継続
セッション情報もロストなし

プロセス障害(1)運用管理サーバの様々な障害を検知(2)自動的にサーバ切替（スプリットブレイン防止機構あり）(3)監視・ジョブ制御等の運用継続

素早い自動切替により、監視やジョブ制御を止めることなく運用継続© 2022 NTT DATA Intellilink Corporation13

④系切替中のメッセージロスト防止機構

運用管理機能の可用性両系でトラップ型データを受信するトラップ型監視のロスト防止機構
一般的な監視ツールのクラスタ構成

Hinemosミッションクリティカル構成
Hinemos（マスタ）

監視ツール

監視ツール

Hinemos（スタンバイ）

共有ディスク

クラスタミドルミッションクリティカル機能

SIP（スタティックIP）

FIP（フローティングIP）

snmptrap

snmptrap

syslogsyslog

二重でトラップ型データを受信して重複判定を行うた
め、二重監視・二重通知は発生しない

カスタムトラップ

マスタ・スタンバイの両サーバのSIPでトラップ型データを受信をして系切替中の受信担保をする

FIPでトラップ型データを受信するため系切替中のトラップ型データは受信できない

Hinemosマネージャの系切替中でも、重要なトラップをロストせずに監視© 2022 NTT DATA Intellilink Corporation

14

⑤オンライン系切戻しによる障害復旧

簡易運用・オンライン復旧

片系運転からの両系運転への切戻しも、オンラインで実現
障害時の自動切替が出来ても、両系運転に切戻す際に停止が発生しては意味がない
オンラインでスタンバイ組込み完了

マスタ

障害マスタ

障害復旧後

スタンバイ

マスタ

自動切替
空データ
オンライン同期

片系運転状態で復旧コマンドを実行

障害発生から障害復旧まで、全てをシステムに影響なく無停止で対処！
© 2022 NTT DATA Intellilink Corporation15

⑥1コマンドによる系切戻し

簡易運用・オンライン復旧

複数の障害パターンに対して、提供する復旧コマンドは１つのみ
一般的な運用管理製品のクラスタ構成

Hinemosミッションクリティカル構成
Hinemos（マスタ）運用管理製品

運用管理製品クラスタミドル

Hinemos（スタンバイ）

ミッションクリティカル機能

簡単組込共有ディスク

・障害ポイントが多い・対処する操作は障害ポイントによる・複数のエンジニアが必要・Hinemos視点で障害切り分け可・復旧コマンドは1つだけ
・Hinemosエンジニアのみで十分パターンごとの復旧手順書が必要

復旧手順書のパターンは不要

シンプルな手順書かつオペレータでも実施できる簡易操作で復旧が可能© 2022 NTT DATA Intellilink Corporation

16

クラスタ方式からみたHinemosの優位性
Hinemos

一般的なクラスタ方式の製品

費用◎ Hinemosのソフトウェア費用のみ△

クラスタミドル、共有ディスク、構築費用など切替時間〇

素早い切替（１～２分）△

数分～数十分かかるものも監視◎ トラップ型監視のロスト防止機構

×

トラップ型監視はロストジョブ〇〇

ジョブ制御の自動継続

復旧◎ １つの復旧コマンド×

障害パターンごとの復旧方法

クラウド◎ プラットフォーム非依存で全機能を高可用化

×

クラウドにより実現可否・制約がある

保守性◎ ワンストップ保守サポート

×

障害ポイントごとに異なる保守サポート

ジョブ制御の自動継続設計・導入・運用そして費用の全てにおいて優位性がある© 2022 NTT DATA Intellilink Corporation

17活用事例紹介© 2022 NTT DATA Intellilink Corporation

18活用事例紹介 Hinemosのミッションクリティカル機能は、サービス停止が許されない金融系システム、公共系システムを中心に利用が増えています。
 ミッションクリティカル機能を活用した事例を3件、ご紹介します。
システム種別

概要

業種

活用事例
公共系クラウドシステム
1

多段構成とミッションクリティカル機能により、堅牢な運用監視を実現

公共活用事例
金融決済システム
2

金融系基幹システムの運用管理をミッションク
リティカル機能でより強固に金融

活用事例 東急電鉄グループ様
3
共通会計システムミッションクリティカル機能により、クラウド上で高可用な運用管理を提供

サービス© 2022 NTT DATA Intellilink Corporation

19活用事例 1
システム種別

概要

業種

活用事例
公共系クラウドシステム
1

多段構成とミッションクリティカル機能により、堅牢な運用監視を実現

公共活用事例
金融決済システム
2

金融系基幹システムの運用管理をミッションク
リティカル機能でより強固に金融活用事例 東急電鉄グループ様
3
共通会計システムミッションクリティカル機能により、クラウド上で高可用な運用管理を提供

サービス© 2022 NTT DATA Intellilink Corporation20

活用事例 1：
多段構成とミッションクリティカル機能により、堅牢な運用監視を実現

システム種別：公共系クラウ
ドシステム
業種：公共
規模：管理ノード 1,000以上

プライベートクラウド上の多数のシステムをHinemos多段構成とミッションクリティカル機能を使い、安全な運用を提供
堅牢な運用監視

上位マネージャは運用集約として非常に重要なため、ミッションクリティカル機能を採用。高可用性を確保し、堅牢、安全な運用管理を実現

ミッションクリティカル機能

運用負担軽減Hinemosマネージャ

Hinemos
マネージャ

Hinemos
マネージャ

システム毎に監視…

多段構成により、下位マネージャには、詳細情報を蓄積し、上位マネージャには、重要な情報をエスカレーションすることにより、運用管理の負担を軽減

Hinemos
マネージャ

独立性
システム毎に、下位マネージャが管理することにより、運用者の設定ミス/操作ミスの影響を局所化し、他システムに影響を与えない…
プライベートクラウド© 2022 NTT DATA Intellilink Corporation21

活用事例 2
システム種別概要

業種

活用事例
公共系クラウドシステム
1

多段構成とミッションクリティカル機能により、堅牢な運用監視を実現

公共

活用事例
金融決済システム
2

金融系基幹システムの運用管理をミッションク
リティカル機能でより強固に金融

活用事例 東急電鉄グループ様
3
共通会計システムミッションクリティカル機能により、クラウド上で高可用な運用管理を提供

サービス© 2022 NTT DATA Intellilink Corporation

22活用事例 2：
金融決済システムの運用管理をミッションクリティカル機能でより強固にシステム種別：金融決済シ
ステム
業種：金融業
規模：管理ノード 500以上

他社運用管理製品から監視、ジョブを移行するとともに、ミッションクリティカル機能の活用により、高可用かつ低コストな運用管理を実現
高可用性

統合監視
システム

金融決済システムでは、運用管理も高い継続性が求められる。
Hinemosミッションクリティカル機能の活用により、高可用な運用管理を実現している。

連携
ミッションクリティカル機能

既存システム、他システムとの連携

Hinemosマネージャ
Hinemosマネージャ

連携

監視/ジョブイベント集計システム

他社運用管理製品からの移行によりコスト削減

他社運用管理製品から移行
既存システム© 2022 NTT DATA Intellilink Corporation

新規システムを監視するとともに既存監視システム、イベント集計システム、統合監視システムとの連携により、運用管理の一元化を実現

他社運用管理製品から、監視、ジョブをHinemosに移行。
Hinemosのサブスクリプションによりコスト削減を実現。

新規システム23

活用事例 3
システム種別概要業種

活用事例
公共系クラウドシステム
1

多段構成とミッションクリティカル機能により、堅牢な運用監視を実現

公共活用事例
金融決済システム
2

金融系基幹システムの運用管理をミッションクリティカル機能でより強固に金融

活用事例 東急電鉄グループ様
3
共通会計システムミッションクリティカル機能により、クラウド上で高可用な運用管理を提供

サービス© 2022 NTT DATA Intellilink Corporation

24活用事例 3：
東急電鉄グループ様

共通会計システムをAWS上に「Biz∫®」で構築
運用管理をHinemosで実現© 2022 NTT DATA Intellilink Corporation

25

システム種別：東急電鉄様
共通会計システム
業種：サービスまとめ© 2022 NTT DATA Intellilink Corporation26

まとめ 本セッションでは、運用管理機能の多重化の必要性、大規模基幹システムの運用に有効な、Hinemosミッションクリティカル機能、および、大規模基幹システムの運用の課題に対して、Hinemosで解決した事例を紹介させていただきました。
 事例としては、公共クラウドシステム、金融決済システム、および、東急電鉄グループ様共通会計システムの3件をご紹介させていただきました。
 大規模基幹システムの運用管理に、ぜひHinemosをご活用ください。

© 2022 NTT DATA Intellilink Corporation27

© 2022 NTT DATA Intellilink Corporation