201911版

詳細解説！Hinemos ver.6.2の全体像
NTTデータ先端技術株式会社© 2019 NTT DATA INTELLILINK Corporation

はじめに• 本セクションでは、以下のような疑問をお持ちの方をターゲットにHinemos ver.6.2が持つ幅広い機能を紹介します。
• Hinemosって具体的に何ができるの？
• 過去のHinemosは知っているけど、今のHinemosはどう進化したの？
• 他の運用管理製品とどう違うの？

共通基本• 機能だけでなく、Hinemosの特徴や実際に使用する際のTIPSなども盛り込んでHinemos ver.6.2の全体像を紹介します！

© 2019 NTT DATA INTELLILINK Corporation2

1. Hinemosとは2. 共通基本機能
3. 収集・蓄積機能
4. 監視・性能機能
5. 自動化機能
6. 商用システム運用を実現するHinemos
7. エンタープライズ機能
8. クラウド・VM管理機能
9. ミッションクリティカル機能
10.Hinemosの構成© 2019 NTT DATA INTELLILINK Corporation

3

Hinemosとは© 2019 NTT DATA INTELLILINK Corporation

4

統合運用管理を実現する機能をワンパッケージで提供
収集・蓄積機能

監視・性能機能

自動化機能

構築自動化
環境構築の一連の作業を定型化
収集
管理対象機器のあらゆる情報を収集

監視システム稼働状況確認、異常検知を実現

蓄積
収集したデータを蓄積管理

性能システム稼働状況の可視化を実現

業務自動化(ジョブ管理)
システム運行処理を一元的に管理運用自動化(Runbook Automation）
確認・判断を含む運用プロセスを自動化

共通基本機能リポジトリ
管理対象システムの構成、マシン構成の統合管理を実現

通知
運用結果に応じたアクションを自動で実行

アカウント
Hinemosを操作するユーザ権限をロール・設定単位で指定© 2019 NTT DATA INTELLILINK Corporation5

カレンダ
予め定めたスケジュールに応じた運用自動化を実現

共通基本機能© 2019 NTT DATA INTELLILINK Corporation6

共通基本機能 概要
統合運用管理を実現するための、シームレスな機能間連携を実現

収集・蓄積参照共用利用

監視・性能相互連携参照
共用利用

自動化
相互連携参照共用利用

共通基本
リポジトリアカウント© 2019 NTT DATA INTELLILINK Corporation

通知

7カレンダリポジトリ機能
管理対象機器（ノード）を利用用途でグルーピング（スコープ）可能です
スコープ設定例

スコープの多段定義が可能
ユーザ定義のグループ階層

OS

Windows
Windows
Server 2008

コールセンタ

営業支援

端末

端末

サーバ
Windows
Server 2012

ノードの複数所属が可能

業務AP

監視・ジョブ実行対象にスコープ指定が可能

サーバ

論理的なグループ単位で監視・ジョブの設定が可能

DB

複数ノードに対する同一の監視要件を、1設定に集約可能© 2019 NTT DATA INTELLILINK Corporation

8

リポジトリ機能 構成情報管理
管理対象ノードのデバイス情報のみならず、パッケージ情報・プロセス情報の取得・履歴管理が可能です
情報活用

情報得

◆変更の通知・履歴確認

デバイス情報条件検索

過去時点の状態を確認

監視に必要なデバイス情報の取得

活用構成情報◆検索と見える化
RedHat And Tomcat 5

PKG
Ver.1PKG
Ver.1

パッケージ・プロセス情報を含む各種構成情報の取得

PKG
Ver.2

PKG
Ver.2

変更時にアラート

GUI表示

CSV出力

リポジトリ登録

リポジトリ
DB

構成情報管理の工数削減

早急な脆弱性点検が可能に構成変更のサイクルを実現

メンテナンスが漏れがちな構成情報もHinemosが自動で取得

定期・不定期に発生する脆弱性問題に対する点検が検索するだけで実現

対象特定⇒構成変更⇒結果確認のサイクルを全てHinemosで実現© 2019 NTT DATA INTELLILINK Corporation

9通知機能 概要
Hinemosの各機能は、実行結果を様々な形で通知可能です
監視結果に連動して処理実行

監視コンソールで視覚的に通知監視結果を外部に通知▲✔
✔

syslog

瞬間的な異常やメッセージラッシュにおける、通知抑制が可能
瞬間的な異常メッセージラッシュ
INFO service start
ERROR diskio /hoge
ERROR diskio /hoge
ERROR diskio /hoge
ERROR diskio /hoge
ERROR diskio /hoge

連続エラーで無ければ通知しない© 2019 NTT DATA INTELLILINK Corporation

10

初回通知後は一定時間は通知しない

通知機能

イベント情報の確認画面

イベント情報を確認する画面の柔軟なカスタマイズが可能です
ユーザ拡張イベント

監視履歴[イベント]ビューにユーザ定義列を追加可能
・最大40項目
・編集可/不可を設定可
・デフォルト値の設定可
・APIで投入・イベントカスタムコマンドで使用可

レイアウトカスタマイズ

リッチクライアント、Webクライアントの単位で列の表示順・幅を指定可能

表示に反映

必要最低限の列のみ表示
見たい順に列の並び替えが簡単に実現

レイアウト設定© 2019 NTT DATA INTELLILINK Corporation

11

通知機能

イベント情報を使ったユーザー操作と履歴管理

イベント情報を利用したユーザ判断を伴った操作が可能です③コマンド選択＆実行

ユースケース
インシデント管理
システム

ユーザ操作によるイベント情報のシステム連動が容易に問題管理
システム⑤実行履歴の保存④実行結果の確認②イベント選択①Hinemosプロパティでコマンド定義© 2019 NTT DATA INTELLILINK Corporation

12

カレンダ機能 概要
業務の営業日・メンテナンス日に合わせたカレンダ定義が可能です
定期的なカレンダ・年月日、曜日の定期ルールで指定可能
・前後日指定で、日数ずらした定義可能・非稼働日の場合の振替日・振替回数を指定可能
不定期なカレンダパターン
・定期的ではない祝日パターンを指定可能
・会社の創立記念日、緊急メンテナンス日も指定可能
稼動スケジュールを視覚的に確認可能

昼間・夜間の異なる運用を実現可能

監視・ジョブ・通知などの各機能で指定可能

複数テナント間でのカレンダ共有・非共有が可能© 2019 NTT DATA INTELLILINK Corporation

13収集・蓄積機能© 2019 NTT DATA INTELLILINK Corporation

14収集・蓄積機能概要

運用状況の把握・分析や、運用の効率化・自動化など必要となる、ありとあらゆるデータの収集・蓄積管理を実現可能です
性能グラフ

検索

性能・リソース値

searchビッグデータ
基盤

システムログアプリログ

機械学習・AI基盤

NWパケットセンサデータ
用途を制限せずあらゆる情報を収集

Hinemosに蓄積し様々な角度から見える化

収集したデータを簡易に外部連携し利活用

収集蓄積転送© 2019 NTT DATA INTELLILINK Corporation

15収集・蓄積データ分析基盤への転送

収集データを転送しSWH/ビックデータ分析基盤へ連携可能です

SIEM、予兆検知、マーケティング分析などの新たなデータ活用へ
クラウド上のDWH/BigDATAサービス

既存のデータ分析基盤(等)© 2019 NTT DATA INTELLILINK Corporation16

監視・性能機能© 2019 NTT DATA INTELLILINK Corporation

17

監視機能
多種多様な監視をGUIから簡易に設定し、簡単に実行できます
監視項目

概要

監視項目

概要

PING監視対象機器へのping応答の有無により死活状態を監視します。

SQL監視

DBサーバの応答有無や応答時間、SQLレスポンスの内容から状態を監視します。

プロセス監視起動しているプロセス数から状態を監視します。

JMX監視

Javaアプリケーションのヒープメモリサ
イズ等の状態を監視します。

リソース監視対象機器のリソース情報を取得してその状態を監視します。

ログファイル監視

特定のログファイルに出力されたメッセージを監視します。

サービス・ポート監視

特定のサービス・ポートについて、応答有無や応答時間から状態を監視します。

システムログ監視

各種OSのシステムログに出力されたメッセージを監視します。

Windows サービス監視

Windows サービスの状態を監視します。

ログ件数監視指定のメッセージを含むログの一定期間の出力量を閾値監視をします。

Windowsイベント監視

Windowsイベントログに出力されたメッセージを監視します。

相関係数監視2値の相関係数に対して閾値監視をします。

Hinemosエージェント監視

Hinemos エージェントの死活状態を監視します。

収集値統合監視指定した複数の条件を満たすか否かを監視します。

HTTP監視Webサーバの応答有無や応答時間、レスポンスの内容から状態を監視します。

バイナリファイル監視

バイナリファイルを監視します。

HTTPシナリオ監視

複数のURLへ順にアクセスし、想定されるアクセスが可能であるかを監視

パケットキャプチャ

パケットキャプチャを監視します。

SNMP監視汎用的なプロトコルSNMPの応答の内容を監視します。

カスタム監視ユーザ定義のコマンド/スクリプトの実行結果(数値・文字列)を監視します。

SNMPTRAP監視

対象機器からSNMPTRAPを受信することで、対象機器の状態を把握します。

カスタムトラップ監視

json形式でHinemosマネージャに送信された情報(数値・文字列)を監視します。

© 2019 NTT DATA INTELLILINK Corporation

18

監視機能

監視結果の視覚的な確認（ノードマップ）

監視結果は、グラフィカルに確認可能

監視結果の詳細までGUI上で確認可能

レイヤ2/レイヤ3の自動結線も可能

ノードの状態をマップ上で確認© 2019 NTT DATA INTELLILINK Corporation

19

監視機能

業務カレンダ制御

高度なカレンダ設定が、監視設定や通知設定に適用可能です
毎月第3月曜日のみ稼働

稼働スケジュールを視覚的に確認

毎月最終日のみ稼働
平日09:00～19:00のみ稼働
所定のメンテナンス日のみ非稼働

日中帯と夜間の異なるワークロードに対する制御も容易に実現
夜間帯

日中帯

バッチ処理
監視A

監視B

通知A

通知B

一般的にジョブ管理製品が持つ高度なカレンダ制御を監視機能でも利用できます。
© 2019 NTT DATA INTELLILINK Corporation

20

性能グラフ機能機能概要システムの「過去」から「未来」までの見える化を実現可能です

折れ線グラフ積み上げ面グラフ

Hinemosクライアント上でシステムの傾向分析を効率的に行えます。

散布図・相関係数
例．CPU使用率とHTTPのレスポンスタイムの相関

円グラフ
例．特定の期間で情報・警告・危険イベント

期間表示
例．特定の期間の情報・警告・危険イベント© 2019 NTT DATA INTELLILINK Corporation

21

性能グラフ機能

将来予測と変化量によるグラフ表示

収集したデータを元に将来予測値や変化量からの分析が可能です
今は正常だが普段の傾向との差を視覚的に確認

１ヶ月後に異常予測値超えが多発し急降下

将来的な異常を視覚的に確認© 2019 NTT DATA INTELLILINK Corporation

次の値を予測し予想以上の変化を検知

22

自動化機能© 2019 NTT DATA INTELLILINK Corporation

23

自動化機能 環境構築から業務処理、オペレータによる運用までを自動化
構築自動化（環境構築）

サーバ環境構築のセットアップといった一連の作業を定型化
複数環境に対しても一括で環境構築設定ファイルの配布・置換といった定型操作も簡単に設定

業務自動化（ジョブ管理）サーバ間を跨る処理フロー（ジョブネット）を一元管理
即時実行・スケジュール起動・他システム連動など様々な起動契機に対応
48時間カレンダ対応し運用時刻変更による特異日試験など運行管理に必要な機能を提供

運用自動化（Runbook Automation）
運用手順書(Runbook)の自動化(Automation)を支援人が行う確認・判断作業から障害確認まで簡単に設定可能
ジョブ管理と同一インタフェースで提供© 2019 NTT DATA INTELLILINK Corporation24

業務自動化(ジョブ管理機能)
複数のサーバを跨る一連の処理フロー（ジョブネット）を一元管理できます
業務・ミドルウェア処理

連続・複雑な操作

定時処理/深夜処理
zzz...

Job2
Job4

Job1
Job3

大量ノードへの一括実行

処理結果の確認
障害

Job2
Job4

Job1

Job1

Job3

ジョブの一元管理© 2019 NTT DATA INTELLILINK Corporation

Job1

・システム運行に必要な処理(ジョブ)の管理
・システム異常発生時に必要な処理(ジョブ)の管理
25

業務自動化 ジョブ管理機能

効率的なジョブ設定の管理

処理フローは「ジョブネット」として階層的にグループ化できます
JobNetC

JobNetA
Job1-1

Job1-2

Job3-1

Job3-3

JobNetB
Job2-1

Job3-2Job2-2

個々の処理（ジョブ）単位の制御も充実



正常・異常終了の判定

待ち条件・実行契機の制御



実行結果の通知設定© 2019 NTT DATA INTELLILINK Corporation

26

ジョブネットで定義した
実行したい処理の流れを画面でそのまま確認可能業務自動化 ジョブ管理機能 実行契機
ジョブネットは任意の契機で実行可能です
即時実行（手動実行）
Hinemos
クライアントカレンダ
スケジュール

ジョブ実行

スケジュール実行（定期実行）

ファイル
チェック

ジョブ通知

障害

監視・ジョブの実行結果© 2019 NTT DATA INTELLILINK Corporation

ファイル（作成、変更、削除）
27

API/コマンドライン

業務自動化 ジョブ管理機能 ジョブネットの作成・確認
実行中の状態・実行結果もGUIから視覚的に確認可能です
ジョブネットの実行状態を視覚化
正常・異常終了をボックスの色で判別
ビューア画面から再実行操作が可能
後続ジョブが動く
条件を線の色で判断
実行中・結果の詳細情報を表示© 2019 NTT DATA INTELLILINK Corporation28

業務自動化

ジョブ機能の進化

他社製品からのジョブ定義移行も実現できる多彩な機能拡充を実施
バージョン

バージョン

主な機能追加・改善

Hinemos ver.3.2• ジョブのアクセス制御• ジョブセッション管理の改善• 起動コマンドの制約緩和

Hinemos ver.4.0• 「Hinemos ジョブマップ（TM)」機能• Hinemosエージェント通信機構の改善（Webサービス化）• ジョブ機能の性能改善（表示/登録の高速化、同時実行数の向上）

Hinemos ver.4.1

••
•
•
•
•
•
•
•
•
••
•

ジョブ種別（参照ジョブ）
実行契機（ファイルチェック）ビュー（スケジュール予定）
エージェント単位の多重度実行制御
編集モード
内部時刻リセット日跨ぎ対応（48時間カレンダ）
スケジュールの繰り返し実行対応（最小実行間隔を5分へ）
ジョブ終了方法の改善（実行中のジョブに対し、シグナル送信で終了可能に）
ジョブ実行優先度
ジョブの状態の詳細化
ジョブの待ち条件の改善（先行ジョブのリターンコードを利用可能に）
ジョブ機能の性能改善（表示/登録の高速化）© 2019 NTT DATA INTELLILINK Corporation

29

主な機能追加・改善

Hinemos ver.5.0• ジョブの繰り返し実行• ジョブのテスト実行• Hinemosエージェント停止時のジョブステータス遷移（危険に遷移）• コマンドの標準出力/標準エラー出力を通知に利用可能• コマンドにノードプロパティを利用可能• ジョブの実行時間を表示• ノード変数をジョブ変数に利用可能• ジョブの条件改善（「セッション開始後の時間」を追加）• ジョブスケジュールの繰り返し間隔の改善

Hinemos ver.6.0

•
••
•
•
•
•
•

RBA対応
Hinemos時刻の追加（運用時刻の設定）
スクリプト配布機能
承認ジョブの追加
監視ジョブの追加OS環境変数定義
ランタイムジョブ変数の追加
順次リトライの動作改善

Hinemos ver.6.1••••

実行時間予測による終了遅延検知
セッションを跨いだイベント連携
待ち条件のIf-Else対応
条件指定の繰り返し実行

Hinemos ver.6.2• キュージョブによるジョブ同時実行制御

Hinemos ver.6.2新機能

商用システム運用を実現する
Hinemos© 2019 NTT DATA INTELLILINK Corporation

30

様々な運用管理の要件

大規模・複雑化するシステムを効率的に運用したい

クラウドや仮想化環境を効率的に運用したい

ミッションクリティ
カルシステムの運用を実現したい© 2019 NTT DATA INTELLILINK Corporation31Hinemosによる解決

エンタープライズ機能

クラウド・VM
管理機能

ミッションクリティカル機能© 2019 NTT DATA INTELLILINK Corporation

32

エンタープライズ機能© 2019 NTT DATA INTELLILINK Corporation

33

エンタープライズ機能
商用システムの効率的な運用を実現するための、運用状況可視化、運用設定管理の容易化を実現します
Hinemos
Utility

Hinemos
ジョブマップ■Hinemosジョブマップ

ジョブフローを可視化
直感的な操作で運用作業を容易に設定可能■Hinemosノードマップ

監視対象を2次元マップで可視化■Hinemosレポーティング

監視結果やジョブ実行状況をレポート出力■Hinemos Utility

使い慣れたExcelでHinemosの設定を操作
設定内容の一括入出力が可能

Hinemos
レポーティング© 2019 NTT DATA INTELLILINK Corporation■ユーティリティツール
インシデント管理ツールとの連携や、HinemosのCUI操作、メンテナンス作業、バージョンアップ作業の効率化を実現

Hinemos
ノードマップ34

Hinemosレポーティング機能
Hinemos上の運用データからレポートを作成し、配信可能です
レポートの自動生成・配信

運用結果を、定義したスケジュールに基づき自動で生成・メール配信

テンプレートの活用

必要なレポートフォーマットを、テンプレートを用いて容易に指定可能
テンプレート
性能情報

監視情報

ジョブ情報

説明

ノード概要

各性能情報のカテゴリのうち、代表的なグラフを表示

ノード詳細

全ての性能情報のグラフを表示

ノード概要

イベントの重要度比率や日別件数をグラフで表示

ノード詳細（表）イベントの内容をリストで表示

ノード詳細（グラフ）

数値監視（リソース監視を除く）の結果をグラフで表示

セッション

ジョブの起点単位の終了状態をリストで表示

ジョブ詳細

ジョブ毎の実行状態をガントチャートで表示

ノード詳細

ノード毎のジョブの実行状態をガントチャートで表示

AWSクラウド性能情報・VMware vSphere仮想化性能情報のレポートテンプレートも提供© 2019 NTT DATA INTELLILINK Corporation35

Hinemos Utility

Excelインポート・エクスポート機能

Hinemosのジョブや監視などの設定をExcelで一括編集できます■ Hinemosクライアントからインポート・エクスポート
・多数の設定を一括でインポートし、設定に要する時間を短縮
・設定を一括でエクスポートし、設定内容をスナップショットとして保持や設計資料へのフィードバックに利用可能■ 差分チェック
・設定情報の差分の有無や差分内容の検出により安全な変更作業を実現
一括編集

スナップショット
資料化

差分チェック
Hinemos
マネージャ

一括保存
Microsoft Excel© 2019 NTT DATA INTELLILINK Corporation36

クラウド・VM管理機能© 2019 NTT DATA INTELLILINK Corporation37

VM・クラウド管理機能
仮想化・クラウド環境の統合管理・一元管理を実現するための幅広い機能をご利用いただけます
リソース変更の自動検出・追随

クラウド管理プラットフォーム監視専用リソース監視

VM管理
クラウド運用を支える必須の機能© 2019 NTT DATA INTELLILINK Corporation

リソース制御課金配賦管理38

クラウド・仮想化運用を効率化する専用機能

単一画面でハイブリッドクラウド環境を俯瞰的に管理可能
AWS© 2019 NTT DATA INTELLILINK Corporation

Azure

39

VMware Hyper-V

プラットフォーム監視アカウント登録だけでVM・クラウドの基盤の正常性を監視可能です
仮想化環境

クラウド環境
App

App

App

プラットフォーム

ハイパーバイザサーバ

データストアクラウド
ヘルスダッシュボードサイト

API

システム障害発生時にアプリケーションの問題かプラットフォームの問題かを簡単に切り分けできる

プラットフォームのステータス確認© 2019 NTT DATA INTELLILINK Corporation

40

専用リソース監視
モニタリングサービス/API経由とOS直接取得の情報を同一インタフェースでシームレスに監視できます
Hinemosのカバー範囲
管理リソース値の分類

モニタリングサービス/APIのカバー範囲

VM環境の代表例

CPU使用率
PaaSのリソース値
CPU不足量ELB/RDS等
バルーン使用量
EBSのリソース
データストア使用率
専用サービス・ツールが必要
CPU使用率sys/usr/iowait等内訳
メモリ利用率バッファ、スワップI/O
ファイルシステム使用率

OSから直接取得する必要のある範囲

必ずセットで必要になる

クラウド環境の代表例

OSの中の情報はモニタリングサービス/API経由で取得できない© 2019 NTT DATA INTELLILINK Corporation

41

作り込み不要で収集/監視/蓄積

レポート
テンプレート有マスタ編集可でメトリクス追加

リソース監視で項目を選ぶだけ

課金配賦管理
任意のスコープ単位でアラートだけでなく課金配賦を管理可能です
課金アラートの限界

手動分析の限界
物理リソースと論理リソースのマッチングが必要になる• アカウント単位・サービス単位では詳細分析に足りない• 最新情報だけでなく日々の変化や日々の増分が知りたい• 足し合わせて1サーバ料金に• AutoScalingの配慮も必要

ディスク料金

一般には個別にリポジトリ管理が必要

知りたいのはWebサーバのコストは？
といった論理レイヤ

Hinemos課金管理機能
システム全体Webサーバ群

NW IN料金NW OUT料金
CPU料金

指定のグループ単位だけの料金把握

APサーバ群
DBサーバ群• 日単位で最新情報・増分情報からアラート• タグを使って任意のスコープの料金にカテゴライズといった調整可能© 2019 NTT DATA INTELLILINK Corporation

配賦管理結果からのレポート化
42

リソース制御クラウドでは不要な時間を止めることでコスト削減できます
基本的なクラウドコストの考え方 ： インスタンス数 × インスタンスタイプ × 起動時間
インフラコスト削減
・土日を停止できれば
月–金→ 5日/7日

70％・さらに起動時間を8時～24時にすれば

月 - 金 & 8:00-24:00→(5日/7日)x(16時間/24時間)50％

業務処理 と連動したリソース制御 が簡単に実現
NW閉塞

インスタンス停止

サービス停止システム停止でコスト削減スナップショット

GUIで制御ジョブ作成
インスタンス
起動© 2019 NTT DATA INTELLILINK Corporation

バッチ処理

サービス開始43

NW開放ミッションクリティカル機能© 2019 NTT DATA INTELLILINK Corporation

44

ミッションクリティカル機能
ミッションクリティカルシステムの安定的な統合運用管理に必要となるHinemos自身の冗長化を、容易に実現します
Hinemosマネージャ(Master)

クラスタリングソフト
共有ディスク不要

Hinemosマネージャ(Standby)

死活監視（ハートビート）

オンプレ・仮想化・クラウド
どこでも冗長化が可能

同期レプリケーション(*)（*）Linux版の場合のアーキテクチャ。

ワンパッケージ
ワンストップサポート

シンプルな構成・低コスト
ワンパッケージでHinemosの冗長化を実現© 2019 NTT DATA INTELLILINK Corporation

45

Hinemosの構成© 2019 NTT DATA INTELLILINK Corporation46

Hinemosの基本構成
 Hinemosは３つのコンポーネントから構成
運用管理サーバ(Hinemosマネージャ)
管理DB
稼動監視
ジョブ実行指示

設定追加・変更
結果の表示

ログ送信
トラップ送信管理対象システム

運用管理端末(Hinemosエージェント)(Hinemosクライアント)© 2019 NTT DATA INTELLILINK Corporation47

バージョン互換性
 Ver.6よりバージョン互換性の対応を進めます。

ver.6.2
マネージャ

接続可能

ver.6.0
エージェントVer.6.0エージェントの機能範囲で利用可

ver.6.1
エージェントVer.6.1エージェントの機能範囲で利用可

ver.6.2
エージェントVer.6.2エージェントの機能が全て利用可

新バージョンの新機能を利用したい場合に管理対象サーバに導入したHinemosエージェントをそのままでHinemosマネージャのみのバージョンアップで対応できます。
© 2019 NTT DATA INTELLILINK Corporation48

© 2019 NTT DATA INTELLILINK Corporation