【osc2014】監視もジョブも、クラウド管理も「hinemos」で

Copyright © 2014 NTT DATA Corporation

株式会社ＮＴＴデータ基盤システム事業本部

石田純一

監視もジョブも、クラウド管理も「Hinemos」で

2 Copyright © 2014 NTT DATA Corporation

自己紹介

氏名：石田純一

所属：株式会社NTTデータ Hinemos担当

普段はHinemosの開発・製品保守・導入支援に関わっています

最近は、Hinemosの製品プロモーションも担当しています

Hinemos開発日記http://d.hatena.ne.jp/hinemos_dev/

Hinemos公式twitter @Hinemos_INFO


お知らせ：Hinemos統合管理[実践]入門

Hinemosの雑誌連載が開始しました！

Software Design 新連載「Hinemosで学ぶジョブ管理超入門」茶納佑季、眞野将徳、山本未希著定価: 本体1,220円＋税 B5判: 204ページ出版社: 技術評論社発売日： 2014/9/18


お知らせ：Hinemos書籍

Hinemosの書籍が出版されました！

Software Design plusシリーズ「Hinemos 統合管理［実践］入門」倉田晃次，澤井健，幸坂大輔著定価: 本体3,700円＋税大型本: 520ページ出版社: 技術評論社発売日： 2014/8/5


目次

1. 運用管理分野のOSS最新動向

2. 統合運用管理ソフトウェア「Hinemos」とは

3. Hinemosの導入

4. ノード管理

5. 状態監視

6. パフォーマンス管理

7. ジョブ制御

8. クラウド管理

9. Hinemos ver.5.0

10.おわりに

Copyright © 2014 NTT DATA Corporation 6

1. 運用管理分野のOSS最新動向


運用管理分野のOSS最新動向

ZABBIX Nagios

Sensu

OpenNMS

Xymon

Ganglia JobScheduler

監視ジョブ

cron

タスクスケジューラ


Hinemosを選ぶ理由

• ワンパッケージ

• 監視もジョブも、ワンパッケージで実現可能

• ツール間の連携方式を考える必要無し

• 内部DB含め、オールインワンでインストール

• シンプル

• 設計から、構築、運用に至るまで、簡単

• 豊富な情報量

• 日本語ドキュメントが豊富

• ドキュメント通りにインストールすれば、即利用可能


2. 統合運用管理ソフトウェア「Hinemos」とは


Hinemosとは

状態監視

ジョブ制御

ノード管理

パフォーマンス管理

システム運用管理で要求される幅広い機能を備えた統合運用管理ソフトウェア

✔

✔

▲


エンタープライズ領域, ミッションクリティカル領域での要件を満たすハイパフォーマンスな運用管理ツールに成長

Hinemosの歩み

Ver3

Ver4

Ver2

Ver1

2005.08

2006.03

2008.10

2012.04

Ver4.1 2013.10

IPA公募によりHinemos誕生

監視機能充実監視対象プラットフォームの拡張

より進化した稼働状況の見える化より大規模な環境への対応強化

よりスマートな統合運用管理の実現

クラウド管理の実現ジョブ管理の進化


数字で見るHinemos

460,000+ Downloads

500+ Systems

3８ Partners

3５ Versions

1000+ Nodes


Hinemosのコンセプトと4つの特徴

1. 監視・ジョブの機能を併せ持つ

2. 複雑化するシステムを一元管理できる

3. シンプルで直観的に操作できる

4. 日本製オープンソースソフトウェアである

本当に必要な機能をシンプルで使いやすい操作性と共に安価に提供する


管理DB

Hinemosの基本構成

Hinemosを構成する3つのコンポーネント

運用管理サーバ (Hinemosマネージャ)

管理対象システム (Hinemosエージェント)

運用管理端末 (Hinemosクライアント)

設定追加・変更

結果の表示

稼動監視ジョブ実行指示

ログ送信トラップ送信


対応プラットフォーム

サーバ

Red Hat Enterprise Linux CentOS Oracle Linux Windows Solaris HP-UX AIX

ハイパーバイザ

VMware ESXi

KVM XenServer Hyper-V Oracle VM

その他

ネットワーク機器アプライアンス製品

多種多様な環境をHinemosで一元管理可能

クラウド

Amazon Web Services BizホスティングCloudn

Microsoft Azure Managed Cloud Platform BizホスティングEnterprise Cloud


3. Hinemosの導入


監視ソフトウェアの環境構築

Hinemosのインストール

Hinemosの起動 !!!

OSインストール

OSの初期設定

OS同梱パッケージをインストール

コマンド1つでインストールできた！

OSに同梱されてないパッケージは不要

リポジトリサーバは不要！

手順書が日本語！

インストーラ同梱物が全て保守サポート対象なので

安心！

DBの初期設定もインストーラがやってくれる！

・インストール手順書も、パッケージも、全てSourceforge.jpからダウンロード・内部DBのインストールや、面倒な初期設定は、全てHinemosのインストーラ内で実施・パッケージのビルドは不要！

導入作業の流れ

Hinemosは、簡単に導入できます


監視ソフトウェアの環境構築

以下環境でHinemosをインストールし、 Ping監視を設定してみたところ…

インターネット作業端末(Windows) インストール先サーバ(Linux)

SSH HTTP

※インターネット接続無し

サーバルーム

※インターネット接続有

ICMP

検証環境の概要

作業者 Hinemos v4.1

ソフトウェアX

担当者A (Hinemosインストール経験あり、監視ソフトウェアXインストール経験なし)

15分 (参考)

420分

担当者B (Hinemosインストール経験なし、監視ソフトウェアXインストール経験なし)

78分 547分

インストール手順探し、パッケージの準備、初期設定の作業時間を含む


4. ノード管理


Hinemosによるノード管理

オンプレミス環境仮想化環境クラウド環境

Hinemos マネージャ

ノード登録

運用管理対象の管理情報は、ノードとして登録します

ハードウェア情報仮想化関連情報 OS情報デバイス情報ネットワーク情報管理者情報

Hinemosを用いた運用管理のスタートライン


ノードをグルーピングする概念「スコープ」

ユーザ定義のグループ階層

OS

Windows

Windows 7

Windows Server 2012

業務

コールセンタ営業支援

端末端末

サーバサーバ

AP DB

※Hinemosの機能（監視、ジョブ等）ではスコープ単位で設定・実行する

ノードは、スコープとしてグルーピングします

システム内での利用用途、管理手法、関係性等に応じてスコープを定義


ノード・スコープの登録

プラットフォームをプルダウンで指定

IPアドレスを設定

ホスト名を設定

SNMPを用いた機器情報の一括取得が可能

ノードの登録画面

スコープの登録画面

必須項目はピンク色で表示

ファシリティID ファシリティ名

を設定

設定画面

誰でもできる！

ノードやスコープの登録は、GUIから容易に行えます


5. 状態監視


Hinemosを用いた監視の概要

スコープA(Linux)

ノードA

1. リポジトリ設定 3. 監視設定

監視設定A (システムログ監視)

監視設定B (Ping監視)

監視設定C (Windowsサービス監視)

スコープB(Windows)

ノードC 監視設定D

(Windowsイベント監視)

通知A

通知B

通知C

2. 通知設定

ノードB

ノードD

1. リポジトリ設定(ノード・スコープ) 2. 通知設定 3. 監視設定

スコープC(サーバ機器)

設定例

Hinemosの監視は、3つの要素で実現します


Hinemosによる状態監視

ITシステムの稼働状況を確認するために必要十分な様々な種類の監視を完備しています

監視種別

PING監視

システムログ監視

Hinemosエージェント監視

HTTP監視

プロセス監視

リソース監視

SQL監視

SNMP監視

SNMPTRAP監視

ログファイル監視サービス・ポート監視

カスタム監視

Windowsサービス監視 Windowsイベント監視選択

・監視対象

ノード

・通知設定

監視設定

ノード

・監視間隔:○分・判定条件（閾値指定)

監視設定毎に、判定条件(閾値)を考えればOK！

複雑難解な条件式


監視機能の詳細

監視項目概要

PING監視対象機器へのping応答の有無により死活状態を監視します。

プロセス監視起動しているプロセス数から状態を監視します。

リソース監視対象機器のリソース情報を取得してその状態を監視します。

サービス・ポート監視特定のサービス・ポートについて、応答有無や応答時間から状態を監視します。

Windows サービス監視 Windows サービスの状態を監視します。

Hinemosエージェント監視 Hinemos エージェントの死活状態を監視します。

HTTP監視 Webサーバの応答有無や応答時間、HTTPレスポンスの内容から状態を監視します。

SQL監視 DBサーバの応答有無や応答時間、SQLレスポンスの内容から状態を監視します。

SNMPTRAP監視対象機器からSNMPTRAPを受信することで、対象機器の状態を把握します。

システムログ監視各種OSのシステムログに出力されたメッセージを監視します。

ログファイル監視特定のログファイルに出力されたメッセージを監視します。

Windowsイベント監視 Windowsイベントログに出力されたメッセージを監視します。

SNMP監視汎用的なプロトコルSNMPの応答の内容を監視します。

カスタム監視ユーザ定義のコマンド/スクリプトの実行結果を監視します。


監視設定の登録

プルダウンメニューラジオボタンが使えて

簡単！


プルダウンで監視対象リソース

を選択

（例）リソース監視

「リソース監視」を選択

監視対象を指定

判定閾値を入力

利用する「通知設定」を

選択

監視設定の登録は、GUIから容易に行えます


監視コンソールで視覚的に通知

監視結果の通知

Hinemosマネージャ

イベント通知ステータス通知

ジョブ通知コマンド通知

監視結果に連動して

処理実行

監視結果を外部に通知

メール通知ログエスカレーション通知

✔

✔

▲

syslog

監視結果は運用者に様々な手段で通知できます


通知設定の定義

重要度変化後の初回通知(赤丸部分に数値を設定) 同じ重要度の監視結果が○回以上連続した場合に初めて通知する重要度変化後の二回目以降の通知(以下から選択) ・常に通知する・前回通知から○分間は同一重要度の通知はしない・通知しない

1. 通知するタイミングを定義

2. 通知実施時に実行する動作（コマンド）を、監視結果の重要度毎に定義

情報：実効ユーザ, 実行コマンド警告：実効ユーザ, 実行コマンド危険：実効ユーザ, 実行コマンド不明：実効ユーザ, 実行コマンド

複雑な条件式を頑張って考えなくても大丈夫！

複雑難解な条件式

（例）コマンド通知の場合

通知設定は、簡単に定義できます


通知設定の登録


条件式を書く必要無し

ラジオボタンで選択

安心！

設定画面

通知設定は、簡単に登録できます

登録済の推奨設定も、すぐに使えます


6. パフォーマンス管理


Hinemosによるパフォーマンス管理

管理対象の情報を定期的に収集・蓄積し、グラフ化・エクスポートできます

パフォーマンス

CPU

メモリ

ディスク

ネットワーク

ファイルシステム

PING応答時間

HTTP応答時間

SQL実行結果

サービス・ポート

応答時間

プロセス数

ユーザ定義コマンド

実行結果


Webサーバ応答時刻のグラフ

CPUコア別の使用率のグラフ

Hinemosによるパフォーマンス管理

多種多様なシステムリソースを集約し

容易に性能分析できます

Webサーバの応答遅延

同一時刻にサーバのCPUが急騰!!

グラフ表示


7. ジョブ制御


Hinemosによるジョブ制御

多種多様な環境に対し実行が必要なジョブを一元管理できます

• システム平常運行に必要な処理

• システム異常発生時に必要な処理

大量ノードに対する処理

連続・複雑な処理

実行結果の管理

定時実行

Job1 Job4

Job3

Job2

Job1 Job4

Job3

Job2 障害

Job1

Job1

zzz...

細やかなカレンダ制御

多様な実行契機

Job1

日月火水木金土1 2 3

4 5 6 7 8 9 1011 12 13 14 15 16 1718 19 20 21 22 23 2425 26 27 28 29 30 31

第3月曜日のみ実行したい

障害


Hinemosを用いたジョブの概要

Hinemosのジョブ設計における3ステップ

スコープA(Linux)

ノードA

1. リポジトリ設定 3. ジョブ設定

ジョブ設定A

ジョブ設定B

ジョブ設定C

スコープB(Windows)

ノードC ジョブ設定D

通知A

通知B

通知C

2. 通知設定

ノードB

ノードD

1. 「ノード」「スコープ」を定義(リポジトリ設定) 2. 「通知」設定を定義 3. 「ジョブ設定」を定義(ジョブ実行対象「スコープ」、実行コマンド、「通知」方式を指定)

スコープC(サーバ機器)

設定例


ジョブの新規作成

実行処理を定義

実行対象を指定

画面を右クリック

ジョブは、GUIから容易に設定可能です


ジョブの実効対象の設定

ジョブはノード単位でもスコープ単位でも実行可能

ジョブの実行対象には定義済みのスコープを利用します


ジョブネット

Job1 Job2-1 Job4 Job3-2

Job3-1

Job2-2

JobNetA

JobNetB JobNetC

待ち条件・実行契機の制御

正常・異常終了の判定

実行結果の通知設定

複数のジョブをジョブネットとして階層的にグループ化できます


実行条件の制御

Job1 Job2-1 Job4

Job3-2

Job3-1 ノードＡ

Job2-1の正常終了と時刻契機によるジョブネット起動

Job2-1の終了を契機とした複数ジョブの同時実行

複数ジョブの終了を契機としたジョブの実行

先行ジョブの正常終了を契機としたジョブ起動

Job2-2 先行ジョブの異常終了を契機としたジョブ起動

ノードＡ

ノードＡ

ノードB

ノードB

細やかな実行条件が定義可能です

「先行ジョブの実行結果」や「時刻」でジョブ実行を制御

Job4-2 先行ジョブの実行結果に依らず終了を契機としたジョブ起動


ジョブ実行時の制御

Job

開始遅延

予定時刻に開始しない予定時刻に終了しない

Job

終了遅延

ジョブの実行遅延を検知した時の動作を指定

Job

保留

ジョブを開始させない

Job

スキップ

コマンドを実行せず終了

×

ジョブ実行時の動作は細かく指定できます

保留スキップ

開始遅延終了遅延


エージェント毎に同時に実行するジョブの数に制限をかけることが可能です

ジョブの多重実行の制御

ジョブ実行依頼




Hinemos エージェント


例）多重度を4とした場合

1つのHinemosエージェントに対して同時実行できるジョブ数が４となる




Wait

Wait

Wait


実行契機

ジョブ実行

即時実行（手動実行）

スケジュール実行（定期実行）

ファイルチェック

ファイル（作成、変更、削除）

スケジュール

カレンダ

監視・ジョブの結果

ジョブ通知

障害

４種類の任意の契機で実行することが可能です

Hinemosクライアント


業務に沿ったジョブの実行

業務スケジュールに合わせた詳細なカレンダ・スケジュール設定が可能

カレンダスケジュール

日跨ぎジョブ（48時間）にも対応

（例）第4月曜日の指定が可能

（例）第4月曜日の3日後という指定が可能


ジョブの実行結果の通知

監視コンソールで視覚的に通知


イベント通知ステータス通知

ジョブ通知コマンド通知

監視結果に連動して処理実行

監視結果を外部に通知

メール通知ログエスカレーション通知

✔

✔

▲

syslog

監視と同様に、ジョブの実行結果は、運用者に様々な手段で通知できます


ジョブの実行結果の確認

日々の定型業務の自動化によって結果を容易に確認可能

開発環境

ログファイル

圧縮ジョブ

ログファイル

転送ジョブ

ログ管理ジョブネット毎日23:45に自動実行完了通知

実行履歴を蓄積管理

詳細情報を確認



ジョブ実行状況の俯瞰的な確認

ジョブの実行状態を視覚化

正常、異常終了をボックスの色で判別

後続ジョブが動く条件を線の色で判断

ビューア画面から再実行操作が可能

詳細情報の表示

ジョブとして実行された各種運用操作の結果は、ジョブマップで視覚的に確認可能です


8. クラウド管理


Hinemosによるクラウド管理

オンプレミス環境に加え、クラウド環境に対するシームレスな運用が実現可能です



クラウドサービス上で動作するシステムの高度な運用管理が Hinemosで実現できます

Hinemos HA on AWS Hinemos V to C ソリューション課金管理

ソフトウェアの可用性を担保し障害時の運用管理を自動継続

災害時のシステム運用をクラウド環境上で自動継続

複数システム運用時の課金配賦管理を容易に実現

例クラウド管理オプション Enterprise for AWSを利用した場合


クラウド環境の管理

2. クラウド環境のアカウント情報を登録

3. インスタンスを自動登録・追尾

クラウド環境の運用管理はすぐに開始できます

1. クラウド管理オプションをインストール



4. 監視・ジョブ実行



クラウド環境

クイックスタートガイドで導入も簡単！

クラウド管理オプション



無償公開版「Hinemos クラウド管理オプション Standard」は以下からダウンロード！！

SourceForge.JP http://sourceforge.jp/projects/hinemos/

Hinemosセットアップ済のAMIもご利用頂けます

クラウド管理オプションは、Standard版を無償公開中です！

概要公開物

セットアップ済みAMI (ベースOS:RHEL6)

Hinemos マネージャAMI

Hinemos エージェントAMI

パブリックAMI として公開中！


9. Hinemos ver.5.0


Hinemos ver.5.0

Cool Hinemos 運用管理の高速化

Auto-managed Infrastructure システムの構築スピード高速化


Cool Hinemos

RPM対応インストールは1行コマンドで完了 Webクライアント

Hinemosクライアントの

導入は不要

Hinemosの導入は、より簡単になります


Cool Hinemos

サーバやネットワーク機器の登録が、

より簡単になります

ノードサーチ機能 IPアドレスを範囲指定すれば、複数のサーバを一括登録できます

自動デバイスサーチ機能追加されたデバイスを検知し、

Hinemosに反映します

変更不要 ①デバイス変更検知

デバイス追加

②デバイス設定変更（自動）


Cool Hinemos

Hinemos ver5.0はサクサク軽快に動作します

3～4倍の性能向上（Hinemos ver4.1比）

10,000ノード 100,000ジョブ


Auto-managed Infrastructure

従来の環境構築それぞれのサーバにコンソールログイン

サーバの数だけ作業が増える

Hinemosによる環境構築 Hinemosクライアントで設定をすれば、Hinemosが全サーバで環境構築

GUIを利用した容易なインタフェース

作業

作業自動

RPM配布×n 設定ファイル配布×n 起動コマンド実行×n

など

RPM配布設定ファイル配布起動コマンド実行

など

次スライド



host=hoge ip=192.168.0.6 host=hoge

ip=%IPADDR%

host=hoge ip=192.168.0.5




Hinemosの設定

配布されるファイル

配布先に応じて、ファイルの内容を置換可能置換内容（IPアドレスなど）は、監視でも利用可能

ファイルの配布

置換



host=hoge ip=192.168.0.6 host=hoge

ip=%IPADDR% charset=UTF-8





Hinemosの設定

配布されるファイル

ファイルの変更時、差分をGUIで視認可能

ファイルの変更

差分あり


リリース予定

Hinemos ver5.0

2015年5月リリース予定！

リリースまで、もうしばらくお待ちください


9. おわりに


おわりに

運用管理ソフトウェアの使いこなしに苦労していませんか？

Hinemosは、シンプル、使いやすさを損なわずに、

監視とジョブの両方の機能を使うことを可能とする、

統合運用管理ソフトウェアです。

ぜひダウンロードして試してみてください。

Hinemos ダウンロード

【osc2014】監視もジョブも、クラウド管理も「hinemos」で

Technology