Cloudera Manager を使って、Hiveserver2 がダウンしたときにアラートメールを受け取る方法を紹介する。

環境

準備

アラートメールを受信するメールアドレスを設定するだけで、他に設定する必要はない。

Cloudera Management Service を開き、設定から 受信者 というキーワードで検索し、 アラート: メールメッセージの受信者 という設定項目に、アラートメールを受信したいメールアドレスを入力する。

設定を変更したらCloudera 管理サービスを再起動する。

Hiveserver2 がダウンすると、以下のようなメールが送信される。
アラート送信のテストをしたければ、単純にプロセスを kill すればいい。

リンクをクリックすれば Cloudera Manager の該当画面にジャンプすることができる。

OutOfMemoryError は Hiveserver2 ではしばしば起こりうる現象であるが、残念ながら現在のバージョンの Cloudera Manager ではメールに記載してくれない。(後述)
もし OOM を疑う場合は以下の場所から確認することができる。

Hive -> Hiveserver2 -> プロセス -> Stdout

プロセスの標準出力に、以下のメッセージが出力されていれば、OOM でダウンしたことがわかる。

# java.lang.OutOfMemoryError: Java heap space

なお、OOM そのものをアラートに出力する改善は近い将来実装されるので、上記のように確認する必要もなくなるだろう。