こんにちは。虎の穴ラボのNSSです。

Webアプリケーションでサーバーのディスク使用率が高くなったとき、
メールやSlackで通知したいという要件はよくあると思います。

EC2を使っていればCloud Watchを利用して、ディスク使用率を監視して空き容量が減少したらメールで通知できることがわかったので、
その手順をまとめたいと思います。

1. モニタリングスクリプト

CloudWatchはデフォルトの状態ではディスク使用率の監視ができないので、
EC2インスタンス上にモニタリングスクリプトというものをインストールします。

まずインスタンスにSSHで接続し、パッケージをインストールします。

sudo yum install -y perl-Switch perl-DateTime perl-Sys-Syslog perl-LWP-Protocol-https perl-Digest-SHA.x86_64

次に、モニタリングスクリプトをダウンロードするフォルダを作成します。今回はmonitoring-scriptsというフォルダにダウンロードします。

mkdir monitoring-scripts
cd monitoring-scripts/
curl https://aws-cloudwatch.s3.amazonaws.com/downloads/CloudWatchMonitoringScripts-1.2.2.zip -O

ダウンロードしたzipを解凍します。 unzipがない場合はインストールします

# unzipがインストールされていない場合
sudo yum install unzip
# zipを解凍後削除
unzip CloudWatchMonitoringScripts-1.2.2.zip
rm CloudWatchMonitoringScripts-1.2.2.zip

これでモニタリングスクリプトがインストールできました。

2. 監視用ユーザーの設定

モニタリングスクリプトがインストールできたら、
設定ファイルにIAMユーザーのアクセスキーIDとシークレットキーを設定します。最低限の権限さえあれば良いのでAWSコンソールにてCloudWatchのアクセス権限のみを持つ監視用IAMユーザーを追加します。
今回はアクセス権限の設定で「既存のポリシーを直接アタッチ」で「CloudWatchAgentServerPolicy」を選択しています。

IAMユーザーを作成したら、
インスタンスにて、解凍されたファイルの中にあるawscreds.templateをawscreds.confという名前でコピーします。

cd aws-scripts-mon
cp awscreds.template awscreds.conf

awscreds.confを編集します。追加したIAMユーザーのアクセスキーIDとシークレットキーを設定します。

AWSAccessKeyId=[アクセスキーID]
AWSSecretKey=[シークレットキー]

ここまでできたら動作確認を行います。
インスタンスにて、以下のコマンドを実行します。
--verifyオプションが設定されているとCloud Watchへはレポートされません。

./mon-put-instance-data.pl --mem-util --verify --verbose

成功していれば以下のような結果が表示されます。

Verification completed successfully. No actual metrics sent to CloudWatch.

5分ごとにディスク使用状況をCloud Watchにレポートするようにcronを設定します。

crontab -e
# 以下の行を追加
*/5 * * * * ~/monitoring-scripts/aws-scripts-mon/mon-put-instance-data.pl --mem-used-incl-cache-buff --mem-util --disk-space-util --disk-path=/ --from-cron

3. Cloud Watchの設定

1~2までの手順が正常に設定されていればCloud Watchコンソール > メトリクス >すべてのメトリクスタブに Linuxシステムが追加されているはずです。 Linuxシステム > Filesystem, InstanceId, MountPath > 該当のインスタンスを選択すると、該当インスタンスのディスク使用率がグラフで表示されます。

このメトリクスを監視するCloud Watchのアラームを設定します。 Cloud Watchコンソール > アラーム > アラームの作成をクリックします。

メトリクス選択で先ほどのインスタンスを選択します。メトリクスを選択したら条件の設定をします。
設定内容は以下のとおりです。

f:id:toranoana-lab:20190708182424p:plain