
## モニタリングとは

- モニタリングとは、システムに関するリアルタイム定量データの収集、処理、集計、表示を行うことである。
- モニタリングはホワイトボックスモニタリングとブラックボックスモニタリングに分けられる。


| ホワイトボックスモニタリング | システムの内部によって公開されているメトリクスに基づくモニタリング |
| --- | --- |
| ブラックボックスモニタリング | ユーザーが目にする外部の振る舞いをモニタリングすること |
- モニタリングシステムは、以下の2つの疑問に答える必要がある。
1. 何が壊れたのか？
2. なぜ壊れたのか？

## オブザーバビリティとは

- オブザーバビリティとは、複雑なITシステムやアプリケーションの状態といったデジタル上の動きを常に把握するという性質、およびそのための取り組み。
- オブザーバビリティに必要不可欠な3要素
1. テレメトリーデータの収集
2. テレメトリーデータの分析
3. テレメトリーデータの可視化

## モニタリングとオブザーバビリティの違い

- モニタリング(監視)との違いは、モニタリングは事前に定義された異常が発生したときに通知するだけだが、オブザーバビリティを備えたシステムでは、問題が生じた原因とシステムの動作がどの様になっているかをリアルタイムに把握できる。

## どのようなメトリクスを取得すべきか？

### 4大シグナル

1. レイテンシ
2. トラフィック
3. エラー
4. サチュレーション(サービスがどれだけ「手一杯」になっているか。システムの利用率)

### USEメソッド

USEメソッドは、システムのパフォーマンス分析の方法論。すべてのリソースについて、以下を確認する。

1. Utilization(使用率)
2. Saturation(飽和状態)
3. Errors(エラー)

### REDメソッド

REDメソッドは、マイクロサービスを監視するための方法論。

1. Rate
2. Errors
3. Duration

### USEメソッドとREDメソッド

- 両方を使用することを推奨。
- REDメソッド: ユーザ影響を直接表現しているデータ
- USEメソッド: システムの内部状況を表現しているデータ

## 参考

- [New Relic実践入門](https://www.shoeisha.co.jp/book/detail/9784798166599)
- [SRE サイトリライアビリティエンジニアリング](https://www.oreilly.co.jp/books/9784873117911/)
- [入門監視](https://www.oreilly.co.jp/books/9784873118642/)
- [AWSの記事『モニタリングとオブザーバビリティ」](https://aws.amazon.com/jp/products/management-and-governance/use-cases/monitoring-and-observability/?whats-new-cards.sort-by=item.additionalFields.postDateTime&whats-new-cards.sort-order=desc&blog-posts-cards.sort-by=item.additionalFields.createdDate&blog-posts-cards.sort-order=desc)
- [AbemaTVにPrometheusというモニタリングシステムを導入した話](https://developers.cyberagent.co.jp/blog/archives/3814/)
- [The USE Method](https://www.brendangregg.com/usemethod.html)
- [The RED Method: How to Instrument Your Services](https://grafana.com/blog/2018/08/02/the-red-method-how-to-instrument-your-services/)
- [Heroku Go言語メトリクス](https://devcenter.heroku.com/ja/articles/language-runtime-metrics-go)

masatora.net