オブザーバビリティ（可観測性）の世界へようこそ。
システム監視の世界で「ただのグラフ」を作るのは簡単ですが、「障害の予兆を瞬時に捉え、意思決定を加速させるダッシュボード」を作るのは、一種の芸術であり、エンジニアの腕の見せ所です。
今日は、Grafanaを使って「見られる」だけでなく「使い倒せる」ダッシュボードの作り方を伝授します。これをマスターすれば、深夜の呼び出し通知に震える回数が劇的に減るはずですよ。
—
1. 優れたダッシュボードデザインの「鉄則」
初心者が陥りがちな罠は「情報を詰め込みすぎること」です。画面がグラフで埋め尽くされていると、脳は重要な信号をノイズとして処理してしまいます。
- 「左上から右下」の法則: 人の目は左上から右下に流れます。最も重要な指標（SLIや主要なレスポンスタイム）は必ず左上に配置してください。
- 「3秒ルール」: 画面を一目見て、システムが健全か異常か判断できないダッシュボードは失敗です。異常時には色が変わり、即座に「何が起きているか」がわかるように設計します。
- コンテキストを忘れない: グラフ単体ではなく、関連するログやエラーレートを近くに配置し、「事象発生」から「原因調査」へのパスを最短にします。
—
2. 基本パネル：情報を「形」にする
Grafanaのパネルは、データの種類によって選ぶべき型が決まっています。
① Time Series（時系列グラフ）
- 用途: CPU負荷、トラフィック、エラー数など「変化」を見るもの。
- コツ: 複数のメトリクスを重ねすぎないこと。多くても3〜4本まで。それ以上はダッシュボードが散らかるだけです。
② Stat（統計パネル）
- 用途: 「現在の成功率」や「稼働時間」など、単一の数値を強調するもの。
- コツ: 「閾値（Thresholds）」を必ず設定してください。成功率が99.9%を下回ったら赤く光るようにするだけで、脳の負荷は劇的に下がります。
③ Gauge（ゲージ）
- 用途: メモリ使用率やディスク容量など、限界値に対して現在どの位置にいるかを見せるもの。
- コツ: 「あともう少しで溢れる」という余裕度を一目で把握させるために使います。
—
3. 変数（Variables）で「動的な司令塔」を作る
Grafanaの真骨頂は、ハードコーディングされたグラフではなく、柔軟な「変数（Variables）」にあります。これを使うと、1つのダッシュボードで環境別（Prod/Staging）、ホスト別、サービス別の切り替えが瞬時に行えます。
実装のステップ:
1. ダッシュボード設定（Dashboard settings）の「Variables」を選択。
2. 「Add variable」をクリック。
3. Typeを`Query`にし、例えば`label_values(up, instance)`のように入力（Prometheusの場合）。
魔法のクエリ例:
変数 $instance を使って、選択したサーバーのCPU使用率のみを表示する
rate(node_cpu_seconds_total{instance=”$instance”, mode=”idle”}[5m])
これだけで、ダッシュボードの右上に「サーバーを選択するドロップダウン」が生まれ、チームメンバーはSQLやPromQLを書かずに必要な情報を手に入れられるようになります。
—
4. チームで共有する「プロの作法」
せっかく作ったダッシュボードが自分専用になっていませんか？チームの武器にするための設定です。
- 説明文（Description）を埋める: パネルの右上の「i」マークに、そのグラフが何を示しているか、異常時の初動は何をすべきかをMarkdownで書いておきましょう。これが「最高の引き継ぎ資料」になります。
- Linkを活用する: パネルから、該当するログ（Loki）やトレース（Tempo）へジャンプするリンクを貼ってください。「グラフで異常を発見し、ログで原因を突き止める」という一連の動線こそがオブザーバビリティです。
- バージョン管理: ダッシュボードをJSONとしてエクスポートし、Gitで管理しましょう。誰がいつ変更したか追跡できることが、運用チームの信頼に繋がります。
—
最後に：エンジニアとして一番伝えたいこと
ダッシュボードは「監視するため」ではなく、「システムと対話するため」のインターフェースです。
最初は完璧を目指さなくていい。「何が起きたら困るか？」という問いから始めて、一つずつパネルを足していってください。その積み重ねが、いずれ「システムの声が聞こえる」レベルの高度なモニタリング環境へと進化します。
まずは今日、1つだけStatパネルを作って、最も重要な指標に「閾値」を設定することから始めてみませんか？それが、あなたの運用の世界を変える第一歩です。
さあ、素晴らしいダッシュボード作りを楽しんでください！応援しています。