LESSON 30分

ストーリー

田中VPoE
進化サイクルを回すには、標準が効果を上げているかどうかを測定する必要がある。感覚ではなく数字で語る
あなた
何を測ればいいんですか?
田中VPoE
大きく4つのカテゴリがある。「準拠率」「開発効率」「品質」「エンジニア体験」。この4つを定期的に測定し、標準の効果を可視化する

メトリクスの4つのカテゴリ

カテゴリ目的
準拠率(Compliance)標準がどれだけ守られているか品質ゲート通過率、例外件数
開発効率(Productivity)標準が生産性に寄与しているかデプロイ頻度、リードタイム
品質(Quality)標準が品質向上に寄与しているか障害件数、テストカバレッジ
エンジニア体験(DX)標準がエンジニアに受け入れられているか満足度、オンボーディング期間

準拠率メトリクス

指標測定方法目標値頻度
品質ゲート通過率CI/CDの通過/失敗率95%以上週次
テクノロジーレーダー準拠率Adopt/Trial技術の使用率80%以上四半期
セキュリティスキャン準拠率Critical CVEゼロのサービス率100%週次
例外件数例外レジストリの件数全体の20%以内四半期
Hold技術の使用率Hold技術を使用するサービスの割合減少傾向四半期

開発効率メトリクス(DORA指標)

DORA Four Keys

指標内容目標水準(Elite)
デプロイ頻度本番へのデプロイ回数1日複数回
変更リードタイムコミットからデプロイまでの時間1時間未満
変更失敗率デプロイ後に障害が発生する割合5%未満
MTTR障害発生から復旧までの時間1時間未満

標準導入前後の比較

指標標準導入前6ヶ月後(目標)12ヶ月後(目標)
デプロイ頻度月2回週1回週2回以上
変更リードタイム2週間1週間3日以内
変更失敗率15%10%5%以下
MTTR4時間2時間1時間以内

品質メトリクス

指標測定方法目標値頻度
テストカバレッジ(全社平均)CI/CDレポート75%以上月次
本番障害件数インシデントレポート前期比20%減月次
セキュリティ脆弱性数Trivy/SnykCritical: 0, High: 前期比50%減週次
技術的負債(SonarQube)SonarQube四半期10%減四半期
コード重複率SonarQube / jscpd5%以下月次

エンジニア体験メトリクス

指標測定方法目標値頻度
標準への満足度アンケート(1-5スコア)4.0以上四半期
オンボーディング完了期間生産的コミットまでの日数2週間以内都度
RFC参加率RFC提案・コメント者数 / 全エンジニア30%以上四半期
チーム間異動の容易さ異動者の立ち上がり期間1ヶ月以内都度
NPS(推奨度)「この標準を他の人に薦めるか」+20以上半期

メトリクスダッシュボード

ダッシュボードの構成

技術標準ダッシュボード:

┌─────────────────────────────────────────────┐
│ サマリー                                     │
│ 準拠率: 92% | DORA: Medium | 満足度: 4.1    │
├─────────────────────────────────────────────┤
│ 準拠率トレンド        │ DORA四半期比較       │
│ ▓▓▓▓▓▓▓▓░░ 92%     │ デプロイ: 週2→週3   │
│ 前期: 85% (+7%)      │ リードタイム: 5d→3d  │
├─────────────────────────────────────────────┤
│ 品質指標              │ エンジニア体験        │
│ カバレッジ: 74%       │ 満足度: 4.1/5.0     │
│ 障害件数: 前期比-25%  │ RFC参加率: 35%      │
│ CVE: Critical 0件    │ オンボーディング: 12日 │
└─────────────────────────────────────────────┘

メトリクスの報告先

報告先内容頻度
技術標準委員会全指標の詳細レポート四半期
CTO/VPoEエグゼクティブサマリー四半期
全エンジニアダッシュボードの公開リアルタイム
経営会議投資効果レポート半期

メトリクス運用の注意点

注意点説明
メトリクスをKPIにしすぎないカバレッジ100%を目標にすると、意味のないテストが量産される
トレンドを重視絶対値よりも改善の方向性を見る
組み合わせで判断カバレッジが高くても障害が多ければ、テストの質が低い
ゲーミング対策メトリクスを操作するインセンティブを生まない設計

「メトリクスは”鏡”だ。組織の健康状態を映し出す。だが鏡を見ることが目的ではない。鏡に映った姿を改善するのが目的だ」 — 田中VPoE


まとめ

ポイント内容
4カテゴリ準拠率、開発効率(DORA)、品質、エンジニア体験
DORAデプロイ頻度、リードタイム、変更失敗率、MTTR
ダッシュボードリアルタイムで全エンジニアに公開
注意点KPIにしすぎない、トレンド重視、組み合わせで判断

チェックリスト

  • メトリクスの4カテゴリを理解した
  • DORA Four Keysの指標と目標水準を理解した
  • エンジニア体験メトリクスの重要性を理解した
  • メトリクス運用の注意点を理解した

次のステップへ

次は「非推奨化と廃止プロセス」を学びます。古くなった標準や技術を適切に非推奨化し、廃止するプロセスを身につけましょう。


推定読了時間: 30分