ストーリー
田
田中VPoE
品質フレームワーク、メトリクス設計、文化醸成、継続的改善 — 品質管理の全体像を学んだ。ここからはFreshCart社の品質管理体制を設計してもらう
あなた
FreshCart社は品質問題で年間6,840万円以上の損失があると試算されていましたね
あ
田
田中VPoE
そうだ。経営層も「データ品質の改善」を優先課題として認識している。「まず何から手をつけるか」「1年後にどこまで持っていくか」を具体的な計画として策定してくれ。品質改善のクイックウィンと中長期ロードマップの両方が必要だ
ミッション概要
| 項目 | 内容 |
|---|---|
| 演習タイトル | データ品質管理体制設計書 |
| 想定時間 | 90分 |
| 成果物 | データ品質管理体制設計書（現状分析 + 品質フレームワーク + 改善計画 + 文化醸成計画） |
| 対象組織 | FreshCart株式会社（Step 1-3と同じ） |
前提条件
Step 1-3の前提条件に加え、以下の追加情報を考慮してください。
追加情報
| 項目 | 詳細 |
|---|---|
| 品質問題の発生状況 | 過去6ヶ月で品質起因のインシデント12件（月平均2件） |
| 代表的なインシデント | 在庫データの遅延で2日間の発注ミス、顧客メールの名前間違い500件 |
| データテストの現状 | dbt導入済みだがテストは売上関連の3テーブルのみ（カバレッジ10%） |
| 品質監視 | Airflowのジョブ失敗アラートのみ。データ内容の品質監視はなし |
| 品質に関する意識調査 | 「品質問題はデータチームの責任」と回答したのが75% |
| 品質改善の追加予算 | 年間500万円（ツール + 教育） |
Mission 1: 品質現状分析と目標設定
要件
FreshCart社のデータ品質の現状を分析し、改善目標を設定してください。
- 主要データセットの品質評価（6次元で5段階評価）
- 品質問題のコスト分析（カテゴリ別の年間推定コスト）
- 品質改善の目標設定（1年後のKPI）
解答例
主要データセットの品質評価
| データセット | 完全性 | 正確性 | 一貫性 | 適時性 | 一意性 | 妥当性 | 総合 |
|---|---|---|---|---|---|---|---|
| 顧客マスター | 3 | 2 | 2 | 4 | 3 | 3 | 2.8 |
| 注文トランザクション | 4 | 3 | 3 | 5 | 4 | 4 | 3.8 |
| 商品マスター | 4 | 3 | 2 | 3 | 2 | 3 | 2.8 |
| 在庫データ | 3 | 3 | 2 | 2 | 4 | 3 | 2.8 |
| 分析マート | 3 | 3 | 2 | 3 | 4 | 4 | 3.2 |
| 顧客セグメント | 2 | 2 | 1 | 3 | 3 | 3 | 2.3 |
（5段階: 1=非常に低い, 2=低い, 3=中程度, 4=高い, 5=非常に高い）
品質問題のコスト分析
| カテゴリ | 年間推定コスト | 主要要因 |
|---|---|---|
| 住所不備による配送失敗 | 1,280万円 | 顧客マスターの住所不備8% |
| 手動データ修正工数 | 600万円 | 自動品質チェックの不在 |
| 在庫予測誤りの機会損失 | 3,000万円 | 在庫データの遅延と不整合 |
| 重複顧客への二重施策 | 360万円 | 商品マスター重複5%、顧客ID未統合 |
| データ不整合の調査工数 | 400万円 | テーブル間の一貫性不足 |
| 広告最適化の精度低下 | 1,500万円 | 顧客セグメントの品質問題 |
| 合計 | 7,140万円 |
1年後の目標
| KPI | 現状 | 1年後目標 |
|---|---|---|
| 全社品質スコア（加重平均） | 60点 | 80点 |
| テストカバレッジ | 10% | 70% |
| 品質インシデント（月間） | 2件 | 0.5件以下 |
| MTTR（平均修復時間） | 48時間（推定） | 4時間 |
| 品質起因コスト | 7,140万円 | 3,000万円以下 |
| 「品質は全員の責任」認識率 | 25% | 70% |
Mission 2: 品質フレームワークとツール選定
要件
FreshCart社のデータ品質管理フレームワークを設計してください。
- 品質SLAの設計（ティア別の品質基準）
- 品質チェックツールの選定（比較検討と推奨）
- 品質ゲートの設計（パイプラインへの組み込み方）
- 品質改善のクイックウィン（3ヶ月以内に着手する施策3つ）
解答例
品質SLAの設計
| ティア | 対象データ | 完全性 | 正確性 | 適時性 | 監視 |
|---|---|---|---|---|---|
| Tier 1 | 注文、顧客PII | 99.5%以上 | 99%以上 | 1時間以内 | リアルタイム |
| Tier 2 | 在庫、商品マスター、分析マート | 98%以上 | 97%以上 | 6時間以内 | 日次 |
| Tier 3 | 行動ログ、マーケデータ | 95%以上 | 95%以上 | 24時間以内 | 週次 |
ツール選定
| 推奨 | 理由 |
|---|---|
| dbt tests（拡張） | 既に導入済み。テストカバレッジ拡大が最も低コスト。dbt-expectationsパッケージで統計テストも可能 |
| Great Expectations | Python連携で高度なプロファイリング。dbtと併用 |
| Slack連携 | アラート通知。追加コストなし |
年間コスト: 約100万円（Great Expectations OSS運用 + クラウドインフラ）
品質ゲートの設計
| ゲート | 実装場所 | チェック内容 |
|---|---|---|
| 入力ゲート | ECアプリのバリデーション | 住所形式、メール形式、必須項目 |
| 取込ゲート | Airflowパイプライン入り口 | スキーマ検証、レコード数±20% |
| 変換ゲート | dbt run後のdbt test | ビジネスルール、整合性 |
| 公開ゲート | 分析マート更新前 | 品質スコア閾値（80点以上） |
クイックウィン（3ヶ月以内）
- dbt testsの全テーブル展開: 既存3テーブル→全主要テーブル（20テーブル）にテスト追加。コスト: エンジニア工数のみ
- 商品マスターの重複クレンジング: 750件の重複を名寄せ、登録画面に重複チェックを追加。効果: 年間360万円削減
- 在庫データのリアルタイム連携: Excelベースの在庫連携をAPI連携に変更。効果: 在庫予測精度向上
Mission 3: 品質文化醸成計画
要件
FreshCart社のデータ品質文化を醸成する計画を策定してください。
- 文化醸成のロードマップ（4フェーズ、各フェーズの施策）
- 品質バジェットの設計（チーム別の配分）
- 品質ポストモーテムのテンプレート（最近のインシデント「顧客メール名前間違い500件」に適用）
解答例
文化醸成ロードマップ
| フェーズ | 期間 | 施策 | 成果指標 |
|---|---|---|---|
| 認知 | Month 1-3 | コスト可視化（7,140万円）の経営報告、全社集会での品質メッセージ、品質ダッシュボード公開 | 品質コスト認知率80% |
| 仕組み | Month 3-6 | 品質SLA展開、品質バジェット制度化、報告フロー整備、dbt tests拡大 | テストカバレッジ50% |
| 定着 | Month 6-9 | 品質賞（Quick Catch賞）開始、ポストモーテム文化、データチャンピオンの品質活動 | 品質報告件数月5件以上 |
| 進化 | Month 9-12 | 品質KPIの評価制度反映、Great Expectations導入、アノマリ検知開始 | 品質スコア全Tier1データ90点以上 |
品質バジェットの設計
| チーム | バジェット | 活動内容 |
|---|---|---|
| EC開発（25名） | 開発時間の15%（月37.5人日） | 入力バリデーション強化、テスト追加 |
| データチーム（10名） | 開発時間の25%（月25人日） | テストカバレッジ拡大、品質監視構築 |
| サプライチェーン（15名） | 開発時間の10%（月15人日） | Excel脱却、データ連携の自動化 |
ポストモーテム: 顧客メール名前間違い500件
| 項目 | 内容 |
|---|---|
| インシデント概要 | キャンペーンメール送信時、500件の顧客名前が別の顧客の名前で送信された |
| 影響 | 顧客500名に不信感。SNSでの拡散リスク。CS問い合わせ50件 |
| タイムライン | 10 メール送信 → 10 CS報告で発覚 → 11 原因調査開始 → 13 原因特定 → 14 お詫びメール送信 |
| 根本原因 | マーケチームがBrazeにCSVアップロードする際、ソート順が異なるファイルをマッチングしたため、顧客IDと名前がずれた |
| Why 1 | なぜ名前がずれた？ → CSVのマッチングミス |
| Why 2 | なぜミスが起きた？ → 手動でExcelをソート・加工していた |
| Why 3 | なぜ手動？ → 自動連携がないため |
| Why 4 | なぜ検知できなかった？ → テスト送信のプロセスがなかった |
| 再発防止策 | (1) Braze連携の自動化（顧客IDベース） (2) テスト送信プロセスの必須化 (3) 送信前のデータチェックリスト |
| 学び | 手動データ操作は品質リスクの温床。自動化とプロセスで防止する |
達成度チェック
| 観点 | 達成基準 |
|---|---|
| 現状分析の具体性 | 6次元評価に具体的な根拠がある |
| コスト分析の妥当性 | 品質問題のコストが合理的に試算されている |
| SLA設計の実用性 | ティア分類と基準値が現実的である |
| ツール選定の合理性 | 既存資産を活用しつつ、費用対効果が説明できる |
| クイックウィンの即効性 | 3ヶ月以内に着手可能で効果が見える施策が選ばれている |
| 文化醸成の段階性 | 認知→仕組み→定着→進化の段階が現実的に設計されている |
| ポストモーテムの深さ | 5 Whysで根本原因に到達し、具体的な再発防止策がある |
推定所要時間: 90分