カリキュラム
データサイエンス
Month 5
Month 5
データパイプライン
データパイプラインを設計しよう
全31ステップ · 約20時間
Step 1: Step 1
0時間
1-1
データパイプライン入門
LESSON
15分
1-2
Modern Data Stackの構成要素
LESSON
30分
1-3
データウェアハウスの設計思想
LESSON
30分
1-4
レイクハウスアーキテクチャ
LESSON
30分
1-5
演習:データ基盤アーキテクチャを設計しよう
EXERCISE
60分
1-6
Step 1 クイズ
QUIZ
15分
Step 2: Step 2
0時間
2-1
dbtの概要と思想
LESSON
30分
2-2
dbtモデルの設計と実装
LESSON
30分
2-3
dbtのテストとドキュメント
LESSON
30分
2-4
dbtの高度な機能
LESSON
30分
2-5
演習:dbtでデータ変換パイプラインを構築しよう
EXERCISE
90分
2-6
dbtデータ変換パイプラインクイズ
QUIZ
30分
Step 3: Step 3
0時間
3-1
Airflow基礎
LESSON
30分
3-2
DAG設計
LESSON
30分
3-3
タスク依存関係
LESSON
30分
3-4
エラーハンドリング
LESSON
30分
3-5
演習:Airflowでワークフローを構築しよう
EXERCISE
90分
3-6
Airflowオーケストレーションクイズ
QUIZ
30分
Step 4: Step 4
0時間
4-1
ストリーミング基礎
LESSON
30分
4-2
Kafka入門
LESSON
30分
4-3
ストリーム処理
LESSON
30分
4-4
Lambda/Kappaアーキテクチャ
LESSON
30分
4-5
演習:ストリーミングパイプラインを設計しよう
EXERCISE
90分
4-6
ストリーミングデータ処理クイズ
QUIZ
30分
Step 5: Step 5
0時間
5-1
データ品質
LESSON
30分
5-2
データ可観測性
LESSON
30分
5-3
データリネージ
LESSON
15分
5-4
演習:データ品質管理基盤を構築しよう
EXERCISE
60分
5-5
データ品質と可観測性クイズ
QUIZ
15分
Step 6: Step 6
0時間
6-1
総合演習:エンドツーエンドのデータパイプラインを設計しよう
EXERCISE
90分
6-2
データパイプライン総合クイズ
QUIZ
30分