Dagster Tutorial

Hướng dẫn xây dựng và điều phối Data Pipeline với Dagster, từ các khái niệm cơ bản như Asset, Workflow, Dependency đến Scheduling, Backfill và Data Lineage.

Sign in to track your progress through this tutorial.

1

Giới thiệu khóa học

Beginner

2

Dagster là gì?

Beginner1 week

3

Cài đặt và chạy Dagster UI lần đầu

Beginner1 week

4

Software-defined Assets — nền tảng của Dagster

Beginner

5

Dependency, Lineage và Asset Materialization

Beginner

6

Resources và Configuration

Beginner

7

IOManager — quản lý dữ liệu giữa các asset

Beginner

8

Partitioned Assets — xử lý dữ liệu theo thời gian

Beginner

9

Freshness Policies và Automated Runs

Beginner

10

Schedules và Sensors

Beginner

11

Asset Checks — kiểm tra chất lượng dữ liệu

Beginner

12

Kiểm thử, gỡ lỗi và giám sát

Beginner

13

Tích hợp: dbt, Spark, Python, Conductor

Beginner

14

Deploy lên production với Dagster Cloud / K8s

Beginner

15

Dự án end-to-end: pipeline Web Analytics

Beginner