Dasar Pipeline Data (ETL)
Bagaimana data berpindah dari sumber ke tempat ia dianalisis.
- Premium
- Pipeline Data
- Kelas Fundamental
- 3 bab
- 9 sub-bab
- 350 poin
Yang akan kamu kuasai
- Membedakan ETL dan ELT beserta kapan masing-masing dipakai
- Merancang muat data harian yang aman diulang saat gagal di tengah
- Menjaga mutu data dengan pemeriksaan otomatis, bukan dengan berharap
Bekal yang dibutuhkan
Selesaikan jalur SQL sampai modul agregat & GROUP BY.
Kelas Fundamental: Keterampilan inti yang dipakai harian. Premium: Butuh langganan aktif.
Isi modul
Bab 1. Dari sumber ke gudang
- Apa yang sebenarnya dikerjakan sebuah pipelineTeori, 10 poin
- Uji pemahaman: ETL vs ELTKuis, 20 poin
Bab 2. Muat harian yang tahan gagal
- Idempoten: kata yang menyelamatkan akhir pekanmuTeori, 10 poin
- Incremental load: ambil yang baru sajaPraktik, 60 poin
- Mencari baris kembarPraktik, 70 poin
- Uji pemahaman: menjalankan ulangKuis, 20 poin
Bab 3. Menjaga mutu datanya
- Pemeriksaan yang berjalan sendiriTeori, 10 poin
- Pemeriksaan kewajaran nilaiPraktik, 70 poin
- Rekonsiliasi: apakah hasilnya masih cocokPraktik, 80 poin
Tentang jalur Pipeline Data
Bagaimana data berpindah dari sumbernya ke tempat ia dianalisis, tepat waktu dan utuh. Jalur ini berisi 4 modul yang disarankan dikerjakan berurutan.
- Merancang Gudang Data & Model DimensionalTabel fakta, tabel dimensi, dan skema bintang. Platinum.
- Kualitas Data & Orkestrasi PipelineUji data, kontrak data, idempoten, dan penjadwalan DAG. Platinum.
- ETL Subsystem: SCD, Data Terlambat & OtomatisasiPola ETL gudang data yang dipakai di Pentaho, dbt, dan Airflow. Platinum.
Pertanyaan yang sering ditanyakan
Apakah modul Dasar Pipeline Data (ETL) gratis?
Modul ini termasuk Premium dan terbuka dengan langganan Academy Data yang aktif. Modul gratis di jalur yang sama bisa dicoba lebih dulu.
Apakah perlu memasang aplikasi atau perangkat lunak?
Tidak. Semua latihan dikerjakan langsung di peramban, termasuk menjalankan kode dan query, jadi cukup laptop atau ponsel dengan koneksi internet.
Bagaimana latihan dinilai?
Latihan dinilai dari hasil yang keluar, bukan dari kemiripan teks kode. Kalau macet, mentor AI Ombiboth bisa memberi petunjuk tanpa langsung membocorkan jawabannya.
Apakah ada sertifikat?
Ada. Setelah seluruh sub-bab modul ini selesai, kamu bisa mengunduh sertifikat penyelesaian modul Dasar Pipeline Data (ETL) dari jalur Pipeline Data.