Dasar-dasar Rekayasa Data Awan dengan BigQuery dan Dataflow

Ketika organisasi menghasilkan sejumlah besar data setiap hari, permintaan akan para profesional yang terampil yang dapat merancang saluran yang kuat semakin meningkat. Kursus ini memperkenalkan Anda pada prinsip inti rekayasa data pada platform awan modern, berfokus pada penyimpanan dan pemrosesan yang dapat disesuaikan. Anda akan berpindah dari memahami konsep dasar database ke merancang dan mengeksekusi aliran data yang siap produksi. Melalui penjelasan tertulis yang jelas dan skenario praktis, Anda akan belajar cara mengonsumsi, mengubah, dan menyimpan data dengan efisien menggunakan alat seperti BigQuery, Pub/Sub, dan Dataflow, sambil menggabungkan praktik modern seperti manajemen schema dan orkestrasi pipa. Apa yang Anda pelajari: Mengerti konsep rekayasa data dasar, termasuk pola ETL / ELT dan jenis penyimpanan; Konfigurasi gudang data skalabel dan menjalankan query yang dioptimalkan menggunakan BigQuery; Bangun pipa streaming dan batch ingestion dengan Pub / Sub dan Dataflow; Terapkan konsep arsitektur data lakehouse modern untuk mengorganisir data yang tidak terstruktur dan terstruktur. data terstruktur; Desain bersih, skema terstruktur yang memastikan kualitas data dan tata kelola di seluruh pipa Anda; Praktik menulis transformasi SQL dan logika pipa melalui latihan tertulis langkah demi langkah. Kursus ini dimulai dengan terminologi dan konsep struktural yang penting sebelum memandu Anda melalui skenario pipa praktis. Anda akan berkembang dari pengaturan penyimpanan data dasar untuk merancang sepenuhnya otomatis, serverless data workflows. Kursus ini dirancang untuk pemula, insinyur data bercita-cita, dan analis yang ingin berpindah ke infrastruktur cloud. Tidak diperlukan pengalaman cloud sebelumnya, meskipun keakraban dasar dengan SQL berguna. Mulai membangun fondasi rekayasa data awan Anda hari ini.