Grundlagen des Data Engineering: Pipelines, SQL und Orchestrierung

Data Engineering ist das Rückgrat moderner Data Science und Analytics, aber die Grundlagen des Datenflusses und der Infrastruktur zu beherrschen, kann komplex sein. Dieser Kurs bietet eine strukturierte Grundlage für die wesentlichen Werkzeuge und Architekturmuster, die zum Entwerfen, Erstellen und Warten zuverlässiger Datenaufnahme- und Transformationspipelines erforderlich sind. Dieser Kurs konzentriert sich auf praktisches, grundlegendes Wissen und bereitet Sie auf die Herausforderungen und technischen Überprüfungen von Data Engineers auf Einstiegsniveau vor. Was Sie lernen werden: * Verstehen Sie die Prinzipien der Datenmodellierung, einschließlich der dimensionalen Modellierung, und verwalten Sie relationale Daten mit PostgreSQL. * Üben Sie das Schreiben leistungsfähiger SQL-Abfragen und die Anwendung von Python für komplexe Datenverarbeitungs- und Transformationslogik. * Entwerfen Sie zuverlässige Batch- und Streaming-Datenarchitekturen unter Verwendung von Konzepten aus Apache Kafka und verteilten Speichersystemen. * Konfigurieren und überwachen Sie reproduzierbare Datenworkflows mit den grundlegenden Funktionen von Apache Airflow. * Anwenden von grundlegenden Data Warehousing-Mustern, einschließlich Konzepten im Zusammenhang mit Spaltenspeichern wie ClickHouse und analytischer Abfrageoptimierung. * Erfahren Sie die wichtigsten Best Practices für die effiziente Strukturierung, Prüfung und Bereitstellung von Data Engineering-Jobs. Der Kurs beginnt mit der Kernterminologie und der Datenmodellierungstheorie, führt durch die praktische Anwendung mit Python und SQL zur Datenmanipulation und endet mit Lektionen zur Strukturierung komplexer Workflows und zur Integration verschiedener Speicher- und Streaming-Technologien. Dieser Kurs ist speziell für absolute Anfänger gedacht, die daran interessiert sind, Data Engineers zu werden. Es sind keine Vorkenntnisse in Dateninfrastruktur oder komplexer Programmierung erforderlich, lediglich grundlegende Programmierkenntnisse. Bauen Sie noch heute Ihr grundlegendes Data Engineering-Wissen auf.