Fundamentos de ingeniería de datos: canalizaciones, SQL y orquestación

Ingeniería de datos es la columna vertebral de la ciencia de datos moderna y análisis, sin embargo, dominar los fundamentos del flujo de datos y la infraestructura puede ser complejo.Este curso proporciona una base estructurada en las herramientas esenciales y patrones arquitectónicos necesarios para diseñar, construir y mantener la ingestión de datos confiables y tuberías de transformación. Este curso se centra en el conocimiento práctico y fundamental, preparándolo para enfrentar los desafíos y las revisiones técnicas del ingeniero de datos de nivel inicial. Lo que aprenderás: * Comprender los principios de modelado de datos, incluido el modelado dimensional, y administrar datos relacionales utilizando PostgreSQL. * Practicar la escritura de consultas SQL de alto rendimiento y la aplicación de Python para el procesamiento de datos complejos y la lógica de transformación. * Diseñar arquitecturas de datos por lotes y streaming confiables utilizando conceptos de Apache Kafka y sistemas de almacenamiento distribuido. * Configurar y monitorear flujos de trabajo de datos reproducibles utilizando las características fundamentales de Apache Airflow. * Aplicar patrones básicos de almacenamiento de datos, incluidos conceptos relacionados con almacenes columnares como ClickHouse y optimización de consultas analíticas. * Aprenda las mejores prácticas esenciales para estructurar, probar e implementar trabajos de ingeniería de datos de manera eficiente. El curso comienza con la terminología básica y la teoría de modelado de datos, progresa a través de la aplicación práctica utilizando Python y SQL para la manipulación de datos y concluye con lecciones sobre la estructuración de flujos de trabajo complejos y la integración de diversas tecnologías de almacenamiento y transmisión. Este curso está diseñado específicamente para principiantes absolutos interesados en convertirse en Ingenieros de Datos.No se requiere experiencia previa con infraestructura de datos o codificación compleja, solo conocimientos básicos de programación. Comience a construir su conocimiento de ingeniería de datos fundamental hoy.