Data Engineering with dbt: Modern SQL Pipelines for Beginners

Современные команды по работе с данными полагаются на чистые, надежные конвейеры данных для принятия критически важных бизнес-решений, однако управление сложными преобразованиями SQL может быстро превратиться в хаос. Этот курс научит вас оптимизировать рабочий процесс обработки данных с помощью dbt (Data Build Tool), отраслевого стандарта современной инженерии данных. Вы перейдете от написания неорганизованных SQL-запросов к созданию модульных, управляемых версиями и полностью протестированных конвейеров преобразования данных. Понимая основополагающие концепции хранилищ данных, вы получите навыки, необходимые для управления моделями данных как профессиональный инженер-программист. Что вы узнаете: - Изучите основные принципы dbt и его место в современном стеке данных - Создавайте модульные SQL-модели с использованием CTE и функций ref для предотвращения дублирования кода - Настройте автоматизированные тесты качества данных, чтобы гарантировать точность ваших аналитических данных - Освойте основы контроля версий с помощью Git для безопасного сотрудничества над проектами данных - Применяйте практики документирования для автоматической генерации каталогов данных с возможностью поиска - Практикуйтесь в развертывании и планировании запусков dbt для последовательного обновления данных Курс начинается с основ терминологии инженерии данных и концепций хранилищ, затем проведет вас через написание модульных SQL-преобразований, внедрение стратегий тестирования и развертывание чистых конвейеров. Он предназначен для начинающих аналитиков данных, начинающих инженеров данных и пользователей SQL, желающих внедрить современные рабочие процессы преобразования данных, без предварительного опыта работы с dbt. Начните читать сегодня, чтобы трансформировать свой рабочий процесс анализа данных с помощью профессиональных инженерных практик.