Аналитическая инженерия с DBT: Основы преобразования данных

Аналитики данных часто сталкиваются с беспорядочными, неорганизованными сценариями SQL, в которых отсутствует управление версиями, документация или тестирование. DBT решает эту проблему, привнося строгость программного обеспечения в слой преобразования данных, позволяя создавать надежные и масштабируемые конвейеры данных. Этот курс поможет вам перейти от написания ручных запросов к управлению профессиональным рабочим процессом аналитики. Вы приобретете навыки по созданию надежной, модульной архитектуры данных, которая обеспечивает качество и согласованность данных в вашей организации. Прочитав структурированные объяснения и примеры кода, вы узнаете, как автоматизировать повторяющиеся части моделирования данных и сосредоточиться на предоставлении ценных сведений. Что вы узнаете: - Понять основные принципы аналитической инженерии и роль DBT в современном стеке данных - Настроить среды DBT и установить соединения с облачными хранилищами данных - Создание модульных моделей SQL с использованием Jinja для динамического генерирования кода и многоразовых макросов - Внедрение автоматизированной проверки данных и документации схемы для обеспечения высокого качества данных - Управление историей данных и отслеживание изменений во времени с помощью снимков - Примените современные концепции CI / CD и управление версиями к рабочим процессам преобразования данных Курс начинается с основной терминологии и основных настроек, а затем переходит к практическому созданию моделей, стратегиям тестирования и передовым методам развертывания. Вы научитесь обращаться с кодом данных с той же тщательностью, что и с программным обеспечением, делая ваши преобразования более поддерживаемыми и прозрачными. Этот курс предназначен для начинающих аналитиков данных, ученых или начинающих инженеров данных с базовыми знаниями SQL, но не знакомых с DBT. Не требуется предыдущий опыт работы с инструментами аналитического проектирования. Начните свое путешествие в современную аналитическую инженерию сегодня.