Основы облачной обработки данных: создание современных конвейеров данных

Каждый современный бизнес полагается на чистые, доступные данные для принятия важных решений, но создание систем для предоставления этих данных остается серьезной проблемой. Понимание того, как использовать облачные службы для сбора, преобразования и хранения данных, является первым шагом к тому, чтобы стать успешным специалистом по данным. Этот курс поможет вам перейти от абсолютного новичка к уверенному проектированию фундаментальных архитектур данных. Вы узнаете, как перейти от необработанных источников данных к структурированным, готовым к запросам активам данных с использованием стандартных облачных технологий. Что вы узнаете: - Понимание основных ролей, обязанностей и фундаментальной терминологии в области инженерии данных - Исследуйте варианты хранения облака и выберите правильные модели баз данных для ваших рабочих нагрузок - Проектирование пакетных и потоковых конвейеров данных с использованием таких сервисов, как Dataflow и Pub/Sub - Эффективно запрашивать и анализировать массивы данных с помощью BigQuery - Применять современные концепции архитектуры озер для унификации хранилищ данных и озер данных - Внедрить основы оркестрации конвейера для автоматизации и мониторинга рабочих процессов данных Вы начнете с основных определений и концепций жизненного цикла данных, прежде чем перейти к архитектурным сценариям. С помощью письменных объяснений и структурированных упражнений по проектированию вы научитесь создавать надежные конвейеры данных от поглощения до анализа. Этот курс разработан специально для начинающих, начинающих инженеров данных и ИТ-специалистов, желающих перейти к ролям данных на основе облака, без предварительного опыта работы в облаке или инженерии данных. Начните свой путь к облачному инжинирингу данных сегодня.