Изменение сбора данных и ввода данных с Debezium и MySQL

Современные бизнесы, основанные на данных, требуют немедленного доступа к изменениям в базе данных по мере их происхождения. Change Data Capture (CDC) позволяет мгновенно передавать эти обновления, не загружая первичную базу данных и обеспечивая анализ в реальном времени и бесперебойную синхронизацию данных. Этот курс обеспечивает прочную основу в использовании Debezium, чтобы ликвидировать разрыв между вашей базой данных MySQL и вашей более широкой экосистемой данные. Вы получите навыки для настройки, управления и масштабирования конвейеров CDC для готовых к производству сред. Прочитав практические объяснения и примеры на основе кода, вы превратитесь из новичка в практикующего специалиста, способного обрабатывать сложные рабочие процессы ввода данных. Что вы узнаете: - Понять основные принципы сбора данных об изменениях и архитектуры, основанные на событиях. - Настройка Debezium коннекторов для мониторинга MySQL binlogs и захвата изменений на уровне строк. - Преобразование и фильтрация потоков данных для обеспечения того, чтобы только актуальная информация достигала ваших потребителей. - Внедрение современных методов наблюдения для мониторинга работоспособности и задержки конвейеров данных. - Применять стратегии эволюции схемы для обработки изменений базы данных без нарушения дальнейших служб. - Развертывание Debezium в автономных и контейнерных средах для масштабируемого ввода данных. Курс начинается с основных определений и архитектуры распределенных потоков данных. Затем вы пройдете технические требования MySQL для CDC и перейдете к практическим деталям реализации, включая настройку производительности и обработку ошибок. Этот курс предназначен для начинающих инженеров данных, администраторов баз данных и разработчиков программного обеспечения, которые впервые используют Change Data Capture. Не требуется предыдущего опыта работы с Debezium, хотя полезно иметь базовое понимание SQL и концепций баз данные. Начните создавать свой первый поток данных в реальном времени уже сегодня.