Przechwytywanie i przetwarzanie danych za pomocą Debezium i MySQL

Funkcja Change Data Capture (CDC) umożliwia natychmiastowe przesyłanie tych aktualizacji bez obciążania podstawowej bazy danych, co umożliwiają analizy w czasie rzeczywistym i bezproblemową synchronizację danych. Ten kurs stanowi solidną podstawę do korzystania z Debezium w celu wypełnienia luki między bazą danych MySQL a szerszym ekosystemem danych. Zdobędziesz umiejętności konfigurowania, zarządzania i skalowania potoków CDC w środowiskach gotowych do produkcji.Czytając praktyczne wyjaśnienia i przykłady oparte na kodzie, przekształcisz się z początkującego w praktyka zdolnego do obsługi złożonych przepływów pracy pobierania danych. Czego się nauczysz: - Zrozum podstawowe zasady przechwytywania danych zmian i architektur opartych na zdarzeniach. - Skonfiguruj złącza Debezium, aby monitorować binlogi MySQL i przechwytywać zmiany na poziomie wiersza. - Przekształć i filtruj strumienie danych, aby zapewnić, że tylko odpowiednie informacje dotrą do konsumentów. - Wdrażaj nowoczesne praktyki obserwacji, aby monitorować stan i opóźnienie potoków danych. - Zastosuj strategie ewolucji schematu, aby obsługiwać zmiany w bazie danych bez przerywania usług niższego szczebla. - Wdrażaj Debezium zarówno w środowiskach autonomicznych, jak i kontenerowych w celu skalowalnego pobierania danych. Kurs rozpoczyna się od podstawowych definicji i architektury rozproszonego przesyłania strumieniowego danych.Następnie przejdziesz przez wymagania techniczne MySQL dla CDC i przejdziemy do praktycznych szczegółów implementacji, w tym dostrajania wydajności i obsługi błędów. Ten kurs jest przeznaczony dla początkujących inżynierów danych, administratorów baz danych i programistów, którzy są nowi w Change Data Capture.Nie jest wymagane wcześniejsze doświadczenie z Debezium, chociaż pomocne jest podstawowe zrozumienie SQL i koncepcji bazy danych. Zacznij tworzyć swój pierwszy strumień danych w czasie rzeczywistym już dziś.