Strumieniowe potoki danych i analiza w czasie rzeczywistym

Nowoczesne organizacje generują dane co sekundę, a oczekiwanie na przetwarzanie wsadowe nie jest już opcją dla decyzji wrażliwych na czas.Ten kurs wprowadza Cię w architekturę i wdrażanie systemów strumieniowych zaprojektowanych do wydajnej obsługi ciągłych, nieograniczonych przepływów danych. Zyskasz solidne podstawy w zakresie projektowania potoków, które pobierają, przetwarzają i przechowują dane w czasie rzeczywistym.Pod koniec tego kursu będziesz w stanie zaprojektować systemy, które przekształcają surowe strumienie w praktyczną inteligencję biznesową, gdy dane dotrą. Czego się nauczysz: - Zrozum podstawowe różnice między architekturami danych wsadowych i strumieniowych - Skonfiguruj Pub / Sub do pobierania i dystrybucji wiadomości o wysokiej przepustowości - Zbuduj logikę przetwarzania za pomocą Dataflow, aby przekształcić i wyczyścić dane w locie - Zastosuj strategie okienkowe do agregowania i analizy danych w określonych odstępach czasu - Zarządzaj późno przychodzącymi danymi i zapewnij niezawodność systemu za pomocą znaków wodnych i wyzwalaczy - Przechowuj przetworzone wyniki w BigQuery w celu natychmiastowej analizy i raportowania Kurs rozpoczyna się od podstawowej terminologii i podstawowej teorii strumieniowania, zanim przejdziemy do praktycznych kroków konfiguracji i wdrażania funkcjonalnego potoku danych.Przeczytasz szczegółowe wyjaśnienia, w jaki sposób te komponenty współdziałają, aby utrzymać wysoką dostępność i niskie opóźnienia. Ten kurs jest przeznaczony dla początkujących w inżynierii danych lub analityki, którzy chcą zrozumieć nowoczesny ruch danych; nie jest wymagane wcześniejsze doświadczenie z narzędziami strumieniowymi. Zacznij budować swoją wiedzę w zakresie inżynierii danych w czasie rzeczywistym już dziś.