Fundamentos do processamento de dados sem servidor com o Dataflow

O processamento de dados sem servidor resolve esse desafio ao dissociar a computação do armazenamento, permitindo que você se concentre apenas na lógica do pipeline. Este curso apresenta os princípios básicos da engenharia de dados sem servidor usando o Apache Beam e o Dataflow.Você fará a transição da compreensão da terminologia básica de processamento de dados para a escrita, teste e execução de seus próprios pipelines sem servidor. O que você vai aprender: - Entenda os conceitos fundamentais do processamento de dados sem servidor e como o Dataflow executa pipelines. - Escreva pipelines Apache Beam usando práticas de programação modernas, incluindo dicas de tipo e esquemas estruturados. - Aplique a lógica de transformação para manipular, filtrar e agregar dados em lote e em streaming. - Aproveite a estrutura de portabilidade do feixe para entender como os pipelines são executados em diferentes backends de execução. - Pratique escrever testes unitários para seus pipelines de dados para garantir a confiabilidade antes da implantação. Você começará com as definições principais e a arquitetura de pipelines sem servidor antes de passar para explicações passo a passo sobre como escrever código de pipeline, executá-lo localmente e implantá-la em um ambiente de nuvem totalmente gerenciado. Este curso foi projetado para aspirantes a engenheiros de dados, desenvolvedores de software e administradores de banco de dados que são novos no processamento de dados sem servidor e querem uma base conceitual clara.Não é necessária experiência prévia com o Apache Beam ou o Dataflow. Comece a ler hoje para construir sua base na moderna engenharia de dados sem servidor.