Engenharia de dados com PySpark e Dataproc na Cloud Platform — WalkSelf
4.3 (13) ⏱ 2 h 48 min 📚 28 aulas 🎧 Versão em áudio

Engenharia de dados com PySpark e Dataproc na Cloud Platform

Crie e implante pipelines de processamento de dados em lote e em tempo real escaláveis usando o PySpark e o Dataproc no Cloud Platform para resolver desafios de big data do mundo real.

  • 💬 Instrutor de IA
    Pergunte sobre qualquer aula e receba uma resposta clara na hora, quando quiser.
  • 🕐 Comece quando quiser
    Sem horários nem prazos: aprenda no seu ritmo, quando quiser.
  • 🌐 Em português
    Aulas, tarefas e certificado: tudo totalmente no seu idioma.

Sobre este curso

À medida que as organizações geram grandes volumes de dados, a capacidade de processar e analisar essas informações de forma eficiente é uma habilidade altamente procurada.Este curso escrito orienta você através dos fundamentos da computação distribuída usando PySpark e infraestrutura de nuvem gerenciada. Você passará de entender os conceitos básicos de big data para projetar, otimizar e implantar pipelines de dados robustos.Através de explicações claras, trechos de código práticos e cenários reais, você aprenderá a executar tarefas de streaming em tempo real e em lote escaláveis no Cloud Platform. O que você vai aprender: - Entenda os principais conceitos de computação distribuída, arquitetura Spark e APIs fundamentais do PySpark DataFrame. - Configurar e gerenciar clusters Spark usando Dataproc no Cloud Platform. - Crie pipelines de processamento em lote escaláveis usando SparkSQL e transformações modernas de DataFrame. - Implemente o processamento de dados em tempo real usando o Spark Structured Streaming e a integração de mensagens na nuvem. - Aplique práticas modernas de engenharia de dados, incluindo técnicas de sugestão de tipo PySpark e otimização de desempenho. - Projete um pipeline de sistema de recomendação de aprendizado de máquina usando o Spark MLlib. Este curso começa com a terminologia essencial de big data e arquitetura Spark antes de passar para operações práticas de DataFrame.Você então progredirá para implantar pipelines do mundo real no Dataproc, concluindo com padrões de streaming e estratégias de entrevista de engenharia de dados profissionais. Este curso é projetado para aspirantes a engenheiros de dados, analistas e desenvolvedores que querem aprender o processamento de big data a partir do zero.Não é necessária experiência prévia com o Spark ou plataformas de nuvem, embora uma compreensão básica do Python seja útil. Comece a ler hoje para construir sua base na engenharia de dados em nuvem moderna.

O que você vai receber

  • 📜 Certificado de conclusão
    Adicione ao seu perfil do LinkedIn
  • 💬 Tutor AI pessoal
    Travou em uma aula? Pergunte ao seu tutor integrado qualquer coisa, a qualquer hora.
  • 🎧 Versão em áudio incluída
    Estude em qualquer lugar, sem tela
  • ♾️ Acesso vitalício
    Volte quando quiser, sem expirar
  • 📱 Celular ou computador
    Funciona em qualquer dispositivo
  • 💸 Reembolso em 14 dias
    Sem perguntas
  • Curto e focado
    2 h 48 min de conteúdo prático

Avaliações (13)

Marc Weber LU
★ 4 · 10 agosto 2026

Curso sólido. Forneceu uma boa base. Eu preferiria que alguns dos módulos posteriores tivessem tarefas mais desafiadoras, embora.

Martina Castillo UY Aluno verificado
★ 4 · 10 agosto 2026

Gostei muito do fluxo disso. As aplicações práticas discutidas foram no local.

Indah Permatasari ID Aluno verificado
★ 4 · 31 julho 2026

Uma introdução sólida ao tópico.Os exemplos fornecidos foram úteis, mas eu gostaria que houvesse mais oportunidades para a prática prática.

Ishaan Malhotra SG Aluno verificado
★ 4 · 30 julho 2026

É um curso sólido. A estrutura é lógica e a maioria dos exemplos foram úteis.Poderia usar alguns cenários mais reais.

زينب علي AE
★ 5 · 27 julho 2026

Machine Translated Eu apreciei os passos claros, embora alguns dos módulos posteriores pudessem ter usado mais exemplos.

Анна Ткаченко UA Aluno verificado
★ 4 · 29 junho 2026

Conteúdo sólido aqui. Enquanto alguns dos módulos poderiam ter sido mais detalhados, o valor geral e a aplicabilidade são altos.

Thusitha Mendis LK
★ 5 · 28 junho 2026

Este curso excedeu minhas expectativas. As aplicações do mundo real discutidas são incrivelmente úteis.

Võ Thị Thu VN
★ 5 · 20 junho 2026

Curso brilhante! O fluxo de informações foi perfeito, e os exemplos realmente solidificaram os conceitos.

Nurul Huda binti Ahmad MY Aluno verificado
★ 5 · 20 junho 2026

Apresentação brilhante! O fluxo foi perfeito e eu apreciei os exemplos do mundo real.

জয়নাল আবেদীন BD
★ 5 · 15 junho 2026

Machine Translated Gostei muito deste curso. A maneira como as informações foram apresentadas foi excelente e as aplicações práticas foram destacadas de forma eficaz.

Siti Nurhaliza binti Ismail MY
★ 3 · 10 junho 2026

Machine Translated Eu gostei dos exemplos de aplicação prática, embora a configuração inicial tenha demorado mais do que eu esperava.

Michael De Leon PH
★ 4 · 8 junho 2026

Achei útil para uma atualização.Não tenho certeza que seria o melhor ponto de partida para um iniciante completo, tbh.

이주원 KR
★ 4 · 29 maio 2026

Conteúdo sólido e apresentado de forma clara. Eu apreciei as aplicações do mundo real mostradas.Poderia ter usado mais algumas oportunidades de prática.

Escrever uma avaliação

Pediremos para fazer login após enviar — o rascunho fica salvo.

Outros também fizeram

Perguntas frequentes

O que preciso para fazer este curso? +

Só um celular ou computador com internet. Sem instalações nem hardware especial.

Como faço para pagar? +

Com cartão via Stripe. Não guardamos dados do cartão — o Stripe processa com segurança.

Posso pedir reembolso? +

Sim — reembolso integral em 14 dias, sem perguntas.

Por quanto tempo terei acesso? +

Para sempre. Uma vez comprado, o curso é seu para revisar quando quiser.

Vou receber um certificado? +

Sim. Ao concluir, você recebe um certificado que pode adicionar ao seu perfil do LinkedIn.

Feito para profissionais em
Tecnologia Design Finanças Marketing Saúde Educação Hotelaria Indústria