Elaborazione dei Big Data con Hadoop e MapReduce

Questo corso basato su testo introduce i concetti chiave dei Big Data e fornisce una chiara comprensione fondamentale del calcolo distribuito utilizzando Hadoop. Inizierai imparando la terminologia essenziale, i concetti di architettura cluster e come lo storage distribuito gestisce i dati su più nodi.Completando questo corso, capirai come organizzare, archiviare e trasformare in modo efficiente grandi set di dati utilizzando paradigmi distribuiti stabiliti. Cosa imparerai: Comprendere la terminologia di base dei Big Data, i concetti di sistema distribuito e l'architettura dei cluster.Padroneggiare i meccanismi di archiviazione HDFS, la distribuzione dei blocchi e le strategie di replica dei dati.Applicare il modello di programmazione MapReduce per dividere, elaborare e aggregare grandi set di dati. Confronta gli approcci di storage tradizionali con i moderni formati colonnari come Parquet. Comprendere l'allocazione delle risorse del cluster e la pianificazione dei processi utilizzando YARN. Il corso inizia con concetti e definizioni fondamentali prima di passare a chiare spiegazioni di testo, architetture e snippet di codice. Progettato per principianti, sviluppatori di software e analisti di dati, non è richiesta alcuna esperienza precedente con i sistemi distribuiti.