Informazioni amministrative
| Titolo | Tecnologie basate su Hadoop |
| Durata | 60 |
| Modulo | B |
| Tipo di lezione | Pratico |
| Focus | Pratiche — AI organizzativa |
| Argomento | Hadoop |
Parole chiave
Mappa Ridurre,Hadoop Framework,
Obiettivi di apprendimento
- Conoscere i fondamenti di Map Reduce paradigma di programmazione
- Per sapere come configurare Hadoop Framework
- Per sapere come applicare le funzionalità Map Reduce
- Per sapere come programmare in Python con la libreria di Map Reduce
Preparazione prevista
Eventi di apprendimento da completare prima
Obbligatorio per gli studenti
Nessuno.
Facoltativo per gli studenti
Nessuno.
Referenze e background per gli studenti
- Big Data Hadoop Tutorial, 2022
- Hadoop Streaming Mappa Ridurre il programma Maggio 5, 2022
- Reddito adulto-censo, 2022
- MapReduce Tutorial, 2022
- Scrivere un programma mapreduce di hadoop, 2022
- Mapper, 2022
- Riduttore, 2022
- Cos'è MapReduce?2022
- Prova VM VirtualBox, 2022
- 10 caratteristiche di Hadoop che lo hanno reso il più popolare
Consigliato per gli insegnanti
Materiale didattico
- Hadoop Impostare e utilizzare la guida passo dopo passo (collegamento a PDF)
- Messaggio di successo della mappa riduce il funzionamento
- I dati in uscita da Adult Dataset di mappa riducono il funzionamento
- Codice e istruzioni Hadoop (collegamento a TXT)
- Macchina virtuale preconfigurata con Hadoop (preparata ad hoc per la lezione)
Istruzioni per gli insegnanti
Occorre seguire il seguente schema:
- Introduzione a Hadoop
- Funzioni di Hadoop
- Mappa Ridurre l'operazione
- Trattamento dei dati
- Localizzazione dei dati
- Descrizione e preparazione del set di dati
- Preparazione del set di dati per adulti
- Configurazione e configurazione di Hadoop
- Installazione di Hadoop
- Configurazione di Hadoop
- Mappa e Riduci le Istruzioni
- Conduttura in ml realizzata con Kubeflow
- Libreria di Mappa/Ridurre in Python
- Google Colab di Mappa/Ridurre la Libreria
Calendario
| Durata (min) | Descrizione | Concetti | Attività | Materiale |
|---|---|---|---|---|
| 5 | Introduzione a Hadoop | Introduzione a Hadoop | Lezione | Esercitazione |
| 10 | Utilizzo delle funzionalità Hadoop | Caratteristiche di Hadoop | Laboratorio | Esercitazione |
| 5 | Descrizione e preparazione del set di dati | Preparazione del set di dati per adulti | Laboratorio | Esercitazione |
| 10 | Hadoop SetUp | Installazione di Hadoop | Laboratorio | Esercitazione |
| 15 | Mappa e Riduci le Istruzioni | Hadoop Programming Script | Esempio di esecuzione | Hadoop Script |
| 15 | Libreria di Mappa/Ridurre in Python | Funzioni Hadoop in Python | Esempio di esecuzione | Google Colab |
Riconoscimenti
Il programma Human-Centered AI Masters è stato co-finanziato dal meccanismo per collegare l'Europa dell'Unione europea nell'ambito della sovvenzione CEF-TC-2020-1 Digital Skills 2020-EU-IA-0068.