Informații administrative
| Titlu | Tehnologii bazate pe Hadoop |
| Durată | 60 |
| Modulul | B |
| Tipul lecției | Practică |
| Focalizare | Practică – IA organizațională |
| Subiect | Hadoop |
Cuvinte cheie
Hartă Reducere, Cadru Hadoop,
Obiective de învățare
- Pentru a cunoaște fundamentele hărții Reduce paradigma de programare
- Pentru a ști cum să configurați Hadoop Framework
- Pentru a ști cum să aplicați funcțiile de reducere a hărții
- Pentru a ști cum să programeze în Python cu biblioteca de Map Reduce
Pregătirea preconizată
Evenimente de învățare care urmează să fie finalizate înainte
Obligatoriu pentru studenți
Nici unul.
Opțional pentru studenți
Nici unul.
Referințe și context pentru studenți
- Big Data Hadoop Tutorial, 2022
- Hadoop Streaming Map Reduce Program mai 5, 2022
- Venituri pentru adulți-census, 2022
- MapReduce Tutorial, 2022
- Scrierea unui program hadoop mapreduce, 2022
- Mapper, 2022
- Reductor, 2022
- Ce este MapReduce?2022
- Încearcă VM VirtualBox, 2022
- 10 caracteristici ale lui Hadoop care l-au făcut cel mai popular
Recomandat pentru profesori
Materiale de lecție
- Hadoop Configurare și utilizare pas cu pas Ghid (link la PDF)
- Mesajul de succes al operației de reducere a hărții
- Datele obținute din setul de date pentru adulți al hărții reduc operarea
- Codul și instrucțiunile Hadoop (link către TXT)
- Mașină virtuală preconfigurată cu Hadoop (pregătit ad hoc pentru lecție)
Instrucțiuni pentru profesori
Trebuie urmată următoarea schiță:
- Introducere în Hadoop
- Funcții Hadoop
- Hartă Reducerea Operațiunii
- Prelucrarea datelor
- Localizarea datelor
- Descrierea și pregătirea setului de date
- Pregătirea setului de date pentru adulți
- Configurarea și configurarea Hadoop
- Instalare Hadoop
- Configurarea Hadoop
- Harta și reducerea instrucțiunilor
- Ml conductă realizată cu Kubeflow
- Biblioteca Hartă/Reducere în Python
- Google Colab de pe hartă/Reduce Biblioteca
Orarul
| Durată (min) | Descriere | Concepte | Activitate | Material |
|---|---|---|---|---|
| 5 | Introducere în Hadoop | Introducere în Hadoop | Prelegere | Tutorial |
| 10 | Utilizarea funcțiilor Hadoop | Caracteristicile lui Hadoop | Laborator | Tutorial |
| 5 | Descrierea și pregătirea setului de date | Pregătirea setului de date pentru adulți | Laborator | Tutorial |
| 10 | Configurare Hadoop | Instalare Hadoop | Laborator | Tutorial |
| 15 | Harta și reducerea instrucțiunilor | Script de programare Hadoop | Exemplu de funcționare | Scriptul Hadoop |
| 15 | Biblioteca Hartă/Reducere în Python | Funcții Hadoop în Python | Exemplu de funcționare | Google Colab |
Confirmări
Programul de masterat AI centrat pe om a fost cofinantat de Mecanismul pentru interconectarea Europei al Uniunii Europene sub Grantul CEF-TC-2020-1 Digital Skills 2020-EU-IA-0068.