Административна информация
| Дял | Хардуерни и софтуерни рамки за дълбоко обучение |
| Продължителност | 60 минути |
| Модул | Б |
| Вид на урока | Лекция |
| Фокус | Технически — задълбочено обучение |
| Тема | Изчислителни графики |
Ключови думи
задълбочено обучение, софтуер, хардуер, GPU инфраструктура,
Учебни цели
- Запознаване с хардуерните и софтуерните рамки за системи за дълбоко обучение
Очаквана подготовка
Обучение на събития, които трябва да бъдат завършени преди
Задължително за студентите
Няма.
Незадължително за студенти
Няма.
Референции и фон за студенти
Няма.
Препоръчва се за учители
Няма.
Материали за уроци
Инструкции за учители
Целта на тази лекция е да покаже на студентите какви хардуерни и софтуерни архитектури помагат за обучение и внедряване на решения за дълбоко обучение. Трябва да признаем, че тези хардуерни и софтуерни компоненти са брилянтни технически решения, които ни позволяват да мащабираме обучението и изводите. Освен хардуера, графичните процесори NVIDIA и Google TPU са най-добрият избор днес, защото внедряват оптимизирани алгоритми за дълбоко обучение с висококачествени и бързи драйвери.
За дълбоко обучение използваме много повече софтуер, отколкото само рамки за дълбоко обучение. Използваме конфигурация, планиране, оркестрация и много други инструменти. Краткото въведение в тази лекция само надраска повърхността.
В последната част на лекцията показваме как може да се реализира мулти-ГПУ обучение с Хоровод. Целта не е да се потопите дълбоко в мулти-GPU тренировките, а да покажете, че не е толкова трудно да се приложи основно решение.
Отварянето на уеб сайтовете на производителите на хардуер и на доставчиците на софтуер може да помогне на студентите да имат практически опит.
Очертаване
- хардуерни решения — от десктоп до сървър
- софтуерни рамки за дълбоко обучение
- допълнителни софтуерни продукти за решения за дълбоко обучение
| Продължителност (минимум) | Описание |
|---|---|
| 5 | Необходимостта от паралелни изчисления в дълбокото обучение |
| 15 | Хардуерни решения |
| 5 | Как да сравним различен хардуер за дълбоко обучение |
| 10 | Софтуерна архитектура за дълбоко обучение |
| 10 | Рамки за дълбоко обучение |
| 10 | Допълнителни софтуерни компоненти |
Потвърждения
Balint Gyires-Tóth (Budapest University of Technology and Economics)
Магистърската програма по ИИ, насочена към човека, беше съфинансирана от Механизма за свързване на Европа на Европейския съюз под формата на безвъзмездни средства № CEF-TC-2020—1 Digital Skills 2020-EU-IA-0068.