Система розподіленого навчання нейронних мереж із використанням Big Data рішень
Вантажиться...
Дата
2021-12
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Розмір пояснювальної записки – 126 аркушів, містить 32 ілюстрації, 22 таблиці, 10 додатків.
У магістерській дисертації розглянуто реалізацію процесу розподіленого навчання нейронних мереж з великим вхідним об’ємом даних, показано особливості розподіленої системи, її основні характеристики, проведено аналіз існуючих реалізацій та визначені їх основні переваг та недоліків.
Розроблено систему, яка реалізує ETL процес, розподілене навчання моделей нейронних мереж та гнучке середовище.
Така система забезпечує зменшення часу, що витрачається на збір, обробку наборів даних, підготовку, розгортання та конфігурацію середовища, а також збільшення швидкості навчання моделей нейронних мереж за рахунок виконання розподілених розрахунків та можливості швидкого масштабування кожного її елементу. При цьому розроблена система спроєктована таким чином, що для розширення її функціоналу та створення інтеграцій з новими інструментами машинного навчання або Big data рішень не потрібно змінювати архітектурний дизайн самої системи.
Об’єктом даного дослідження є процес навчання нейронних мереж із великими вхідними даними.
Предметом – способи та засоби, за допомогою яких можна виконувати централізоване і/або розподілене навчання нейронних мереж із великими вхідними даними.
Опис
Ключові слова
розподiлена система, розподiлене навчання нейронних мереж, ETL, Kubernetes, Scala, Python
Бібліографічний опис
Нікулін, О. В. Система розподіленого навчання нейронних мереж із використанням Big Data рішень : магістерська дис. : 126 Інформаційні системи та технології / Нікулін Олексій Володимирович. – Київ, 2021. – 126 с.