Архітектура програмного забезпечення відмовостійких систем обробки великих даних
Вантажиться...
Дата
2022-12
Автори
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Дипломний проект на тему «Архітектура програмного забезпечення відмовостійких систем обробки великих даних» складається зі вступу, чотирьох розділів, висновків, переліку джерел посилання, додатків.
Загальний обсяг роботи становить 102 сторінки. Список джерел посилання складається з 37 найменувань. Робота містить 20 ілюстрацій, 23 таблиці та 2 додатка.
Мета дослідження – підвищення якості існуючих архітектур програмного забезпечення відмовостійкої системи обробки великих даних.
Об’єкт дослідження – програмне забезпечення систем обробки великих даних.
Предмет дослідження – методи, моделі та засоби побудови архітектури відмовостійкої системи обробки великих даних.
В роботі проведено огляд проблем відмовостійкості при обробці великих обсягів даних. Розглянуто доступні інструменти для обробки великих даних та побудови систем, які займаються такою обробкою. В результаті роботи, запропоновано удосконалену архітектуру відмовостійкої системи обробки великих даних, що забезпечує високу пропускну здатність та є стійкою до збоїв і швидкою у відновленні за рахунок використання розглянутів інструментів та технік із забезпечення відмовостійкості. Також була розроблена система обробки білінг даних з використанням розробленої покращеної архітектури відмовостійких систем обробки великих даних.
Опис
Ключові слова
архітектура, відмовостійкість, великі дані, відновлення, Kubernetes, Spark, structured streaming, Kafka, architecture, fault-tolerance, big data, recovery, structured streaming
Бібліографічний опис
Ващенок, А. І. Архітектура програмного забезпечення відмовостійких систем обробки великих даних : магістерська дис. : 121 Інженерія програмного забезпечення / Ващенок Андрій Ігорович. – Київ, 2022. – 103 с.