Автоматизована система розпізнавання жестової мови

Скорочена інформація про документ
dc.contributor.advisorСулема, Євгенія Станіславівна
dc.contributor.authorПеня, Олександр Романович
dc.date.accessioned2019-09-13T15:55:17Z
dc.date.available2019-09-13T15:55:17Z
dc.date.issued2019
dc.description.abstractenThis project is devoted to the development of automatic gesture recognition software. In this work image recognition methods, principles of neural network functioning and training, modern precise networks and their properties were analyzed, a convolutional neural network was built and trained to recognize the Ukrainian sign alphabet and a software application was developed for its usage. The development was carried out according to the software lifecycle. Thus, the development process was planned, the requirements for the developed software application were identified and analyzed, the architecture was designed, the most appropriate development tools were chosen, defined components were created, their behavior was tested, integration testing was carried out, the system’s accuracy, speed and other attributes were analyzed and a technical documentation was created. The developed system is a software application that allows real-time video stream processing from a local video file or a webcam, processes frames using a neural network, detects elements of the sign language and displays their meanings. The program has a windowed graphical interface that provides user interaction, means of capturing a video stream, a deep convolutional neural network for image classification and a local built-in database of gesture meanings. The results of the project can be used to develop effective recognition and classification systems, for example, to create an application for translating sign language or communication in non-standard conditions.uk
dc.description.abstractukДаний дипломний проект присвячено розробленню програмної системи автоматичного розпізнавання жестів. У ході роботи було проаналізовано методи розпізнавання зображень, розглянуто принципи функціонування, навчання нейронних мереж, сучасні архітектури глибоких високоточних мереж та їх характеристики, побудовано та навчено згорткову нейронну мережу для розпізнавання української дактильної абетки та розроблено програмний застосунок для її застосування. Робота над проектом здійснювалась відповідно до життєвого циклу програмного забезпечення. Таким чином, було сплановано процес розроблення, виявлено та проаналізовано вимоги до розробленого програмного застосунку, спроектовано архітектуру, визначено найбільш підходящі засоби розроблення, розроблено виділені компоненти, протестовано їх поведінку, проведено інтеграційне тестування, проаналізовано точність, швидкодію та інші атрибути якості системи, створено технічну документацію. Розроблена система є програмним застосунком, який дозволяє в режимі реального часу обробляти відео-потік, який надходить із локального відео- файлу або з веб-камери, проводить обробку кадрів відео за допомогою нейронної мережі, виявляє елементи жестової мови та виводить їх значення. Програма має віконний графічний інтерфейс, який забезпечує взаємодію з користувачем, засоби захоплення відео-потоку, глибоку згорткову нейронну мережу за допомогою якої відбувається класифікація зображень, локальну вбудовану базу даних значень жестів. Результати роботи можуть бути використані для розробки ефективних систем розпізнавання та класифікації, наприклад, для розроблення застосунку для перекладу жестової мови або комунікації в нестандартних умовах.uk
dc.format.page144 с.uk
dc.identifier.citationПеня, О. Р. Автоматизована система розпізнавання жестової мови : дипломний проект ... бакалавра : 121 Інженерія програмного забезпечення / Пеня Олекснадр Романович. – Київ, 2019. – 144 с.uk
dc.identifier.urihttps://ela.kpi.ua/handle/123456789/29289
dc.language.isoukuk
dc.publisherКПІ ім. Ігоря Сікорськогоuk
dc.publisher.placeКиївuk
dc.titleАвтоматизована система розпізнавання жестової мовиuk
dc.typeBachelor Thesisuk

Файли

Контейнер файлів
Зараз показуємо 1 - 1 з 1
Ескіз
Назва:
Penia_bakalavr.pdf
Розмір:
5.13 MB
Формат:
Adobe Portable Document Format
Опис:
Завантажити
Ліцензійна угода
Зараз показуємо 1 - 1 з 1
Ескіз недоступний
Назва:
license.txt
Розмір:
8.98 KB
Формат:
Item-specific license agreed upon to submission
Опис:
Завантажити

Зібрання

Бакалаврські роботи (ПЗКС)
Бакалаврські роботи