Система розпізнавання української жестової мови на базі технологій машинного навчання та комп'ютерного зору
Ескіз недоступний
Дата
2024
Автори
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Кваліфікаційна робота включає пояснювальну записку (57- с., 23- рис.
6- табл., - додатки).
Об’єкт розробки – створення системи розпізнавання української жестової мови на базі технологій машинного навчання та комп'ютерного зору з використанням TensorFlow.js, MobileNet, KNN Classifier та Handpose Model.
Система дозволяє: здійснювати розпізнавання жестів у реальному часі; забезпечувати високу точність та швидкість роботи системи; передбачені механізми захисту від помилок. Передбачена можливість інтеграції системи у різні середовища для покращення комунікації та автоматизації процесів. В процесі розробки були використані технології машинного навчання TensorFlow.js, MobileNet, KNN Classifier та модель Handpose. В ході розробки: проведено аналіз методів побудови існуючих систем розпізнавання жестової мови, сформульовані вимоги до системи розпізнавання української жестової мови, розроблена система розпізнавання жестів на базі машинного навчання та комп'ютерного зору, розроблена структура системи розпізнавання жестів, розроблено користувацький додаток для управління та моніторингу роботи системи розпізнавання жестів, розроблено веб-сервіс для інтеграції системи розпізнавання жестів у різні середовища, розроблено програмне забезпечення для роботи з моделями TensorFlow.js, MobileNet, KNN Classifier та Handpose.
Упровадження цієї системи дозволить покращити якість комунікації для людей з порушеннями слуху та сприятиме розвитку технологій машинного навчання та комп'ютерного зору.
Опис
Ключові слова
система розпізнавання жестової мови, tensorflow.js, mobilenet, knn classifier, handpose model, sign language recognition system, handpose model.
Бібліографічний опис
Гусарова, Н. В. Система розпізнавання української жестової мови на базі технологій машинного навчання та комп'ютерного зору : дипломний проект ... бакалавра : 123 Комп'ютерна інженерія / Гусарова Надія Вікторівна. – Київ, 2024. – 72 с.