Роботизована система спілкування для людей з порушеннями слуху та мовлення
Вантажиться...
Дата
2025
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Роботизована система спілкування для осіб з порушеннями слуху та мовлення. Проєкт містить 73 с. тексту, 27 рисунків, 2 таблиці, посилання на 19 літературних джерел, 1 додаток та 4 конструкторські документи.
Об’єктом розробки є система розпізнавання мови жестів в реальному часі для роботів-консультантів. Мета розробки — забезпечити зручний та доступний спосіб комунікації для людей з вадами слуху та мовлення шляхом створення та реалізації ефективної системи, що здатна розпізнавати мову жестів в реальному часі. Предметом дослідження є програмні рішення та алгоритми розпізнавання мови жестів з використанням моделі глибокого навчання LSTM та технології MediaPipe Holistic для захоплення рухів. У дипломному проєкті реалізовано прототип системи розпізнавання жестів з використанням бібліотеки TensorFlow, яка є потужним фреймворком для розробки та навчання моделей машинного навчання. Побудовано та навчено нейронну мережу, яка активно розпізнає жести з відеопотоку в реальному часі. Система передбачає подальшу інтеграцію системи в сервісного робота, який зможе надавати різноманітну допомогу – навігація у просторі, надання важливої інформації, розваги, медицина. Отримані результати можуть бути використані для створення інклюзивних роботизованих асистентів у громадських містах для людей з особливими потребами.
Опис
Ключові слова
розпізнавання жестів, нейронні мережі, LSTM, глибоке навчання, роботизована система, інклюзія, gesture recognition, neural networks, ltsm, deep learning, robotic system, inclusion
Бібліографічний опис
Грищенко, О. О. Роботизована система спілкування для людей з порушеннями слуху та мовлення : дипломний проєкт ... бакалавра : 126 Інформаційні системи та технології / Грищенко Олексій Олександрович. – Київ, 2025. – 79 с.