Підсистема перекладу жестової мови в кіберфізичній системі
Вантажиться...
Дата
2024
Автори
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
У сучасному світі понад 70 мільйонів людей використовують жестову мову, однак суспільство залишається недостатньо адаптованим до їхніх потреб. Завдяки розвитку технологій нейронних мереж, з'являються можливості для створення інноваційних рішень, таких як автоматичний переклад жестової мови. Це сприятиме інтеграції людей, що спілкуються жестовою мовою у суспільство. Метою даної роботи є підвищення ефективності та доступності комунікації з людьми, що спілкуються мовою жестів, за рахунок створення та застосування системи автоматизованого перекладу жестової мови. Для досягнення мети необхідно вирішити наступні задачі: – аналіз відомих готових рішень; – формування вимог до розроблюваної підсистеми; – вибір архітектури нейронних мереж; – вибір архітектури підсистеми; – програмування підсистеми; – тестування. Об’єкт дослідження: кіберфізична система з функцією двостороннього перетворення жестової мови у звичайну. Предмет дослідження: процес перетворення жестової мови у звичайну та навпаки на основі глибинних нейронних мереж. Методи дослідження: метод аугментації даних для збільшення навчального набору даних, метод градієнтного спуску для навчання нейронних мереж, метод ітеративного проходження контекстним вікном для розпізнавання жестів у відео потоці, метод надання інструкцій та прикладів перекладу підвищення точності перекладу.
Опис
Ключові слова
Підсистема, жестова мова, кіберфізична система, нейронні мережі
Бібліографічний опис
Щур, А. С. Підсистема перекладу жестової мови в кіберфізичній системі : магістерська дис. : 126 Інформаційні системи та технології / Щур Антон Сергійович. – Київ, 2024. – 106 с.