Система інтелектуального аналізу переміщень руки по рухомому відео
Ескіз недоступний
Дата
2018
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
Анотація
Дипломна робота: 79 с., 18 рис., 6 табл., 1 додаток, 12 джерел.
Об'єктом дослідження є підходи до розпізнавання жестів у випадку потокового відео з камери.
Актуальність теми виражена тим, що для людей очевидним способом взаємодії є жести, отже їх інтелектуальний аналіз дозволить керувати різними системами. Перевагою такого підходу є відсутність необхідного додаткового обладнання, потрібна лише камера, яка зараз є чи не в усіх мобільних пристроях (і смартфонах, і ноутбуках). Важливим та соціально значущою складовою розробки є можливість впровадження її у мобільні додатки з графічними інтерфейсами. У силу того, що більшість програм використовує графічний інтерфейс з тактильним управлінням, та візуальним відкликом, це унеможливлює використання таких додатків людьми з обмеженими фізичними можливостями. Тож впровадження системи що розпізнає жести в якості ще одного способу взаємодії з інтерфейсом зробить мобільні додатки доступними для людей з поганим зором. Для людей очевидним способом взаємодії є жести, отже їх інтелектуальний аналіз дозволить керувати різними системами.
Тому актуальною є розробка системи що дозволить застосовувати жести для невербальної комунікації людей з фізичними обмеженнями з електронними пристроями та дасть можливість створення системи управління функціями автомобіля, для якої не потрібні додаткові фізичні контролери.
Мета роботи – розробити підходи до розпізнавання жестів, визначити їх основні переваги та недоліки; розробити додатки, які спрощують взаємодію користувачів портативних девайсів з, безпосередньо цими девайсами.
Задачі роботи – розробити алгоритми та програмне забезпечення, яке б можна було з легкість інтегрувати до існуючих мобільних застосунків, для додавання способу взаємодії з ними за допомогою жестів.
Завдання дослідження : проаналізувати існуючі алгоритми розпізнавання жестів; розробити та налаштувати нейронну мережу; покращити нейронну мережу для максимальної продуктивності; дослідити ефективність розроблених алгоритмів.
Об'єктом дослідження є процес аналізу переміщень руки з камери смартфона в режимі реального часу по рухомому відео.
Предметом дослідження є методи та алгоритми аналізу переміщення руки з камери смартфона в режимі реального часу по рухомому відео
Методом дослідження є аналіз існуючих підходів та їх удосконалення та перетворення для отримання кращих результатів.
Наукова новизна одержаних результатів визначається унікальним розроблений алгоритмом розпізнавання та інтелектуального аналізу жестів з камери смартфону по рухомому відео, який у порівнянні з існуючими алгоритмами показує більшу якість розпізнавання.
Практичне значення полягає в розробленій програмній реалізації, яка дозволяє використовувати розроблений алгоритм для створення системи взаємодії користувача зі смартфоном за допомогою жестів.
Теоретичною та методологічною основою дослідження є праці зарубіжних вчених в питанні алгоритмів розпізнавання жестів, обробки і роботи з відео та зображеннями, та засобів які при цьому використовуються а також особисті напрацювання опубліковані у збірниках.
В ході дослідницької роботи створено програмний продукт для розпізнавання жестів, а також представлено результати роботи алгоритмів на реальних даних.
Опис
Ключові слова
hand tracking on real-time video, computer vision, histogram of oriented gradients, speeded up robust features
Бібліографічний опис
Мамаєнко, Є. О. Система інтелектуального аналізу переміщень руки по рухомому відео : магістерська дис. : 121 Інженерія програмного забезпечення / Мамаєнко Євген Олександрович. – Київ, 2018. – 80 с.