Система інтелектуального аналізу переміщень руки по рухомому відео
| dc.contributor.advisor | Гавриленко, Олена Валеріївна | |
| dc.contributor.author | Мамаєнко, Євген Олександрович | |
| dc.date.accessioned | 2019-01-24T12:36:09Z | |
| dc.date.available | 2019-01-24T12:36:09Z | |
| dc.date.issued | 2018 | |
| dc.description.abstracten | Thesis: 78 p., 18 figures, 6 tables, 1 supplement, 12 sources. The subject of the study is approaches to the recognition of gestures in the case of streaming video from the camera. The urgency of the topic is expressed by the fact that for people the obvious way of interaction are gestures, therefore, their intellectual analysis will allow the management of various systems. The advantage of this approach is the lack of the necessary additional equipment, only the camera that is presently available on all mobile devices (and smartphones, and laptops) is required. An important and socially significant component of the development is the ability to implement it in mobile applications with graphical interfaces. Due to the fact that most programs use a tactile control graphical interface and a visual response, it makes it impossible to use such applications by people with disabilities. So introducing a gesture recognition system as another way to interact with the interface will make mobile applications accessible to people with poor eyesight. For people, the obvious way of interaction is gestures, so their intellectual analysis will allow you to manage different systems. Therefore, it is relevant to develop a system that will allow the use of gestures for non-verbal communication of people with physical constraints with electronic devices and will enable the creation of a car control system that does not require additional physical controllers. The purpose of the work is to develop approaches to the recognition of gestures, to determine their main advantages and disadvantages; develop applications that simplify the interaction of users of portable devices with, directly these devices. The job objectives are to develop algorithms and software that can be easily integrated into existing mobile applications to add a way to interact with them using gestures. Objectives of the study: to analyze the existing algorithms for recognition of gestures; develop and configure a neural network; improve neural network for maximum performance; to investigate the effectiveness of the developed algorithms. The object of the study is the process of analyzing hand movements from the camera of the smartphone in real-time on a moving video. The subject of the study is the methods and algorithms for analyzing the movement of a hand from the camera of the smartphone in real-time on a moving video The research method is an analysis of existing approaches and their improvement and transformation for better results. The scientific novelty of the resulting results is determined by the unique developed by the algorithm of recognition and intelligent analysis of gestures from the camera of a smartphone on a mobile video, which, in comparison with existing algorithms, shows greater recognition quality. The practical value lies in the developed software implementation, which allows using the developed algorithm to create a user interaction system with a smartphone using gestures. The theoretical and methodological basis of the research is the work of foreign scientists on the issue of algorithms for recognizing gestures, processing and working with video and images, and the means used in doing so, as well as personal developments published in collections. During the research work, a software product was created for the recognition of gestures, as well as the results of the algorithms on the real data. | uk |
| dc.description.abstractuk | Дипломна робота: 79 с., 18 рис., 6 табл., 1 додаток, 12 джерел. Об’єктом дослідження є підходи до розпізнавання жестів у випадку потокового відео з камери. Актуальність теми виражена тим, що для людей очевидним способом взаємодії є жести, отже їх інтелектуальний аналіз дозволить керувати різними системами. Перевагою такого підходу є відсутність необхідного додаткового обладнання, потрібна лише камера, яка зараз є чи не в усіх мобільних пристроях (і смартфонах, і ноутбуках). Важливим та соціально значущою складовою розробки є можливість впровадження її у мобільні додатки з графічними інтерфейсами. У силу того, що більшість програм використовує графічний інтерфейс з тактильним управлінням, та візуальним відкликом, це унеможливлює використання таких додатків людьми з обмеженими фізичними можливостями. Тож впровадження системи що розпізнає жести в якості ще одного способу взаємодії з інтерфейсом зробить мобільні додатки доступними для людей з поганим зором. Для людей очевидним способом взаємодії є жести, отже їх інтелектуальний аналіз дозволить керувати різними системами. Тому актуальною є розробка системи що дозволить застосовувати жести для невербальної комунікації людей з фізичними обмеженнями з електронними пристроями та дасть можливість створення системи управління функціями автомобіля, для якої не потрібні додаткові фізичні контролери. Мета роботи – розробити підходи до розпізнавання жестів, визначити їх основні переваги та недоліки; розробити додатки, які спрощують взаємодію користувачів портативних девайсів з, безпосередньо цими девайсами. Задачі роботи – розробити алгоритми та програмне забезпечення, яке б можна було з легкість інтегрувати до існуючих мобільних застосунків, для додавання способу взаємодії з ними за допомогою жестів. Завдання дослідження : проаналізувати існуючі алгоритми розпізнавання жестів; розробити та налаштувати нейронну мережу; покращити нейронну мережу для максимальної продуктивності; дослідити ефективність розроблених алгоритмів. Об’єктом дослідження є процес аналізу переміщень руки з камери смартфона в режимі реального часу по рухомому відео. Предметом дослідження є методи та алгоритми аналізу переміщення руки з камери смартфона в режимі реального часу по рухомому відео Методом дослідження є аналіз існуючих підходів та їх удосконалення та перетворення для отримання кращих результатів. Наукова новизна одержаних результатів визначається унікальним розроблений алгоритмом розпізнавання та інтелектуального аналізу жестів з камери смартфону по рухомому відео, який у порівнянні з існуючими алгоритмами показує більшу якість розпізнавання. Практичне значення полягає в розробленій програмній реалізації, яка дозволяє використовувати розроблений алгоритм для створення системи взаємодії користувача зі смартфоном за допомогою жестів. Теоретичною та методологічною основою дослідження є праці зарубіжних вчених в питанні алгоритмів розпізнавання жестів, обробки і роботи з відео та зображеннями, та засобів які при цьому використовуються а також особисті напрацювання опубліковані у збірниках. В ході дослідницької роботи створено програмний продукт для розпізнавання жестів, а також представлено результати роботи алгоритмів на реальних даних. | uk |
| dc.format.page | 80 с. | uk |
| dc.identifier.citation | Мамаєнко, Є. О. Система інтелектуального аналізу переміщень руки по рухомому відео : магістерська дис. : 121 Інженерія програмного забезпечення / Мамаєнко Євген Олександрович. – Київ, 2018. – 80 с. | uk |
| dc.identifier.uri | https://ela.kpi.ua/handle/123456789/26030 | |
| dc.language.iso | uk | uk |
| dc.publisher.place | Київ | uk |
| dc.subject | hand tracking on real-time video | uk |
| dc.subject | computer vision | uk |
| dc.subject | histogram of oriented gradients | uk |
| dc.subject | speeded up robust features | uk |
| dc.subject.udc | 004.925.3 | uk |
| dc.title | Система інтелектуального аналізу переміщень руки по рухомому відео | uk |
| dc.type | Master Thesis | uk |
Файли
Контейнер файлів
1 - 1 з 1
Ескіз недоступний
- Назва:
- Mamaienko_magistr .docx
- Розмір:
- 5.94 MB
- Формат:
- Microsoft Word XML
- Опис:
Ліцензійна угода
1 - 1 з 1
Ескіз недоступний
- Назва:
- license.txt
- Розмір:
- 7.74 KB
- Формат:
- Item-specific license agreed upon to submission
- Опис: