Метод та програмне забезпечення для поєднання віртуальної та доповненої реальності на смартфонах
Вантажиться...
Дата
2024
Автори
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Сучасний розвиток мобільних технологій дозволяє створювати нові
способи взаємодії між фізичним та віртуальним світом. Віртуальна та
доповнена реальності стали важливими інструментами для багатьох галузей,
таких як освіта, ігрова індустрія, медицина та дизайн. Ця робота спрямована
на розробку комплексного програмного методу для забезпечення синхронної
інтеграції віртуальної та доповненої реальностей на смартфонах.
Запропоноване рішення поєднує три основні підходи: передбачення
руху смартфона за допомогою нейронної мережі LSTM, прорисовку сцен
поза полем зору за допомогою реконструкції оточення та отримання глибини
зображення завдяки використанню LiDAR. Для досягнення цих цілей
використано Unity AR Foundation, що забезпечує кросплатформенну
підтримку та можливість створення стереозображень для відображення
тривимірних сцен.
Програмний метод базується на архітектурі, яка включає збір даних,
навчання LSTM-моделі для передбачення майбутнього положення камери та
реалізацію оптимізованих моделей на мобільних пристроях за допомогою
PyTorch і LibTorch-Lite. Основні переваги запропонованого підходу
включають зменшення візуальних затримок, покращення плавності
відтворення змішаних сцен та підвищення точності інтеграції віртуального
контенту з реальним оточенням.
Опис
Ключові слова
мобільний застосунок, смартфон, змішана реальність, віртуальна реальність, доповнена реальність, програмне забезпечення
Бібліографічний опис
Проценко, А. П. Метод та програмне забезпечення для поєднання віртуальної та доповненої реальності на смартфонах : магістерська дис. : 121 Інженерія програмного забезпечення / Проценко Андрій Павлович. – Київ, 2024. – 105 с.