Інтелектуальна система AI Motion Capture для анімації 3D-моделі людини з використанням методів компʼютерного зору та аудіоаналіз
Вантажиться...
Дата
2026
Автори
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Дипломна робота: 109 с., 31 рис., 16 табл., 53 посилання, 1 додаток.
Обʼєкт дослідження – процес безмаркерного захоплення руху людини за монокулярним відео та синхронним аудіо. Предмет дослідження – методи багатоканального подання, синхронізації, очищення та регіонального злиття результатів нейромережевого інференсу для анімації персонажа Blender/DAZ. Мета роботи – підвищити ефективність і доступність створення анімації 3Dмоделі людини шляхом розроблення системи AI-захоплення руху, у якій тіло, кисті, голова, відеоміміка, аудіоміміка та емоції зберігаються окремими каналами у форматі AIMOCAP. Для досягнення мети оглянуто сучасні методи безмаркерного захоплення руху, моделі SMPL-X, MediaPipe, Audio2Face-3D, HaMeR та засоби розпізнавання емоцій; проаналізовано обмеження готових програмних рішень; розроблено канальну модель декомпозиції, самоописний формат .aimocap, producer-алгоритми калібрування, очищення і кодування та consumer-алгоритми декодування, синхронізації, регіонального злиття і емоційного шару. Реалізовано бібліотеку aimocap, настільний редактор на Qt 6 і тестове доповнення Blender/DAZ. Виконано експериментальну перевірку на відеофрагменті з послідовним увімкненням каналів, порівнянням джерел кистей і політик злиття рота. Встановлено, що спеціалізоване джерело кистей HaMeR зменшує джитер порівняно з NLF, а аудіоканал стабілізує рух рота за деградації відео; отримані файли AIMOCAP відтворюються у Blender з окремими редагованими доріжками тіла, обличчя й емоцій. Практичне значення розробки полягає у можливості використовувати систему в навчальних і дослідницьких сценаріях створення анімації без маркерів, інерційного костюма та багатокамерної сцени.
Опис
Ключові слова
ai-захоплення руху, компʼютерний зір, аудіоаналіз, smpl-x, регіональне злиття, blender, aimocap, AI motion capture, computer vision, audio analysis, regional fusion
Бібліографічний опис
Вареня, А. В. Інтелектуальна система AI Motion Capture для анімації 3D-моделі людини з використанням методів компʼютерного зору та
аудіоаналіз : дипломна робота … бакалавра : 122 Комп'ютерні науки / Вареня Андрій Вячеславович. – Київ, 2026. – 109 с.