Автоматизація збору даних з веб-ресурсів і їх аналіз
Вантажиться...
Дата
2024
Автори
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Дипломна робота: 113 с., 6 табл., 8 рис., 2 дод., 20 джерел.
Об'єкт дослідження: дані з веб-ресурсів.
Предмет дослідження: методи збору, обробки та аналізу даних з веб-ресурсів для виявлення важливих інформаційних інсайтів.
Мета роботи: розробка ефективних методів та інструментів для збору, обробки та аналізу даних з веб-ресурсів з метою виявлення важливих інформаційних інсайтів.
Завдання дослідження включають:
1) аналіз існуючих методів та інструментів збору даних з веб-ресурсів;
2) вибір оптимальної мови програмування та бібліотек для реалізації проекту;
3) розробка скриптів для автоматизованого збору та обробки даних;
4) аналіз зібраних даних для виявлення ключових тем та трендів;
5) оцінка ефективності реалізованого рішення та порівняння з
альтернативними підходами;
6) розробка рекомендацій щодо використання отриманих інсайтів для бізнесу.
Результатом роботи є програмний продукт, розроблений за допомогою Python та бібліотек для обробки та аналізу даних, таких як requests, Scrapy, Pandas, NLTK тощо. Створений програмний продукт дозволяє автоматизувати процес збору та аналізу даних з веб-ресурсів, що спрощує виявлення ключових тем та трендів.
Подальший розвиток предмету дослідження може включати розгляд більш складних методів машинного навчання та аналізу тексту для покращення точності та швидкості аналізу даних, а також розширення функціональності для роботи з різними типами веб-ресурсів.
Опис
Ключові слова
автоматизація збору даних, веб-ресурси, аналіз даних, текстовий аналіз, data collection automation, web resources, data analysis, text analysis
Бібліографічний опис
Бойко, А. В. Автоматизація збору даних з веб-ресурсів і їх аналіз : дипломна робота ... бакалавра : 124 Системний аналіз / Бойко Анна Валеріївна. - Київ, 2024. - 113 с.