Комп'ютерна система реєстрації новин на веб-ресурсах
Вантажиться...
Дата
2019-06
Науковий керівник
Назва журналу
Номер ISSN
Назва тому
Видавець
КПІ ім. Ігоря Сікорського
Анотація
Кваліфікаційна робота включає пояснювальну записку (51 с., 13 рис., 2 додатки).
Бакалаврський проект призначено розробці комп'ютерної системи реєстрації новин на веб-ресурсах, яка дозволяє визначити чи містить блок новин веб-ресурса деструктивний контент.
Комп’ютерна система реєстрації новин на веб-ресурсах дозволяє: знайти і проаналізувати блок новин на веб-ресурсі за посиланням; здійснити аналізу, як тексту сторінки в цілому, так і його окремих блоків на наявність контенту деструктивного характеру; проводити повторення аналізу веб-ресурсу для випадків коли веб-ресурс генерує список новин при кожному відкритті сторінки. Передбачена можливість не тільки виявлення яскраво вираженого деструктивного контенту за рахунок слів-маркерів, але й винесення підозри про наявність прихованого деструктивного контенту за рахунок аналізу стиля написання новини.
В ході розробки:
проведено аналіз існуючих рішень для боротьби з деструктивним контентом в Інтернеті;
сформульовані вимоги до комп’ютерної системи реєстрації новин на веб-ресурсах;
розглянута проблематика розпізнавання деструктивного контенту;
розроблені алгоритми функціонування комп’ютерної системи реєстрації новин на веб-ресурсах.
Використання системи наведеної в цій роботі дозволяє користувачам оцінити наявність деструктивного контенту на веб-ресурсі перед його відвідуванням.
Опис
Ключові слова
нейронні мережі, машинне навчання, Python, scikit-learn, Scrapy, urllib, NoSQL, MongoDB, neural networks, machine learning
Бібліографічний опис
Скрипник, В. С. Комп'ютерна система реєстрації новин на веб-ресурсах : дипломний проект ... бакалавра : 6.050102 Комп'ютерна інженерія / Скрипник Владислав Сергійович. – Київ, 2019. – 64 с.