Система автоаналiзу А/B тестувань

dc.contributor.advisorЯйлимова, Ганна Олексіївна
dc.contributor.authorМарков, Артур Андрiйович
dc.date.accessioned2023-01-28T10:22:09Z
dc.date.available2023-01-28T10:22:09Z
dc.date.issued2022-06
dc.description.abstractenThe topic of work: A/B test automatic assessment system. Qualification work contains: 51 pages, 6 drawings, 4 tables, 15 sources. The purpose of the study is to build a system of A/B testing with automatic assessment of test stability. The task of the study is to build a system of A/B assessment that meets the requirements of the product, and covers most of the cases. The object of study is: A/B testing on product funnels, and subject of research — analysis of statistical hypotheses. This paper considers the main approaches to building an automatic A/B assessment system based on the Uber Experimentation Platform. An analysis of Cris Stucchio and Evan Miller’s work on the Bayesian approach to the analysis of A / B testing was also conducted. Based on them, a software solution was built, which uses an analytical calculation of loss function, that improved the accuracy of the results compared to the discrete calculation. A system for checking the stability of the test based on the method of sequential sampling was also built and an analysis of the effectiveness of this approach compared to other approaches was conducted. The result is an A/B assessment system that is fully integrated into most similar products, which allows you to almost completely automate A/B testing on your product.uk
dc.description.abstractukТема роботи: Система автоаналiзу А/B тестувань. Квалiфiкацiйна робота мiстить: 55 стор., 10 рисункiв, 15 джерел. Метою дослiдження є: побудова системи А/B тестуваннь iз автоматичною перевiркою стабiльностi тесту. Задача дослiдження полягає у побудовi системи А/В тестувань, яка задовольняє вимогам продукту, та покриває бiльшу частину наявних тестувань. Об’єктом дослiдження є: А/B тестування на продуктових воронках, а предметом дослiдження – аналiз статистичних гiпотез. У цiй роботi розглянутi основнi пiдходи до побудови автоматичної системи А/B тестувань на основi Uber Experimentation Platform. Також був проведений аналiз робiт Cris Stucchio та Evan Miller щодо Баєсового пiдходу до аналiзу А/B тестувань. На їх основi було побудоване програмне рiшення, яке використовує аналiтичний вид функцiї втрат, що покращило точнiсть результатiв в порiвняннi з дискретним обрахуванням функцiї. Також була побудована система перевiрки стабiльностi тесту на основi методу sequential sampling та був проведений аналiз ефективностi цього пiдходу у порiвняннi iз iншими пiдходами. Результатом роботи є система А/B тестування, яка є повнiсттю iнтегрованою у бiльшiсть схожих продуктiв, що дозволяє майже повнiсттю автоматизувати А/B тестування на продуктi.uk
dc.format.page55 с.uk
dc.identifier.citationМарков, А. А. Система автоаналiзу А/B тестувань : дипломна робота … бакалавра : 113 Прикладна математика / Маркова Артур Андрійович. – Київ, 2022. – 55 с.uk
dc.identifier.urihttps://ela.kpi.ua/handle/123456789/52127
dc.language.isoukuk
dc.publisherКПІ ім. Ігоря Сікорськогоuk
dc.publisher.placeКиївuk
dc.subjecta/b тестуванняuk
dc.subjecta/b testinguk
dc.subjectбайєсовське тестуванняuk
dc.subjectbyesian testinguk
dc.subjectчастотне тестуванняuk
dc.subjectsequential testinguk
dc.titleСистема автоаналiзу А/B тестуваньuk
dc.typeBachelor Thesisuk

Файли

Контейнер файлів
Зараз показуємо 1 - 1 з 1
Вантажиться...
Ескіз
Назва:
Markov_bakalavr.pdf
Розмір:
1.19 MB
Формат:
Adobe Portable Document Format
Опис:
Ліцензійна угода
Зараз показуємо 1 - 1 з 1
Ескіз недоступний
Назва:
license.txt
Розмір:
1.71 KB
Формат:
Item-specific license agreed upon to submission
Опис: