Вибір критерію якості для оцінювання прогнозів нелінійних нестаціонарних процесів

dc.contributor.authorБелас, А. О.
dc.contributor.authorБідюк, П. І.
dc.date.accessioned2023-08-09T06:36:33Z
dc.date.available2023-08-09T06:36:33Z
dc.date.issued2021
dc.description.abstractПроблематика. Прогнозування нелінійних нестаціонарних процесів (ННП), поданих у формі часових рядів, є актуальним, оскільки такі ряди можуть описувати процеси в технічних й економічних системах. Для вибору найкращої математичної моделі використовують різні метрики оцінювання якості прогнозів, як-от: R^2, RMSE, MAE, MAPE. Однак оптимізація моделі за одним критерієм погіршує її відносно іншого. Тому важливо розуміти, яку метрику слід використовувати для оптимізації та оцінки якості прогнозу в поставленій задачі. Мета дослідження. Розробити та проаналізувати критеріальну базу для оцінювання прогнозів ННП, а також підхід до вибору критерію якості з урахуванням особливостей поставленої задачі прогнозування. Методика реалізації. Виконання порівняльного аналізу основних метрик для задачі регресії, а саме їхнього теоретичного та практичного змісту, переваг і недоліків у різних випадках. Результати дослідження. Сформовано критеріальну базу для оцінювання прогнозів ННП, а також підхід до вибору критерію якості з урахуванням особливостей поставленої задачі прогнозування. Для мінімізації абсолютної похибки проаналізовано та рекомендовано використовувати метрики RMSE (MSE, R^2) і MAE залежно від необхідності роботи з викидами. Для розв’язання задач мінімізації відносної помилки запропоновано використовувати метрику RMSLE. Висновки. Показано важливість вибору метрики для оптимізації та оцінювання якості прогнозу в поставленій задачі. Отримані критеріальну базу та підхід можна використовувати в подальших дослідженнях як для розв’язання практичних задач моделювання та прогнозування ННП, так і для розробки нових методів або загальної методики розв’язання цих задач.uk
dc.description.abstractotherПроблематика. Прогнозирование нелинейных нестационарных процессов (НПП), представленных в форме временных рядов, является актуальным, поскольку такие ряды могут описывать процессы в технических и экономических системах. Для выбора лучшей математической модели используют различные метрики оценивания качества прогнозов, такие как: R^2, RMSE, MAE, MAPE. Однако оптимизация модели по одному критерию ухудшает ее относительно другого. Поэтому важно понимать, какую метрику следует использовать для оптимизации и оценивания качества прогноза в поставленной задаче. Цель исследования. Разработать и проанализировать критериальную базы для оценивания прогнозов НПП, а также подход к выбору критерия качества с учетом поставленной задачи прогнозирования. Методика реализации. Выполнение сравнительного анализа основных метрик для задачи регрессии, а именно их теоретического и практического смысла, преимуществ и недостатков в различных случаях. Результаты исследования. Сформирована критериальная база для оценивания прогнозов ННП, а также подход к выбору критерия качества с учетом особенностей поставленной задачи прогнозирования. Для минимизации абсолютной погрешности проанализированы и рекомендованы к использованию метрики RMSE (MSE, R^2) и MAE в зависимости от необходимости работы с выбросами. Для решения задач минимизации относительной погрешности предложено использовать метрику RMSLE. Выводы. Показана важность выбора метрики для оптимизации и оценивания качества прогноза в поставленной задаче. Полученные критериальную базу и подход можно использовать в дальнейших исследованиях как для решения практических задач моделирования и прогнозирования ННП, так и для разработки новых методов или общей методики решения таких задач.uk
dc.description.abstractotherBackground. The problem of forecasting nonlinear nonstationary processes presented in the form of time series is very relevant, since such series can describe dynamics of the processes in both technical and economic systems. To establish the best model, various metrics are used to assess the quality of forecasts, such as R^2, RMSE, MAE, MAPE. However, in many tasks, when optimizing the model according to the selected criterion, the model becomes worse in relation to another criterion. Therefore it is important to understand which metric must be used to optimize and assess the quality of the forecast in the given task. Obective. The aim of the paper is to develop a criteria base for assessing forecasts of nonlinear nonstationary processes, as well as an approach to choosing a metric in accordance to the specificity of the set forecasting problem. Methods. The paper presents a comparative analysis of the basic metrics for the regression problem, their theoretical and practical meaning, advantages and disadvantages in various cases. New approaches are proposed based on the results of the analysis. Results. Based on the analysis of the selected data, it is shown that by optimizing the model according to the selected criterion, the model becomes worse in relation to another criterion. A criterion basis for assessing forecasts of nonlinear nonstationary processes has been formed, as well as an approach to the selection of a quality criterion in accordance with the specifics of the set forecasting problem. To minimize an absolute error, the RMSE (MSE, R^2) and MAE metrics are analysed and recommended, depending on the need to work with outliers. The RMSLE metric is proposed for solving the problems of minimizing the relative metric, for solving the shown problems of the MAPE metric for this class of problems. Conclusions. The paper shows the importance of choosing a metric that must be used to optimize and assess the quality of the forecasts in the given task. The obtained criterion base and approach can be used in further research to solve practical problems in modelling and forecasting nonlinear nonstationary processes and to develop new methods or general method for solving such problems.uk
dc.format.pagerangePp. 35-48uk
dc.identifier.citationБелас, А. О. Вибір критерію якості для оцінювання прогнозів нелінійних нестаціонарних процесів / А. О. Белас, П. І. Бідюк // Наукові вісті КПІ : міжнародний науково-технічний журнал. – 2021. – № 2(132). – С. 38–45. – Бібліогр.: 16 назв.uk
dc.identifier.doihttps://doi.org/10.20535/kpisn.2021.2.236936
dc.identifier.orcid0000-0001-7883-2489uk
dc.identifier.orcid0000-0002-7421-3565uk
dc.identifier.urihttps://ela.kpi.ua/handle/123456789/59045
dc.language.isoukuk
dc.publisherКПІ ім. Ігоря Сікорськогоuk
dc.publisher.placeКиївuk
dc.relation.ispartofНаукові вісті КПІ: міжнародний науково-технічний журнал, № 2(132)uk
dc.rights.urihttps://creativecommons.org/licenses/by/4.0/
dc.subjectматематична модельuk
dc.subjectпрогнозуванняuk
dc.subjectкритерій якості прогнозівuk
dc.subjectчасовий рядuk
dc.subjectметрикаuk
dc.subjectнелінійний нестаціонарний процесuk
dc.subjectматематическая модельuk
dc.subjectпрогнозированиеuk
dc.subjectкритерий качества прогнозовuk
dc.subjectвременной рядuk
dc.subjectнестационарный процессuk
dc.subjectmathematical modeluk
dc.subjectforecastinguk
dc.subjectforecast quality criteriauk
dc.subjecttime seriesuk
dc.subjectmetricsuk
dc.subjectnon-stationary processuk
dc.subject.udc004.942:519.216.3uk
dc.titleВибір критерію якості для оцінювання прогнозів нелінійних нестаціонарних процесівuk
dc.title.alternativeВыбор критерия качества для оценивания прогнозов нелинейных нестационарных процессовuk
dc.title.alternativeChoosing a quality criterion for evaluating the forecast of nonlinear non-stationary processesuk
dc.typeArticleuk

Файли

Контейнер файлів
Зараз показуємо 1 - 1 з 1
Вантажиться...
Ескіз
Назва:
236936-549327-1-10-20210830.pdf
Розмір:
487.75 KB
Формат:
Adobe Portable Document Format
Опис:
Ліцензійна угода
Зараз показуємо 1 - 1 з 1
Ескіз недоступний
Назва:
license.txt
Розмір:
1.71 KB
Формат:
Item-specific license agreed upon to submission
Опис: