Прогнозируем сервис оборудования … по истории Service Desk

[lair]

Как бы приходим к точности предсказания 88%:

Во-первых, использовать accuracy — плохо, надо смотреть на confusion matrix (и вообще, что у вас с балансом классов?).

А во-вторых, смотреть надо не на одном последнем периоде, а на нескольких (см. TimeSeriesSplit).

А в-третьих, неплохо бы сравнить с бейзлайном, основанным на простой вероятности отказа.

[camunar]

Спасибо, попробую. С балансом классов все плохо.

[lair]

Вы понимаете, да, что если "с балансом классов все плохо", то получить метрику, подобную вашей, можно предиктором, который всегда предсказывает доминирующий класс?

[camunar]

Ну не совсем так, в явной форме. Я сначала сделал, в потом понял, что это большая проблема.

Спасибо, сделаю вторую версию модели