Как мы сделали классификатор металлопроката на 15+ млн SKU

[stackshortlist]

Интересно, как вы обрабатываете позиции, где в названии смешаны марка стали и ГОСТ с ошибками в обоих. Мы в похожей задаче с номенклатурой поставщиков упёрлись в то, что правила дают хорошую точность, но любое новое написание ломает их тихо. Помогло логировать всё, что классификатор отнёс с низкой уверенностью, и раз в неделю разбирать это руками. Какая у вас доля таких пограничных строк после препроцессинга?

[teecat]

Интереснейшая статья на фоне постоянных обсуждений ОГАС (например в https://habr.com/ru/articles/1091788/). Система задумывалась в том числе для планирования поставок и по идее должна была решать задачу классификации всего и вся. Если нее сложно - как вы считаете, была ли возможность в те времена выполнить задачу классификации вменяемыми ресурсами?