Обновить
4
Aleksandr Nikitin@nktnlx

Data Analyst @ Tochka Bank

1
Подписчики
Отправить сообщение

Добрый день. Спасибо за комментарий и вопрос. Данную задачу довольно тяжело решать в сетапе классификации т.к. классов у нас очень много. Если говорить о том, чтобы векторизовать адреса и наименования компаний через word representations от FastText и потом искать ближайшие по косинусному расстоянию, то мы не пробовали этот вариант, потому что не нашли подтверждений тому, что FastText хорошо работает в домене русскоязычных адресов и наименований компаний "из коробки". А раз уж всё равно нужно обучать что-то для векторизации текстов, то решили взять чуть более современный подход и обучить трансформер, а не дообучать FastText. Конечно, мы не утверждаем, что нет более простых вариантов решения этой задачи, но мы выбрали такой подход.

Информация

В рейтинге
Не участвует
Зарегистрирован
Активность

Специализация

Аналитик по данным, Ученый по данным
Python
SQL
Английский язык
Git
Linux