Few-Shot NER, или Как перестать размечать и начать жить

[KonstantinSmith]

Как раз сейчас на Диалог-2022 проходит конкурс по Few-Shot NER (RuNNE: https://github.com/dialogue-evaluation/RuNNE). Вы в нём собираетесь принять участие, чтобы подтвердить вышеизложенное практически?

[Kirili4ik]

Добрый день!

Cпасибо за информацию о соревновании, но, к сожалению, дедлайн уже почти наступил ? В статье приведены результаты для англйиского датасета Few-NERD Inter, что уже подтверждает вышеизоженное практически, по сравнению с моделями на основе bert-base.

Вскоре мы планиурем поделиться новыми успехами в решении NER задач.

[mkhovrichev]

>Во время тестирования, имея всего N совершенно новых классов (пород собак) и по K примеров на каждый класс, мы дообучаем модель.

В смысле дообучаем во время тестирования?

[Kirili4ik]

В прямом. Чтобы понять, насколько Few-Shot модель качественная (протестировать), мы обучаем ее классификировать новые N классов имея для каждого K примеров (напр. 3-5 фото собак каждой породы) и затем смотрим на качество классификации на этих новых классах (породах собак).

Более подробно про это можно почитать тут или тут.