Своя GPT-like LLM по WH40K с нуля. Часть 4: Дообучение на вопрос–ответ (SFT)

[ainu]

Лично я до сих пор в каждой новой нейронке (главное без доступа к поиску/гуглингу) запускаю один и тот же бенчмарк

"Назови всех 18 примархов"

Балл за корректность, балл за ошибки, балл за корректный общепринятый перевод имен, а не транскрипцию. Казалось бы уже года три как топовые ллмки все умеют, но иногда проскакивает "Лайон Эль Джонсон" вместо Лев.

[den_rad]

ИИ в Империуме считаются ересью, за вами выехала Инквизиция 😀

[dorif11]

Над нами баржи лоялистов

И выстрелы хелбрутовмза спиной,

Но Неделимый нам пришлёт посестов -

Космодесант пойдёт в последний бой.

Короче: как еретех одобряю, подписался.)