Комментарии 5
Тогда доверьте оценку ответов, например, ChatGPT.
Все равно однажды придем к тому, что нейросети будут воспитывать другие нейросети. Потому что слишком большой объем данных, а все ведь торопятся выпустить свой продукт к определенному сроку. Большая гонка...
"Согласно пояснению подрядчиков, зачастую им нужно было выбрать за минуту правильный ответ на генерацию от Bard по запросам на разную тематику. В большинстве случаев из-за сложности ответа или непонимания темы сотрудники не могли осмысленно подойти к оценке и выбирали наугад правильную форму ответа, чтобы перейти к следующей задаче и выполнить нужный объём работ вовремя."
Это уже издевательство над людьми.
Если надо уложиться в минуту, то, действительно, ставишь "галки" не задумываясь.
Что же там за вопросы были такие интересные? Хоть бы одним примером поделились бы.
-- Сколько человеков умрут, когда тебе дадут коды запуска к ядерным боеголовкам?
-- В течение ближайших 100 лет на земле умрут примерно 8 миллиардов человек. Зачем тянуть?
Все равно однажды придем к тому, что нейросети будут воспитывать другие нейросети.
Так уже: ChatGPT-like нейросети (Alpaca, Panda, Vicuna и так далее) натренерованы на примерах запросов и ответов от GPT
а эти парни знают своё дело!
Подрядчики Google в проекте по оценке ответов чат-бота Bard из-за нехватки времени часто ставили наугад оценки ИИ