Reasoning-модели сломали мой промпт-инжиниринг. Год переучиваюсь

[Chuika]

Ох, понимаю

[netricks]

Как то вы поздно проснулись. Этой фигнёй уже давно никто не занимается.

[411]

Та самая причина по которой я считал курсы по промт-инжинирингу пустой тратой времени (и денег, если платные)

[Dhwtj]

Изначально было понятно что это оптимизации-костыли под одну модель, максимум под поколение. То есть на квартал - полгода. Потом они входят в саму модель.

Лучше вспоминать и прокачивать инженерное мышление.

Вас этому когда-то учили. Да да!

[Dreams_and_magic]

"Ты гениальный программист с двадцатью годами опыта, ты любишь elegant решения"

Это и не должно было работать, так как не даёт никакой полезной информации нейросетке :) Это был баг, а не фича. Антропики любят добавлять слои "очеловечивания", поэтому это худо-бедно помогало, а как убрали лишнее - так всё и поломалось.

"Если у вас сейчас лежит пара любимых промптов со множеством примеров и развёрнутым CoT — попробуйте их укоротить. Не на десять процентов. Процентов на семьдесят-восемьдесят. Сравните. У меня после такого упражнения часть промптов сжалась с 2000 токенов до 150. Качество либо то же, либо лучше. "

Попробуйте дать задание вашей нейросети их укоротить для самой себя, объяснив, что именно требуется, дайте задание сделать их с десяток вариантов и прогнать их на нескольких типичных запросах, результаты вписать в файл и потом их оценить . Это будет объективно лучше и гораздо быстрее:)

[Pshir]

Так всё логично. Сейчас LLM - это рабочий инструмент, и их сразу обучают на то, что быть рабочими инструментами. Поэтому и обращаться надо с ними как с рабочими инструментами, а не как с менеджерами-шизофрениками, у которых главный KPI - это длина и пафосность отчёта, а не результат. Ну и самому мыслить надо соответственно: напрямую, а не через подвыверты.

[Ra2007]

Точно та же история с CLAUDE.md. Полтора года назад писал в него подробные инструкции с объяснением логики, сейчас оставил только ограничения и правила вывода. Verbose CoT в промпте это действительно был workaround для моделей без внутреннего рассуждения, сейчас он мешает. Единственное что у меня по-прежнему работает из старого арсенала это явные примеры формата вывода, Claude уважает независимо от уровня thinking. А вот role-play действительно умер, согласен.