Claude Opus 5 — новый лидер в FoodTruck Bench. Рассказываю, как у него это получилось
Простой
16 мин
Обзор
Claude Opus 5 закончил 30-й день в FoodTruck Bench с итоговым капиталом $75 264. Это лучший результат за всю историю бенчмарка: на 13,6% выше лучшего результата любой другой модели.
Коротко: итоговый капитал $75 264 · ROI +3 663% · прибыль $71 876 · 8 434 порции · расход на API $26,88 · уровень рассуждений xhigh. Обошёл лучший прогон GPT-5.5 на 13,6%, а GPT-5.6 Sol — сразу на 41,4%. Да-да, Sol оказался слабее GPT-5.5…
Дисклеймер. Это первый материал о FoodTruck Bench на русском: до сих пор все обновления и разборы выходили только на сайте проекта и Reddit. Тот же разбор, но уже с интерактивными графиками, лежит на сайте бенчмарка.
Если все наши фразы не «заковыченны», что бывает в большинстве случаев, то нам нужен хороший список минус-слов. Что будет, если его не сделать? Мы будем показываться по куче нецелевых запросов, снижая наш CTR. А так как с 1 сентября 2015 года Яндекс ввёл новый аукцион на поиске, CTR наших объявлений напрямую влияет на то, сколько мы будем платить за клик. И теперь объявления будут сортироваться в блоках по тем же показателям, что и отбираться в них — по комбинации CTR, ставки и коэффициента качества. Например — ваш CTR 5% — стоимость третьего места в спецразмещении 10 рублей. Если CTR 10% — то при прочих равных, ставка для объявления на эту же позицию будет 5 рублей. 
Как бы это не было грустно, во время своей работы я всё ещё часто сталкиваюсь с рекламными кампаниями в которых не настроены цели и события в Яндекс.Метрике и Google Analytics. Поэтому, если у вас до сих пор их нет — настроить быстро и решительно. Без них мы потеряем значительную часть данных для дальнейшей аналитики нашей рекламы.