Обновить

Сколько стоит час работы кодинг-агента: рейтинг пяти API-шлюзов по расходам

Уровень сложностиПростой
Время на прочтение9 мин
Охват и читатели8.8K
Всего голосов 4: ↑0 и ↓4-4
Комментарии8

Комментарии 8

Пока это не «сколько стоит час работы кодинг-агента», а «сколько стоил бы мой вчерашний чек из одного ресторана, если пересчитать его по меню пяти других».

Блюда другие, повар другой, порции другие, но зато цифры очень красивые.

Самое смешное, что настоящий эксперимент автор уже придумал сам — одинаковые задачи, реальные списания, latency и ошибки.

То есть статья пока фактически является прологом к нормальному исследованию.

Кроме того, все горе-исследователи и прогнозисты цен забывают о крутом увеличении стоимости токена на больших контекстах на многих LLM. Из-да этого цифры стоимости уже гарантированно отличаются от реальных в разы.

Да, у GPT-6 Sol выше 272 тыс. токенов ввод вдвое дороже, вывод в полтора раза, и в моих логах медианный контекст при сбросе кэша около 356 тыс., так что часть запросов туда попадает. В таблице стоит базовая ставка, это надо было оговорить явно. Добавлю UPD.

И это ломает все "расчёты" на серьёзных задачах.

Справедливо, это расчёт по ставкам, а не по списаниям. Поэтому и вынес реальный прогон в отдельную часть: одинаковые задачи, фактические списания из кабинетов, задержка и ошибки.

Про то, что это не "отформатировано ИИ", а полностью написано ИИ тут уже отмечали?

Согласен, что по фактическим списаниям картина может сильно отличаться от таблицы ставок. У меня так вышло с Claude: один и тот же ответ с веб-поиском через шлюз в итоге обходился в 17,4 ₽, а прямым ключом Anthropic — в 6,9 ₽, в два с половиной раза дешевле. Поэтому часть про реальные списания на одинаковых задачах, которую вы оставили на следующие статьи, по-моему, самая важная.

Я дал задачку агенту написать ридми файл для своего пет-проекта из нескольких (~10) файлов. Так это стоило мне 118 рублей. Модель gpt-6-sol, codex cli, провайдер aitunnel. Хорошо что не решился сразу поставить gpt-6-astra, а то бы в районе 700 рублей выкинул. Я как увидел это, охренел малость. Потом решил, что возьму-ка я лучше gpt-6-luna она примерно в 10 раз дешевле. Но все равно бесплатный вариант (гугл ии) тоже норм, и к тому же полезней для мозгов.

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Публикации