Comments 8
А куда делась Gemini? В прошлых тестах она всегда попадала в тройку лидеров.
Читал на днях кажется на пикабушке тест, который показал что грок всех уделал
А почему в бенчмарке нет практической задачи разработки приложения с нуля ? Например, реализовать простую CRM-систему. Или сделать задачу по учету оборудования и его обслуживания. Да, я понимаю, что её оценивать объективно сложнее, но там и так половина оценок субъективна.
Кроме того, а можно в 1С подключать Claude напрямую к проду и давать ему любые задачи по обработке/чтению/измению данных ?
Мы в lsFusion сделали, что любой сервер в проде отдает MCP сервер, который просто дает исходный код на внутреннем высокоуровневом языке, а также возможность запуска команд на этом языке.
В итоге LLM может спокойно сам разобраться в логике по коду, все считать и даже изменять данные. Например, вот Claude подключился к демке MyCompany , считал её логику, считал и изменил данные, добавив платеж. И все по промпту :
Найди в демо MyCompany поставщиков с наибольшей задолженностью и заплати ему половину долга
Вот пример чата : https://claude.ai/share/bd0b0d12-75e5-4d6f-ade3-8e78f55984f3
Ну можно ещё добавить задачу ERP систему с нуля разработать, что CRM то мелочиться :)))). Смысл там даже не в оценке, а в том что оценки не перепроверить, и не сравнить сами по себе, поэтому такой бенч бесполезен.
В 1С конечно ИИ к проду подключается, вот так https://vibecoding1c.ru/#designer к примеру.
ИИ сам разбирается в логике по коду , всё тестирует и вводит данные в 1С. Это уже давно так. На курсах https://vibecoding1c.ru/agenticai рассказываю как сделать чтобы в принципе ИИ регулярно выполнял все нужные операции.
P.S. я думал интерфейс более жуткий чем у 1С придумать трудно, но по ссылке встретил таковой. Там ещё громкое название ERP а функционала пожалуй до УНФ не дотягивает. А декларативный язык в 2026-м уже "досвидания" тут с 1С-ным то много проблем и сама 1С от своего Элемент-а не отвяжется никак а эту поделку ещё зачем ХЗ. Ну и за Java в основе от меня "лучи добра", нафига этот стек сейчас кому нежен непонятно.
Сорри за токсичность, но как есть
Ну можно ещё добавить задачу ERP систему с нуля разработать, что CRM то мелочиться :)))). Смысл там даже не в оценке, а в том что оценки не перепроверить, и не сравнить сами по себе, поэтому такой бенч бесполезен.
Claude уже сейчас умеет видеоигры целиком создавать за один промпт. В чем проблема создать простую CRM ? Claude прекрасно создает простые CRM даже на чистом node.js с базой в PostgreSQL за один промпт. И на lsFusion тоже без проблем.
Что касается проверки, то у Вас же у самих в тестах есть как результат : "Просто посмотреть что получилось визуально". Что мешает дать более подробный промпт, например, "там должен быть канбан с изменением статусов", и тупо проверить это также визуально потягав этот канбан ?
А ведь это и есть основной кейс. Сейчас уже на lsFusion обычные люди могут писать (и пишут) готовые системы. А они вообще нихрена не разбираются в программировании, тупо промптами.
Для этого просто ставите Claude Desktop (он у Вас есть, я полагаю). Просто подключаете skill https://github.com/lsfusion/ai-skills , а затем просто даете пропмт "создай CRM на lsfusion". И всё. Claude сам скачает и запустит платформу, все протестирует, а потом при желании может сам установить на удаленный сервак на линуксе, настроив HTTPS. 1С так может ?
В 1С конечно ИИ к проду подключается, вот так https://vibecoding1c.ru/#designer к примеру.
ИИ сам разбирается в логике по коду , всё тестирует и вводит данные в 1С. Это уже давно так. На курсах https://vibecoding1c.ru/agenticai рассказываю как сделать чтобы в принципе ИИ регулярно выполнял все нужные операции.
Если я правильно смотрю, то это детский сад по сравнению с lsFusion, да еще и платный к тому же. Да еще и не из коробки от производителя, а что-то стороннее.
Я посмотрел начало этого видео : https://rutube.ru/video/3b7ddc03c03e48aff1efc7a9cfc56f62/?r=wd (отметка где-то 01:00) Вручную настраивать инструменты ? Вы серьезно ? В lsFusion ИИ сам из коробки подключается к проду, и на основе промпта сам лезет в код на проде, и узнает всю логику, которая ему нужна. Все, что нужно пользователю просто прописать MCP в https://<ваш сервер>/mcp.
Курс, к сожалению, посмотреть не могу, так как он платный (да-да, очень смешно).
P.S. я думал интерфейс более жуткий чем у 1С придумать трудно, но по ссылке встретил таковой. Там ещё громкое название ERP а функционала пожалуй до УНФ не дотягивает. А декларативный язык в 2026-м уже "досвидания" тут с 1С-ным то много проблем и сама 1С от своего Элемент-а не отвяжется никак а эту поделку ещё зачем ХЗ. Ну и за Java в основе от меня "лучи добра", нафига этот стек сейчас кому нежен непонятно.
Не, тормознутость и жуткость интерфейса 1С никто не перепрыгнет. В lsFusion стандартный Bootstrap интерфейс с самым простым DOM'ом. Там можно свои CSS добавлять и сделать как угодно (там и есть встроенные темы). Но Claude вам может добавить CSS'ок каких надо.
Мало того, что такой простой DOM прекрасно работает даже на мобилах (в отличие от 1С), он дает еще одно важное преимущество. ИИ при помощи Playwright прекрасно умеет с ним работать и тестировать (кликать элементы и т.д.). Я часто сам ему пишу - напиши функционал, а потом покликай все и прогони, что все работает. И Claude прекрасно это делает.
Что касается декларативности, то все с точностью до наоборот. Именно с появлением ИИ декларативность - это огромный плюс, так как ИИ не генерит миллион ошибок, связанных с миллионом разных сценариев выполнения, а именно строит правильную модель. Можете сами спросить у ИИ, что лучше декларативность или императивность.
О Боже ИИ лезит в 1С. :)))
Не портите его ;)
Лучшие модели для разработки с ИИ на 1С (бенчмарк v2)