Обновить

Как мы внедряли ИИ на 500 инженеров, а скорость не росла. Часть 2. Почему AI-first команды не делают нас быстрее

Время на прочтение9 мин
Охват и читатели4.6K
Всего голосов 8: ↑8 и ↓0+11
Комментарии2

Комментарии 2

AI ускоряет инженера и команду, но не гарантирует ускорения бизнеса.

Посмотрел на собственных данных, как подход AI-first повлиял на количество выполненных продуктовых задач. Рост есть, но пока умеренный, около 10%. При этом большую часть кода у нас пишет AI, а первичное code review проводят AI-боты. За людьми остаются финальный апрув и ответственность.

Сравнение одной команды до и после перехода на AI-first
Сравнение одной команды до и после перехода на AI-first

Если взять среднее по двум командам и сравнить с приростом за прошлый год, чтобы частично исключить естественный рост, тренд всё равно останется положительным, но будет уже не таким заметным.

Сравнение прироста за два года на более широкой выборке
Сравнение прироста за два года на более широкой выборке

Ещё одно наблюдение: кода в целом стало больше, потому что подешевели вещи, на которых раньше часто экономили время: тесты на пограничные сценарии, обработка редких случаев и более универсальные реализации.

Сравнение прироста LOC за два года, рассчитанного как Additions − Deletions. Видно, что в последние месяцы прирост ускорился.
Сравнение прироста LOC за два года, рассчитанного как Additions − Deletions. Видно, что в последние месяцы прирост ускорился.

Команды стали чаще браться за сложные фичи. Раньше большой объём реализации сам по себе мог остановить задачу: делать долго, а ожидаемая польза не всегда оправдывала затраты. Сейчас этот барьер ниже. Решение чаще упирается в архитектуру и риски, а не в количество кода, которое придётся написать руками.

В любом случае сравнивать разработчиков сегодня и два года назад сложно. Изменились инструменты, процессы и сам подход к работе, поэтому прежние метрики продуктивности всё хуже отражают реальный результат. Состав команд за это время тоже изменился, поэтому прямое сравнение не вполне корректно.

Для себя пока сделал такой вывод: значимого влияния на продуктовые метрики пока не вижу, но производительность команды в среднем выросла примерно на 10%. При этом эффект сильно зависит от уровня разработчика и отличается у джунов, мидлов и сеньоров.

За последние полгода агентная разработка заметно шагнула вперёд. Самое важное изменение в том, что сложные задачи, которые раньше откладывали из-за риска долгой и дорогой реализации, теперь чаще попадают в спринты.

Поэтому оценивать эффект только по количеству закрытых задач не совсем корректно. AI влияет не только на скорость работы, но и на выбор задач.

Согласен. Команды постоянно меняются, технологии меняются, измерять что-то в целом очень сложно :) Я возьму на вооружение идею - а стали ли мы делать больше сложных задач)

Зарегистрируйтесь на Хабре, чтобы оставить комментарий

Информация

Наименование
АО "Райффайзенбанк"
ИНН
7744000302
Сайт компании
www.raiffeisen.ru
На Хабре с
Дата регистрации
1996
Размер компании
5 001–10 000 человек
Место нахождения
Россия