Метрики ИИ-трансформации: как отличить реальную пользу от хайпа

[zakarov]

Согласен с главным тезисом: токены, DAU и сам факт внедрения не доказывают ценность.

Единственное, насчет saved time с агентами в первые месяцы после внедрения я бы был осторожен.

Часто вижу у команд, которые только внедряют ИИ-агентов и не понимают их ограничений: saved time космическая, задача заняла 1 день вместо 2 недель, покрытие тестами 146%, разумеется все зеленые. Ревью прошла. Через месяц оказывается, что была допущена тупая архитектурная ошибка, которая людям даже в голову не могла прийти, из-за которой нужно рефакторить не только эту задачу, но и весь код написанный после.

[DoubleS]

Разделяю Вашу позицию, поэтому и призываю смотреть на метрики в связке.

К сожалению, редко когда удается построить идеальный процесс с первого захода, только с помощью подобных "шишек", команды смогут набраться зрелости, устранить недочеты и прийти к оптимальному решению под свои реалии.