Хороший вопрос задали на днях: не тратим ли мы на управление кодовы... - Vibeus
Хороший вопрос задали на днях: не тратим ли мы на управление кодовым агентом больше времени, чем экономим?
Мой ответ: зависит от того, что вы измеряете. Если смотреть на скорость первого диффа - да, агент почти всегда быстрее. Но первый результат и безопасный результат - это разные вещи.
Смотрите на реальный паттерн. Инженер сидит и повторяет одно и то же: "не трогай этот модуль", "мы так уже делали, смотри PR 341", "сначала запусти тесты, потом показывай". Если таких повторений за сессию десяток - это не плохой агент и не слабый инженер. Это значит, что границы системы, локальные правила и критерии готовности существуют где-то в головах, а не там, где агент их может прочитать.
Поэтому метрика, за которой я бы следила, другая: число коррекций до первого безопасного изменения. Одна-две - нормальный рабочий диалог. Пять и больше - сигнал, что вы вручную компенсируете отсутствие контекста проекта. И тогда самое честное вложение - не более мощная модель, а наведение порядка: правила рядом с кодом, явные критерии готовности, понятная карта того, что нельзя трогать.
Скорость без этого - просто ускоренная генерация правок, которые потом всё равно придётся переделывать.