Поставьте независимый гейт между работой агента и её принятием
Статья показывает, как не дать одному и тому же агенту и выполнить задачу, и поставить ей PASS. Результат работы живёт в файлах, а отдельный проверяющий проход получает только пути к ним и пишет свой вердикт.
- Гейт держится на трёх условиях: отдельный проверяющий, файлы вместо пересказа и один владелец каждого файла.
- Переход к следующей стадии возможен только после строки вердикта другого прохода.
- Автор сообщает о 444 обращениях к модели за месяц: 167 исполняющих и 277 проверяющих; около каждой шестой задачи получила отказ.
- Проверяйте сам гейт: тесты могут быть зелёными, а журнал прогонов — пустым.
- Создайте в репозитории work.md, review.md и правило: исполнителю разрешена запись только в первый файл.
- После работы запустите отдельного verifier без истории чата и передайте ему только пути к изменённым файлам и work.md.
- Сделайте выпуск зависимым от строки PASS в review.md; при FAIL верните задачу исполнителю.
- Метрика: за 10 задач посчитайте долю FAIL и время от начала работы до чужого вердикта.