— на полочку
Недетерминизм ≠ неизмеримость. У качества есть перцентили, у промпта — версия, у каждого изменения — регрессионный прогон. Промпт наконец получил то, что схемы получили в десятом модуле: реестр, ревью и CI.
evals · записано в блокнот
Каждый шаг цикла — в трейс, каждая сессия — под бюджетом и лимитом. Предохранители живут в оркестраторе: они не спрашивают модель, согласна ли она остановиться.