AI Test Loop

Dê nota 0-100 no seu agente antes de entregar.

Como começar

1. Declare as checagens antes de escrever códigoPara cada uma: nome, comando, peso e o que significa passar. Os pesos somam 100.
2. Rode o críticoEle executa cada comando de verdade, guarda a saída bruta como evidência e imprime SCORE=<0-100> e GAPS=[...]. Não pergunta a um modelo se está bom — mede.python scripts/loop_runner.py --config loop.json --round 1
3. Corrija só o maior buraco e rode de novoBateu o limiar, segue para a revisão. Não bateu, pegue a MAIOR lacuna, conserte e repita — teto de 8 rodadas. Se nunca converge, o conjunto de checagens está errado, não o código.
4. Revisão independente antes de entregarMesmo artefato, contexto novo, sem justificativa de quem construiu — o prompt está no pacote, em references/reviewer-prompt.md.

Quando você vai usar

• O agente aprova o próprio trabalho"Parece pronto" não conta como evidência. O loop separa builder, critic, reviewer e dono da entrega — quem construiu não dá a nota.
• Rodada de review que nunca convergeQuatro revisões e nada muda. Ou o loop chega ao threshold com evidência, ou lista exatamente os gaps que faltam em vez de repetir "quase lá".
• Gate que nunca falhaCheck que dá verde sempre é denunciado: cada verificação precisa conseguir reprovar de verdade, e crítica decorativa aparece no relatório.
• Nota antes de subirAntes do deploy você roda os checks reais do projeto e recebe 0-100, com pesos por tipo de artefato (código, UI, pipeline, doc).

O que vem no pacote

• scripts/loop_runner.py — o critic: roda os checks com peso, dá a nota 0-100, imprime os gaps e guarda estado entre rodadas
• templates/loop.example.json — config pronta pra copiar ao lado do projeto: comandos, pesos e threshold
• references/scoring-rubric.md — pesos iniciais por tipo de artefato
• references/reviewer-prompt.md — prompt do reviewer em JSON estrito + regras anti-eco do parser

Precisa de

• Python 3.8+ (só stdlib)
• os comandos de verificação do seu projeto
• qualquer agente que saiba rodar comando

Onde ela não entra: Não faz deploy nem merge — a decisão de entregar continua com o dono. Não abre rede nem manda telemetria: o passo de segurança roda grep no próprio repo.

← todas as skills