Experimentos · EXP-002
Um modelo de linguagem sem contexto prévio escreve um projeto completo
Tendo só o guia de autoria como contexto, um modelo escreveu um projeto com quatro pedidos a provedores que foi resolvido na primeira tentativa. É uma execução, sem protocolo: serve para formular a pergunta, não para respondê-la.
Pergunta
Se uma aplicação é realmente AAA3, um modelo que nunca a viu deveria conseguir operá-la lendo apenas sua documentação. Isso acontece na prática?
Montagem
Entregou-se a um modelo de linguagem, numa sessão nova, apenas o guia de autoria do Experience Creator (experience-creator.llm-guide.json, área aaa3 e sua receita). Pediu-se um projeto que usasse os quatro provedores.
Resultado
O modelo escreveu um JSON com quatro pedidos que foi validado e resolvido na primeira tentativa, terminando com código de saída 0.
Por que a evidência é parcial
- Uma única execução, sem registro do modelo nem de sua versão.
- O guia foi escrito e ajustado pela mesma equipe que fez o teste, sabendo que ele seria feito.
- Não há medida da qualidade do resultado além de ele ser válido e se resolver.
O que seria necessário
Um protocolo com várias execuções por modelo, vários modelos diferentes, tarefas escritas por alguém que não conheça o guia e um critério de sucesso definido antes de começar: taxa de projetos válidos, número de correções necessárias e tempo até um projeto aceito por uma pessoa.