SyncThinkDesignSTD

Experimentos · EXP-002

Un modelo de lenguaje sin contexto previo escribe un proyecto completo

Con solo la guía de autoría como contexto, un modelo escribió un proyecto con cuatro pedidos a proveedores que se resolvió al primer intento. Es una ejecución, sin protocolo: sirve para formular la pregunta, no para responderla.

Fecha
Estado
Evidencia parcial
Se relaciona con
H5, I2

Pregunta

Si una aplicación es realmente AAA3, un modelo que nunca la vio debería poder operarla leyendo solo su documentación. ¿Es así en la práctica?

Montaje

Se le entregó a un modelo de lenguaje, en una sesión nueva, únicamente la guía de autoría de Experience Creator (experience-creator.llm-guide.json, área aaa3 y su receta). Se le pidió un proyecto que usara los cuatro proveedores.

Resultado

O2Observación

El modelo escribió un JSON con cuatro pedidos que validó y se resolvió al primer intento, terminando con código de salida 0.

Por qué la evidencia es parcial

  • Una sola ejecución, sin registro del modelo ni de su versión.
  • La guía fue escrita y ajustada por el mismo equipo que hizo la prueba, sabiendo que se haría.
  • No hay medida de calidad del resultado más allá de que sea válido y se resuelva.

Qué haría falta

Un protocolo con varias ejecuciones por modelo, con varios modelos distintos, tareas escritas por alguien que no conozca la guía y un criterio de éxito definido antes de empezar: tasa de proyectos válidos, número de correcciones necesarias y tiempo hasta un proyecto aceptado por una persona.

← Todos los experimentos