Saltar al contenido
Air Automations
Todos los posts
Estrategia24 de junio de 20265 min de lectura

GPT-5 Pro resolvió un misterio de inmunología. ¿Deberías copiar el patrón?

GPT-5 Pro resolvió un acertijo de inmunología de 3 años. Aquí está el patrón de ingeniería que lo hizo funcionar — y cuándo omitir el razonamiento de frontera para un flujo de trabajo más económico.

By the airautomations team

Qué sucedió realmente: razonamiento de frontera en un bucle cerrado

Un investigador en una empresa de biotecnología había perseguido un mecanismo de vía proteína-inmunidad durante tres años. GPT-5 Pro propuso un mecanismo que resultó ser correcto. Eso es real, y vale la pena entender exactamente por qué funcionó — porque la configuración no se parecía en nada a la vaga narrativa de "lanzar un modelo de frontera a problemas difíciles" que se propaga.

El modelo no descubrió nada de forma autónoma. Un investigador le proporcionó entradas estructuradas: vías inmunológicas conocidas, literatura anterior, moléculas candidatas y resultados negativos de experimentos anteriores. GPT-5 Pro combinó esas restricciones para proponer un mecanismo novedoso que el investigador luego evaluó y validó. El modelo realizó el razonamiento combinatorio — manteniendo docenas de interacciones de vías en la memoria de trabajo simultáneamente — que un humano no podría sostener. Pero el experto se mantuvo en el bucle. Cada hipótesis tardó minutos en verificarse o refutarse.

Esto importa porque el patrón real no es "los modelos de frontera son mejores en la ciencia." Es "un modelo de frontera resolvió un paso de razonamiento bien delimitado dentro de un flujo de trabajo guiado por humanos."

Las cuatro precondiciones que hicieron que esto funcionara

Cada éxito de razonamiento de frontera que hemos implementado comparte la misma forma. Primero: el espacio de hipótesis está acotado. No infinito — miles de candidatos, no millones. Segundo: la verificación es rápida y económica. Un experto o un simulador califica cada hipótesis en minutos, no en días. Tercero: el prompt lleva priors estructurados de alta calidad. Artículos, esquemas, negativos anteriores — el modelo no está adivinando; está recombinando piezas conocidas bajo nuevas restricciones. Cuarto: el costo de estar equivocado es bajo. Una hipótesis incorrecta desperdicia una reunión, no un despliegue.

El caso de inmunología cumple los cuatro. El caso del agente de codificación que se está propagando en la empresa ahora — generación de código con retroalimentación de pruebas — cumple los cuatro también. Ediciones acotadas, bucle de prueba rápido, priors de alta calidad (la base de código existente), revisión humana, radio de explosión bajo. El patrón se repite porque estas condiciones son raras.

Por qué la mayoría de los problemas de dominio fallan en al menos una prueba

La automatización de soporte choca contra una pared en la condición uno: el espacio de acción explota. Un bucle de servicio al cliente podría necesitar manejar reembolsos, reembolsos más etiquetas de envío, créditos parciales, cambios de cuenta — de repente tienes millones de combinaciones de resultados. La verificación se expande también. El cliente decide si la respuesta fue correcta, no una suite de pruebas o un científico.

Los flujos de trabajo de operaciones fallan en visibilidad: el patrón Amazing Digital Dentures muestra agentes acoplados a cadenas de suministro que no poseían. El contexto de dominio vive en sistemas que el modelo no puede ver — bases de datos heredadas, formularios en papel, canales de slack. No puedes razonar sobre lo que no puedes recuperar.

Los dominios regulados invierten el cálculo de costos. El costo de estar equivocado se convierte en "fallo de auditoría" o "daño al paciente." La revisión de expertos deja de escalar en 100 decisiones por día. Si no puedes escribir el verificador en un fin de semana, no tienes la configuración de inmunología.

La alternativa más económica: flujo de trabajo guiado con enrutamiento de inferencia

Para el 80% de los problemas que no se ajustan a esas cuatro condiciones, el patrón es diferente. Comienza con un shell de flujo de trabajo determinista — n8n, Temporal, o Postgres más Redis si estás construyendo el tuyo propio. Superpón recuperación sobre tus datos de dominio estructurados: no solo búsqueda vectorial, sino SQL más híbrido, para que el modelo vea lo que realmente importa.

Usa GPT-4o-mini, Claude Haiku, o Llama para inferencia por paso en la ruta activa. Reserva el modelo de frontera para la única unión que realmente lo necesita — y bloquéalo detrás de un límite de presupuesto. RAG falla en producción cuando la recuperación es el cuello de botella, no el modelo. Lanzar un modelo más grande a un problema de recuperación quema dinero por nada.

La infraestructura se vuelve aburrida: reintentos con retroceso exponencial, claves de idempotencia, colas de letra muerta. La demostración de inmunología no necesitaba estas porque se ejecutó una vez, con un humano observando. Tú sí. Matemática de costos: un flujo de trabajo guiado se ejecuta a $0.002 por llamada en un modelo más pequeño. Un bucle de razonamiento de frontera sobre el mismo conjunto de datos cuesta $0.40 por llamada. En 100k solicitudes por día, eso es $40k diarios versus $200 diarios. Latencia: el flujo de trabajo alcanza 2s p95 para trabajo interactivo, 30s para lotes. Los bucles de razonamiento de frontera superan ambos.

Una regla de decisión para el lunes por la mañana

Hazte cinco preguntas. ¿Puedes enumerar menos de 10,000 respuestas candidatas? Si no, el razonamiento de frontera no es viable — el espacio de búsqueda es demasiado grande. ¿Puede un humano o una prueba verificar una respuesta en menos de cinco minutos? Si no, el bucle de retroalimentación es demasiado costoso. ¿Tienes priors estructurados que caben en 200k tokens? Si no, estás haciendo ingeniería de prompts a ciegas; el ajuste fino tampoco te salvará. ¿Es el modo de fallo "reunión desperdiciada" o "escritura de producción incorrecta"? Este cambia todo. Si es lo último, el razonamiento de frontera es demasiado arriesgado sin infraestructura de seguridad pesada.

Si alguna respuesta es no, construye el flujo de trabajo. Usa el modelo de frontera solo en el paso que genuinamente lo requiere. Si la recuperación es tu cuello de botella, ninguna actualización de modelo lo arregla.

Cómo lo implementaríamos en tu stack

Para un problema de forma inmunológica, construiríamos una capa de orquestación delgada que distribuya hipótesis candidatas a una pequeña cola. GPT-5 Pro se sienta detrás de esa cola, razonando sobre lotes, con un límite de presupuesto duro — quizás $100 por ejecución. El registro estructurado captura cada tupla (hipótesis, evidencia, veredicto); eso se convierte en tu conjunto de evaluación y tu pista de auditoría de producción. UI de bucle humano-en-el-bucle para la revisión del experto. Sin pretensión de autonomía.

El flujo de trabajo a su alrededor se ejecuta en modelos más económicos y pasos deterministas rápidos. Cuándo construir un agente versus un flujo de trabajo desglosa las diferencias de costo y mantenimiento. La mayoría de los equipos deberían comenzar allí antes de tocar un modelo de frontera.

Encuentra tu único paso acotado

La historia de inmunología no es "los modelos de frontera pueden hacer ciencia ahora." Es "un investigador con la configuración correcta obtuvo 10x de apalancamiento de un prompt bien formado." Encuentra el único paso acotado y verificable en tu pipeline que se ajuste a esa forma. Construye el flujo de trabajo económico a su alrededor. Si estás mirando un problema y no puedes decir de qué lado de la línea cae, hemos escrito sobre el dimensionamiento correcto de tu bucle de razonamiento — o ponte en contacto para un segundo par de ojos antes de comprometerte con un bucle agente.