Canal de pruebas
Proceso que combina el sandboxing, las pruebas A/B y las Verificaciones de seguridad antes de la implementación completa (glosario del módulo 7). La guía PDF lo llama canal de integración.
Su premisa es que ningún método basta por sí solo: el sandbox valida funcionalidad pero no comportamiento real, las pruebas A/B miden desempeño pero no seguridad, y las verificaciones de seguridad detectan violaciones pero no dicen si el agente es útil.
Los cinco pasos
- Sandbox inicial — valida la funcionalidad básica con datos sintéticos a gran escala.
- Pruebas A/B piloto — despliegan las variantes prometedoras en grupos pequeños de usuarios, con medición en vivo y retroalimentación humana.
- Verificaciones de seguridad automatizadas — se ejecutan de forma continua, tanto en sandbox como en las pruebas A/B en vivo, bloqueando lo que viole reglas predefinidas.
- Bucles de revisión humana — interceptan los casos de alto riesgo señalados por anomalías o violaciones, y refinan tanto el agente como las propias reglas de seguridad.
- Despliegue completo condicionado — a superar todos los criterios de sandbox y A/B, a no registrar violaciones críticas durante un período sostenido, y a la aprobación de los equipos de riesgo y cumplimiento.
En el curso
Módulo 7 — capítulo 2, sección de cierre. La conclusión del capítulo es que la iteración continua y la supervisión rigurosa convierten las pruebas de una lista de verificación en un activo estratégico.
Relacionado
Sandboxing · Pruebas A-B · Verificaciones de seguridad · Pruebas adversarias · LLM como juez · Human-in-the-loop · MLOps · Implementación por fases
Enlaces entrantes
- Auditoría simuladaConcepto
- Caso extremoConcepto
- GobernanzaConcepto
- Human-in-the-loopConcepto
- Inyección de promptConcepto
- LLM como juezConcepto
- M7 Gobernanza, cumplimiento y pruebas de agentesMódulo
- Pruebas A-BConcepto
- Pruebas adversariasConcepto
- SandboxingConcepto
- Verificaciones de seguridadConcepto