De scripts a objetivos: IA agente para pruebas de calidad en web, API y bases de datos
IA agente para pruebas de calidad: automatización de pruebas que se enfoca en un objetivo en lugar de en pasos, con agentes para web, API y bases de datos, MCP como elemento de conexión, memoria y sus límites reales.
Fuentes: The Day My Test Scripts Stopped Listening — And My Agents Started Thinking : —
¿Qué cambia cuando la automatización de pruebas deja de recibir instrucciones sobre qué botones presionar y en su lugar recibe indicaciones sobre qué resultado alcanzar? Esa pregunta impulsa un pequeño experimento de código abierto con inteligencia artificial agente para la ingeniería de calidad, y este texto explica qué intenta el experimento, dónde es útil y dónde no lo es.
Un martes habitual
Se ejecuta el paquete de pruebas de regresión y aparecen marcas verdes que se desplazan. Todos se relajan, pero al final se envía un error, porque el script solo sabía hacer exactamente lo que se le indicaba, en el orden exacto en que se le indicaba.
La pregunta persistente es si la automatización podría razonar en lugar de simplemente repetir. Nadie promete milagros aquí. El objetivo es ver si los agentes de inteligencia artificial pueden complementar el juicio del tester sin pretender reemplazarlo.
Automatización por scripts y automatización orientada a objetivos
La mayoría de las suites de pruebas actuales siguen una secuencia fija: caso de prueba, script, ejecución, verificación y generación de informe. Es determinista, predecible y segura. Pero también es rígida, frágil e incapaz de manejar cualquier situación que el script no mencione. Una suite basada en scripts es como un tren en vías fijas: rápido y confiable hasta que las vías cambian de lugar.
La versión basada en agentes invierte este orden:
- Se le da al agente un objetivo de prueba en lugar de un script predefinido.
- Se le permite determinar qué es necesario hacer.
- Se le permite elegir las herramientas (navegador, cliente API, base de datos) según el contexto.
- Se le permite observar los resultados y ajustar sus siguientes acciones.
- Se le permite validar y generar informes.
Así, la solicitud deja de ser “ejecuta estos pasos predefinidos” para convertirse en “he aquí el objetivo, encuentra una forma de alcanzarlo”. Se trata más bien de un cambio de mentalidad que de un cambio de herramientas.
Por qué QA es la opción adecuada
El software moderno rara vez funciona en una sola capa. Un único defecto puede existir en la interfaz de usuario, la API y la base de datos, y solo se detectará cuando se revisen los tres al mismo tiempo. Cada vez se espera más de los testers que piensen como ingenieros de sistemas, y la pregunta ha pasado de “¿funciona el botón?” a “¿se comporta todo el sistema distribuido en condiciones reales?”.
Imaginemos que un agente pudiera coordinarse entre esas capas en torno a un único objetivo, en lugar de tres conjuntos desconectados. El diseño se divide en:
- Un agente web que controla el navegador.
- Un agente API que envía solicitudes y analiza las respuestas.
- Un agente de base de datos que verifica los datos del backend.
- Una capa de razonamiento que planifica y decide qué agente llamar y cuándo.
- Una capa de validación que combina todo en un único resultado accionable.
En lugar de tres informes que un humano debe combinar mentalmente, se obtiene un veredicto coordinado único.
El boceto de arquitectura
El flujo que se muestra a continuación está en pleno desarrollo intencionadamente. Se trata de un experimento en tiempo real, no de un marco ya finalizado, y los avances reales en ingeniería rara vez llegan completamente formados.
User / Goal
↓
Agentic AI Layer (Reasoning + Planning)
↓
┌──────────┬──────────┬──────────┐
│ Web Agent│ API Agent│ DB Agent │
└──────────┴──────────┴──────────┘
↓ ↓ ↓
Browser APIs Database
↓ ↓ ↓
Validation / Result
MCP como tejido conectivo
El Protocolo de Contexto de Modelo, MCP, es la parte de este ámbito que merece una explicación detallada. Considérelo como un conector estándar entre agentes y capacidades reales, de modo que un agente no solo describe lo que haría, sino que realmente lo ejecuta.
Para las pruebas de calidad, esto abre posibilidades como:
- conectar agentes con herramientas de prueba reales;
- interacción estructurada con el navegador;
- operaciones directas a través de API;
- acceso a bases de datos sin necesidad de crear soluciones personalizadas cada vez;
- memoria y contexto persistentes;
- bibliotecas reutilizables de herramientas de automatización.
El proceso se vuelve: entender el objetivo, elegir una capacidad, utilizar la herramienta, observar el resultado y decidir el siguiente paso. Esto difiere significativamente del enfoque de “paso uno, paso dos, paso tres”.
Pruebas de API como capacidad
Las pruebas de API no desaparecerán, pero su forma cambiará. En lugar de una colección estática de Postman que realice las mismas verificaciones para siempre, un agente podría:
- enviar solicitudes derivadas de un objetivo específico;
- evaluar la respuesta en contexto, más allá de la simple coincidencia de códigos de estado;
- crear nuevos escenarios sobre la marcha;
- colaborar con otros agentes cuando se necesita un análisis detallado a nivel interno.
Testing Objective → API Agent → Send Request → Analyze Response
→ Validate Result → Pass Result to Workflow
Se trata de pruebas de API que tienen en cuenta qué es lo que están verificando, y no solo si un número coincide.
Los agentes de base de datos merecen más reconocimiento
Cada SDET conoce esta situación: la interfaz muestra una confirmación de éxito, la API devuelve 200 OK, pero la fila de la base de datos nunca se guarda. Nada lo indica a menos que alguien revise los datos directamente.
Un agente con conocimiento de la base de datos puede consultar y validar automáticamente los datos de prueba, verificar el backend sin que alguien tenga que escribir SQL en bruto cada vez, respaldar pruebas basadas en datos y entre sistemas, y detectar el tipo de errores que ocurren entre las capas del sistema.
UI → API → Business Logic → Database
Un defecto puede manifestarse solo cuando se validan juntos los cuatro capas, y es allí donde los agentes coordinados ganan su importancia.
El navegador como una herramienta entre varias
El proyecto de ejemplo incluye un script web_surfer.py que muestra cómo funciona un agente en un entorno web real, no como un script aislado sino como una capacidad dentro de un conjunto.
Testing Goal → Agent → Web Interaction → Observation
→ Decision → Validation
El navegador deja de ser la prueba completa. Se convierte en una herramienta a la que recurre el agente cuando el objetivo lo requiere.
Proporcionar memoria a la automatización
La mayoría de las automatizaciones tienen una memoria limitada, como la de los peces dorados, y cada ejecución comienza desde cero. El proyecto mantiene un pequeño archivo memory.json para solucionar este problema. Este archivo almacena las acciones anteriores, el estado del flujo de trabajo, el contexto de la prueba, las observaciones relevantes y los resultados previos.
Test Objective → Current Context → Previous Actions
→ Agent Decision → New Action → Updated Context
La automatización consciente del contexto no trata al sistema como algo ajeno en cada ejecución. Construye una memoria de trabajo, lo cual se acerca más a la forma en que actúa un tester experimentado.
Qué no es esto
La fatiga por el exceso de promesas relacionadas con la IA es real, por lo que un poco de claridad ayuda:
- No se trata de “la IA reemplaza a los testers”.
- No es un bot de pruebas listo para usar sin más.
- Todavía no es un framework de nivel de producción.
Se trata de un experimento honesto y en constante evolución sobre cómo el razonamiento, las herramientas y la memoria podrían transformar el QA, además de un recordatorio de que el juicio de los ingenieros sigue dirigiendo todo. El objetivo no es automatizar todo, sino hacerlo de manera inteligente.
Un buen QA sigue dependiendo del análisis de riesgos, la estrategia de pruebas, el conocimiento del dominio, las pruebas exploratorias, un diseño sólido de automatización, la capacidad de observación y la revisión humana de los resultados. Los agentes deberían funcionar como un socio más eficaz, no como un sustituto del razonamiento del tester.
Así es la estructura del repositorio
Para quienes quieran explorarlo en detalle, esta es la estructura del proyecto de ejemplo. Los archivos basics constituyen las bases fundamentales; un archivo de escenarios las aplica, un archivo de selectores agrupa y selecciona las capacidades, y el archivo de memoria almacena el contexto.
AgenticAIAutoGen/
│
├── Framework/
├── basics1.py → basics6.py → progressive foundational examples
├── scenario1.py → applied automation scenario
├── selectorGroup.py → capability grouping/selection logic
├── web_surfer.py → web interaction experimentation
├── memory.json → agent memory/context storage
└── .gitignore
La tecnología base es Python, con OpenAI Agents, integración MCP, pruebas de API, validación de bases de datos y automatización de navegadores.
Quiénes se benefician
El experimento está dirigido a ingenieros de automatización de QA y SDETs, responsables de calidad, arquitectos de automatización de pruebas, ingenieros de automatización con IA y gerentes de ingeniería que evalúan el uso de la IA en las pruebas de calidad.
Hacia dónde podría evolucionar
La hoja de ruta es ambiciosa porque el campo avanza rápidamente:
- flujos de trabajo de QA con múltiples agentes;
- generación más inteligente de pruebas, incluyendo datos de prueba;
- pruebas de API asistidas por IA;
- pruebas de navegadores autónomas;
- agentes para la validación de bases de datos;
- análisis automático de fallos y defectos;
- integración con CI/CD;
- resúmenes de los resultados de las pruebas;
- orquestación completa de agentes.
Nada de esto reemplaza los fundamentos. Funciona sobre ellos.
Conclusión
El futuro de la automatización de pruebas probablemente no consista en escribir más scripts más rápido. Se trata de crear sistemas que puedan:
- Comprender un objetivo de prueba.
- Decidir cuál es el enfoque adecuado.
- Actuar con las herramientas adecuadas en la web, las API y las bases de datos.
- Evaluar el resultado.
- Adaptarse y proporcionar información útil a los ingenieros.
Esto convierte a la automatización de algo que simplemente ejecuta tareas en algo que piensa junto a usted, y brinda al probador un socio de ingeniería más inteligente en lugar de un reemplazo.
Leer más
- Cuatro roles para agentes de IA para ingenieros: coordinación, creatividad, claridad y orientación — Deje de usar la IA como un chatbot. Cuatro roles de agentes, desde reuniones matutinas hasta orientación en entrevistas, muestran cómo los ingenieros pueden asignar responsabilidades reales a la IA.
- Agentes de IA negociando acuerdos: lo que revelan los bots de Walmart sobre el riesgo real — Los pagos entre agentes ya son una realidad. El peligro no radica en un lenguaje secreto de robots, sino en la colusión y en mandatos sin control, y aquí se explica cómo decidir qué delegar.