Tutoriales 4 min de lectura· 27 de abril de 2026
Cómo hacer A/B testing de mensajes en agentes de IA
Probar dos versiones del mensaje inicial, dos prompts, dos modelos — y ver cuál convierte mejor con datos.
Los agentes son configuraciones, y las configuraciones se pueden probar. A/B testing científico te dice qué funciona en lugar de adivinar.
Cómo configurar el test
- Crear dos variantes del agente con el cambio puntual (mensaje, modelo, prompt).
- Asignar 50/50 del tráfico durante mínimo 2 semanas.
- Medir métrica primaria: conversion (no engagement).
- Validar significancia: necesitas ~500 conversaciones por variante.
- Promover la ganadora a 100% y desactivar la otra.
Errores típicos
- Cambiar muchas cosas a la vez — no sabes cuál movió la aguja.
- Cortar el test antes de tiempo por "ya parece ganar X" — falso ganador.
- Optimizar para vanity metrics (engagement) en vez de conversion.