Verifi
Descripción general
Verifi es la plataforma de testing y monitoreo de agentes de IA del ecosistema HeyNow. Permite definir casos de prueba estructurados, ejecutarlos de forma automatizada contra un agente y obtener un reporte con métricas objetivas, evidencia paso a paso y detección de errores.
A diferencia de una consola conversacional, Verifi sirve para validar un agente: reproducir escenarios, medir su comportamiento y detectar regresiones antes de publicar cambios. La ejecución real de las pruebas la realiza un agente especial llamado Agent Tester que vive en Heynow.
Verifi orquesta, registra y presenta los resultados.
Para quién es este sistema
Esta guía está pensada para perfiles con conocimientos técnicos que participan en el ciclo de vida de un agente de IA:
- Equipos de QA: diseñan la batería de casos, lanzan corridas regulares y revisan reportes para detectar regresiones.
- Desarrolladores y prompt engineers: iteran sobre el prompt, los modelos o las bases de conocimiento y quieren comparar el antes/después.
- Responsables funcionales / product: definen el comportamiento esperado del agente y auditan el cumplimiento.
- Administradores técnicos: configuran el Agent Tester en Heynow, mantienen la batería y hacen cargas masivas.
Cómo acceder
- URL pública de producción:
verifi.heynowbots.com. - El acceso se hace con credenciales Heynow a través del servicio de autenticación central (SSO).
Requisitos previos para poder operar (no solo acceder):
- Al menos un agente principal creado en Heynow para el cliente, disponible en
https://developers.heynowbots.com/ia/agents. - Al menos un caso de uso cargado en la biblioteca de Verifi (manual o por importación Excel).
| Índice | Sección | Para qué sirve | Documentación |
|---|---|---|---|
| 1 | Casos de uso | Biblioteca de escenarios de prueba. Define nombre, descripción, comportamiento esperado y pasos que el Agent Tester usará para evaluar al agente. Soporta importación masiva desde Excel. | Ver documentación |
| 2 | Ejecuciones | Centro operativo de pruebas. Configura y lanza corridas sobre un agente, monitorea estado en tiempo real, muestra métricas, evidencia paso a paso y errores por categoría. Permite reejecutar y cancelar. | Ver documentación |
Cómo usar esta ayuda
- Si es la primera vez que entrás a Verifi, empezá por
Casos de usopara entender la unidad básica de prueba (caso + pasos + comportamiento esperado) y cargar al menos un caso. - Si ya tenés casos cargados y querés lanzar una prueba, pasá a
Ejecuciones. Ahí encontrás el wizard de 4 pasos para seleccionar agente, casos, revisar configuración y lanzar. - Si necesitás cargar decenas o cientos de casos de una vez, mirá la sección de Importar desde Excel dentro de
Casos de uso: incluye la descripción del formato, las columnas y las validaciones que aplica el parser. - Si una ejecución quedó en estado intermedio (
pending,en progreso,evaluando) por más tiempo del esperado, consultáEjecuciones— sección de Problemas comunes — antes de cancelar. - Para entender por qué una ejecución terminó en
failedoerror, revisá el detalle: cada paso guarda el input enviado al agente, la respuesta, el veredicto del evaluador y, si aplica, una categoría de error.
Resumen rápido
Verifi centraliza el trabajo de QA sobre agentes de IA: define casos de prueba en Casos de uso, los ejecuta contra un agente objetivo desde Ejecuciones usando al Agent Tester como evaluador, y entrega un reporte auditado con métricas, evidencia por paso y errores categorizados. Las pruebas son reproducibles, multi-tenant y comparables entre corridas mediante la función de reejecución.