Crear y ejecutar una prueba por lotes
Utiliza la prueba por lotes para evaluar juntos varios escenarios repetibles en lugar de depender solo de una conversación informal en Playground. Un conjunto de datos se convierte en una lista de comprobación de regr...
Utiliza la prueba por lotes para evaluar juntos varios escenarios repetibles en lugar de depender solo de una conversación informal en Playground. Un conjunto de datos se convierte en una lista de comprobación de regresión estable para preguntas importantes de los clientes.
Un Agent combina instrucciones, ajustes de la interfaz orientada al cliente, Knowledge, datos del catálogo y herramientas opcionales. Una configuración fiable se prueba con preguntas realistas de clientes antes de la implementación. Las pruebas deben cubrir respuestas esperadas, información faltante, escenarios de producto, escalado y cualquier interacción opcional que el equipo haya habilitado.
Antes de empezar
Acceso: Abre la configuración y las pruebas del Agent con permiso para ejecutar pruebas para el Agent seleccionado.
- Elige el Agent que se va a probar.
- Define los recorridos de cliente que debe cubrir el conjunto de datos.
- Prepara preguntas manualmente, en un CSV compatible o a partir de productos del catálogo.
Trabaja en el área responsable más pequeña descrita a continuación y mantén disponible el estado actual orientado al cliente mientras preparas el cambio. Antes de hacer clic en cualquier acción final, confirma la empresa activa, el Agent, la tienda, el idioma y el mercado que se muestran en Humind. Un control ausente puede indicar acceso de solo lectura o una capacidad que no está configurada para esta empresa. En ese caso, registra la tarea prevista y pide a un administrador que revise el permiso o la dependencia exactos. No eludas este límite compartiendo una cuenta, copiando datos en otra área ni prometiendo una capacidad que el espacio de trabajo no expone.
Flujo de trabajo paso a paso
Definir el objetivo de la prueba
Crea un conjunto de datos centrado en una versión, un riesgo o un recorrido. Mezcla casos de éxito esperados con casos de información faltante y casos límite para que una puntuación alta no pueda ocultar comportamientos inseguros.
- Da al conjunto de datos un nombre específico y reutilizable.
- Escribe la expectativa de aceptación junto a cada pregunta planificada.
Añadir casos de prueba
Introduce preguntas manualmente, importa un CSV con hasta 50 casos o genera casos orientados a productos a partir del catálogo. Revisa el texto importado antes de ejecutarlo.
- Elimina duplicados y datos personales de clientes.
- Haz que cada caso sea comprensible sin contexto oculto.
Seleccionar el Agent y ejecutar
Confirma el Agent y el conjunto de datos, y luego inicia la ejecución. Deja que la ejecución alcance su estado final antes de interpretar resultados parciales.
- No edites la configuración de destino durante la ejecución.
- Registra el tiempo de ejecución y la configuración evaluada.
Conservar el conjunto de datos para regresión
Después de la ejecución, conserva los casos útiles y ajusta los ambiguos. Reutiliza el mismo conjunto de datos después de un cambio en Knowledge, en la guía, en el catálogo o en una herramienta.
- Añade los nuevos casos de fallo descubiertos.
- Evita reescribir casos antiguos simplemente para mejorar la puntuación.
Límites importantes y notas de funcionamiento
- La importación de CSV está limitada a 50 casos de prueba por conjunto de datos.
- Los casos de producto generados dependen del catálogo disponible.
- Un resultado por lotes no sustituye la validación en canales en directo.
- No incluyas secretos reales de clientes ni información personal en los prompts de prueba.
Verificar el resultado
- El conjunto de datos contiene el número previsto de casos distintos.
- La ejecución alcanza un estado final completado o claramente informado.
- Cada respuesta puede abrirse y revisarse.
- El conjunto de datos puede seleccionarse de nuevo para una ejecución de regresión posterior.
Mantén un registro breve de lo que probaste, qué escenario de cliente utilizaste y qué cambió. Esto hace que la resolución de problemas posterior sea más precisa y ayuda a otro miembro del equipo a reproducir el resultado sin depender de la memoria.
Resolución de problemas
Los casos CSV no se importan como se esperaba
Comprueba la estructura del archivo, la codificación, el número de filas y el contenido obligatorio de la pregunta. Empieza con un archivo pequeño y limpio, verifica que se importa y luego añade los casos restantes.
La ejecución permanece en cola o falla
Mantén el conjunto de datos sin cambios, anota el estado informado y vuelve a intentarlo solo después de confirmar que el Agent y el servicio están disponibles. Los fallos repetidos deben notificarse con el contexto de la ejecución.