Créer et exécuter un test par lots
Utilisez le test par lots pour évaluer ensemble plusieurs scénarios répétables au lieu de vous appuyer uniquement sur une conversation informelle dans Playground. Un jeu de données devient une liste de contrôle de rég...
Utilisez le test par lots pour évaluer ensemble plusieurs scénarios répétables au lieu de vous appuyer uniquement sur une conversation informelle dans Playground. Un jeu de données devient une liste de contrôle de régression stable pour les questions importantes des clients.
Un Agent combine des instructions, des paramètres d'interface orientée client, Knowledge, des données de catalogue et des outils facultatifs. Une configuration fiable est testée avec des questions clients réalistes avant le déploiement. Les tests doivent couvrir les réponses attendues, les informations manquantes, les scénarios produits, l'escalade et toute interaction facultative que l'équipe a activée.
Avant de commencer
Accès : Ouvrez la configuration et les tests de l'Agent avec l'autorisation d'exécuter des tests pour l'Agent sélectionné.
- Choisissez l'Agent à tester.
- Définissez les parcours client que le jeu de données doit couvrir.
- Préparez les questions manuellement, dans un CSV compatible, ou à partir des produits du catalogue.
Travaillez dans la plus petite zone propriétaire décrite ci-dessous et gardez l'état actuel orienté client disponible pendant que vous préparez la modification. Avant de cliquer sur une action finale, confirmez l'entreprise active, l'Agent, la boutique, la langue et le marché affichés dans Humind. Une commande absente peut indiquer un accès en lecture seule ou une capacité qui n'est pas configurée pour cette entreprise. Dans ce cas, consignez la tâche prévue et demandez à un administrateur de vérifier l'autorisation ou la dépendance exacte. Ne contournez pas cette limite en partageant un compte, en copiant des données dans une autre zone ou en promettant une capacité que l'espace de travail n'expose pas.
Workflow étape par étape
Définir l'objectif du test
Créez un jeu de données ciblé pour une version, un risque ou un parcours. Mélangez des cas de réussite attendue avec des cas d'informations manquantes et des cas limites afin qu'un score élevé ne puisse pas masquer un comportement dangereux.
- Donnez au jeu de données un nom spécifique et réutilisable.
- Écrivez l'attente d'acceptation à côté de chaque question planifiée.
Ajouter des cas de test
Saisissez les questions manuellement, importez un CSV avec jusqu'à 50 cas, ou générez des cas orientés produit à partir du catalogue. Vérifiez le texte importé avant de l'exécuter.
- Supprimez les doublons et les données personnelles des clients.
- Faites en sorte que chaque cas soit compréhensible sans contexte caché.
Sélectionner l'Agent et exécuter
Confirmez l'Agent et le jeu de données, puis démarrez l'exécution. Laissez l'exécution atteindre son état final avant d'interpréter des résultats partiels.
- Ne modifiez pas la configuration cible pendant l'exécution.
- Consignez l'heure d'exécution et la configuration évaluée.
Conserver le jeu de données pour la régression
Après l'exécution, conservez les cas utiles et affinez ceux qui sont ambigus. Réutilisez le même jeu de données après une modification de Knowledge, des consignes, du catalogue ou d'un outil.
- Ajoutez les nouveaux cas d'échec découverts.
- Évitez de réécrire d'anciens cas simplement pour améliorer le score.
Limites importantes et notes d'exploitation
- L'import CSV est limité à 50 cas de test par jeu de données.
- Les cas produits générés dépendent du catalogue disponible.
- Un résultat par lots ne remplace pas la validation sur un canal en direct.
- N'incluez pas de secrets réels de clients ni d'informations personnelles dans les prompts de test.
Vérifier le résultat
- Le jeu de données contient le nombre prévu de cas distincts.
- L'exécution atteint un état final terminé ou clairement signalé.
- Chaque réponse peut être ouverte et vérifiée.
- Le jeu de données peut être sélectionné de nouveau pour une exécution de régression ultérieure.
Conservez un bref enregistrement de ce que vous avez testé, du scénario client utilisé et de ce qui a changé. Cela rend le dépannage ultérieur plus précis et aide un autre membre de l'équipe à reproduire le résultat sans se fier à sa mémoire.
Dépannage
Les cas CSV ne s'importent pas comme prévu
Vérifiez la structure du fichier, l'encodage, le nombre de lignes et le contenu requis des questions. Commencez avec un petit fichier propre, vérifiez qu'il s'importe, puis ajoutez les cas restants.
L'exécution reste en file d'attente ou échoue
Gardez le jeu de données inchangé, notez le statut signalé et réessayez seulement après avoir confirmé que l'Agent et le service sont disponibles. Un échec répété doit être signalé avec le contexte de l'exécution.