Creare ed eseguire un test batch
Usa il test batch per valutare insieme diversi scenari ripetibili invece di affidarti solo a una conversazione informale in Playground. Un set di dati diventa una checklist di regressione stabile per domande important...
Usa il test batch per valutare insieme diversi scenari ripetibili invece di affidarti solo a una conversazione informale in Playground. Un set di dati diventa una checklist di regressione stabile per domande importanti dei clienti.
Un Agent combina istruzioni, impostazioni dell'interfaccia rivolta al cliente, Knowledge, dati del catalogo e strumenti opzionali. Una configurazione affidabile viene testata con domande realistiche dei clienti prima della distribuzione. I test dovrebbero coprire risposte previste, informazioni mancanti, scenari di prodotto, escalation e qualsiasi interazione opzionale che il team ha abilitato.
Prima di iniziare
Accesso: Apri la configurazione e i test dell'Agent con l'autorizzazione a eseguire test per l'Agent selezionato.
- Scegli l'Agent da testare.
- Definisci i percorsi cliente che il set di dati deve coprire.
- Prepara le domande manualmente, in un CSV compatibile o dai prodotti del catalogo.
Lavora nell'area di competenza più piccola descritta di seguito e mantieni disponibile lo stato attuale rivolto al cliente mentre prepari la modifica. Prima di fare clic su qualsiasi azione finale, conferma l'azienda attiva, l'Agent, il negozio, la lingua e il mercato mostrati in Humind. Un controllo mancante può indicare accesso in sola lettura o una capacità non configurata per questa azienda. In tal caso, registra l'attività prevista e chiedi a un amministratore di verificare l'autorizzazione o la dipendenza esatta. Non aggirare questo limite condividendo un account, copiando dati in un'altra area o promettendo una capacità che lo spazio di lavoro non espone.
Flusso di lavoro passo dopo passo
Definire l'obiettivo del test
Crea un set di dati mirato per una release, un rischio o un percorso. Mescola casi di successo attesi con casi di informazioni mancanti e casi limite, in modo che un punteggio alto non possa nascondere comportamenti non sicuri.
- Assegna al set di dati un nome specifico e riutilizzabile.
- Scrivi l'aspettativa di accettazione accanto a ogni domanda pianificata.
Aggiungere casi di test
Inserisci le domande manualmente, importa un CSV con fino a 50 casi oppure genera casi orientati al prodotto dal catalogo. Controlla il testo importato prima di eseguirlo.
- Rimuovi duplicati e dati personali dei clienti.
- Fai in modo che ogni caso sia comprensibile senza contesto nascosto.
Selezionare l'Agent ed eseguire
Conferma l'Agent e il set di dati, quindi avvia l'esecuzione. Lascia che l'esecuzione raggiunga il suo stato finale prima di interpretare risultati parziali.
- Non modificare la configurazione di destinazione durante l'esecuzione.
- Registra il tempo di esecuzione e la configurazione in valutazione.
Conservare il set di dati per la regressione
Dopo l'esecuzione, conserva i casi utili e affina quelli ambigui. Riutilizza lo stesso set di dati dopo una modifica a Knowledge, alle linee guida, al catalogo o a uno strumento.
- Aggiungi i nuovi casi di errore scoperti.
- Evita di riscrivere i vecchi casi solo per migliorare il punteggio.
Limiti importanti e note operative
- L'importazione CSV è limitata a 50 casi di test per set di dati.
- I casi di prodotto generati dipendono dal catalogo disponibile.
- Un risultato batch non sostituisce la convalida sui canali live.
- Non includere veri segreti dei clienti o informazioni personali nei prompt di test.
Verificare il risultato
- Il set di dati contiene il numero previsto di casi distinti.
- L'esecuzione raggiunge uno stato finale completato o chiaramente segnalato.
- Ogni risposta può essere aperta e rivista.
- Il set di dati può essere selezionato di nuovo per una successiva esecuzione di regressione.
Tieni una breve registrazione di ciò che hai testato, dello scenario cliente che hai usato e di ciò che è cambiato. Questo rende più precisa la risoluzione dei problemi successiva e aiuta un altro membro del team a riprodurre il risultato senza affidarsi alla memoria.
Risoluzione dei problemi
I casi CSV non vengono importati come previsto
Controlla la struttura del file, la codifica, il numero di righe e il contenuto richiesto della domanda. Inizia con un file piccolo e pulito, verifica che venga importato, quindi aggiungi i casi rimanenti.
L'esecuzione resta in coda o non riesce
Lascia invariato il set di dati, annota lo stato segnalato e riprova solo dopo aver confermato che l'Agent e il servizio sono disponibili. Un errore ripetuto dovrebbe essere segnalato con il contesto dell'esecuzione.