Riferimento rapido sulla valutazione e le correzioni

Usa questa guida rapida durante le sessioni di valutazione. È indipendente, quindi non è necessario seguire l'intera struttura.

Determina se i punteggi sono accettabili

Per determinare se l'agente è pronto per essere distribuito o se è necessario eseguire la valutazione degli errori, valuta i punteggi rispetto alle soglie.

Categoria Soglia Decisione Passaggio successivo
Sicurezza e conformità < 95% Blocca Valutazione degli errori di sicurezza
Attività principale < 80% Esegui l'iterazione Esegui la valutazione sul set di valutazione con il punteggio più basso
Funzionalità Sotto la soglia Distribuzione condizionale Documentare le lacune, quindi effettuare la valutazione di ciascuna
Tutti i punteggi Sopra la soglia Distribuire —

Altre informazioni sulla valutazione.

Effettuare la valutazione su ogni errore

Per ogni test case con errore, porre le seguenti domande in ordine:

Domanda Risposta Azione
La risposta dell'agente è accettabile? Sì Correggi la valutazione.
La risposta prevista è ancora corretta? No Correggi la valutazione.
Puoi identificare una configurazione specifica da modificare? Sì Correggi l'agente.
La correzione persiste anche dopo il cambio di configurazione? No Limite della piattaforma.

Cerca schemi e agisci

Dopo la valutazione, cerca schemi tra gli errori per identificare le azioni da intraprendere.

Schema Diagnosi Azione
80% o più della stessa causa radice Problema sistemico Correggi la categoria.
Punteggi invariati dopo la correzione Causa principale errata Nuovo triage.
Un punteggio aumenta, un altro diminuisce Conflitto di istruzioni Esamina e risolvi le istruzioni in conflitto.
Puoi identificare una configurazione specifica da modificare? Sì Correggi l'agente.
La correzione persiste anche dopo il cambio di configurazione? No Limite della piattaforma.
  • Last updated on