Nota
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare ad accedere o modificare le directory.
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare a modificare le directory.
La creazione di un agente efficace si estende oltre le istruzioni di creazione e la connessione di dati e strumenti. Dopo la distribuzione, i team devono valutare, diagnosticare e migliorare continuamente il comportamento degli agenti per garantire che soddisfi le aspettative di business, qualità e sicurezza.
Questo set di articoli introduce un framework pratico per la fase di miglioramento del ciclo di vita di sviluppo dell'agente. Il framework consente di eseguire risultati di valutazione (punteggi, test case non riusciti e regressioni) e trasformarli in azioni chiare e con priorità.
Usare questo framework quando si hanno risultati di valutazione ed è necessario decidere cosa fare successivamente. Gli scenari comuni includono:
- Un set di valutazione ottiene punteggi al di sotto di una soglia prevista.
- Test case specifici hanno esito negativo e la causa radice non è chiara.
- I punteggi migliorano in un'area, ma regredino in un'altra.
- Più set di valutazione hanno esito negativo e le priorità non sono chiare.
- Il comportamento di un agente cambia in modo imprevisto dopo un aggiornamento.
Questo framework presuppone che ci siano già risultati di successo o fallimento per i singoli test case in uno o più set di valutazione.
Suggerimento
Configurare ed eseguire valutazioni per l'agente prima di usare questo framework di triage e risoluzione. Altre informazioni sulla progettazione di un framework di valutazione iterativo.
Passo successivo
Comprendere gli obiettivi del framework di valutazione e correzione, inclusa la struttura e i principi di progettazione.