Nota
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare ad accedere o modificare le directory.
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare a modificare le directory.
Le metriche di integrità operativa di Copilot Studio sono disponibili nell'interfaccia di amministrazione di Power Platform.
Visualizzare le metriche di Copilot Studio
Accedi all'interfaccia di amministrazione di Power Platform.
Nel riquadro di spostamento seleziona Monitora.
Nel riquadro Monitoraggio , in Prodotti selezionare Copilot Studio.
Nella pagina Copilot Studio vengono visualizzate le metriche per gli agenti di conversazione e autonomi creati in Copilot Studio. Per gli agenti che usano GitHub Copilot, Copilot Studio usa l'intelligenza artificiale per esaminare ogni sessione completata e assegnargli un singolo risultato, ad esempio risolto, inoltrato o abbandonato. Il monitoraggio usa quindi tale risultato per decidere se la sessione viene conteggiata come esito positivo o negativo. L'analisi di intelligenza artificiale viene eseguita al termine della sessione, quindi le metriche per questi agenti possono essere visualizzate in Monitoraggio fino a 48 ore dopo l'utilizzo.
Metriche e raccomandazioni di Copilot Studio
Definizioni delle metriche
| TIPO | Metrica | Definition | Support |
|---|---|---|---|
| Agents | Tasso di successo della sessione dell'agente | Percentuale che descrive la frequenza con cui un agente autonomo è in grado di eseguire correttamente l'attività o la frequenza con cui la sessione di un agente di conversazione è stata risolta correttamente. | Generalmente disponibile |
| Agents | Sessioni recenti dell'agente | Numero di sessioni utente distinte in un agente in un giorno. Una sessione inizia quando un utente apre l'agente e termina dopo un periodo di inattività o quando l'agente viene chiuso. | Generalmente disponibile |
Mappatura dei risultati della sessione
La tabella seguente mostra come Monitor conteggia ogni risultato della sessione per gli agenti che usano GitHub Copilot.
| Risultato della sessione | Che cosa significa | Tasso di successo della sessione dell'agente | Sessioni recenti dell'agente |
|---|---|---|---|
| Risolto – confermato | L'utente ha confermato che la necessità è stata soddisfatta. | ✅ Successo | Conteggiato |
| Risolto – implicito | La necessità dell'utente sembra essere soddisfatta, anche se l'utente non lo ha confermato in modo esplicito. | ✅ Successo | Conteggiato |
| Escalato – previsto dal sistema | L'agente ha passato la sessione a causa di una regola di escalation configurata dal creatore. L'agente ha fatto quello che è stato progettato per fare. | ✅ Successo | Conteggiato |
| Escalato – richiesto dall'utente | L'utente ha chiesto di parlare con una persona. | ❌ Guasto | Conteggiato |
| Escalato – non intenzionale da parte del sistema | La sessione è stata inoltrata perché l'agente, o uno strumento o un flusso che ha chiamato, non è riuscito. | ❌ Malfunzionamento | Conteggiato |
| Non risolto: malfunzionamento dell'agente | L'agente ha detto che non poteva aiutare con la richiesta. | ❌ Operazione non riuscita | Conteggiato |
| Non risolto – l'utente ha respinto | L'utente ha rifiutato la risposta dell'agente. | ❌ Operazione non riuscita | Conteggiato |
| Non risolto – incompleto | La sessione è terminata con la richiesta dell'utente ancora aperta. | ❌ Guasto | Conteggiato |
| Abbandonato | L'utente ha smesso di rispondere prima che la sessione sia terminata. | ❌ Guasto | Conteggiato |
| Non coinvolto | L'utente non ha mai inviato un messaggio all'agente, quindi non esiste alcun risultato. | Escluso | Non conteggiato |
| Non analizzato | Non è stato possibile determinare alcun esito. Ad esempio, la sessione era troppo grande da analizzare, è stata ignorata a causa dei limiti di capacità di analisi o l'analisi non ha restituito un risultato valido. | Escluso | Non conteggiato |
Come viene calcolato il tasso di successo
Monitor calcola il tasso di successo solo dalle sessioni che hanno un risultato:
Tasso di successo della sessione dell'agente = sessioni riuscite ÷ (sessioni riuscite + sessioni non riuscite)
Note
- Ogni sessione viene conteggiata una volta.
- Questo mapping si applica alle sessioni di conversazione per gli agenti che usano GitHub Copilot. Gli agenti autonomi continuano a segnalare l'esito positivo in base al fatto che ogni esecuzione abbia completato l'attività.
Suggerimenti per migliorare il tasso di successo
- Molti risultati "Non risolti" o "Escalation – richiesta dall'utente": Verificare che l'agente disponga delle fonti di informazioni e delle istruzioni necessarie per rispondere a domande comuni.
- Molti risultati "escalati – non intenzionata dal sistema": Cercare strumenti, connettori o flussi con errori che l'agente chiama.
- Molti risultati "abbandonati": Esaminare le trascrizioni di sessione per vedere dove gli utenti si allontanano, ad esempio dopo lunghe risposte o domande ripetute di chiarimento.