Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Dashboard delle prestazioni di AI Agent
Puoi utilizzare la dashboard delle prestazioni degli agenti AI per visualizzare le prestazioni degli agenti AI e ottenere informazioni dettagliate sugli agenti di intelligenza artificiale e nel tempo.
La dashboard fornisce un unico punto per visualizzare le prestazioni aggregate degli agenti AI. Usa la dashboard per visualizzare le metriche degli agenti AI come il numero di chiamate, la latenza e la percentuale di successo.
Indice
Abilitare l’accesso alla dashboard
Assicurati che agli utenti vengano assegnate le autorizzazioni del profilo di sicurezza appropriate:
Metriche di accesso - Autorizzazione di accesso o Dashboard - Autorizzazione di accesso. Per ulteriori informazioni sulla differenza nel comportamento, consulta Assegna le autorizzazioni per visualizzare dashboard e report in Connect Customer.
È necessaria almeno una delle seguenti autorizzazioni del profilo di sicurezza per accedere alla dashboard di AI Agent Performance:
-
AI agent designer: autorizzazione di visualizzazione dell'agente AI
-
AI agent designer: autorizzazione alla visualizzazione tramite prompt AI
-
AI Agent Designer: autorizzazione alla visualizzazione dei guardrail AI
-
Applicazioni per agenti: autorizzazione di visualizzazione di Connect Assistant
La dashboard è disponibile all'indirizzo: Analisi e ottimizzazione > Dashboard di analisi > AI Agent Performance.
Specificare “Intervallo di tempo” e il riferimento “Confronta con”
Utilizza il filtro Intervallo di tempo per specificare la data e il periodo di tempo per cui desideri visualizzare i dati nella dashboard.
Per impostazione predefinita, la dashboard mostra i dati relativi all'ultima settimana. Puoi personalizzare l'intervallo di tempo per visualizzare i dati recenti degli ultimi 15 minuti o risalire fino a 3 mesi nella cronologia.
Usa il filtro Confronta per selezionare un periodo di tempo con cui confrontare i dati correnti. Con il filtro Confronta per, puoi identificare le tendenze e tenere traccia di miglioramenti o problemi nel tempo.
Self-service Riepilogo delle prestazioni dell'IA
Questa sezione mostra lo stato delle Self-Service interazioni AI-Agent avviate. Visualizza le seguenti metriche chiave per il periodo di tempo selezionato, filtrate in base al caso d'uso «Self service»:
-
L'IA ha coinvolto i contatti:
Numero totale di contatti gestiti in cui gli agenti di intelligenza artificiale hanno risolto le richieste dei clienti senza coinvolgere agenti umani.
-
Agenti AI attivi:
Il numero totale di agenti AI univoci, in cui ogni agente è identificato dalla sua combinazione univoca di nome e versione.
-
Percentuale di completamento delle risposte:
La percentuale di sessioni degli agenti di intelligenza artificiale che sono riuscite a rispondere alle richieste in arrivo.
-
Tasso di trasferimento:
Percentuale di contatti self-service gestiti da agenti di intelligenza artificiale contrassegnati come bisognosi di supporto aggiuntivo, inclusi, a titolo esemplificativo ma non esaustivo, agenti umani.
-
Percentuale di successo degli obiettivi:
La percentuale di sessioni in cui gli agenti di intelligenza artificiale hanno risolto con successo i problemi dei clienti. Il valore è compreso tra 0 e 1, dove 1 indica una risoluzione corretta in tutte le sessioni.
-
Punteggio di fedeltà:
La percentuale di risposte degli agenti di intelligenza artificiale che rimangono fedeli al contesto conversazionale, inclusi i messaggi e i risultati delle chiamate agli strumenti. Il valore è compreso tra 0 e 1, dove 1 indica una perfetta fedeltà contestuale.
L'immagine seguente mostra un esempio di grafico riassuntivo delle prestazioni dell'Self-service IA.
Assistenza agli agenti: riepilogo delle prestazioni dell'IA
Questo widget mostra lo stato delle interazioni assistite dagli agenti in cui l'IA fornisce supporto agli agenti umani. Visualizza le seguenti metriche chiave per il periodo di tempo selezionato, filtrate in base al caso d'uso di «Assistenza agli agenti».
-
L'IA ha coinvolto i contatti:
Numero totale di contatti in cui gli agenti di intelligenza artificiale hanno assistito gli agenti umani nella risoluzione delle richieste dei clienti.
-
Agenti AI attivi:
Il numero totale di agenti AI univoci, in cui ogni agente è identificato dalla sua combinazione univoca di nome e versione.
-
Percentuale di completamento delle risposte:
La percentuale di sessioni degli agenti di intelligenza artificiale che sono riuscite a rispondere alle richieste in arrivo.
-
Tasso di coinvolgimento proattivo delle intenzioni:
Percentuale di intenti proattivi rilevati su cui hanno fatto clic gli agenti umani.
-
Punteggio di fedeltà:
La percentuale di risposte degli agenti di intelligenza artificiale che rimangono fedeli al contesto conversazionale, inclusi i messaggi e i risultati delle chiamate agli strumenti. Il valore è compreso tra 0 e 1, dove 1 indica una perfetta fedeltà contestuale.
L'immagine seguente mostra un esempio di grafico riassuntivo delle prestazioni dell'IA di assistenza agli agenti.
Prestazioni degli agenti di intelligenza artificiale
Questa tabella fornisce una panoramica dettagliata delle prestazioni degli agenti di intelligenza artificiale dal caso d'uso alle versioni dei singoli agenti e delle relative metriche prestazionali chiave.
La tabella mostra le metriche delle prestazioni a due livelli:
-
Livello di casi d'uso dell'IA:
Metriche aggregate su tutte le versioni degli agenti all'interno di un caso d'uso (self-service per il cliente finale, assistenza per gli agenti).
-
Livello di versione dell'agente AI:
Metriche prestazionali individuali per ogni versione dell'agente.
È possibile espandere o comprimere le righe dei casi d'uso per visualizzare in dettaglio le versioni specifiche dell'agente. Per vedere come ogni versione contribuisce alle prestazioni complessive dei casi d'uso, visualizza le singole metriche per ogni riga della versione dell'agente.
Metriche visualizzate:
-
Numero di chiamate degli agenti AI:
Numero totale di volte in cui è stata richiamata la versione dell'agente AI.
-
Percentuale di successo nell'invocazione di un agente AI:
Percentuale di chiamate agli agenti di intelligenza artificiale eseguite con successo.
-
Media. La conversazione con un agente di intelligenza artificiale si trasforma:
Numero medio di turni di conversazione effettuati dall'agente di intelligenza artificiale per raggiungere un risultato.
-
Risposta utile:
Il numero di suggerimenti di intelligenza artificiale giudicati utili con il pollice in alto.
-
Risposta inutile:
Il numero di suggerimenti di intelligenza artificiale classificati come inutili con il pollice in giù.
-
Precisione nell'uso degli strumenti:
Il tasso di utilizzo corretto degli strumenti da parte dell'agente AI. Il valore è compreso tra 0 e 1, dove 1 indica un utilizzo perfetto.
-
Precisione nella selezione degli utensili:
Il tasso di selezione corretta degli strumenti da parte degli agenti AI. Il valore è compreso tra 0 e 1, dove 1 indica la selezione ottimale.
-
Precisione dei parametri dell'utensile:
La frequenza di richiami dello strumento in cui gli agenti AI hanno fornito i parametri corretti. Il valore è compreso tra 0-1, dove 1 indica la perfetta precisione dei parametri.
L'immagine seguente mostra un esempio di tabella delle prestazioni degli agenti AI.
Percentuale di successo degli agenti di intelligenza artificiale per invocazione
Il grafico della percentuale di successo degli agenti AI per invocazione mostra la percentuale di successo delle chiamate per ciascun agente AI. Puoi configurare ulteriormente questo widget filtrando per agenti AI specifici, tipo di agente AI, caso d'uso dell'IA o altre dimensioni direttamente da questo grafico.
L'immagine seguente mostra un esempio di grafico della percentuale di successo degli agenti AI per invocazione.
Utilizzo della Knowledge Base
Questa tabella fornisce una panoramica dettagliata degli articoli della knowledge base a cui fanno riferimento gli agenti di intelligenza artificiale. Puoi espandere in base al tipo di agente AI e alle righe degli agenti AI per approfondire il nome specifico della knowledge base e vedere quante volte una knowledge base è stata referenziata dagli agenti di intelligenza artificiale.
Metriche visualizzate:
-
Numero di riferimenti: numero di volte in cui l'articolo è stato referenziato dagli agenti di intelligenza artificiale.
L'immagine seguente mostra un esempio di tabella di utilizzo della Knowledge Base.
Trend delle prestazioni degli agenti di intelligenza artificiale
L'andamento delle prestazioni degli agenti di intelligenza artificiale è un grafico di serie temporali che mostra la percentuale di successo delle chiamate degli agenti di intelligenza artificiale (barre blu), il punteggio di fedeltà (linea rossa) e la precisione dell'uso degli strumenti (linea verde) in un determinato periodo di tempo suddiviso per intervalli (15 minuti, giornalieri, settimanali, mensili). È possibile configurare intervalli di tempo diversi utilizzando il pulsante “Intervallo” direttamente nel widget. Gli intervalli che puoi selezionare dipendono dal filtro dell'intervallo di tempo a livello di pagina.
Ad esempio:
-
Se selezioni il filtro «Intervallo di tempo odierno» nella dashboard, puoi visualizzare solo un intervallo di 15 minuti nelle ultime 24 ore.
-
Se selezioni il filtro per l'intervallo di tempo «Giorno» sulla dashboard, puoi visualizzare un trend dell'intervallo finale di 8 giorni o un trend dell'intervallo di 15 minuti per le ultime 24 ore.
-
Se selezioni il filtro dell'intervallo di tempo «Settimana» sulla dashboard, puoi visualizzare le tendenze degli intervalli giornalieri o settimanali.
-
Se selezioni il filtro per l'intervallo di tempo «Mese» sulla dashboard, puoi visualizzare le tendenze degli intervalli giornalieri o mensili.
L'immagine seguente mostra un esempio di grafico delle tendenze delle prestazioni degli agenti di intelligenza artificiale.
Utilizzo degli strumenti di intelligenza artificiale
Questa tabella confronta le implementazioni degli strumenti (ad esempio, MCP - Model Context Protocol Return-to-Control) sulle invocazioni, la latenza media e la percentuale di successo delle invocazioni e la precisione di utilizzo degli strumenti.
Ad esempio, puoi selezionare un tipo di agente AI (come Orchestration o Answer Recommendation) e visualizzare le prestazioni dei diversi strumenti e delle relative versioni all'interno di quel tipo di agente. Puoi identificare quali versioni dello strumento necessitano di ottimizzazione ordinando le colonne utilizzando il conteggio delle chiamate degli strumenti AI, la percentuale di successo delle chiamate degli strumenti AI o la media. Latenza di richiamo degli strumenti di intelligenza artificiale.
La tabella mostra le metriche delle prestazioni a tre livelli:
-
Livello del tipo di agente AI:
Metriche aggregate su tutti gli strumenti e le versioni all'interno di un tipo di agente.
-
Livello del tipo di strumento AI:
Metriche aggregate su tutte le versioni di un tipo di strumento specifico.
-
Strumento di intelligenza artificiale:
Metriche prestazionali individuali per ogni versione dello strumento.
Puoi espandere o comprimere le righe del tipo di agente AI e del tipo di strumento per approfondire le versioni specifiche dello strumento. Per vedere come ogni versione contribuisce alle prestazioni complessive del tipo di strumento, visualizza le singole metriche per ogni riga della versione dello strumento.
Metriche visualizzate:
-
Numero di chiamate allo strumento di intelligenza artificiale:
Numero totale di volte in cui è stata richiamata la versione dello strumento di intelligenza artificiale.
-
Media. Latenza di richiamo dello strumento AI:
Latenza media di chiamata in millisecondi per la versione dello strumento.
-
Percentuale di successo delle chiamate agli strumenti di intelligenza artificiale:
Percentuale di chiamate agli strumenti di intelligenza artificiale eseguite con successo.
-
Precisione nell'uso dello strumento:
Il tasso di utilizzo corretto degli strumenti da parte dell'agente AI. Il valore è compreso tra 0 e 1, dove 1 indica un utilizzo perfetto.
-
Precisione nella selezione degli utensili:
Il tasso di selezione corretta degli strumenti da parte degli agenti AI. Il valore è compreso tra 0 e 1, dove 1 indica la selezione ottimale.
-
Precisione dei parametri dell'utensile:
La frequenza di richiami dello strumento in cui gli agenti AI hanno fornito i parametri corretti. Il valore è compreso tra 0-1, dove 1 indica la perfetta precisione dei parametri.
L'immagine seguente mostra un esempio di tabella di utilizzo degli strumenti di intelligenza artificiale.
Prestazioni rapide dell'IA
Questa tabella fornisce una panoramica dettagliata delle prestazioni dell'AI prompt. È possibile espandere le righe del tipo di agente AI e del tipo di prompt per visualizzare in dettaglio le versioni di prompt specifiche. Per vedere come ogni versione contribuisce alle prestazioni complessive del tipo di prompt, visualizza le singole metriche per ogni riga della versione del prompt.
La tabella mostra le metriche delle prestazioni a tre livelli:
-
Livello del tipo di agente AI:
Metriche aggregate su tutti i prompt e le versioni per un tipo di agente AI.
-
Livello del tipo di prompt AI:
Metriche aggregate in tutte le versioni di un tipo specifico di prompt AI.
-
Livello di versione del prompt AI:
Metriche prestazionali individuali per ogni versione del prompt AI.
Metriche visualizzate:
-
Numero di chiamate ai prompt AI:
Numero totale di volte in cui è stata richiamata la versione del prompt AI.
-
Percentuale di successo delle chiamate al prompt AI:
Percentuale di chiamate ai prompt AI eseguite con successo.
-
Media. Latenza di chiamata rapida AI:
Latenza media di chiamata in millisecondi per la versione AI prompt.
Oltre a utilizzare i filtri di pagina, puoi aggiungere filtri alla tabella per agenti AI specifici, prompt AI, intervalli di tempo o altre dimensioni.
L'immagine seguente mostra un esempio di tabella delle prestazioni dei prompt AI.
Tendenza degli intenti proattivi
Il grafico di tendenza degli intenti proattivi mostra gli intenti proattivi rilevati (barre blu), rispetto al tasso di coinvolgimento degli intenti proattivi (linea rossa) e al tasso di risposta degli intenti proattivi (linea verde) in un determinato periodo di tempo suddiviso per intervalli (15 minuti, giornalieri, settimanali, mensili). È possibile configurare intervalli di tempo diversi utilizzando il pulsante “Intervallo” direttamente nel widget. Gli intervalli che puoi selezionare dipendono dal filtro dell'intervallo di tempo a livello di pagina.
Metriche visualizzate:
-
Intenti proattivi rilevati:
Il numero di intenti proattivi (richieste dei clienti) rilevati durante le sessioni di intelligenza artificiale, per i casi d'uso di Agent Assistance.
-
Tasso di coinvolgimento proattivo delle intenzioni:
La percentuale di intenti proattivi rilevati che sono stati cliccati o utilizzati da agenti umani, per i casi d'uso di Agent Assistance.
-
Tasso di risposta proattiva alle intenzioni:
La percentuale di intenti proattivi coinvolti che sono stati soddisfatti con successo dagli agenti di intelligenza artificiale, per i casi d'uso di Agent Assistance.
L'immagine seguente mostra un esempio di grafico di tendenza degli intenti proattivi.
Prompt AI in base alla latenza di chiamata
Il grafico della latenza dei prompt AI per invocazione mostra la latenza media di chiamata in millisecondi per ogni prompt AI. Puoi configurare ulteriormente questo widget filtrando i prompt AI specifici, il tipo di prompt AI, l'agente AI, il tipo di agente AI, il caso d'uso AI o altre dimensioni direttamente da questo grafico.
L'immagine seguente mostra un esempio di diagramma della latenza di chiamata dei prompt AI.
Prompt AI in base alla percentuale di successo delle invocazioni
Il grafico della percentuale di successo dei prompt AI per invocazione mostra la percentuale di successo delle chiamate per ogni prompt AI. Puoi configurare ulteriormente questo widget filtrando i prompt AI specifici, il tipo di prompt AI, l'agente AI, il tipo di agente AI, il caso d'uso AI o altre dimensioni direttamente da questo grafico.
L'immagine seguente mostra un esempio di grafico della percentuale di successo dei prompt AI per invocazione.
