Loading
CRM Analytics
Scheda Prestazioni generali per i casi d'uso di classificazione multiclasse

Scheda Prestazioni generali per i casi d'uso di classificazione multiclasse

La scheda Prestazioni generali mostra le metriche principali relative alla qualità del modello.

Nota
Nota Le storie di Einstein Discovery ora sono modelli. Stiamo facendo il possibile per aggiornare il nome ovunque, ma in alcuni punti potrebbe essere ancora visualizzato il nome precedente.

Navigazione alla scheda Prestazioni generali

In Prestazioni, fare su Valutazione del modello, quindi su Prestazioni generali.

Scheda Prestazioni generali con i risultati dell'analisi dell'accuratezza

Selettore classe

Selezionare una classe per visualizzarne le statistiche sulle prestazioni.

Curva ROC

Curva ROC (Receiver Operating Characteristic). Visualizza la misurazione delle prestazioni per la classe selezionata. La curva ROC è una curva di probabilità e l'AUC (Area sotto la curva) rappresenta il grado o la misura di separabilità. Questo grafico mostra in che misura il modello è in grado di effettuare distinzioni tra le classi.

  • Asse Y: Tasso di veri positivi: TPR = VP / (VP + FN)
  • Asse X: Tasso di falsi positivi >: FPR = FP / (FP + VN)
  • Modello (linea blu)
  • Nessun modello (linea grigia): uguale al caso fortuito

Conteggio delle righe per la classe selezionata

Numero di osservazioni nella serie di dati di addestramento associata alla classe selezionata.

AUC

Area sotto la curva. Misura il tasso di classificazione corretta del modello per la classe selezionata.

Intervallo:

  • 0,5 indica che il modello genera una congettura casuale (random guess).
  • 1,0 indica che il modello ha classificato correttamente i dati il 100% delle volte. Un AUC di 1,0 è sospetto poiché può indicare fughe di dati: i dati utilizzati per eseguire l'addestramento del modello includono una o più colonne che contengono le informazioni di cui si sta tentando di eseguire la previsione.

Matrice di confusione per la classe selezionata

La matrice di confusione si usa per valutare i compromessi tra diversi tipi di errore per la classe selezionata. Indica quante volte il modello classifica in modo corretto e non corretto un'osservazione come vera e falsa per la classe. Metriche chiave:

MetricaDescrizione
Punteggio F1

Il punteggio F1 rappresenta la media armonica di precisione e richiamo.

Formula:

F1 = 2 * ( (precisione * richiamo) / (precisione + richiamo) )

dove

  • precisione rappresenta il numero di risultati positivi corretti diviso per il numero totale di risultati positivi.
  • richiamo rappresenta il numero di risultati positivi corretti diviso per il numero totale di osservazioni pertinenti (tutte le osservazioni che dovrebbero essere state identificate come positive).
Tasso di veri positivi

Il Tasso di veri positivi (TPR, True Positive Rate) misura la percentuale di veri positivi che il modello ha previsto correttamente.

Formula:

TPR = VP / (VP + FN)

dove

  • TP rappresenta il numero di veri positivi (previsione positiva con risultato positivo)
  • FN rappresenta il numero di falsi negativi (previsione negativa con risultato positivo)

Intervallo:

  • uno (1) rappresenta un test perfetto (100% veri positivi)
  • zero (0) rappresenta il peggior valore possibile (0% veri positivi).

Il Tasso di veri positivi è noto anche come Riservatezza o Richiamo.

Precisione

La Precisione descrive la percentuale di risultati positivi che sono risultati veri positivi.

Formula:

Precisione = VP / (VP + FP)

dove

  • TP rappresenta il numero di veri positivi (previsione positiva con risultato positivo)
  • FP rappresenta il numero di falsi positivi (previsione positiva con risultato negativo)

Intervallo: La precisione è nota anche come valore predittivo positivo (PPV, Positive Predictive Value).

  • 1 rappresenta un test perfetto (100% veri positivi)
  • 0 rappresenta il peggior valore possibile (0% veri positivi)
Valore predittivo negativo

Il Valore predittivo negativo (NPV, Negative Predictive Value) descrive la percentuale di risultati negativi che sono risultati veri negativi.

Formula:

NPV = VN / (VN + FN)

dove

  • TN rappresenta il numero di veri negativi (previsione negativa con risultato negativo)
  • FN rappresenta il numero di falsi negativi (previsione negativa con risultato positivo)

Intervallo:

  • 1 rappresenta un test perfetto (100%)
  • 0 rappresenta il peggior valore possibile
Marcatezza

La Marcatezza misura l'affidabilità delle previsioni positive e negative del modello.

Formula:

Marcatezza = PPV + NPV - 1

dove

  • PPV è il valore predittivo positivo
  • NPV è il valore predittivo negativo
MCC

Il Coefficiente di correlazione di Matthews (MCC) è una misura della qualità del modello. MCC offre una rappresentazione più uniforme delle 4 parti della matrice di confusione rispetto ad altre metriche di classificazione.

Intervallo:

  • +1 indica che il modello prevede correttamente la classe ogni volta.
  • 0 indica che il modello genera una congettura casuale (random guess)
  • -1 indica che il modello prevede erroneamente la classe opposta ogni volta
Livello di informazione

Il Livello di informazione misura quanto è informato il modello su positivi e negativi.

Formula:

Livello di informazione = TPR + TNR - 1

dove

  • TPR è il tasso di veri positivi
  • TNR è il tasso di veri negativi
Accuratezza

L'Accuratezza misura la proporzione degli esiti previsti correttamente dal modello.

Formula:

Accuratezza = (VP + FP) / N. totale di previsioni

dove

  • TP rappresenta il numero di veri positivi (previsione positiva con risultato positivo)
  • TN rappresenta il numero di veri negativi (previsione negativa con risultato negativo)
  • N. totale di previsioni formulate dal modello (previsioni corrette più previsioni errate)

Matrice di confusione per tutte le classi

Questo grafico mostra rapidamente in che misura il modello prevede ogni classe in modo preciso. Dove la riga e la colonna di ogni classe si intersecano nella tabella, il colore del quadrato indica l'accuratezza del modello. La legenda mostra una progressione dei colori da 0 a 1, con 1 che rappresenta la precisione 100%. In questo esempio, la diagonale di colore blu scuro indica una percentuale elevata di veri positivi.

 
Caricamento
Salesforce Help | Article