Interpreta i risultati delle previsioni dei modelli di classificazione del testo

Se richiedi una previsione, Vertex AI restituisce i risultati in base all'obiettivo del modello. Le previsioni dei modelli di classificazione multi-etichetta restituiscono una o più etichette per ogni documento e un punteggio di affidabilità per ogni etichetta. Per i modelli di classificazione a singola etichetta, le previsioni restituiscono una sola etichetta e un solo punteggio di affidabilità per documento.

Il punteggio di confidenza indica quanto il modello associa ciascuna classe o etichetta a un elemento di test. Più alto è il numero, maggiore è la certezza del modello che l'etichetta debba essere applicata a quell'elemento. Sei tu a decidere quanto deve essere alto il punteggio di affidabilità per accettare i risultati del modello.

Cursore della soglia di punteggio

Nella Google Cloud console, Vertex AI fornisce un cursore che viene utilizzato per regolare la soglia di confidenza per tutte le classi o le etichette o per una singola classe o etichetta. Il cursore è disponibile nella pagina dei dettagli di un modello nella scheda Valuta. La soglia di confidenza è il livello di confidenza che deve avere il modello per assegnare una classe o un'etichetta a un elemento di test. Man mano che aggiusti la soglia, puoi vedere come cambiano la precisione e il richiamo del modello. Soglie più alte in genere aumentano la precisione e riducono il richiamo.

Esempio di output di previsione batch

Il seguente esempio è il risultato previsto per un modello di classificazione con più etichette. Il modello ha applicato le etichette GreatService, Suggestion e InfoRequest al documento inviato. I valori di confidenza si applicano a ogni etichetta in ordine. In questo esempio, il modello ha previsto GreatService come etichetta più pertinente.

{
  "instance": {"content": "gs://bucket/text.txt", "mimeType": "text/plain"},
  "predictions": [
    {
      "ids": [
        "1234567890123456789",
        "2234567890123456789",
        "3234567890123456789"
      ],
      "displayNames": [
        "GreatService",
        "Suggestion",
        "InfoRequest"
      ],
      "confidences": [
        0.8986392080783844,
        0.81984345316886902,
        0.7722353458404541
      ]
    }
  ]
}