Token vs parole

Token vs parole

Le parole sono facili da contare per le persone, ma i modelli IA di solito elaborano il testo come token. Incolla il testo per confrontare caratteri, parole, token stimati e costo potenziale.

Le parole sono unità umane

Le parole aiutano a leggere e scrivere, ma spesso non sono l’unità usata dalle API IA per il costo.

I token sono unità del modello

Un token può essere una parola, parte di una parola, punteggiatura, spazio, codice o formattazione.

Il conteggio cambia

Lingua, punteggiatura, codice, markdown, JSON e struttura del messaggio possono cambiare la stima.

Il costo segue i token

Il costo IA di solito dipende da token di input e output, non dal numero di parole.

Calcolatore

Stima il costo del tuo prompt IA

Incolla un prompt, scegli un profilo di prezzo di esempio e stima il costo per esecuzione, al giorno e al mese.

I token di input sono ciò che invii al modello IA. I token di output sono ciò che il modello restituisce. I provider spesso li prezzano separatamente.

Impostazioni avanzate

I prezzi sono manuali per ora. Esempio: se il provider addebita $2 input e $10 output per 1M token, inserisci 2 e 10.

L’uso energetico è una stima approssimativa e dipende da modello, hardware, provider, datacenter, carico e regione.

FAQ

FAQ token vs parole

Una parola equivale a un token?

No. Alcune parole sono un token, altre si dividono in più token, e anche punteggiatura o formato possono contare.

Perché i token contano nel costo IA?

I provider spesso prezzano l’uso API per token. Più token di input o output aumentano il costo.

Il conteggio può variare per modello?

Sì. Modelli e tokenizer diversi possono contare lo stesso testo in modo diverso.