Conteggio con la tokenizzazione GPT. Altri modelli possono dare risultati diversi.
Spazi, interruzioni di riga e tabulazioni sono conteggiati come caratteri. Uno spazio bianco può condividere un token con il testo vicino, quindi questi valori non possono essere sottratti dal totale dei token.
Un carattere può occupare più token. I singoli frammenti di byte sono visualizzati in esadecimale per preservare il testo originale.
Usa questo contatore e calcolatore di token gratuito per misurare un testo prima di utilizzarlo in un prompt IA. Visualizza il numero di token, parole e caratteri, esamina gli spazi bianchi ed esplora come il testo viene suddiviso in token.
Conta i token del testo inserito secondo le regole di tokenizzazione GPT o200k_base. Mostra anche il numero di parole, caratteri e spazi bianchi. Un token può contenere una parola, parte di una parola, punteggiatura o spazi bianchi.
No. Un token può contenere più caratteri o solo una parte di una parola, e un carattere può occupare più token. Anche le emoji e le lettere con segni combinanti possono occupare più token, pur apparendo come un unico carattere. Non esiste un rapporto fisso tra caratteri e token.
Sono supportati tutti e tre, ma raggrupparli come CJK non significa che abbiano lo stesso numero di token per carattere. Le sequenze di caratteri comuni possono formare un token, mentre un singolo carattere o una sillaba può essere suddiviso in più token. Il conteggio dipende dal testo effettivo e dalle regole di tokenizzazione, non solo dalla lingua.
Il contatore supporta anche testi in scrittura latina, cirillica, araba, nelle scritture indiane e in altre scritture, inclusi testi in più lingue. Le parole possono essere suddivise in parti più piccole, quindi le stime basate sulle parole o sui caratteri inglesi non valgono per tutte le lingue. Le traduzioni della stessa frase possono avere un numero diverso di token.
Nei browser moderni, un carattere han, un kana giapponese, una sillaba coreana o una lettera latina conta in genere come un carattere. Anche una lettera con un accento combinante o un’emoji composta conta solitamente come uno. Sono inclusi anche gli spazi bianchi e la punteggiatura. Le parole seguono confini adeguati alla lingua, quindi un brano CJK non viene considerato un’unica parola solo perché non contiene spazi. Entrambi i conteggi sono separati da quello dei token.
Gli spazi e gli altri spazi bianchi sono inclusi nel conteggio dei token. Uno spazio può essere unito alla parola successiva o formare un token separato. Rimuovere uno spazio può modificare i confini dei token vicini, quindi uno spazio non equivale sempre a un token.
No. I modelli possono usare regole di tokenizzazione diverse. Questo strumento fornisce un conteggio di riferimento GPT per il testo semplice. Le richieste di chat complete possono includere anche ruoli, formattazione dei messaggi e definizioni degli strumenti, quindi l’utilizzo totale può variare.
No. Il testo e i file importati vengono conteggiati nel browser. Lo strumento non invia il loro contenuto a un servizio di conteggio.
Non ci sono limiti fissi alla lunghezza del testo o alle dimensioni dei file. I contenuti di grandi dimensioni richiedono più tempo e dipendono dalla memoria disponibile sul dispositivo. Lo strumento conta l’intero testo e mostra nell’anteprima solo i primi 500 token; l’anteprima non riduce il totale. Usa «Cancella» per interrompere il conteggio in corso.
Strumenti correlati: Contatore di parole
Formatta e abbellisci Java, Python, JavaScript, JSON, HTML e altro; uniforma rientri, spazi e interruzioni di riga.
Taglia, unisci o dividi registrazioni, elimina silenzi e rumore e regola volume, velocità, tono o canali.
Apri e modifica fogli CSV o Excel, formatta testo tabellare e converti CSV in Excel o SQL.
Scrivi e visualizza Markdown, mostra diagrammi Mermaid e converti tra Markdown, HTML e tabelle.
Confronta testi, conta parole e termini frequenti, ordina o sostituisci righe e visualizza testo DOCX.
Consulta significati, sinonimi e contrari delle parole cinesi o trova trascrizioni IPA in più lingue.
Converti tra MP3, WAV, FLAC e altri formati, riproduci audio o PCM grezzo e consulta o modifica i metadati.
Esamina, confronta e convalida JSON; prova espressioni JSONPath o converti dati in CSV, YAML e XML.
Trascrivi audio in testo, genera voce dal testo o registra la tua voce nel browser.
Converti e comprimi video, taglia o unisci clip, ridimensiona fotogrammi ed estrai audio.
Riproduci video locali o in streaming, registra schermo o fotocamera e usa la fotocamera come specchio online.
Comprimi o unisci PDF, dividi e riordina pagine, trasformale in immagini e visualizza o confronta documenti.
Converti formati immagine, ridimensiona o ritaglia foto, comprimi file, confronta immagini ed estrai testo con OCR.
Cattura e abbellisci schermate, crea immagini o GIF dal testo, disegna su una lavagna e genera nuvole di parole o favicon.
Modifica sottotitoli SRT o VTT con anteprima video, sposta i tempi, converti formati e gestisci tracce sottotitoli.
Apri archivi ZIP, 7Z, RAR o TAR, estrai i file desiderati e crea nuovi archivi; ZIP e 7Z possono essere protetti da password.
Codifica e decodifica Base64 o Base32, applica l’escape a URL, HTML e Unicode e consulta il contenuto dei JWT.
Converti valori tra binario, decimale ed esadecimale; scrivi numeri in lettere o trasforma testo in binario.
Calcola percentuali e frazioni, riassumi statistiche e determina voti, sconti o proporzioni dell’immagine.
Mostra un orologio online, avvia conto alla rovescia o cronometro e calcola date, età o differenze di fuso orario.
Verifica IP e connessione IPv6, esamina richieste HTTP o file HAR e calcola intervalli di indirizzi CIDR.
Converti unità di lunghezza, peso, temperatura, spazio dati e altro.
Converti valori HEX, RGB e HSL, estrai colori da un’immagine, verifica il contrasto o prova lo schermo con colori uniformi.
Genera e leggi codici QR o a barre, inclusi codici QR per link e reti Wi-Fi.
Genera hash, UUID e password, prova espressioni regolari, crea slug URL e verifica permessi dei file.
Verifica risoluzione e frequenza dello schermo, misura con un righello, prova i tasti o leggi con un teleprompter.
2048, Campo minato, Sudoku, Gomoku, Battaglia di carri armati