Contagem com a tokenização GPT. Outros modelos podem apresentar resultados diferentes.
Espaços, quebras de linha e tabulações são contados como caracteres. Um espaço em branco pode compartilhar um token com o texto próximo, por isso esses números não podem ser subtraídos do total de tokens.
Um caractere pode ocupar mais de um token. Fragmentos individuais de bytes são exibidos em hexadecimal para preservar o texto original.
Use este contador e calculadora de tokens gratuitos para medir um texto antes de usá-lo em um prompt de IA. Veja as contagens de tokens, palavras e caracteres, examine os espaços em branco e explore como o texto é dividido em tokens.
Ela conta os tokens do texto inserido usando as regras de tokenização GPT o200k_base. Também mostra a contagem de palavras, caracteres e espaços em branco. Um token pode conter uma palavra, parte de uma palavra, pontuação ou espaços em branco.
Não. Um token pode conter vários caracteres ou apenas parte de uma palavra, e um caractere pode ocupar vários tokens. Emojis e letras com marcas combinantes também podem ocupar vários tokens, mesmo quando parecem um único caractere. Não existe uma proporção fixa entre caracteres e tokens.
Os três são aceitos, mas agrupá-los como CJK não significa que tenham a mesma quantidade de tokens por caractere. Sequências frequentes de caracteres podem formar um token, enquanto um único caractere ou uma sílaba pode ser dividido em vários. A contagem depende do texto real e das regras de tokenização, não apenas do idioma.
O contador também aceita textos nas escritas latina, cirílica, árabe, índicas e outras, incluindo textos que misturam idiomas. As palavras podem ser divididas em partes menores, por isso as estimativas baseadas em palavras ou caracteres do inglês não se aplicam a todos os idiomas. Traduções da mesma frase podem ter quantidades diferentes de tokens.
Nos navegadores modernos, um caractere han, um kana japonês, uma sílaba coreana ou uma letra latina geralmente conta como um caractere. Uma letra com acento combinante ou um emoji composto também costuma contar como um. Espaços em branco e pontuação são incluídos. As palavras seguem limites adequados ao idioma, portanto um trecho CJK não é considerado uma única palavra apenas por não ter espaços. Ambas as contagens são independentes da contagem de tokens.
Espaços e outros espaços em branco são incluídos na contagem de tokens. Um espaço pode ser combinado com a palavra seguinte ou formar um token separado. Remover um espaço pode alterar os limites dos tokens próximos, portanto um espaço nem sempre equivale a um token.
Não. Os modelos podem usar regras de tokenização diferentes. Esta ferramenta fornece uma contagem de referência GPT para texto simples. Solicitações completas de chat também podem conter funções, formatação de mensagens e definições de ferramentas, por isso o uso total pode variar.
Não. O texto e os arquivos importados são contados no navegador. A ferramenta não envia seu conteúdo a um serviço de contagem.
Não há limite fixo de comprimento do texto ou tamanho do arquivo. Entradas grandes levam mais tempo e dependem da memória disponível no seu dispositivo. A ferramenta conta o texto completo e mostra apenas os primeiros 500 tokens na prévia; a prévia não reduz o total. Use “Limpar” para interromper a contagem atual.
Ferramentas relacionadas: Contador de palavras
Formate e embeleze Java, Python, JavaScript, JSON, HTML e outros; ajuste recuos, espaços e quebras de linha.
Corte, una ou divida gravações, remova silêncios ou ruídos e ajuste volume, velocidade, tom ou canais.
Abra e edite planilhas CSV ou Excel, formate texto tabular e converta CSV para Excel ou SQL.
Escreva e visualize Markdown, renderize diagramas Mermaid e converta entre Markdown, HTML e tabelas.
Compare textos, conte palavras e termos frequentes, ordene ou substitua linhas e visualize texto DOCX.
Consulte significados, sinônimos e antônimos em chinês ou encontre transcrições fonéticas em AFI em vários idiomas.
Converta entre MP3, WAV, FLAC e outros formatos, reproduza áudio ou PCM bruto e consulte ou edite metadados.
Inspecione, compare e valide JSON; teste expressões JSONPath ou converta dados para CSV, YAML e XML.
Transcreva áudio em texto, gere voz a partir de texto ou grave sua voz no navegador.
Converta e comprima vídeos, corte ou una clipes, redimensione quadros e extraia áudio.
Reproduza vídeos locais ou em streaming, grave tela ou câmera e use a câmera como espelho online.
Comprima ou una PDFs, divida e reorganize páginas, converta-as em imagens e visualize ou compare documentos.
Converta formatos de imagem, redimensione ou recorte fotos, comprima arquivos, compare imagens e extraia texto com OCR.
Capture e melhore telas, transforme texto em imagens ou GIFs, desenhe em um quadro branco e crie nuvens de palavras ou favicons.
Edite legendas SRT ou VTT com prévia do vídeo, ajuste tempos, converta formatos e gerencie faixas de legendas.
Abra ZIP, 7Z, RAR ou TAR, extraia os arquivos desejados e crie novos arquivos compactados; ZIP e 7Z aceitam senha.
Codifique e decodifique Base64 ou Base32, escape URLs, HTML e texto Unicode e inspecione o conteúdo de JWTs.
Converta valores entre binário, decimal e hexadecimal; escreva números por extenso ou transforme texto em binário.
Calcule porcentagens e frações, resuma estatísticas e determine notas, descontos ou proporções de imagem.
Exiba um relógio online, use contagem regressiva ou cronômetro e calcule datas, idades ou diferenças de fuso horário.
Verifique seu IP e conexão IPv6, inspecione requisições HTTP ou arquivos HAR e calcule intervalos de endereços CIDR.
Converta unidades de comprimento, peso, temperatura, armazenamento de dados e mais.
Converta valores HEX, RGB e HSL, extraia cores de uma imagem, verifique contraste ou teste a tela com cores sólidas.
Gere e leia códigos QR ou de barras, inclusive códigos QR para links e redes Wi-Fi.
Gere hashes, UUIDs e senhas, teste expressões regulares, crie slugs de URL e confira permissões de arquivos.
Verifique resolução e taxa de atualização da tela, meça com uma régua, teste teclas ou leia com um teleprompter.
2048, Campo minado, Sudoku, Gomoku, Batalha de tanques