Tokenteller

Geteld met GPT-tokenisatie. Andere modellen kunnen andere resultaten geven.

0Tokens
0Woorden
0Tekens
0Tekens zonder witruimte

Witruimtegegevens

0Spaties
0Regeleinden
0Tabtekens
0Overige witruimte

Spaties, regeleinden en tabs zijn aantallen tekens. Witruimte kan een token delen met nabijgelegen tekst; u kunt deze aantallen dus niet van het totale aantal tokens aftrekken.

Tokengrenzen

Tokengrenzen verschijnen nadat u tekst hebt ingevoerd.

Een teken kan uit meerdere tokens bestaan. Afzonderlijke bytefragmenten worden hexadecimaal getoond om de oorspronkelijke tekst intact te houden.

Token-ID’s en bytes

    Gebruik deze gratis tokenteller en tokencalculator om tekst te meten voordat u deze in een AI-prompt gebruikt. Bekijk aantallen tokens, woorden en tekens, onderzoek witruimte en ontdek hoe tekst in tokens wordt gesplitst.

    Vragen over tokens tellen

    Wat telt deze tokencalculator?

    Dit hulpmiddel telt tokens in uw tekst volgens de GPT-tokenisatieregels o200k_base. Het toont ook aantallen woorden, tekens en witruimte. Tokens kunnen een woord, een deel van een woord, leestekens of witruimte bevatten.

    Is één teken altijd één token?

    Nee. Een token kan meerdere tekens of slechts een deel van een woord bevatten en één teken kan meerdere tokens gebruiken. Emoji en letters met gecombineerde tekens kunnen ook meerdere tokens gebruiken, ook als ze er als één teken uitzien. Er is geen vaste verhouding tussen tekens en tokens.

    Hoe worden Chinese, Japanse en Koreaanse teksten geteld?

    Alle drie worden ondersteund, maar de groepering als CJK betekent niet dat ze hetzelfde aantal tokens per teken hebben. Veelvoorkomende tekenreeksen kunnen één token vormen, terwijl één teken of lettergreep in meerdere tokens kan worden gesplitst. Het aantal hangt af van de tekst en tokenisatieregels, niet alleen van de taal.

    Hoe zit het met andere talen en gemengde tekst?

    De teller ondersteunt ook Latijns, Cyrillisch, Arabisch, Indische en andere schriftstelsels, inclusief gemengde talen. Woorden kunnen in kleinere delen worden gesplitst; schattingen op basis van Engelse woorden of tekens gelden daarom niet voor elke taal. Vertalingen van dezelfde zin kunnen verschillende aantallen tokens hebben.

    Hoe worden tekens en woorden geteld?

    In moderne browsers telt een Han-teken, Japanse kana, Koreaanse lettergreep of Latijnse letter meestal als één teken. Een letter met een gecombineerd accent of een samengestelde emoji telt doorgaans ook als één. Witruimte en leestekens tellen mee. Woorden volgen taalspecifieke grenzen; een CJK-tekst telt dus niet als één woord omdat er geen spaties zijn. Beide tellingen staan los van tokens.

    Tellen spaties als tokens?

    Spaties en andere witruimte tellen mee bij het tellen van tokens. Een spatie kan met het volgende woord worden gecombineerd of een apart token zijn. Een spatie verwijderen kan nabijgelegen tokengrenzen veranderen, dus één spatie is niet altijd één token.

    Komt deze telling overeen met elk AI-model?

    Nee. Modellen kunnen verschillende tokenisatieregels gebruiken. Dit hulpmiddel geeft een GPT-referentietelling voor gewone tekst. Volledige chatverzoeken kunnen ook rollen, berichtopmaak en hulpmiddeldefinities bevatten; het totale gebruik kan daarom afwijken.

    Wordt mijn tekst geüpload?

    Nee. Tekst en geïmporteerde bestanden worden in uw browser geteld. Het hulpmiddel verzendt de inhoud niet naar een teldienst.

    Is er een limiet voor tekst of bestandsgrootte?

    Er is geen vaste limiet voor tekstlengte of bestandsgrootte. Grote invoer kost meer tijd en hangt af van het beschikbare geheugen op uw apparaat. De bestandsmodus telt elk volledig bestand zonder dit in de teksteditor te zetten en bewaart voltooide resultaten bij annuleren. Tokenvoorbeelden tonen alleen de eerste 500 tokens; CSV-rapporten bevatten de volledige tellingen.

    Gerelateerde tools: Woordenteller

    Codeformatteerders

    Formatteer en verfraai Java, Python, JavaScript, JSON, HTML en meer; pas inspringing, spaties en regeleinden aan.

    Meer tools

    Audio bewerken en effecten

    Snijd opnamen bij, voeg ze samen of splits ze, verwijder stilte of ruis en pas volume, snelheid, toonhoogte of kanalen aan.

    Meer tools

    Spreadsheettools

    Open en bewerk CSV- of Excel-werkbladen, formatteer tabeltekst en converteer CSV naar Excel of SQL.

    Meer tools

    Markdown-tools

    Schrijf en bekijk Markdown, render Mermaid-diagrammen en converteer Markdown, HTML en tabellen tussen formaten.

    Meer tools

    Teksttools

    Vergelijk passages, tel woorden en trefwoorden, sorteer of vervang regels en bekijk DOCX-tekst.

    Meer tools

    Woordenboeken

    Zoek Chinese betekenissen, synoniemen en antoniemen of vind IPA-uitspraken in meerdere talen.

    Audio converteren en afspelen

    Converteer MP3, WAV, FLAC en meer, speel audio of ruwe PCM af en bekijk of bewerk audiometadata.

    JSON- en datatools

    Bekijk, vergelijk en valideer JSON, test JSONPath-expressies of converteer gegevens naar CSV, YAML en XML.

    Meer tools

    Spraaktools

    Transcribeer audio naar tekst, genereer spraak uit tekst of neem je stem op in de browser.

    Videotools

    Converteer en comprimeer video, snijd fragmenten bij of voeg ze samen, wijzig beeldafmetingen en extraheer audio.

    Meer tools

    Video afspelen en opnemen

    Speel lokale of gestreamde video af, neem je scherm of camera op en gebruik je camera als online spiegel.

    PDF-tools

    Comprimeer of voeg PDF’s samen, splits en herschik pagina’s, zet pagina’s om in afbeeldingen en bekijk of vergelijk documenten.

    Meer tools

    Afbeeldingstools

    Converteer afbeeldingsformaten, wijzig het formaat of snijd foto’s bij, comprimeer bestanden, vergelijk afbeeldingen en haal tekst op met OCR.

    Meer tools

    Afbeeldingen maken

    Maak en verfraai schermafbeeldingen, zet tekst om in afbeeldingen of GIF’s, teken op een whiteboard en maak woordwolken of favicons.

    Meer tools

    Ondertiteltools

    Bewerk SRT- of VTT-ondertitels met een videovoorbeeld, verschuif de timing, converteer formaten en beheer ondertitelsporen.

    Meer tools

    Archieftools

    Open ZIP-, 7Z-, RAR- of TAR-bestanden, pak geselecteerde inhoud uit en maak nieuwe archieven met optionele ZIP/7Z-wachtwoorden.

    Coderen | Decoderen

    Codeer en decodeer Base64 of Base32, escape URL’s, HTML en Unicode-tekst en bekijk de inhoud van JWT.

    Meer tools

    Getallentools

    Converteer getalstelsels en waarden tussen binair, decimaal en hexadecimaal; zet getallen om in woorden of tekst in binair.

    Rekenhulpmiddelen

    Bereken percentages en breuken, vat statistieken samen en bereken cijfers, kortingen of beeldverhoudingen.

    Meer tools

    Tijdtools

    Toon een online klok, gebruik een afteller of stopwatch en bereken datums, leeftijden of tijdzoneverschillen.

    Meer tools

    Netwerktools

    Controleer je IP- en IPv6-verbinding, bekijk HTTP-verzoeken of HAR-bestanden en bereken CIDR-adresbereiken.

    Eenheden omrekenen

    Converteer lengte, gewicht, temperatuur, gegevensopslag en andere eenheden.

    Kleurtools

    Converteer HEX-, RGB- en HSL-waarden, haal kleuren uit afbeeldingen, controleer contrast of test je beeldscherm met effen kleuren.

    QR-codes en barcodes

    Genereer en scan QR-codes of barcodes, waaronder QR-codes voor links en wifi-netwerken.

    Ontwikkel- en beveiligingstools

    Genereer hashes, UUID’s en wachtwoorden, test reguliere expressies, maak URL-slugs en controleer bestandsrechten.

    Meer tools

    Handige tools

    Controleer schermresolutie en verversingssnelheid, meet met een schermliniaal, test toetsen of lees van een autocue.

    Meer tools

    Spellen

    2048, Mijnenveger, Sudoku, Gomoku, Tankgevecht

    Meer tools