GPT-tokenizálással számolva. Más modellek eltérő eredményt adhatnak.
A fájlok helyben, egyenként kerülnek számlálásra. A teljes tartalom számlálódik anélkül, hogy a szövegszerkesztőbe betöltődne. Válasszon elkészült fájlt az első 500 token előnézetéhez.
A szóközök, sortörések és tabulátorok karakterszámok. A szóközjellegű karakter a közeli szöveggel közös tokenben lehet, ezért ezek a számok nem vonhatók le a teljes tokenszámból.
Egy karakter több tokenre is kiterjedhet. Az egyes bájtrészletek hexadecimális értékként jelennek meg az eredeti szöveg épségének megőrzéséhez.
Ezzel az ingyenes tokenszámlálóval és tokenkalkulátorral mérje fel a szöveget MI-promptban való használat előtt. Nézze meg a token-, szó- és karakterszámot, vizsgálja a szóközjellegű karaktereket, és fedezze fel a szöveg tokenekre bontását.
A megadott szöveg tokenjeit az o200k_base GPT-tokenizálási szabályokkal számolja. A szavak, karakterek és szóközjellegű karakterek számát is mutatja. A token lehet egy szó, szórész, írásjel vagy szóközjellegű karakter.
Nem. Egy token több karaktert vagy csak egy szórészt tartalmazhat, egy karakter pedig több tokent is használhat. Az emodzsik és kombináló jelekkel ellátott betűk több tokent is igényelhetnek, még ha egyetlen karakternek látszanak is. Nincs rögzített karakter–token arány.
Mindhárom támogatott, de a CJK-csoportosítás nem jelent közös karakterenkénti tokenszámot. Gyakori karaktersorozatok egy tokent alkothatnak, míg egyetlen karakter vagy szótag több tokenre bomolhat. A szám a tényleges szövegtől és tokenizálási szabályoktól függ, nem csupán a nyelvtől.
A számláló latin, cirill, arab, indiai és más írásrendszerek szövegét is támogatja, beleértve a vegyes nyelvű szöveget. A szavak kisebb részekre bomolhatnak, ezért az angol szó- vagy karakterbecslések nem érvényesek minden nyelvre. Ugyanazon mondat fordításai eltérő tokenszámúak lehetnek.
Modern böngészőkben egy Han-karakter, japán kana, koreai szótag vagy latin betű általában egy karakternek számít. Egy kombinált ékezetes betű vagy összetett emodzsi is rendszerint egynek számít. A szóközjellegű karakterek és írásjelek beleszámítanak. A szavak nyelvfüggő határokat követnek, így egy CJK-szakasz nem lesz egyetlen szó pusztán a szóközök hiánya miatt. Mindkét számlálás különbözik a tokenektől.
A szóközök és más szóközjellegű karakterek beleszámítanak a tokenekbe. Egy szóköz egyesülhet a következő szóval vagy külön tokent alkothat. Eltávolítása módosíthatja a közeli tokenhatárokat, ezért egy szóköz nem mindig egy token.
Nem. A modellek eltérő tokenizálási szabályokat használhatnak. Ez az eszköz egyszerű szöveghez ad GPT-referenciaszámot. A teljes csevegési kérések szerepeket, üzenetformázást és eszközdefiníciókat is tartalmazhatnak, ezért a teljes felhasználás eltérhet.
Nem. A szöveg és az importált fájlok számlálása a böngészőben történik. Az eszköz nem küldi a tartalmukat számlálási szolgáltatásnak.
Nincs rögzített szöveghossz- vagy fájlméretkorlát. A nagy bemenet több időt igényel, és az eszköz elérhető memóriájától függ. A fájlmód minden teljes fájlt megszámol anélkül, hogy a szövegszerkesztőbe tenné, megszakításkor pedig megtartja a kész eredményeket. A tokenelőnézet csak az első 500 tokent mutatja; a CSV-jelentések a teljes számokat tartalmazzák.
Kapcsolódó eszközök: Szószámláló
Formázza és tegye áttekinthetővé a Java, Python, JavaScript, JSON, HTML és más kódokat; állítsa be a behúzást, szóközöket és sortöréseket.
Vágjon, fűzzön össze vagy osszon fel felvételeket, távolítson el csendet vagy zajt, és állítsa be a hangerőt, sebességet, hangmagasságot vagy csatornákat.
Nyisson meg és szerkesszen CSV- vagy Excel-munkalapokat, formázzon táblázatos szöveget, és alakítson CSV-t Excel vagy SQL formátumba.
Írjon és nézzen meg Markdown-szöveget, jelenítsen meg Mermaid-diagramokat, és alakítson át Markdown, HTML és táblázatos formátumok között.
Hasonlítson össze szövegrészeket, számoljon szavakat és kulcsszavakat, rendezzen vagy cseréljen sorokat, és tekintsen meg DOCX-szöveget.
Keressen kínai jelentéseket, szinonimákat és antonimákat, vagy találjon IPA-kiejtéseket több nyelven.
Alakítson át MP3, WAV, FLAC és más formátumok között, játsszon le hangot vagy nyers PCM-et, és vizsgálja vagy szerkessze a hangmetaadatokat.
Vizsgálja, hasonlítsa össze és ellenőrizze a JSON-t; teszteljen JSONPath-kifejezéseket, vagy alakítson adatokat CSV, YAML és XML formátumba.
Írjon át hangot szöveggé, állítson elő beszédet szövegből, vagy rögzítse a hangját a böngészőben.
Alakítson át és tömörítsen videót, vágjon vagy fűzzön össze klipeket, méretezze át a képkockákat, és nyerjen ki hangot.
Játsszon le helyi vagy streamelt videót, rögzítse a képernyőt vagy a kamerát, és használja a kamerát online tükörként.
Tömörítsen vagy egyesítsen PDF-eket, ossza fel és rendezze át az oldalakat, alakítsa őket képpé, és tekintsen meg vagy hasonlítson össze dokumentumokat.
Alakítson át képformátumokat, méretezzen át vagy vágjon körül fényképeket, tömörítsen fájlokat, hasonlítson össze képeket, és nyerjen ki szöveget OCR-rel.
Készítsen és szépítsen képernyőképeket, alakítson szöveget képpé vagy GIF-fé, rajzoljon táblára, és készítsen szófelhőket vagy faviconokat.
Szerkesszen SRT- vagy VTT-feliratokat videóelőnézettel, tolja el az időzítést, alakítson át formátumokat, és kezelje a feliratsávokat.
Nyisson meg ZIP-, 7Z-, RAR- vagy TAR-fájlokat, bontsa ki a kiválasztott tartalmat, és hozzon létre új archívumokat opcionális ZIP/7Z-jelszóval.
Kódoljon és dekódoljon Base64-et vagy Base32-t, alkalmazzon escape-kódolást URL-ekre, HTML-re és Unicode-szövegre, és vizsgálja a JWT tartalmát.
Váltson számrendszerek és értékek között bináris, decimális és hexadecimális alakban; írjon számokat betűvel, vagy alakítson szöveget binárissá.
Számoljon százalékokkal és törtekkel, összegezze a statisztikákat, és számítson érdemjegyet, kedvezményt vagy képarányt.
Jelenítsen meg online órát, indítson visszaszámlálót vagy stopperórát, és számítson dátumokat, életkort vagy időzóna-különbségeket.
Ellenőrizze az IP-címét és IPv6-kapcsolatát, vizsgáljon HTTP-kéréseket vagy HAR-fájlokat, és számítson CIDR-címtartományokat.
Váltson át hosszúságot, súlyt, hőmérsékletet, adattárolási és más mértékegységeket.
Alakítson át HEX-, RGB- és HSL-értékeket, nyerjen ki színeket képből, ellenőrizze a kontrasztot, vagy tesztelje a kijelzőt egyszínű felületekkel.
Készítsen és olvasson be QR-kódokat vagy vonalkódokat, köztük hivatkozásokhoz és Wi-Fi-hálózatokhoz tartozó QR-kódokat.
Állítson elő hasheket, UUID-kat és jelszavakat, teszteljen reguláris kifejezéseket, készítsen URL-slugokat, és ellenőrizze a fájljogosultságokat.
Ellenőrizze a képernyő felbontását és frissítési gyakoriságát, mérjen képernyővonalzóval, teszteljen billentyűket, vagy olvasson súgógépről.
2048, Aknakereső, Szúdoku, Gomoku, Tankcsata