Pengira Token

Dikira menggunakan pentokenan GPT. Model lain mungkin memberikan hasil berbeza.

0Token
0Perkataan
0Aksara
0Aksara tanpa ruang putih

Butiran ruang putih

0Ruang
0Pemisah baris
0Tab
0Ruang putih lain

Ruang, pemisah baris dan tab ialah bilangan aksara. Ruang putih boleh berkongsi token dengan teks berdekatan, jadi nombor ini tidak boleh ditolak daripada jumlah token.

Sempadan token

Sempadan token akan muncul selepas anda memasukkan teks.

Satu aksara mungkin merentasi lebih daripada satu token. Fragmen bait individu ditunjukkan sebagai nilai heksadesimal supaya teks asal kekal utuh.

ID token dan bait

    Gunakan pengira dan kalkulator token percuma ini untuk mengukur teks sebelum menggunakannya dalam prom AI. Lihat bilangan token, perkataan dan aksara, periksa ruang putih dan terokai cara teks dipecahkan kepada token.

    Soalan pengira token

    Apakah yang dikira oleh kalkulator token ini?

    Ia mengira token dalam teks yang anda masukkan menggunakan peraturan pentokenan GPT o200k_base. Ia turut memaparkan bilangan perkataan, aksara dan ruang putih. Token mungkin mengandungi perkataan, sebahagian perkataan, tanda baca atau ruang putih.

    Adakah satu aksara sentiasa satu token?

    Tidak. Token mungkin mengandungi beberapa aksara atau hanya sebahagian perkataan, dan satu aksara mungkin menggunakan beberapa token. Emoji dan huruf dengan tanda gabungan juga boleh menggunakan berbilang token walaupun kelihatan seperti satu aksara. Tiada nisbah aksara kepada token yang tetap.

    Bagaimanakah teks Cina, Jepun dan Korea dikira?

    Ketiga-tiganya disokong, tetapi pengelompokan sebagai CJK tidak memberikan bilangan token setiap aksara yang sama. Jujukan aksara lazim mungkin membentuk satu token, manakala satu aksara atau suku kata mungkin dipecahkan kepada beberapa token. Kiraan bergantung pada teks sebenar dan peraturan pentokenan, bukan bahasa semata-mata.

    Bagaimana dengan bahasa lain dan teks bercampur?

    Pengira juga menyokong teks dalam tulisan Latin, Cyrillic, Arab, India dan tulisan lain, termasuk teks bercampur bahasa. Perkataan mungkin dipecahkan kepada bahagian lebih kecil, jadi anggaran perkataan atau aksara bahasa Inggeris tidak terpakai pada setiap bahasa. Terjemahan ayat yang sama boleh mempunyai bilangan token berbeza.

    Bagaimanakah aksara dan perkataan dikira?

    Dalam pelayar moden, satu aksara Han, kana Jepun, suku kata Korea atau huruf Latin biasanya dikira sebagai satu aksara. Huruf dengan aksen gabungan atau emoji gabungan biasanya juga dikira satu. Ruang putih dan tanda baca disertakan. Perkataan mengikut sempadan peka bahasa, jadi petikan CJK tidak dianggap satu perkataan hanya kerana tiada ruang. Kedua-dua kiraan ini berasingan daripada token.

    Adakah ruang dikira sebagai token?

    Ruang dan ruang putih lain disertakan semasa mengira token. Satu ruang mungkin digabungkan dengan perkataan berikutnya atau muncul dalam token berasingan. Pembuangan ruang boleh mengubah sempadan token berdekatan, jadi satu ruang tidak semestinya satu token.

    Adakah kiraan ini sepadan dengan setiap model AI?

    Tidak. Model boleh menggunakan peraturan pentokenan berbeza. Alat ini memberikan kiraan rujukan GPT untuk teks biasa. Permintaan perbualan lengkap juga mungkin mengandungi peranan, pemformatan mesej dan takrif alat, jadi jumlah penggunaannya boleh berbeza.

    Adakah teks saya dimuat naik?

    Tidak. Teks dan fail yang diimport dikira dalam pelayar. Alat ini tidak menghantar kandungannya ke perkhidmatan pengiraan.

    Adakah terdapat had teks atau saiz fail?

    Tiada had panjang teks atau saiz fail tetap. Input besar mengambil lebih masa dan bergantung pada memori peranti yang tersedia. Mod fail mengira keseluruhan setiap fail tanpa meletakkannya dalam editor teks dan mengekalkan hasil siap apabila dibatalkan. Pratonton token hanya menunjukkan 500 token pertama; laporan CSV merangkumi kiraan penuh.

    Alat berkaitan: Pengira Perkataan

    Pemformat Kod

    Formatkan dan kemaskan Java, Python, JavaScript, JSON, HTML dan banyak lagi; laraskan inden, jarak dan pemisah baris.

    Lagi alat

    Penyuntingan dan Kesan Audio

    Pangkas, gabungkan atau pisahkan rakaman, buang bahagian senyap atau hingar serta laraskan kelantangan, kelajuan, pic atau saluran.

    Lagi alat

    Alat Hamparan

    Buka dan sunting lembaran CSV atau Excel, formatkan teks berjadual serta tukar CSV kepada Excel atau SQL.

    Lagi alat

    Alat Markdown

    Tulis dan lihat pratonton Markdown, paparkan rajah Mermaid serta tukar Markdown, HTML dan jadual antara format.

    Lagi alat

    Alat Teks

    Bandingkan petikan, kira perkataan dan kata kunci, isih atau gantikan baris serta lihat teks DOCX.

    Lagi alat

    Kamus

    Cari makna, sinonim dan antonim bahasa Cina atau cari sebutan IPA dalam pelbagai bahasa.

    Penukaran dan Main Balik Audio

    Tukar antara MP3, WAV, FLAC dan banyak lagi, mainkan audio atau PCM mentah serta semak atau sunting metadata audio.

    Alat JSON dan Data

    Semak, bandingkan dan sahkan JSON; uji ungkapan JSONPath atau tukar data kepada CSV, YAML dan XML.

    Lagi alat

    Alat Pertuturan

    Transkripsikan audio kepada teks, jana pertuturan daripada teks atau rakam suara anda dalam pelayar.

    Alat Video

    Tukar dan mampatkan video, pangkas atau gabungkan klip, ubah saiz bingkai dan ekstrak audio.

    Lagi alat

    Main Balik dan Rakaman Video

    Mainkan video setempat atau penstriman, rakam skrin atau kamera anda dan gunakan kamera sebagai cermin dalam talian.

    Alat PDF

    Mampatkan atau gabungkan PDF, pisahkan dan susun semula halaman, tukar halaman kepada imej serta lihat atau bandingkan dokumen.

    Lagi alat

    Alat Imej

    Tukar format imej, ubah saiz atau pangkas foto, mampatkan fail, bandingkan gambar serta ekstrak teks dengan OCR.

    Lagi alat

    Penciptaan Imej

    Tangkap dan hias tangkap layar, tukar teks kepada imej atau GIF, lukis pada papan putih serta cipta awan perkataan atau favicon.

    Lagi alat

    Alat Sari Kata

    Sunting sari kata SRT atau VTT dengan pratonton video, anjak pemasaan, tukar format dan urus trek sari kata.

    Lagi alat

    Alat Arkib

    Buka fail ZIP, 7Z, RAR atau TAR, ekstrak kandungan yang dipilih dan cipta arkib baharu dengan kata laluan ZIP/7Z pilihan.

    Pengekod | Penyahkod

    Kodkan dan nyahkod Base64 atau Base32, lakukan escape pada URL, HTML dan teks Unicode serta semak kandungan JWT.

    Lagi alat

    Alat Nombor

    Tukar asas nombor dan nilai antara perduaan, perpuluhan dan heksadesimal; tukar nombor kepada perkataan atau teks kepada perduaan.

    Kalkulator

    Kira peratusan dan pecahan, ringkaskan statistik serta kira gred, diskaun atau nisbah aspek.

    Lagi alat

    Alat Masa

    Paparkan jam dalam talian, jalankan kiraan detik atau jam randik serta kira tarikh, umur atau perbezaan zon waktu.

    Lagi alat

    Alat Rangkaian

    Semak sambungan IP dan IPv6 anda, semak permintaan HTTP atau fail HAR serta kira julat alamat CIDR.

    Penukaran Unit

    Tukar unit panjang, berat, suhu, storan data dan unit lain.

    Alat Warna

    Tukar nilai HEX, RGB dan HSL, ekstrak warna daripada imej, semak kontras atau uji paparan anda dengan warna pejal.

    Kod QR dan Kod Bar

    Jana dan imbas kod QR atau kod bar, termasuk kod QR untuk pautan dan rangkaian Wi-Fi.

    Alat Pembangun dan Keselamatan

    Jana hash, UUID dan kata laluan, uji ungkapan nalar, cipta slug URL dan semak kebenaran fail.

    Lagi alat

    Alat Utiliti

    Semak resolusi dan kadar segar semula skrin, ukur dengan pembaris skrin, uji kekunci atau baca daripada teleprompter.

    Lagi alat

    Permainan

    2048, Penyapu Periuk Api, Sudoku, Gomoku, Pertempuran Kereta Kebal

    Lagi alat