這個 Token 計算器統計什麼?
它依 o200k_base GPT 分詞規則統計輸入文字的 Token 數,同時顯示單詞、字元和空白字元數量。一個 Token 可能包含一個單詞、單詞的一部分、標點或空白字元。
依 GPT 分詞規則統計,其他模型的結果可能不同。
空格、換行和定位字元以字元數計算。空白字元可能與相鄰文字共用一個 Token,因此不能從 Token 總數中扣除這些數量。
一個字元可能跨越多個 Token。個別的位元組片段以十六進位顯示,避免破壞原始文字。
使用這款免費的 Token 計數器與計算器,在將文字用於 AI 提示詞之前了解其長度。查看 Token、單詞和字元數量,檢查空白字元,並探索文字如何分割為 Token。
它依 o200k_base GPT 分詞規則統計輸入文字的 Token 數,同時顯示單詞、字元和空白字元數量。一個 Token 可能包含一個單詞、單詞的一部分、標點或空白字元。
不一定。一個 Token 可能包含多個字元或單詞的一部分,一個字元也可能占用多個 Token。表情符號和帶組合重音的字母,即使看起來只有一個字元,也可能使用多個 Token。字元數與 Token 數沒有固定換算比例。
這三種語言都支援,但把它們統稱為中日韓文字(CJK),不代表每個字元有相同的 Token 數。常見的多個字元可能合成一個 Token,單個字或音節也可能拆成多個 Token。結果取決於實際文字和分詞規則,不能只根據語言估算。
也支援拉丁字母、西里爾字母、阿拉伯文字、印度文字等多種文字,以及混合語言文字。單詞可能被拆成更小的片段,因此英語的詞數或字元數估算不適用於所有語言。同一句話翻譯成不同語言,Token 數也可能不同。
在現代瀏覽器中,漢字、日文假名、韓文音節和拉丁字母通常各算一個字元;帶組合重音的字母或組合表情通常也算一個。空白和標點也計入字元數。詞數按各語言的詞語邊界識別,中日韓文字不會僅因沒有空格就整段算作一個詞。這兩項統計都獨立於 Token 數。
空格和其他空白字元都會參與 Token 統計。空格可能與後面的單詞合併,也可能單獨形成 Token。刪除空格可能改變相鄰文字的分割邊界,因此一個空格不一定對應一個 Token。
不一定。不同模型可能使用不同的分詞規則。本工具為純文字提供 GPT 參考計數。完整的聊天請求還可能包含角色、訊息格式和工具定義,因此總用量可能不同。
不會。文字和匯入檔案都在瀏覽器內統計,不會將其內容傳送到計數服務。
沒有固定的文字長度或檔案大小限制。較大輸入需要更多時間,實際處理能力取決於裝置可用記憶體。工具統計完整文字,僅預覽前 500 個 Token,預覽範圍不會影響總數。點擊「清除」可停止目前統計。
相關工具: 字數統計工具
格式化與美化 Java、Python、JavaScript、JSON、HTML 等程式碼,統一縮排、空格與換行。
裁切、合併或拆分錄音,去除靜音與噪聲,調整音量、速度、音調或聲道。
打開並編輯 CSV 或 Excel 表格、整理表格文字,並將 CSV 轉為 Excel 或 SQL。
編寫和預覽 Markdown、渲染 Mermaid 流程圖,並轉換 Markdown、HTML 與表格。
對比文字、統計字數和詞頻、排序或替換文字行,還可檢視 DOCX 文字。
查詢中文詞語的意思、近義詞和反義詞,或查閱多種語言的 IPA 音標。
在 MP3、WAV、FLAC 等格式間轉換,播放普通或原始 PCM 音訊,並檢視或編輯中繼資料。
檢視、比較和校驗 JSON,測試 JSONPath,或將資料轉換為 CSV、YAML、XML。
將音訊轉錄為文字、將文字生成語音,或直接在瀏覽器中錄音。
轉換和壓縮影片、裁切或合併片段、調整畫面尺寸、擷取音訊。
播放本地或線上影片、錄製螢幕或攝影機,也可把攝影機用作線上鏡子。
壓縮或合併 PDF、拆分與重排頁面、將頁面轉成圖片,並檢視或比較文件。
轉換圖片格式、調整或裁切照片、壓縮檔案、比較圖片,並用 OCR 擷取文字。
截圖並美化畫面,將文字做成圖片或 GIF,在白板上繪製,還可生成詞雲和網站圖示。
結合影片預覽編輯 SRT、VTT 字幕,校準時間、轉換格式並管理影片字幕軌。
開啟 ZIP、7Z、RAR 或 TAR 壓縮檔,選擇要解壓縮的檔案;也可建立新壓縮檔,並為 ZIP 或 7Z 設定密碼。
編碼或解碼 Base64、Base32,轉義 URL、HTML 和 Unicode 文字,並檢視 JWT 內容。
在二進位、十進位和十六進位之間換算,將數字寫成英文,或把文字轉為二進位。
計算百分比和分數,彙總統計資料,還可計算成績、折扣和長寬比。
顯示線上時鐘、執行倒計時或秒錶,並計算日期、年齡與時區差異。
檢視 IP 與 IPv6 連接、檢查 HTTP 請求或 HAR 檔案,並計算 CIDR 地址範圍。
換算長度、重量、溫度、資料儲存等單位。
轉換 HEX、RGB、HSL 色值,從圖片擷取顏色、檢查對比度,或用純色畫面測試顯示器。
生成和辨識二維碼、條碼,包括網址和 Wi-Fi 網路的二維碼。
生成雜湊值、UUID 和密碼,測試正規表示式、創建 URL 別名,並檢查檔案權限。
檢視螢幕解析度與更新率、用螢幕尺測量、測試按鍵,或使用提詞器。
2048、踩地雷、數獨、五子棋、坦克大戰