Μετρητής token

Μέτρηση με διαχωρισμό σε token GPT. Άλλα μοντέλα μπορεί να δώσουν διαφορετικά αποτελέσματα.

0Token
0Λέξεις
0Χαρακτήρες
0Χαρακτήρες χωρίς λευκά διαστήματα

Λεπτομέρειες λευκών διαστημάτων

0Κενά
0Αλλαγές γραμμής
0Στηλοθέτες
0Άλλα λευκά διαστήματα

Κενά, αλλαγές γραμμής και στηλοθέτες μετρώνται ως χαρακτήρες. Τα λευκά διαστήματα μπορούν να μοιράζονται token με κοντινό κείμενο, επομένως αυτά τα πλήθη δεν αφαιρούνται από το σύνολο token.

Όρια token

Τα όρια των token θα εμφανιστούν αφού εισαγάγετε κείμενο.

Ένας χαρακτήρας μπορεί να εκτείνεται σε περισσότερα από ένα token. Τα επιμέρους τμήματα byte εμφανίζονται ως δεκαεξαδικές τιμές ώστε να διατηρείται ανέπαφο το αρχικό κείμενο.

Αναγνωριστικά token και byte

    Χρησιμοποιήστε αυτό το δωρεάν εργαλείο μέτρησης και υπολογισμού token για να μετρήσετε κείμενο πριν το χρησιμοποιήσετε σε προτροπή AI. Δείτε πλήθος token, λέξεων και χαρακτήρων, εξετάστε λευκά διαστήματα και δείτε πώς το κείμενο χωρίζεται σε token.

    Ερωτήσεις για τον μετρητή token

    Τι μετρά αυτή η αριθμομηχανή token;

    Μετρά τα token του κειμένου που εισάγετε με τους κανόνες διαχωρισμού GPT o200k_base. Εμφανίζει επίσης πλήθος λέξεων, χαρακτήρων και λευκών διαστημάτων. Τα token μπορεί να περιέχουν λέξη, μέρος λέξης, στίξη ή λευκά διαστήματα.

    Είναι ένας χαρακτήρας πάντα ένα token;

    Όχι. Ένα token μπορεί να περιέχει αρκετούς χαρακτήρες ή μόνο μέρος μιας λέξης και ένας χαρακτήρας μπορεί να χρησιμοποιεί πολλά token. Τα emoji και τα γράμματα με συνδυαστικά διακριτικά μπορεί επίσης να χρησιμοποιούν πολλά token, ακόμη και αν φαίνονται ως ένας χαρακτήρας. Δεν υπάρχει σταθερή αναλογία χαρακτήρων προς token.

    Πώς μετρώνται τα κινεζικά, ιαπωνικά και κορεατικά κείμενα;

    Υποστηρίζονται και οι τρεις γλώσσες, αλλά η ομαδοποίησή τους ως CJK δεν σημαίνει κοινό πλήθος token ανά χαρακτήρα. Συνηθισμένες ακολουθίες χαρακτήρων μπορεί να αποτελούν ένα token, ενώ ένας χαρακτήρας ή συλλαβή μπορεί να χωρίζεται σε πολλά. Η μέτρηση εξαρτάται από το πραγματικό κείμενο και τους κανόνες διαχωρισμού σε token, όχι μόνο από τη γλώσσα.

    Τι ισχύει για άλλες γλώσσες και μεικτά κείμενα;

    Ο μετρητής υποστηρίζει επίσης κείμενα σε λατινική, κυριλλική, αραβική, ινδικές και άλλες γραφές, συμπεριλαμβανομένων μεικτών γλωσσών. Οι λέξεις μπορεί να χωρίζονται σε μικρότερα μέρη, επομένως οι εκτιμήσεις βάσει αγγλικών λέξεων ή χαρακτήρων δεν ισχύουν για κάθε γλώσσα. Μεταφράσεις της ίδιας πρότασης μπορεί να έχουν διαφορετικό πλήθος token.

    Πώς μετρώνται οι χαρακτήρες και οι λέξεις;

    Στους σύγχρονους περιηγητές, ένας χαρακτήρας Han, ιαπωνικό kana, κορεατική συλλαβή ή λατινικό γράμμα συνήθως μετρά ως ένας χαρακτήρας. Ένα γράμμα με συνδυαστικό τόνο ή ένα σύνθετο emoji συνήθως μετρά επίσης ως ένα. Περιλαμβάνονται λευκά διαστήματα και στίξη. Οι λέξεις ακολουθούν όρια ανάλογα με τη γλώσσα, επομένως ένα απόσπασμα CJK δεν θεωρείται μία λέξη απλώς επειδή δεν έχει κενά. Και οι δύο μετρήσεις είναι ανεξάρτητες από τα token.

    Μετρούν τα κενά ως token;

    Τα κενά και τα άλλα λευκά διαστήματα περιλαμβάνονται στη μέτρηση token. Ένα κενό μπορεί να συνδυάζεται με την επόμενη λέξη ή να αποτελεί ξεχωριστό token. Η αφαίρεση κενού μπορεί να αλλάξει τα κοντινά όρια token, οπότε ένα κενό δεν σημαίνει πάντα ένα token.

    Θα συμφωνεί η μέτρηση με κάθε μοντέλο AI;

    Όχι. Τα μοντέλα μπορεί να χρησιμοποιούν διαφορετικούς κανόνες διαχωρισμού σε token. Το εργαλείο παρέχει μέτρηση αναφοράς GPT για απλό κείμενο. Τα πλήρη αιτήματα συνομιλίας μπορεί επίσης να περιέχουν ρόλους, μορφοποίηση μηνυμάτων και ορισμούς εργαλείων, οπότε η συνολική χρήση τους μπορεί να διαφέρει.

    Μεταφορτώνεται το κείμενό μου;

    Όχι. Το κείμενο και τα εισαγόμενα αρχεία μετρώνται στον περιηγητή σας. Το εργαλείο δεν στέλνει το περιεχόμενό τους σε υπηρεσία μέτρησης.

    Υπάρχει όριο κειμένου ή μεγέθους αρχείου;

    Δεν υπάρχει σταθερό όριο μήκους κειμένου ή μεγέθους αρχείου. Οι μεγάλες είσοδοι χρειάζονται περισσότερο χρόνο και εξαρτώνται από τη διαθέσιμη μνήμη της συσκευής σας. Η λειτουργία αρχείων μετρά κάθε πλήρες αρχείο χωρίς να το βάζει στον επεξεργαστή κειμένου και διατηρεί τα ολοκληρωμένα αποτελέσματα σε ακύρωση. Οι προεπισκοπήσεις εμφανίζουν μόνο τα πρώτα 500 token· οι αναφορές CSV περιλαμβάνουν τις πλήρεις μετρήσεις.

    Σχετικά εργαλεία: Μετρητής λέξεων

    Μορφοποιητές κώδικα

    Μορφοποιήστε και καλλωπίστε Java, Python, JavaScript, JSON, HTML και άλλα· προσαρμόστε εσοχές, διαστήματα και αλλαγές γραμμής.

    Περισσότερα εργαλεία

    Επεξεργασία και εφέ ήχου

    Κόψτε, ενώστε ή χωρίστε εγγραφές, αφαιρέστε σιωπή ή θόρυβο και προσαρμόστε ένταση, ταχύτητα, τονικό ύψος ή κανάλια.

    Περισσότερα εργαλεία

    Εργαλεία υπολογιστικών φύλλων

    Ανοίξτε και επεξεργαστείτε φύλλα CSV ή Excel, μορφοποιήστε κείμενο πινάκων και μετατρέψτε CSV σε Excel ή SQL.

    Περισσότερα εργαλεία

    Εργαλεία Markdown

    Γράψτε και προεπισκοπήστε Markdown, αποδώστε διαγράμματα Mermaid και μετατρέψτε Markdown, HTML και πίνακες μεταξύ μορφών.

    Περισσότερα εργαλεία

    Εργαλεία κειμένου

    Συγκρίνετε αποσπάσματα, μετρήστε λέξεις και λέξεις-κλειδιά, ταξινομήστε ή αντικαταστήστε γραμμές και δείτε κείμενο DOCX.

    Περισσότερα εργαλεία

    Λεξικά

    Αναζητήστε σημασίες, συνώνυμα και αντώνυμα στα κινεζικά ή βρείτε φωνητικές μεταγραφές IPA σε πολλές γλώσσες.

    Μετατροπή και αναπαραγωγή ήχου

    Μετατρέψτε μεταξύ MP3, WAV, FLAC και άλλων μορφών, αναπαραγάγετε ήχο ή ακατέργαστο PCM και εξετάστε ή επεξεργαστείτε μεταδεδομένα ήχου.

    Εργαλεία JSON και δεδομένων

    Εξετάστε, συγκρίνετε και ελέγξτε JSON· δοκιμάστε εκφράσεις JSONPath ή μετατρέψτε δεδομένα σε CSV, YAML και XML.

    Περισσότερα εργαλεία

    Εργαλεία ομιλίας

    Απομαγνητοφωνήστε ήχο σε κείμενο, δημιουργήστε ομιλία από κείμενο ή εγγράψτε τη φωνή σας στο πρόγραμμα περιήγησης.

    Εργαλεία βίντεο

    Μετατρέψτε και συμπιέστε βίντεο, κόψτε ή ενώστε αποσπάσματα, αλλάξτε διαστάσεις καρέ και εξαγάγετε ήχο.

    Περισσότερα εργαλεία

    Αναπαραγωγή και εγγραφή βίντεο

    Αναπαραγάγετε τοπικό βίντεο ή ροή, εγγράψτε την οθόνη ή την κάμερά σας και χρησιμοποιήστε την κάμερα ως διαδικτυακό καθρέφτη.

    Εργαλεία PDF

    Συμπιέστε ή συγχωνεύστε PDF, χωρίστε και αναδιατάξτε σελίδες, μετατρέψτε σελίδες σε εικόνες και δείτε ή συγκρίνετε έγγραφα.

    Περισσότερα εργαλεία

    Εργαλεία εικόνας

    Μετατρέψτε μορφές εικόνων, αλλάξτε διαστάσεις ή περικόψτε φωτογραφίες, συμπιέστε αρχεία, συγκρίνετε εικόνες και εξαγάγετε κείμενο με OCR.

    Περισσότερα εργαλεία

    Δημιουργία εικόνων

    Καταγράψτε και καλλωπίστε στιγμιότυπα οθόνης, μετατρέψτε κείμενο σε εικόνες ή GIF, σχεδιάστε σε πίνακα και δημιουργήστε σύννεφα λέξεων ή favicon.

    Περισσότερα εργαλεία

    Εργαλεία υποτίτλων

    Επεξεργαστείτε υποτίτλους SRT ή VTT με προεπισκόπηση βίντεο, μετατοπίστε χρόνους, μετατρέψτε μορφές και διαχειριστείτε κομμάτια υποτίτλων.

    Περισσότερα εργαλεία

    Εργαλεία αρχειοθέτησης

    Ανοίξτε αρχεία ZIP, 7Z, RAR ή TAR, εξαγάγετε επιλεγμένα περιεχόμενα και δημιουργήστε νέα αρχεία με προαιρετικούς κωδικούς πρόσβασης ZIP/7Z.

    Κωδικοποιητές | Αποκωδικοποιητές

    Κωδικοποιήστε και αποκωδικοποιήστε Base64 ή Base32, προσθέστε χαρακτήρες διαφυγής σε URL, HTML και κείμενο Unicode και εξετάστε περιεχόμενα JWT.

    Περισσότερα εργαλεία

    Εργαλεία αριθμών

    Μετατρέψτε βάσεις και τιμές μεταξύ δυαδικού, δεκαδικού και δεκαεξαδικού· μετατρέψτε αριθμούς σε λέξεις ή κείμενο σε δυαδικό.

    Αριθμομηχανές

    Υπολογίστε ποσοστά και κλάσματα, συνοψίστε στατιστικά και υπολογίστε βαθμούς, εκπτώσεις ή αναλογίες διαστάσεων.

    Περισσότερα εργαλεία

    Εργαλεία χρόνου

    Εμφανίστε διαδικτυακό ρολόι, εκτελέστε αντίστροφη μέτρηση ή χρονόμετρο και υπολογίστε ημερομηνίες, ηλικίες ή διαφορές ζωνών ώρας.

    Περισσότερα εργαλεία

    Εργαλεία δικτύου

    Ελέγξτε τη διεύθυνση IP και τη σύνδεση IPv6, εξετάστε αιτήματα HTTP ή αρχεία HAR και υπολογίστε εύρη διευθύνσεων CIDR.

    Μετατροπές μονάδων

    Μετατρέψτε μονάδες μήκους, βάρους, θερμοκρασίας, αποθήκευσης δεδομένων και άλλες.

    Εργαλεία χρωμάτων

    Μετατρέψτε τιμές HEX, RGB και HSL, εξαγάγετε χρώματα από εικόνα, ελέγξτε αντίθεση ή δοκιμάστε την οθόνη σας με συμπαγή χρώματα.

    Κωδικοί QR και γραμμωτοί κωδικοί

    Δημιουργήστε και σαρώστε κωδικούς QR ή γραμμωτούς κώδικες, όπως κωδικούς QR για συνδέσμους και δίκτυα Wi-Fi.

    Εργαλεία προγραμματισμού και ασφάλειας

    Δημιουργήστε hash, UUID και κωδικούς πρόσβασης, δοκιμάστε κανονικές εκφράσεις, δημιουργήστε αναγνωριστικά URL και ελέγξτε δικαιώματα αρχείων.

    Περισσότερα εργαλεία

    Βοηθητικά εργαλεία

    Ελέγξτε ανάλυση και ρυθμό ανανέωσης οθόνης, μετρήστε με χάρακα οθόνης, δοκιμάστε πλήκτρα ή διαβάστε από τηλεϋποβολέα.

    Περισσότερα εργαλεία

    Παιχνίδια

    2048, Ναρκαλιευτής, Sudoku, Γκομόκου, Μάχη αρμάτων

    Περισσότερα εργαλεία