টোকেন গণনাকারী

হোয়াইটস্পেসের বিবরণ

স্পেস, লাইনবিরতি ও ট্যাব অক্ষরের গণনা। হোয়াইটস্পেস কাছের লেখার সঙ্গে একই টোকেনে থাকতে পারে, তাই এই সংখ্যাগুলো মোট টোকেন থেকে বিয়োগ করা যায় না।

একটি অক্ষর একাধিক টোকেনে ছড়াতে পারে। মূল লেখা অক্ষত রাখতে পৃথক বাইটের অংশ হেক্স মান হিসেবে দেখানো হয়।