বিনামূল্যে শব্দ ফ্রিকোয়েন্সি কাউন্টার

কিভাবে কাজ করে

শব্দের ফ্রিকোয়েন্সি বিশ্লেষণ পুরোপুরি আপনার ব্রাউজারে একটি হাতে লেখা টোকেনাইজার ও একটি JavaScript Map দিয়ে চলে — কোনো লাইব্রেরি বা সার্ভার নেই। টাইপ বা পেস্ট করার মুহূর্তেই টেক্সট লোকালি পার্স, গণনা ও ক্রমানুসারে সাজানো হয়।

1. 1
   ইউনিকোড-সচেতন টোকেনাইজেশন

   টুলটি আপনার টেক্সট ছোট হাতের করে, তারপর ইউনিকোড প্রপার্টি regex \p{L}\p{M} দিয়ে টোকেন বের করে — যা অ্যাকসেন্টযুক্ত অক্ষর ও অ-লাতিন লিপি সঠিকভাবে সামলায়। CJK টেক্সটে (চীনা, জাপানি, কোরিয়ান) এটি granularity: 'word'-সহ ব্রাউজারের বিল্ট-ইন Intl.Segmenter API-তে যায়, যাতে মাঝে স্পেস নেই এমন অক্ষর ভাগ করা যায়।
2. 2
   stop-word ও দৈর্ঘ্য ফিল্টার

   ঐচ্ছিক ফিল্টার আপনার সাইট লোকেলের সাথে মেলানো একটি নির্দিষ্ট Set দিয়ে প্রচলিত function word (the, a, is এবং স্প্যানিশ, ফরাসি, জার্মান, ইতালীয় ও পর্তুগিজে তাদের সমতুল্য) সরায়। একটি ন্যূনতম-দৈর্ঘ্যের স্লাইডার গণনা শুরুর আগে আপনার বাছাই করা সীমার চেয়ে ছোট টোকেন সরায়।
3. 3
   Map-ভিত্তিক ফ্রিকোয়েন্সি গণনা ও n-gram মোড

   টোকেনগুলো একটি JavaScript Map-এ গোনা হয় — বিশেষভাবে বেছে নেওয়া যাতে 'constructor'-এর মতো সংরক্ষিত প্রপার্টির নাম গণনা করা শব্দের সাথে সংঘর্ষ না করে। bigram বা trigram মোডে টোকেনাইজার কাঁচা টোকেন ধারার উপর একটি জানালা সরিয়ে গণনার আগে পাশাপাশি শব্দ জুড়ে বাক্যাংশ তৈরি করে।
4. 4
   ক্রমানুসারে ফলাফল ও CSV এক্সপোর্ট

   ফলাফল সংখ্যা অনুযায়ী অবরোহ ক্রমে সাজিয়ে ক্রমানুসারী বার চার্ট হিসেবে দেখানো হয়। এক্সপোর্ট ব্রাউজারের Blob API দিয়ে মেমোরিতে একটি প্লেইন-টেক্সট CSV blob তৈরি করে ডাউনলোড শুরু করে — কোনো পর্যায়ে কিছুই সার্ভারে পাঠানো হয় না।

সম্পর্কিত টুলস