با استفاده از کتابخانه NLTK در پایتون، برنامه‌ای بنویسید که یک متن ساده (مثلاً انگلیسی) را توکنایز کند، حروف را به کوچک تبدیل کند، علائم نگارشی و کلمات توقف را حذف کرده و پنج کلمهٔ پرتکرار را نمایش دهد.

برای حل این مسئله ابتدا NLTK را نصب کنید و داده‌های مورد نیاز مانند punkt و stopwords را دانلود نمایید؛ سپس متن ورودی را به حروف کوچک تبدیل کنید، با nltk.word_tokenize توکن‌ها را استخراج کنید و با حذف علائم نگارشی (مثلاً با استفاده از string.punctuation یا یک الگوی regex) و فیلتر کردن توکن‌های موجود در لیست stopwords، تنها کلمات معنی‌دار را نگه دارید. در نهایت با استفاده از nltk.FreqDist یا collections.Counter فراوانی کلمات را محاسبه کرده و پنج کلمهٔ پرتکرار را با مقدارشان نمایش دهید؛ می‌توانید برای نمایش بهتر از matplotlib استفاده کنید یا خروجی را به‌صورت مرتب چاپ کنید.