یک تابع پایتون بنویسید که با استفاده از کتابخانه NLTK یک متن فارسی را توکنایز کند، توقف‌واژه‌ها را حذف نماید و فهرست ۱۰ کلمه پر تکرار را به همراه تعداد هر کدام برگرداند.

برای حل این مسئله از Python و NLTK استفاده کنید: ابتدا بسته‌های مورد نیاز را نصب و دانلود کنید (مثلاً nltk.download('punkt') و nltk.download('stopwords')). متن را به حروف کوچک تبدیل، و با word_tokenize یا روش ساده‌تر با جداکننده‌ها توکن‌سازی کنید؛ علائم نگارشی را با regex حذف کنید. چون مجموعه توقف‌واژه‌های فارسی ممکن است در NLTK کامل نباشد، یک لیست ساده از stopwords فارسی آماده کنید یا از مجموعهٔ موجود استفاده کنید. پس از فیلتر کردن توقف‌واژه‌ها، با استفاده از nltk.FreqDist یا collections.Counter فراوانی هر کلمه را محاسبه و ۱۰ کلمه با بیشترین تکرار را بازگردانید. نکات: نرمال‌سازی حروف (مثلاً تبدیل ک ی و ی متفاوت) و حذف فاصله‌های اضافی کیفیت نتایج را بهبود می‌دهد.