آموزش راهنمای کامل NLP با R
Complete Guide to NLP with R
توکن‌سازی یک سند را به بخش‌های مجزا، معمولاً کلمات مجزا، تبدیل می‌کند. این اغلب به عنوان کیسه ای از کلمات نامیده می شود و امکان تحلیل فراوانی کلمات را فراهم می کند، اما زمینه آن کلمات را قربانی می کند. توکن سازی پیچیده تر، مانند تشخیص عبارت، تفاوت بین مفید و غیر مفید را تشخیص می دهد.
برای دریافت و مشاهده جزییات بیشتر این دوره کلیک کنید