آنالایزرها

تحلیلگرها ابزارهای نرم افزاری هستند که داده های متنی را پردازش می کنند تا اطلاعات مربوطه را از آن استخراج کنند. آنها برای تجزیه اطلاعات متنی به واحدهای کوچکتر، مانند کلمات یا عبارات، و اختصاص دادن خصوصیات به آنها، مانند تگ های بخشی از گفتار، نشانه ها یا ساقه ها استفاده می شوند. آنالایزرها همچنین عملیاتی مانند عادی سازی، تقسیم، فیلتر کردن یا ریشه یابی را برای استانداردسازی داده های متن و آماده سازی آن برای تجزیه و تحلیل بیشتر انجام می دهند. تحلیلگرها معمولاً در پردازش زبان طبیعی، بازیابی اطلاعات، موتورهای جستجو و سایر برنامه‌هایی که نیاز به کار با داده‌های متنی دارند، استفاده می‌شوند.