پردازش زبان طبیعی چیست؟ آشنایی با مفاهیم و تکنیک‌های آن

NLP چیست؟

NLP مخفف عبارت Natural Language Processing است که متشکل از سه حوزه علوم کامپیوتر، زبان جامعه بشری و هوش مصنوعی است. این فناوری در ماشین‌ها و رایانه‌هایی که برای درک، تجزیه‌وتحلیل، مدیریت و تفسیر زبان‌های جامعه بشری به ما کمک می‌کنند، استفاده می‌شود. چگونه؟ به این صورت که توسعه‌دهندگان با به‌کارگیری NLP می‌توانند پروژه‌هایی مانند ترجمه (Translation)، خلاصه‌سازی خودکار (Automatic Summarization)، شناسایی موجودیت‌های نامدار (Named Entity Recognition (NER))، تشخیص گفتار (Speech Recognition)، استخراج ارتباطات معنایی (Relationship Extraction) و بخش‌بندی موضوعات (Topic Segmentation) را ایجاد و سازماندهی کنند.

به‌طورکلی، ما انسان‌ها با استفاده از کلمات و جملاتی که می‌‌سازیم، با یکدیگر ارتباط برقرار کرده و به‌این‌ترتیب اطلاعاتی را منتقل یا دریافت می‌کنیم، اما این اطلاعات برای کامپیوترها و رایانه‌ها چندان واضح نیست و نمی‌توانند آن را به‌خوبی تفسیر کنند. چرا؟ به دلیل آنکه این اطلاعات ساختاری ندارند و جدولی نیستند؛ به عبارتی، غیر ساخت‌یافته (Unstructured) هستند و ماشین‌ها و رایانه‌ها باید با داده‌های جدولی (Tabular Data یا Structured Data) کار کنند تا بتوانند آن‌ها را درک و تفسیر کنند. اینجا است که NLP به کمک ما می‌آید. هدف پردازش زبان طبیعی (NLP) این است که رایانه، متن و اطلاعات غیر ساخت‌یافته را دریافت کرده، آن‌ها را تفسیر کنند و بخش‌ها یا قسمت‌های معنی‌دار آن را بازیابی و استخراج کنند. همان‌طور که پیش‌ازاین اشاره شد، پردازش زبان طبیعی (NLP) زیر شاخه‌ای از هوش مصنوعی است که در اصل باعث شکل‌گیری تعاملات و ارتباطات بین رایانه و انسان می‌شود.