منظور از پردازش متن در پایتون چیست؟


#1

منظور از پردازش متن در پایتون چیست و در چه جاهایی که میشه ازش استفاده کرد؟؟


#2

پردازش متن یکی از زیرشاخه های حوزه ای هست به نام پردازش زبانهای طبیعی(NLP).
پردازش زبانهای طبیعی زیر مجموعه ای هست از ۳ حوزه ی:

  • علوم کامپیوتر
  • مهندسی اطلاعات
  • و هوش مصنوعیه

هدف اصلی حوزه ی پردازش زبان طبیعی تعامل بین انسان و ماشینه

حوزه ی پردازش زبانهای طبیعی روبه چند زیر بخش تقسیم می کنن که این زیر بخش ها شامل:

  • تشخیص گفتار
  • فهم زبان طبیعی
  • و تولید زبان طبیعیه

پردازش متن زیر مجموعه ای هست مرتبط به فهم زبان طبیعی و تولید زبان طبیعی.
هدف از پردازش متن در حالت کلی خودکار سازی ویرایش و تولید متن هست.
برای انجام دادن پردازش متن یکسری ابزار ها وجود دارن که یکی از اون ابزارها کتابخانه پایتون NLP هستش.

https://www.nltk.org

در این لینک چند تا از بهترین ابزار های پردازش زبان فارسی رو میتونید مشاهده کنید:

در دیاگرامی که با این پست فرستادم به صورت تصویری میتونید روابط بین توضیحاتی که دادم رو مشاهده کنید.

Untitled%20Diagram

خب حالا برسیم به جواب سوال شما، قبلا دوستانی بودن که به صورت کامل و جامع به سوال شما پاسخ دادن لطفا مطالبی که این لینک ها بهشون ارجاع داده میشن رو مطالعه کنید:

فایل خام این دیاگرام رو در انتهای این پست گذاشتم که اگر دوستان خواستن میتونن اون رو ویرایش کنن و توضیحات تکمیلی رو به این پست اضافه کنن.

https://drive.google.com/file/d/1Rq1oza3Kb1GBgvuPg9RXCGo_1q1fETSH/view?usp=sharing

فایل رو میتونید در سایت زیر ویرایش کنید:
https://www.draw.io