جستجو در اینترنت با استفاده از زبان طبیعی فارسی

جستجو در اینترنت با استفاده از زبان طبیعی فارسی دکتر محسن کاهانی گروه مهندسی کامپیوتر دانشگاه فردوسی مشهد kahani@um.ac.ir http www.um.ac.ir ~kahani فهرست مطالب مقدمه پردازش زبان طبیعی ویژگیهای زبان فارسی ساختار سیستم پیاده سازی سیستم نتایج مقدمه گسترش کاربرد های اینترنت افزایش سایت های با مطالب عمومی تجارتی، اطلاع رسانی، سرگرمی و وبلاگ افزایش کاربران غیر آکادمیک عدم آشنایی کاربران عادی با گزاره های جبری مشکل جستجو در اینترنت راه حل پذیرش جملات طبیعی محاوره ای توسط موتورهای جستجو فقط پشتیبانی محدود از زبان انگلیسی انگیزه پروژه افزایش سایتهای بزبان فارسی افزایش کاربران فارسی زبان مشکل جستجو در اینترنت برای کاربران عادی پردازش زبان طبیعی nlp یکی از مقوله های مطرح در هوش مصنوعی روند استفاده از کامپیوترها و نرم افزارها بسمت استفاده راحت تر کاربر user friendly پردازش گفتار پردازش نوشتار مفاهیم و علوم مطرح در nlp phonological تشیخص اصوات در لغات morphological ‌ علم لغت و واژک ها که کلمات را تجزبه کند . syntactic شناخت نحوی و گرامری semantic معنای لغات و مفهوم عبارات ترکیبی pragmatic سطح بالاتری از علم که درباره معنای متفاوت یک جمله در متون مختلف قضاوت می کند . world اطلاعات کلی که شخص در برقراری ارتباط می داند . شامل شناخت اهداف و عقاید دیگران نیز می شود . ویژگیهای زبان فارسی حروف در زبان فارسی به یکدیگر چسبیده می شوند اشکال متفاوتی بسته به محل کلمه چداسازی کلمات با فاصله درباره ترتیب اجزاء جمله قید و محدودیت خاصی وجود ندارد. free order وجود استثنائات زیاد مثلا امکان آوردن فعل مفرد برای فاعل جمع و بالعکس عدم وجود حروف بزرگ و کوچک case عدم وجود نشانگر بین عبارات اسمی ساختار سیستم عبارت ورودی فیلترها عبارت منظم آنالیز کننده نحوی پارسر عبارت جبری تبدیل کننده عبارت جبری درخت کامل آنالیز کننده محتوایی مجموعه لغات lexicon قواعد خاص درخت پارس شده پیش پردازش پیش پردازش عبارت منظم فیلتر ۴ فیلتر ۱ فیلتر ۲ فیلتر ۳ عبارت ورودی فیلتر ۱ شروع مشخص کردن tockon های خالص شمردن افعال جمله تنظیم فعل اعمال قاعده ۱ وجود فعل پیرو پیش از پایه اعمال قاعده ۲ تصحیح حروف پایان هدف فعل هر جمله کنار اجزای خود جمله و آخر جمله باشد قاعده ۱ تک جمله را به تک جمله ای که فعل اش آخرش است تبدیل می کند. قاعده ۲ جملات پیروی توصیفی که در دل جمله پایه آمده باشند را از دل جملات پایه خارج می کند. فیلتر ۲ هدف مفعول در جمله موجود باشد و نسبت به ترکیبات اضافی تقدم داشته باشد تنظیم ترتیب اجزای جمله بعلت free order بودن زبان فارسی فیلتر ۳ هدف تطابق و تغییرواژک های ورودی براساس لغاتlexicon تنظیم جداکننده ها white spaces در میان لغات یک جمله تنظیم جداکننده ها در کلمات مرکب فیلتر ۴ هدف حذف token هایی که از دید پروژه با توجه به lexicon غیرلازم اند حذف حروف پشت سرهم به لحاظ عملکرد خاص فیلتر ۱ تولید شده اند اسامی خاصی از lexicon که خصوصیت مشخصی داشته باشند ، مثلا null قید n کلمه ای که نوع اش n باشد و خاصیت اش قید باشد و عملگرش null و تهی باشد حذف می شود. فرهنگ لغات lexicon نوع کلمه خصوصیت عملگر n آن ضمیر اشاره n من ضمیر شخصی n نیز حذفی pp در and pss و and n اثرات حذفی vp می خواهم vt باشد si درمورد si بدون not گرامر ترمینالها pss حروف ربط مجاز بین دوجمله غیرپایه ، پیرو pst حرف ربط بعد جمله پایه که ptt حرف ربط بین دو جمله پیرو و … st۱ نوع جستجو کتاب ، مقاله ، site …. si پیش عبارت اضافی مشخص کننده موضوع جستجو درمورد و …. pp حرف ربط یا اضافه vp فعل جمله پایه vt فعل جمله پیرو n اسم اسم خاص یا یک ورودی در فرهنگ لغات یاخارج آن گرامر – غیر ترمینالها s جمله یا جملات sp جمله پایه st جمله پیرو start شروع جمله پایه sr عبارت شامل موضوع درخواست mnp عبارت اسمی شامل موضوع جستجو srs چندین sr snp موضوعات خالص search با حروف ربط بین شان . np عبارت اسمی tsrs ترکیبات جستجو دار قبل از فعل در جمله پیرو قوانین گرامر ss pss s ssp pst st sp stst ptt st spsrs vp srssr va srs sr sr start mnp۱ start mnp۲ start  st st ra mnp۱ si snp قوانین گرامر ادامه mnp۲ snp ra snp np pp snp np st tsrs vt tsrs’ vt tsrs  mnp۱ va tsrs mnp۱ tsrs’ mnp۲ va tsrs mnp۲ npn np n st st۱ st st۱ مقالاتی در مورد پردازش زبان طبیعی می خواهم پردازش زبان طبیعی s …

کلمات کلیدی پرکاربرد در این اسلاید پاورپوینت: جمله پایه, جمله پیرو, حرف ربط, فعل جمله, پردازش زبان, زبان فارسی, زبان طبیعی, پردازش زبان طبیعی, فیلتر هدف, فرهنگ لغات, فیلتر فیلتر, جستجو اینترنت, حرف, جمله,

این فایل پاورپوینت شامل ۲۳  اسلاید و به زبان فارسی و حجم آن ۰٫۳۴ مگا بایت است. نوع قالب فایل ppt بوده که با این لینک قابل دانلود است. این مطلب برگرفته از سایت زیر است و مسئولیت انتشار آن با منبع اصلی می باشد که در تاریخ ۲۰۱۸/۱۱/۰۲ ۰۶:۳۸:۰۴ استخراج شده است.

http://profsite.um.ac.ir/~kahani/ppt/nlp.ppt

• جهت آموزش های پاورپوینت بر روی اینجا کلیک کنید.
• جهت دانلود رایگان قالب های حرفه ای پاورپوینت بر روی اینجا کلیک کنید.