معالجة لغات طبيعية

هذه بذرة مقالة عن موضوع علمي تحتاج للنمو والتحسين، ساهم في إثرائها بالمشاركة في تحريرها.

معالجة اللغات الطبيعية (بالانجلزية Natural Language Processing" NLP" ) هي علم فرعي من علوم الذكاء الاصطناعي والتي بدورها متفرعة من المعلوماتية، وتتداخل بشكل كبير مع علوم اللغويات التي تقدم التوصيف اللغوي المطلوب للحاسوب. هذا العلم يمكننا من صناعة برمجيات تتمكن من تحليل ومحاكاة فهم اللغات الطبيعية.

[تحرير] تحليل النصوص الطبيعية

أولى الأنظمة مثل SHRDLU ، التي عملت في بيئة محددة من الكلمات، عملت بشكل فعّال للغاية، مما قاد الباحثين إلى التفائل الشديد الذي تلاشى بسرعة عندما تم تطبيق الأنظمة في بيئات أكثر واقعية بوجود التعقيد والإبهام (عدم الوضوح) في اللغات التي يتداولها البشر.

فهم اللغات الطبيعية يشار إليه أحيانا بمشكلة الذكاء الإصطناعي الكاملة، لأن تمييز وفهم اللغات الطبيعية يحتاج إلى معرفة مكثفة بالعالم الخارجي والقدرة على التحكم به. تعريف مفهوم "الفهم" هو واحد من المشاكل الرئيسية في معالجة اللغات الطبيعية.

مثال على بعض المشاكل التي تواجه أنظمة فهم وتحليل اللغات الطبيعية:

• جملة "أعطينا القردة الموزة لأنها كانت جائعة" وجملة "أعطينا القردة الموزة لأنها كانت ناضجة" لهما ذات التكوين القواعدي ، ولكن الضمير "ها" في كلمة لأنها تعود في الأولى على القردة ، وفي الثاني تعود على الموزة: ففهم الجملة بشكل صحيح غير ممكن دون معرفة خصائص الموز وسلوك القردة.

[تحرير] مستويات تحليل اللغات الطبيعية

بالنسبة للنصوص المكتوبة ، فإن تحليها يمر في عدّة مراحل تختلف بإختلاف طريقة التحيليل ، ولكن إحدى معظم أكثر اساليب التحليل إنتشارا تتبع المراحل:

[تحرير] التحليل الصرفي

وهو الجزء الذي يهتم في معرفة نوع الكلمات ، إحتوائها على الضمائر وغيرها من المعلومات الصرفية.

[تحرير] التحليل النحوي

وهو الجزء الذي يهتم في علاقة الكلمات بعضها مع بعض ، هيكلية الجملة ، وغيرها من المعلومات النحوية، ويعتمد على المرحلة الصرفية.

[تحرير] التحليل الدلالي

وهو الجزء الذي يهتم بفهم المقصود من الجملة عن طريق الربط المنطقي بالمعلومات عن حول ما يدور الحديث عنه في الجملة وبين العالم الواقعي ، ويعتمد على كل من المرحلة الصرفية والنحوية.

[تحرير] المجالات الرئيسية لمعالجة اللغات الطبيعية

• القراءة الآلية للنصوص
• تمييز الكلام
• توليد النصوص أو الكلام آليا
• الترجمة الآلية
• فهم الأسئلة والإجابة عليها
• ايجاد المعلومات
• إستخلاص المعلومات
• تنقيح النصوص
• تقنيات الترجمة
• التلخيص الآلي

[تحرير] وصلات خارجية

• نظام start لإجابة الأسئلة بإستخدام معالجة اللغات الطبيعية من جامعة MIT