التحليل الصرفي

التحليل الصرفي ، في معالجة اللغة الطبيعية ، هو عملية تحديد المورفيمات التي تُبنى منها كلمة معينة. ويجب أن يكون قادراً على التمييز بين القواعد الإملائية والقواعد الصرفية. على سبيل المثال، يمكن تحليل كلمة "foxes" إلى "fox" (الجذر) و"es" (لاحقة تدل على الجمع).

يُعدّ استخدام مُحوِّل الحالة المحدودة (FST) النهجَ المُعتمد عمومًا في التحليل الصرفي، حيث يُدخل الكلمات ويُخرج جذورها ومُعدِّلاتها. ويتم إنشاء مُحوِّل الحالة المحدودة مبدئيًا من خلال تحليل خوارزمي لمصدر كلمات، مثل قاموس، مُتضمنًا علامات المُعدِّلات.

ثمة نهج آخر يتمثل في استخدام طريقة البحث المفهرس، التي تستخدم شجرة جذرية مُنشأة . لكن هذا النهج ليس شائع الاستخدام لأنه لا يُجدي نفعاً مع اللغات ذات البنية الصرفية المعقدة.

مع تطور الشبكات العصبية في معالجة اللغات الطبيعية، أصبح استخدام تحويل فورييه السريع (FST) للتحليل الصرفي أقل شيوعًا، لا سيما بالنسبة للغات التي تتوفر لها بيانات تدريبية وفيرة . بالنسبة لهذه اللغات، من الممكن بناء نماذج لغوية على مستوى الأحرف دون استخدام محلل صرفي صريح. ^{[ 1 ]}

القواعد الإملائية هي قواعد عامة تُستخدم عند تحليل الكلمة إلى جذرها وملحقاتها . على سبيل المثال: الكلمات الإنجليزية المفردة التي تنتهي بـ "-y" تنتهي بـ "-ies " عند جمعها. في المقابل، توجد قواعد صرفية تتضمن حالات استثنائية لهذه القواعد العامة. يُستخدم كلا النوعين من القواعد لبناء أنظمة قادرة على التحليل الصرفي.

تُعدّ القواعد الصرفية استثناءاتٍ من القواعد الإملائية المُستخدمة عند تحليل الكلمة إلى جذرها ومُلحقاتها. على سبيل المثال، بينما يُجمع عادةً في اللغة الإنجليزية بإضافة اللاحقة "s"، فإن كلمة "fish" لا تتغير عند جمعها. يُقارن هذا بالقواعد الإملائية التي تتضمن قواعد عامة. يُستخدم كلا النوعين من القواعد لبناء أنظمة قادرة على التحليل الصرفي.

طُرحت نماذج مختلفة للمعالجة الصرفية الطبيعية. تشير بعض الدراسات التجريبية إلى أن المتحدثين أحاديي اللغة يعالجون الكلمات ككل عند الاستماع إليها، بينما يقوم أقرانهم ثنائيي اللغة بتقسيم الكلمات إلى مورفيماتها المقابلة، لأن تمثيلاتهم المعجمية ليست محددة، ولأن المعالجة المعجمية في اللغة الثانية قد تكون أقل تكرارًا من المعالجة في اللغة الأم. ^{[ 2 ]}

تشمل تطبيقات المعالجة المورفولوجية الترجمة الآلية ، ومدقق الإملاء ، واسترجاع المعلومات .