الضغط الدلالي

في معالجة اللغة الطبيعية ، يُعدّ الضغط الدلالي عملية لضغط المعجم المستخدم في بناء مستند نصي (أو مجموعة مستندات) عن طريق تقليل التباين اللغوي، مع الحفاظ على دلالات النص . ونتيجة لذلك، يمكن تمثيل الأفكار نفسها باستخدام مجموعة أصغر من الكلمات.

في معظم التطبيقات، يُعدّ الضغط الدلالي ضغطًا مع فقدان للبيانات. ولا يُعوّض الإسهاب المتزايد عن الضغط المعجمي، ولا يمكن إعادة بناء المستند الأصلي في عملية عكسية.

بالتعميم

يتم تحقيق الضغط الدلالي بشكل أساسي في خطوتين، باستخدام قواميس التردد والشبكة الدلالية :

  1. تحديد الترددات التراكمية للمصطلحات لتحديد المعجم المستهدف،
  2. استبدال المصطلحات الأقل شيوعًا بمرادفاتها ( التعميم ) من المعجم المستهدف. [ 1 ]

تتطلب الخطوة الأولى تجميع ترددات الكلمات ومعلومات حول العلاقات الدلالية، وتحديداً التضمين . وبالانتقال تصاعدياً في التسلسل الهرمي للكلمات، يتم حساب التردد التراكمي للمفهوم عن طريق إضافة مجموع ترددات التضمين إلى تردد المصطلح الأعلى منه. جuمو(كأنا)=و(كأنا)+ججuمو(كج){\displaystyle cumf(k_{i})=f(k_{i})+\sum _{j}cumf(k_{j})}أينكأنا{\displaystyle k_{i}}هو اسم عام لـكج{\displaystyle k_{j}}ثم يتم اختيار عدد مرغوب فيه من الكلمات ذات الترددات التراكمية الأعلى لبناء معجم مستهدف.

في الخطوة الثانية، يتم تحديد قواعد تعيين الضغط للكلمات المتبقية من أجل التعامل مع كل ظهور لكلمة فرعية أقل تكرارًا باعتبارها كلمة عامة في نص الإخراج.

مثال

تمت معالجة الجزء النصي أدناه باستخدام الضغط الدلالي. تم استبدال الكلمات المكتوبة بخط غامق بمرادفاتها.

كلاهما حشرات اجتماعية تبني أعشاشًا ، لكن الدبابير الورقية ونحل العسل ينظمان مستعمراتهما .

بطرق مختلفة تمامًا . في دراسة جديدة، أفاد الباحثون أنه على الرغم من اختلافاتهم ، تعتمد هذه الحشرات على نفس شبكة الجينات لتوجيه سلوكها الاجتماعي . نُشرت الدراسة في وقائع الجمعية الملكية ب : العلوم البيولوجية. يفصل بين نحل العسل والدبابير الورقية أكثر من 100 مليون سنة.

التطور ، وهناك اختلافات ملحوظة في كيفية تقسيمهم لعمل الحفاظ على المستعمرة .

يُخرج الإجراء النص التالي:

كلاهما من الحشرات التي تبني المنشآت ، لكن الحشرات وحشرات العسل تصنف مجموعاتها البيولوجية.

في بنية مختلفة تمامًا . في دراسة جديدة، أفاد الباحثون أنه على الرغم من اختلاف آرائهم ، فإن هذه الحشرات تستخدم نفس شبكة الجينات لتوجيه سلوكها الجماعي . نُشرت الدراسة في وقائع مؤسسة علوم الأحياء البكتيرية . يفصل بين حشرات العسل والحشرات الأخرى أكثر من مائة مليون سنة.

العمليات العضوية ، وهناك اختلافات جوهرية في الآراء حول كيفية تقسيم العمل لتأكيد مجموعة بيولوجية .

الضغط الدلالي الضمني

يمكن اعتبار الميل الطبيعي إلى إبقاء تعابير اللغة الطبيعية موجزة شكلاً من أشكال الضغط الدلالي الضمني، وذلك عن طريق حذف الكلمات غير ذات المعنى أو الكلمات ذات المعنى الزائدة (وخاصة لتجنب التكرار ). [ 2 ]

التطبيقات والمزايا

في نموذج الفضاء المتجهي ، يؤدي ضغط المعجم إلى تقليل الأبعاد ، مما ينتج عنه تعقيد حسابي أقل وتأثير إيجابي على الكفاءة.

يُعدّ الضغط الدلالي مفيدًا في مهام استرجاع المعلومات ، إذ يُحسّن من فعاليتها (من حيث الدقة والاستدعاء ). [ 3 ] ويعود ذلك إلى استخدام مُعرّفات أكثر دقة (تقليل تأثير التنوع اللغوي - الحد من تكرار اللغة، وخطوة نحو قاموس مُتحكّم به).

كما هو الحال في المثال أعلاه، من الممكن عرض الناتج كنص طبيعي (إعادة تطبيق التصريف، وإضافة الكلمات الموقوفة).

انظر أيضاً

مراجع

  1. سيجلاريك، د.؛ هانيفيتش، ك.؛ روتكوفسكي، و. (2010). "الضغط الدلالي لأنظمة استرجاع المعلومات المتخصصة". التطورات في أنظمة المعلومات وقواعد البيانات الذكية . دراسات في الذكاء الحسابي. المجلد  283. الصفحات 111-121 . doi : 10.1007/978-3-642-12090-9_10 . ISBN  978-3-642-12089-3.
  2. بيركوفا، ن.ن. (1982). "حول أنواع الضغط الدلالي للنص". وقائع المؤتمر التاسع للغويات الحاسوبية COLING '82 . المجلد 2. الصفحات 229-231 . doi : 10.3115/990100.990155 . ISBN   0-444-86393-1. S2CID 33742593 . 
  3. سيجلاريك، د.؛ هانيفيتش، ك.؛ روتكوفسكي، و. (2010). "جودة الضغط الدلالي في التصنيف" . وقائع المؤتمر الدولي الثاني حول الذكاء الجماعي الحسابي: التقنيات والتطبيقات . المجلد 1. سبرينغر. الصفحات 162-171 . ISBN   978-3-642-16692-1.