قائمة قواعد بيانات تعابير الوجه

📅 آخر تحديث: ٢٥ يوليو ٢٠٢٦
✍️ نُشر في: ٢٥ يوليو ٢٠٢٦
الموسوعة الحرة

قاعدة بيانات تعابير الوجه هي مجموعة من الصور أو مقاطع الفيديو التي تعرض تعابير وجهية لمجموعة متنوعة من المشاعر . يُعدّ المحتوى الإعلامي المُصنّف جيدًا ( المُوسوم بالمشاعر ) لسلوك الوجه ضروريًا لتدريب واختبار والتحقق من صحة خوارزميات تطوير أنظمة التعرف على التعبيرات . يمكن تصنيف المشاعر باستخدام تصنيفات منفصلة أو على مقياس متصل. تعتمد معظم قواعد البيانات عادةً على نظرية المشاعر الأساسية ( لبول إيكمان ) التي تفترض وجود ست مشاعر أساسية منفصلة (الغضب، الخوف، الاشمئزاز، المفاجأة، الفرح، الحزن). مع ذلك، تتضمن بعض قواعد البيانات تصنيف المشاعر على مقياس متصل للإثارة والتكافؤ. 

في قواعد بيانات التعبيرات المصطنعة، يُطلب من المشاركين إظهار تعابير عاطفية أساسية مختلفة، بينما في قواعد بيانات التعبيرات العفوية، تكون التعبيرات طبيعية. وتختلف التعبيرات العفوية عن التعبيرات المصطنعة اختلافًا ملحوظًا من حيث الشدة والتكوين والمدة. إضافةً إلى ذلك، يصعب توليد بعض وحدات الحركة دون المرور بالحالة العاطفية المصاحبة لها. لذلك، في معظم الحالات، تكون التعبيرات المصطنعة مبالغًا فيها، بينما تكون التعبيرات العفوية دقيقة وتختلف في مظهرها.

تم تصنيف العديد من قواعد البيانات المتاحة للجمهور هنا. [ 1 ] [ 2 ] فيما يلي بعض التفاصيل حول قواعد بيانات تعابير الوجه .

قاعدة البياناتتعبير الوجهعدد المواضيععدد الصور/مقاطع الفيديورمادي/ملونالدقة، معدل الإطاراتالحقيقة على أرض الواقعيكتب
FERG-3D-DB (قاعدة بيانات ثلاثية الأبعاد لمجموعة أبحاث التعبير الوجهي) للشخصيات المنمقة [ 3 ]غاضب، مشمئز، خائف، فرح، محايد، حزين، متفاجئ439574 مثالاً مشروحاًلونتصنيفات المشاعرالوضع الأمامي
قاعدة بيانات رايرسون السمعية والبصرية للكلام العاطفي والأغاني (RAVDESS) [ 4 ]الكلام: هادئ، سعيد، حزين، غاضب، خائف، متفاجئ، مقرف، ومحايد.

الأغنية: هادئة، سعيدة، حزينة، غاضبة، خائفة، ومحايدة. كل تعبير بمستويين من الشدة العاطفية.

24 7356 ملف فيديو وصوتلون1280x720 (720p)ملصقات تعابير الوجه

تم تقديم التقييمات من قبل 319 مقيّمًا بشريًا

وضعية
مجموعة بيانات كوهن-كانادي الموسعة (CK+) [ 5 ]محايد، حزن، مفاجأة، سعادة، خوف، غضب، ازدراء، واشمئزاز123 593 تسلسل صور (327 تسلسلًا تحمل تصنيفات عاطفية منفصلة)رمادي في الغالب640* 490تصنيفات تعابير الوجه ونظام ترميز تعابير الوجه (تصنيف وحدة الحركة للإطار الأخير في كل تسلسل صور)ابتسامات مصطنعة وعفوية
تعابير الوجه الأنثوية اليابانية (JAFFE) [ 6 ]محايد، حزن، مفاجأة، سعادة، خوف، غضب، واشمئزاز10213 صورة ثابتةرمادي256* 256ملصق تعبير الوجهوضعية
قاعدة بيانات MMI [ 7 ]431280 مقطع فيديو وأكثر من 250 صورةلون720* 576تسمية AU لإطار الصورة الذي يحتوي على تعبير الوجه الأقصى في كل تسلسل صورمصطنع وعفوي
قاعدة بيانات بلفاست [ 8 ]المجموعة 1 (الاشمئزاز، الخوف، التسلية، الإحباط، المفاجأة)114570 مقطع فيديولون720*576المشاعر الطبيعية
المجموعة الثانية (الاشمئزاز، الخوف، التسلية، الإحباط، المفاجأة، الغضب، الحزن)82650 مقطع فيديولون
المجموعة الثالثة (الاشمئزاز، الخوف، التسلية)60180 مقطع فيديولون1920*1080
قاعدة بيانات التعبيرات الوجهية شبه التمثيلية الهندية (iSAFE) [ 9 ]سعيد، حزين، خائف، متفاجئ، غاضب، محايد، مقرف44395 مقطع فيديولون1920x1080

(60 إطارًا في الثانية)

تصنيفات المشاعرتلقائي
DISFA [ 10 ]-274845 إطار فيديولون1024*768؛ 20 إطارًا في الثانيةشدة الإضاءة لكل إطار فيديو (12 وحدة إضاءة)تلقائي
مجموعة فهم الوسائط المتعددة (MUG) [ 11 ]محايد، حزن، مفاجأة، سعادة، خوف، غضب، واشمئزاز861462 تسلسلًالون896*896، 19 إطارًا في الثانيةتصنيفات المشاعروضعية
قاعدة بيانات التعبير التلقائي الهندية (ISED) [ 12 ]الحزن، والمفاجأة،  والسعادة، والاشمئزاز50428 فيديو لون1920 × 1080، 50 إطارًا في الثانيةتصنيفات المشاعرتلقائي
قاعدة بيانات وجوه Radboud (RaFD) [ 13 ]محايد، حزن،  ازدراء، مفاجأة،  سعادة، خوف، غضب، واشمئزاز67ثلاثة اتجاهات نظر مختلفة وخمس زوايا للكاميرا (8*67*3*5=8040 صورة)لون681*1024تصنيفات المشاعروضعية
قاعدة بيانات Oulu-CASIA NIR-VISمفاجأة، سعادة، حزن، غضب، خوف، واشمئزاز80ثلاث حالات إضاءة مختلفة: عادية، ضعيفة، ومظلمة (إجمالي 2880 مقطع فيديو)لون320×240وضعية
قاعدة بيانات FERG (مجموعة أبحاث تعابير الوجه) [ 14 ] للأحرف المُنمّقةغاضب، مشمئز، خائف، فرح، محايد، حزين، متفاجئ655767لون768x768تصنيفات المشاعرالوضع الأمامي
AffectNet [ 15 ]محايد، سعيد، حزين، مفاجئ، خائف، مقرف، غاضب، محتقرحوالي 450,000 ملف مُعلّق يدويًا

حوالي 500,000 معلّق عليها تلقائياً

لونمتنوعتصنيفات المشاعر، والتكافؤ، والإثارةبيئة برية
IMPA-FACE3D [ 16 ]الوضع الأمامي المحايد، الفرح، الحزن، المفاجأة، الغضب، الاشمئزاز، الخوف، مفتوح، مغلق، قبلة، الجانب الأيسر، الجانب الأيمن، الوضع السهمي الأيسر المحايد، الوضع السهمي الأيمن المحايد، مؤخرة العنق والجبهة (مكتسبة أحيانًا)38534 صورة ثابتةلون640×480تصنيفات المشاعروضعية
قاعدة بيانات وجوه الاتحاد الدولي للفروسيةمحايد، ابتسم2002800 صورة ثابتةلون640×480تصنيفات المشاعروضعية
أف-وايلد [ 17 ] [ 18 ]التكافؤ والإثارة200حوالي 1,250,000 مُعَلَّم يدويًالونمتنوع (المتوسط ​​= 640 × 360)التكافؤ، الإثارةبيئة برية
Aff-Wild2 [ 19 ] [ 20 ]محايد، سعادة، حزن، مفاجأة، خوف، اشمئزاز، غضب + استثارة التكافؤ + وحدات الحركة 1، 2، 4، 6، 12، 15، 20، 25458حوالي 2,800,000 تم شرحها يدويًالونمتنوعة (المتوسط ​​= 1030 × 630)التكافؤ، الإثارة، 7 تعبيرات أساسية، وحدات الحركة لكل إطار فيديوبيئة برية
قاعدة بيانات الوجوه العاطفية في العالم الحقيقي (RAF-DB) [ 21 ] [ 22 ]ستة أنواع من المشاعر الأساسية (المفاجأة، الخوف، الاشمئزاز، السعادة، الحزن، الغضب) بالإضافة إلى الحياد و12 نوعًا من المشاعر المركبة (المفاجأة الخائفة، الاشمئزاز الخائف، الغضب الحزين، الخوف الحزين، الاشمئزاز الغاضب، المفاجأة الغاضبة، الاشمئزاز الحزين، المفاجأة المشمئزة، المفاجأة السعيدة، المفاجأة الحزينة، الغضب الخائف، الاشمئزاز السعيد).29672 مثالاً مشروحاًلونتختلف البيانات الأصلية، و100×100 للبيانات المُحاذيةتصنيفات المشاعرمصطنع وعفوي

مراجع

  1. ↑ "مجموعة من قواعد البيانات العاطفية" . مؤرشف من الأصل بتاريخ 25-03-2018.
  2. ↑ "قواعد بيانات تعابير الوجه" .
  3. ↑ أنيجا، ديبالي، وآخرون. "تعلم توليد تعابير شخصيات ثلاثية الأبعاد منمقة من البشر." مؤتمر IEEE الشتوي لعام 2018 حول تطبيقات رؤية الحاسوب (WACV). IEEE، 2018.
  4. ↑ ليفينغستون وروسو (2018). قاعدة بيانات رايرسون السمعية البصرية للكلام والأغاني العاطفية (RAVDESS): مجموعة ديناميكية متعددة الوسائط من تعابير الوجه والصوت في اللغة الإنجليزية الأمريكية الشمالية. doi : 10.1371/journal.pone.0196391
  5. ↑ بي. لوسي، جيه إف كوهن، تي. كانادي، جيه. ساراغيه، زد. أمبادار، وآي. ماثيوز، "مجموعة بيانات كوهن-كانادي الموسعة (CK+): مجموعة بيانات كاملة لتعبيرات الوجه لوحدة الحركة والتعبير المحدد بالعاطفة"، في ورشة عمل IEEE الثالثة حول رؤية الحاسوب وأنماط التعرف لتحليل السلوك التواصلي البشري ، 2010
  6. ^ ليونز، مايكل. كاماتشي، ميوكي؛ جيوبا، جيرو (1998). قاعدة بيانات تعابير الوجه الأنثوية اليابانية (JAFFE) . دوى : 10.5281/زينودو.3451524 .
  7. ↑ م. فالستار وم. بانتيك، "الاشمئزاز والسعادة والمفاجأة المستحثة: إضافة إلى قاعدة بيانات تعابير الوجه في MMI"، في وقائع المؤتمر الدولي لموارد اللغة وتقييمها ، 2010
  8. ↑ آي. سنيدون، إم. ماكروري، جي. ماكيون، وجيه. هانراتي، "قاعدة بيانات المشاعر الطبيعية المستحثة في بلفاست"، مجلة IEEE للمعاملات في الحوسبة العاطفية، المجلد 3، العدد 1، الصفحات 32-41، 2012
  9. ↑ سينغ، شيفيندرا؛ بينيديكت، شاجولين (2020). "مجموعة بيانات التعبيرات الوجهية شبه التمثيلية الهندية (ISAFE) للتعرف على المشاعر البشرية" . في: ثامبي، سابو م.؛ هيغدي، راجيش م.؛ كريشنان، سري؛ موخوبادياي، جايانتا؛ تشودري، فيبين؛ ماركيز، أوجي؛ بيراموثو، سيلوين؛ كورتشادو، خوان م. (محررون). التطورات في معالجة الإشارات وأنظمة التعرف الذكية . سلسلة الاتصالات في علوم الحاسوب والمعلومات. المجلد 1209. سنغافورة: سبرينغر. الصفحات 150-162 . doi : 10.1007/978-981-15-4828-4_13 . ISBN   978-981-15-4828-4.
  10. ↑ إس إم مافاداتي، إم إتش ماهور، ك. بارتليت، ب. ترينه، وج. كوهن، "DISFA: قاعدة بيانات لشدة حركات الوجه التلقائية"، مجلة IEEE للمعاملات في الحوسبة العاطفية، المجلد 4، العدد 2، الصفحات 151-160، 2013
  11. ↑ N. Aifanti, C. Papachristou and A. Delopoulos, The MUG Facial Expression Database, in Proc. 11th Int. Workshop on Image Analysis for Multimedia Interactive Services (WIAMIS), Desenzano, Italy, April 12–14 2010.
  12. ↑ SL Happy, P. Patnaik, A. Routray, and R. Guha, “The Indian Spontaneous Expression Database for Emotion Recognition,” in IEEE Transactions on Affective Computing, 2016, doi : 10.1109/TAFFC.2015.2498174 .
  13. ^ لانغنر، O.، Dotsch، R.، Bijlstra، G.، Wigboldus، DHJ، Hawk، ST، & van Knippenberg، A. (2010). عرض والتحقق من صحة قاعدة بيانات وجوه Radboud. الإدراك والعاطفة، 24(8)، 1377-1388. دوى : 10.1080/02699930903485076
  14. ↑ "قاعدة بيانات مجموعة أبحاث تعابير الوجه (FERG-DB)" . grail.cs.washington.edu . تم الاطلاع عليها بتاريخ 2016-12-06 .
  15. ↑ مولاحوسيني، أ.؛ حسني، ب.؛ ماهور، م.ح. (2017). "AffectNet: قاعدة بيانات لحساب تعابير الوجه، والتكافؤ، والإثارة في بيئات واقعية". معاملات IEEE في الحوسبة العاطفية . الصفحات (99): 18-31 . arXiv : 1708.03985 . doi : 10.1109/TAFFC.2017.2740923 . ISSN 1949-3045 . S2CID 37515850 .  
  16. ↑ "التقارير الفنية لمشروع IMPA-FACE3D" . visgraf.impa.br . تم الاطلاع عليه بتاريخ 2018-03-08 .
  17. ↑ زافيريو، س.؛ كولياس، د.؛ نيكولاو، م.أ.؛ بابايوانو، أ.؛ تشاو، ج.؛ كوتسيا، إ. (2017). "تحدي Aff-Wild: التكافؤ والإثارة في بيئتهما الطبيعية" (ملف PDF) . مؤتمر IEEE لعام 2017 حول ورش عمل رؤية الحاسوب والتعرف على الأنماط (CVPRW) . الصفحات 1980-1987 . doi : 10.1109/CVPRW.2017.248 . ISBN  978-1-5386-0733-6. S2CID 3107614 . 
  18. ↑ كولياس، د.؛ تزيراكيس، ب.؛ نيكولاو، م.أ.؛ بابايوانو، أ.؛ تشاو، ج.؛ شولر، ب.؛ كوتسيا، إ.؛ زافيريو، س. (2019). "التنبؤ العميق بالانفعالات في بيئات واقعية: قاعدة بيانات Aff-Wild والتحدي، والبنى العميقة، وما وراء ذلك" . المجلة الدولية لرؤية الحاسوب . 127 ( 6-7 ): 907-929 . arXiv : 1804.10938 . doi : 10.1007/s11263-019-01158-4 . S2CID 13679040 . 
  19. ↑ كولياس، د.؛ زافيريو، س. (2019). "التعرف على التعبير، والعاطفة، ووحدات الحركة: Aff-wild2، والتعلم متعدد المهام، و arcface" (ملف PDF) . المؤتمر البريطاني لرؤية الآلة (BMVC)، 2019. arXiv : 1910.04855 .
  20. ↑ كولياس، د.؛ شولك، أ.؛ حاجييف، إ.؛ زافيريو، س. (2020). "تحليل السلوك العاطفي في مسابقة ABAW 2020 الأولى" . المؤتمر الدولي الخامس عشر لمعهد مهندسي الكهرباء والإلكترونيات (IEEE) حول التعرف التلقائي على الوجه والإيماءات (FG 2020) . الصفحات 637-643 . arXiv : 2001.11409 . doi : 10.1109/FG47880.2020.00126 . ISBN  978-1-7281-3079-8. S2CID 210966051 . 
  21. ↑ لي، س. "RAF-DB" . قاعدة بيانات الوجوه العاطفية في العالم الحقيقي .
  22. ↑ لي، س.؛ دينغ، و.؛ دو، ج. (2017). "التعهيد الجماعي الموثوق والتعلم العميق الحافظ للموقع للتعرف على التعبيرات في البيئات الطبيعية". مؤتمر IEEE لعام 2017 حول رؤية الحاسوب والتعرف على الأنماط (CVPR) . الصفحات 2584-2593 . doi : 10.1109/CVPR.2017.277 . ISBN  978-1-5386-0457-1. S2CID 11413183 .