مخطط المعلومات

مخطط المعلومات هو نوع من مخططات فين المستخدمة في نظرية المعلومات لتوضيح العلاقات بين مقاييس شانون الأساسية للمعلومات : الإنتروبيا ، الإنتروبيا المشتركة ، الإنتروبيا الشرطية والمعلومات المتبادلة . ^{[1] [2]} مخططات المعلومات هي أداة تربوية مفيدة للتدريس والتعلم حول هذه المقاييس الأساسية للمعلومات. كما تم تطبيق مخططات المعلومات على مشاكل محددة مثل عرض التشابه النظري للمعلومات بين مجموعات من المصطلحات الوجودية . ^[3]

• 
  مخطط فين يوضح العلاقات الإضافية والطرحية بين مقاييس المعلومات المختلفة المرتبطة بالمتغيرين المترابطين X و Y. المساحة التي تحتويها كلتا الدائرتين هي الإنتروبيا المشتركة . الدائرة الموجودة على اليسار (الحمراء والبنفسجية) هي الإنتروبيا الفردية ، حيث يمثل اللون الأحمر الإنتروبيا الشرطية . الدائرة الموجودة على اليمين (الزرقاء والبنفسجية) هي ، حيث يمثل اللون الأزرق . البنفسجي هو المعلومات المتبادلة .${\displaystyle H(X,Y)}$ ${\displaystyle H(X)}$ ${\displaystyle H(X|Y)}$${\displaystyle H(Y)}$${\displaystyle H(Y|X)}$ ${\displaystyle I(X;Y)}$
• 
  مخطط فين لمقاييس نظرية المعلومات لثلاثة متغيرات x و y و z . تمثل كل دائرة إنتروبيا فردية : هي${\displaystyle H(x)}$ الدائرة السفلية اليسرى، والدائرة السفلية${\displaystyle H(y)}$ اليمنى، والدائرة العلوية${\displaystyle H(z)}$ . تمثل تقاطعات أي دائرتين المعلومات المتبادلة للمتغيرين المرتبطين (على سبيل المثال ،${\displaystyle I(x;z)}$ الأصفر والرمادي). اتحاد أي دائرتين هو الإنتروبيا المشتركة للمتغيرين المرتبطين (على سبيل المثال، كل شيء ما عدا الأخضر). الإنتروبيا المشتركة لجميع المتغيرات الثلاثة ${\displaystyle H(x,y)}$هي اتحاد الدوائر ${\displaystyle H(x,y,z)}$الثلاث . وهي مقسمة إلى 7 أجزاء، الأحمر والأزرق والأخضر هي الإنتروبيا الشرطية على التوالي، والأصفر والأرجواني والسماوي هي المعلومات المتبادلة الشرطية و على التوالي، والرمادي هو معلومات التفاعل . معلومات التفاعل هي الوحيدة من بين كل ما قد يكون سلبيًا .${\displaystyle H(x|y,z),H(y|x,z),H(z|x,y)}$ ${\displaystyle I(x;z|y),I(y;z|x)}$${\displaystyle I(x;y|z)}$ ${\displaystyle I(x;y;z)}$