مصفوفة التغاير


في نظرية الاحتمالات والإحصاء ، مصفوفة التغاير (المعروفة أيضًا باسم مصفوفة التغاير الذاتي ، أو مصفوفة التشتت ، أو مصفوفة التباين ، أو مصفوفة التباين والتغاير ) هي مصفوفة مربعة تعطي التغاير بين كل زوج من عناصر متجه عشوائي معين .
بشكل بديهي، تعمم مصفوفة التغاير مفهوم التباين ليشمل أبعادًا متعددة. على سبيل المثال، لا يمكن وصف التباين في مجموعة من النقاط العشوائية في فضاء ثنائي الأبعاد بشكل كامل برقم واحد، ولا يمكن أيضًا وصف التباينات فيوتحتوي التعليمات على جميع المعلومات الضرورية؛ أستكون المصفوفة ضرورية لتوصيف التباين ثنائي الأبعاد بشكل كامل.
أي مصفوفة تباين متماثلة وشبه موجبة، ويحتوي قطرها الرئيسي على التباينات (أي التباين المشترك لكل عنصر مع نفسه).
مصفوفة التغاير لمتجه عشوائييُشار إليه عادةً بـ،أو.
تعريف
في جميع أنحاء هذه المقالة، الكلمات المكتوبة بخط غامق بدون كتابة بخط سفليوتُستخدم للإشارة إلى المتجهات العشوائية، والرموز الرومانية السفليةوتُستخدم للإشارة إلى المتغيرات العشوائية العددية.
إذا كانت المدخلات في متجه العمود إذا كانت المتغيرات عشوائية ، ولكل منها تباين وقيمة متوقعة محدودان ، فإن مصفوفة التغايرهي المصفوفة التيالمدخل هو التغاير [ 1 ] : 177 حيث المشغليشير إلى القيمة المتوقعة (المتوسط) لمتغيره.
تسميات ورموز متضاربة
تختلف المصطلحات. بعض الإحصائيين، تبعًا لعالم الاحتمالات ويليام فيلر في كتابه المكون من مجلدين بعنوان " مقدمة في نظرية الاحتمالات وتطبيقاتها" ، [ 2 ] يطلقون على المصفوفة اسمتباين المتجه العشوائيلأنها التعميم الطبيعي للتباين أحادي البعد إلى أبعاد أعلى. ويطلق عليها البعض الآخر اسم مصفوفة التغاير ، لأنها مصفوفة التغاير بين المكونات العددية للمتجه..
كلا الشكلين قياسيان تماماً، ولا يوجد أي لبس بينهما. المصفوفةوتسمى أيضًا في كثير من الأحيان مصفوفة التباين والتباين المشترك ، لأن العناصر القطرية هي في الواقع تباينات.
وبالمقارنة، فإن رمز مصفوفة التغاير المشترك بين متجهين هو
ملكيات
العلاقة بمصفوفة الارتباط الذاتي
مصفوفة التغاير الذاتييرتبط بمصفوفة الارتباط الذاتيبواسطة حيث تُعرَّف مصفوفة الارتباط الذاتي على النحو التالي:.
العلاقة بمصفوفة الارتباط
الكيان المرتبط ارتباطًا وثيقًا بمصفوفة التغاير هو مصفوفة معاملات ارتباط بيرسون بين كل متغير من المتغيرات العشوائية في المتجه العشوائيوالتي يمكن كتابتها على النحو التالي أين هي مصفوفة العناصر القطرية لـ(أي، مصفوفة قطرية لتباينات ل).
وبالمثل، يمكن اعتبار مصفوفة الارتباط بمثابة مصفوفة التغاير للمتغيرات العشوائية المعياريةل.
كل عنصر على القطر الرئيسي لمصفوفة الارتباط هو ارتباط متغير عشوائي بنفسه، والذي يساوي دائمًا 1. كل عنصر خارج القطر الرئيسي يقع بين -1 و +1 شاملًا.
معكوس مصفوفة التغاير
معكوس هذه المصفوفة،، إن وجدت، هي مصفوفة التغاير العكسية، والمعروفة أيضًا باسم مصفوفة الدقة (أو مصفوفة التركيز ). [ 3 ]
تمامًا كما يمكن كتابة مصفوفة التغاير على أنها إعادة قياس لمصفوفة الارتباط بواسطة التباينات الهامشية:
لذا، باستخدام فكرة الارتباط الجزئي والتباين الجزئي، يمكن التعبير عن مصفوفة التغاير العكسي بشكل مماثل:
هذه الازدواجية تحفز عددًا من الازدواجيات الأخرى بين التهميش والتكييف للمتغيرات العشوائية الغاوسية.
الخصائص الأساسية
لو، أينهوبالنسبة للمتغير العشوائي ذي الأبعاد n، تنطبق الخصائص الأساسية التالية: [ 4 ]
- هي شبه محددة موجبة ، أي
في الواقع، من الخاصية 4 يتبين أنه في ظل التحويل الخطي للمتغير العشوائيمع مصفوفة التغايربواسطة عامل خطيسا، يتم تحويل مصفوفة التغاير على النحو التالي
- .
وفقًا لمصفوفة الخاصية 3إذا كانت متناظرة، فيمكن تحويلها إلى مصفوفة قطرية بواسطة تحويل خطي متعامد، أي توجد مصفوفة متعامدة كهذه.(في أثناء)، الذي - التي
- متناظر ، أي
- لأي ثابت (أي غير عشوائي)مصفوفةوثابتمتجه، لدى المرء
- لوهو متجه عشوائي آخر له نفس البعد مثل، ثمأينهي مصفوفة التغاير المتقاطع لـو.
مصفوفات الكتل
المتوسط المشتركومصفوفة التغاير المشتركةلويمكن كتابتها في شكل كتلة أين،و.
ويمكن تحديدها على أنها مصفوفات التباين للتوزيعات الهامشية لـوعلى التوالى.
لوويتم توزيعها بشكل طبيعي مشترك ، ثم التوزيع الشرطي لـمنحيتم تحديده بواسطة [ 5 ] يُعرَّف بالمتوسط الشرطيوالتباين الشرطي
المصفوفةتُعرف باسم مصفوفة معاملات الانحدار ، بينما في الجبر الخطيمكمل شور لـفي.
يمكن في كثير من الأحيان إعطاء مصفوفة معاملات الانحدار في شكل منقول،، مناسب لضرب متجه صف من المتغيرات التفسيرية من الخلفبدلاً من ضرب متجه عمودي مسبقًا. في هذا الشكل تتوافق مع المعاملات التي تم الحصول عليها عن طريق عكس مصفوفة المعادلات العادية للمربعات الصغرى العادية (OLS).
مصفوفة التغاير الجزئي
تشير مصفوفة التغاير التي تحتوي جميع عناصرها على قيم غير صفرية إلى أن جميع المتغيرات العشوائية الفردية مترابطة. وهذا يعني أن المتغيرات لا ترتبط ارتباطًا مباشرًا فحسب، بل ترتبط أيضًا ارتباطًا غير مباشر عبر متغيرات أخرى. غالبًا ما تكون هذه الارتباطات غير المباشرة، أو ما يُعرف بالارتباطات ذات النمط المشترك ، بسيطة وغير مهمة. ويمكن إخفاؤها بحساب مصفوفة التغاير الجزئية، أي الجزء من مصفوفة التغاير الذي يُظهر فقط الجزء المهم من الارتباطات.
إذا كان لدينا متجهان من المتغيرات العشوائيةوترتبط هذه العلاقات عبر متجه آخر، يتم قمع الارتباطات الأخيرة في مصفوفة [ 6 ] مصفوفة التغاير الجزئيهي في الواقع مصفوفة التغاير البسيطةكما لو أن المتغيرات العشوائية غير المثيرة للاهتمامتم تثبيتها على ثوابت.
مصفوفة الانحراف المعياري
مصفوفة الانحراف المعياريهو امتداد للانحراف المعياري إلى أبعاد متعددة. وهو الجذر التربيعي المتناظر لمصفوفة التغاير..
مصفوفة التغاير كمعلمة للتوزيع
إذا كان متجه عموديلإذا كانت المتغيرات العشوائية التي قد تكون مرتبطة موزعة توزيعًا طبيعيًا مشتركًا ، أو بشكل أعم، موزعة توزيعًا إهليلجيًا ، فإن دالة كثافة الاحتمال الخاصة بهايمكن التعبير عنها بدلالة مصفوفة التغايركما يلي [ 6 ] أينوهو المحدد لـ، ما يسمى بالتباين المعمم .
مصفوفة التغاير كمؤثر خطي
عند تطبيقها على متجه واحد، تقوم مصفوفة التغاير برسم تركيبة خطية c من المتغيرات العشوائية X على متجه من التغايرات مع تلك المتغيرات:. عند التعامل معها كصيغة ثنائية الخطية ، فإنها تعطي التغاير بين التركيبتين الخطيتين:إذن، يكون تباين التركيبة الخطية هو، وتباينها مع نفسها.
وبالمثل، توفر مصفوفة التغاير (الزائفة) المعكوسة حاصل ضرب داخلي، مما يؤدي إلى مسافة ماهالانوبيس ، وهي مقياس "لعدم احتمال" حدوث c .
المقبولية
انطلاقاً من الخاصية الأساسية رقم 4 أعلاه، لنفترضكنمتجه ذو قيم حقيقية، إذن والتي يجب أن تكون دائمًا غير سالبة، لأنها تمثل تباين متغير عشوائي حقيقي القيمة، لذا فإن مصفوفة التغاير هي دائمًا مصفوفة شبه موجبة .
يمكن توسيع الحجة المذكورة أعلاه على النحو التالي:حيث تستنتج المتباينة الأخيرة من الملاحظة التالية:هو كمية قياسية.
وعلى العكس من ذلك، فإن كل مصفوفة متناظرة موجبة شبه محددة هي مصفوفة تباين. ولتوضيح ذلك، لنفترضهومصفوفة متناظرة شبه موجبة. من الحالة ذات الأبعاد المحدودة لنظرية الطيف ، يتبين أنللدالة جذر تربيعي متناظر غير سالب ، والذي يمكن الإشارة إليه بـ M 1/2 .كن أيمتغير عشوائي ذو قيم متجهة عمودية، ومصفوفة التباين الخاصة به هيمصفوفة الوحدة. ثم.
المتجهات العشوائية المعقدة
تباين متغير عشوائي ذي قيمة عددية مركبة وقيمة متوقعةيتم تعريفها تقليديًا باستخدام التصريف المركب : حيث المرافق المركب لعدد مركبيُشار إليه بـوبالتالي فإن تباين المتغير العشوائي المركب هو عدد حقيقي.
لوإذا كان متجهًا عموديًا من متغيرات عشوائية ذات قيم مركبة، فإن المنقول المرافقتُشكّل المصفوفة من خلال عمليتي النقل والمرافقة. في التعبير التالي، ينتج عن ضرب متجه في منقولته المرافقة مصفوفة مربعة تُسمى مصفوفة التغاير ، وذلك وفقًا لقيمتها المتوقعة: [ 7 ] : 293 ستكون المصفوفة التي تم الحصول عليها بهذه الطريقة هيرميتية موجبة شبه محددة ، [ 8 ] مع أعداد حقيقية في القطر الرئيسي وأعداد مركبة خارج القطر.
- ملكيات
- مصفوفة التغاير هي مصفوفة هيرميتية ، أي. [ 1 ] : 179
- عناصر القطر الرئيسي لمصفوفة التغاير أعداد حقيقية. [ 1 ] : 179
مصفوفة التغاير الزائف
بالنسبة للمتجهات العشوائية المعقدة، يتم تعريف نوع آخر من العزم المركزي الثاني، وهو مصفوفة التغاير الزائف (وتسمى أيضًا مصفوفة العلاقة )، على النحو التالي:
على عكس مصفوفة التغاير المعرّفة أعلاه، يتم استبدال النقل الهيرميتي بالنقل في التعريف. قد تكون عناصر قطرها ذات قيم مركبة؛ فهي مصفوفة متناظرة مركبة .
تقدير
لووهي مصفوفات بيانات مركزية ذات بُعدوعلى التوالي، أي مع n عمودًا من الملاحظات و p و q صفًا من المتغيرات، والتي تم طرح متوسطات الصفوف منها، ثم، إذا تم تقدير متوسطات الصفوف من البيانات، فإن مصفوفات التغاير العينيويمكن تعريفها بأنها أو، إذا كانت متوسطات الصفوف معروفة مسبقًا،
تُعد مصفوفات التغاير التجريبية هذه هي أبسط وأكثر المقدرات استخدامًا لمصفوفات التغاير، ولكن توجد أيضًا مقدرات أخرى، بما في ذلك المقدرات المنتظمة أو مقدرات الانكماش، والتي قد تتمتع بخصائص أفضل.
التطبيقات
تُعدّ مصفوفة التغاير أداةً مفيدةً في العديد من المجالات. فمنها يُمكن اشتقاق مصفوفة تحويل تُسمى تحويل التبييض ، والتي تُتيح إزالة الارتباط بين البيانات تمامًا [ 9 ] ، أو من منظورٍ آخر، إيجاد أساسٍ أمثل لتمثيل البيانات بطريقةٍ مُختصرة (انظر مُعامل رايلي للاطلاع على برهانٍ رسمي وخصائص إضافية لمصفوفات التغاير). يُطلق على هذا اسم تحليل المكونات الرئيسية (PCA) وتحويل كارونين-لوف (تحويل KL).
تلعب مصفوفة التغاير دورًا محوريًا في الاقتصاد المالي ، لا سيما في نظرية المحفظة ونظرية فصل صناديق الاستثمار المشتركة ، وفي نموذج تسعير الأصول الرأسمالية . تُستخدم مصفوفة التغاير بين عوائد الأصول المختلفة لتحديد النسب النسبية للأصول المختلفة التي ينبغي على المستثمرين (في التحليل المعياري ) أو يُتوقع منهم (في التحليل الإيجابي ) الاحتفاظ بها في سياق التنويع ، وذلك في ظل افتراضات معينة .
الاستخدام في التحسين
تعتمد استراتيجية التطور ، وهي فئة محددة من خوارزميات البحث العشوائي، بشكل أساسي على مصفوفة التغاير في آليتها. يستخلص عامل الطفرة المميز خطوة التحديث من توزيع طبيعي متعدد المتغيرات باستخدام مصفوفة تغاير متطورة. يوجد برهان رسمي على أن مصفوفة التغاير لاستراتيجية التطور تتكيف مع معكوس مصفوفة هيسيان لمشهد البحث، حتى عامل قياسي وتقلبات عشوائية صغيرة (تم إثبات ذلك لاستراتيجية أحادية الأصل ونموذج ثابت، مع ازدياد حجم المجموعة، بالاعتماد على التقريب التربيعي). [ 10 ] وبشكل بديهي، تدعم هذه النتيجة فكرة أن توزيع التغاير الأمثل يمكن أن يوفر خطوات طفرة تتطابق فيها خطوط احتمالية الكثافة المتساوية مع مجموعات مستويات المشهد، وبالتالي فهي تزيد من معدل التقدم إلى أقصى حد.
رسم خرائط التغاير
في رسم خرائط التغاير، تكون قيمأويتم تمثيل المصفوفة كخريطة ثنائية الأبعاد. عندما تكون المتجهاتوبما أن الدوال عشوائية منفصلة ، فإن الخريطة تُظهر العلاقات الإحصائية بين مناطق مختلفة من هذه الدوال. تظهر المناطق المستقلة إحصائيًا على الخريطة كأراضٍ مستوية ذات مستوى صفري، بينما تظهر الارتباطات الموجبة أو السالبة، على التوالي، كتل أو وديان.
في الممارسة العملية، متجهات الأعمدة، ويتم الحصول عليها تجريبياً على شكل صفوف منعينات، على سبيل المثال أينهي القيمة المنفصلة رقم i في العينة j من الدالة العشوائيةيتم تقدير القيم المتوقعة اللازمة في صيغة التغاير باستخدام متوسط العينة ، على سبيل المثال ويتم تقدير مصفوفة التغاير بواسطة مصفوفة التغاير العينية حيث تشير الأقواس الزاوية إلى متوسط العينة كما في السابق، باستثناء أنه يجب إجراء تصحيح بيسل لتجنب التحيز . باستخدام هذا التقدير، يمكن حساب مصفوفة التغاير الجزئي على النحو التالي: حيث تشير علامة الخط المائل العكسي إلى عامل قسمة المصفوفة اليسرى ، والذي يتجاوز شرط قلب المصفوفة وهو متاح في بعض حزم الحوسبة مثل Matlab . [ 11 ]

يوضح الشكل 1 كيفية إنشاء خريطة تباين جزئية على مثال لتجربة أُجريت في ليزر الإلكترون الحر FLASH في هامبورغ. [ 12 ] الدالة العشوائيةيمثل طيف زمن الطيران للأيونات الناتجة عن انفجار كولوم لجزيئات النيتروجين المتأينة عدة مرات بواسطة نبضة ليزر. ونظرًا لتأين بضع مئات فقط من الجزيئات في كل نبضة ليزر، فإن أطياف اللقطة الواحدة تكون شديدة التذبذب. ومع ذلك، فإن جمع البيانات عادةًمثل هذه الأطياف،، وحساب متوسطها علىينتج طيفًا سلسًاوالذي يظهر باللون الأحمر في أسفل الشكل 1. الطيف المتوسطيكشف عن العديد من أيونات النيتروجين في شكل قمم متوسعة بسبب طاقتها الحركية، ولكن إيجاد الارتباطات بين مراحل التأين وزخم الأيونات يتطلب حساب خريطة التغاير.
في مثال الأطياف الموضحة في الشكل 1وهي نفسها، باستثناء أن نطاق زمن الرحلةيختلف. اللوحة أ تُظهر، اللوحة ب تُظهروتُظهر اللوحة ج الفرق بينهما، وهو(لاحظ تغييرًا في مقياس الألوان). لسوء الحظ، تُطغى على هذه الخريطة ارتباطات غير مهمة ذات نمط مشترك ناتجة عن تذبذب شدة الليزر من لقطة إلى أخرى. ولكبح هذه الارتباطات، يتم ضبط شدة الليزر.يتم تسجيلها في كل لقطة، ثم يتم وضعها فيويتم حسابها كما هو موضح في اللوحتين د و هـ . ومع ذلك، فإن كبح الارتباطات غير المهمة ليس مثاليًا، نظرًا لوجود مصادر أخرى لتقلبات الوضع المشترك غير شدة الليزر، ومن حيث المبدأ، ينبغي رصد جميع هذه المصادر في الاتجاه.ومع ذلك، من الناحية العملية، غالبًا ما يكون من الكافي المبالغة في تعويض تصحيح التغاير الجزئي كما هو موضح في اللوحة f ، حيث تظهر الآن بوضوح الارتباطات المثيرة للاهتمام لزخم الأيونات كخطوط مستقيمة متمركزة على مراحل تأين النيتروجين الذري.
التحليل الطيفي بالأشعة تحت الحمراء ثنائي الأبعاد
تستخدم مطيافية الأشعة تحت الحمراء ثنائية الأبعاد تحليل الارتباط للحصول على أطياف ثنائية الأبعاد للطور المكثف . يوجد نوعان من هذا التحليل: متزامن وغير متزامن . رياضياً، يُعبَّر عن النوع الأول بدلالة مصفوفة التغاير للعينة، وتُعادل هذه التقنية رسم خرائط التغاير. [ 13 ]
انظر أيضاً
مراجع
- 1 2 3 بارك، كون إيل (2018). أساسيات الاحتمالات والعمليات العشوائية مع تطبيقات في الاتصالات . سبرينغر. ISBN 978-3-319-68074-3.
- ↑ ويليام فيلر (1971). مقدمة في نظرية الاحتمالات وتطبيقاتها . وايلي. ISBN 978-0-471-25709-7تم الاطلاع عليه بتاريخ 10 أغسطس 2012 .
- ↑ واسرمان، لاري (2004). كل الإحصاء: دورة موجزة في الاستدلال الإحصائي . سبرينغر. ISBN 0-387-40272-1.
- ↑ تابوغا، ماركو (2010). "محاضرات في نظرية الاحتمالات والإحصاء الرياضي" .
- ↑ إيتون، موريس ل. (1983). الإحصاءات متعددة المتغيرات: منهج فضاء المتجهات . جون وايلي وأولاده. ص 116-117 . ISBN 0-471-02776-6.
- 1 2 دبليو جيه كرزانوفسكي "مبادئ التحليل متعدد المتغيرات" (مطبعة جامعة أكسفورد، نيويورك، 1988)، الفصل 14.4؛ كيه في مارديا، جيه تي كينت وجيه إم بيبي "التحليل متعدد المتغيرات" (أكاديميك برس، لندن، 1997)، الفصل 6.5.3؛ تي دبليو أندرسون "مقدمة في التحليل الإحصائي متعدد المتغيرات" (وايلي، نيويورك، 2003)، الطبعة الثالثة، الفصلان 2.5.1 و4.3.1.
- ↑ لابيدوث، آموس (2009). أساسيات الاتصال الرقمي . مطبعة جامعة كامبريدج. ISBN 978-0-521-19395-5.
- ↑ بروكس، مايك. "دليل مرجع المصفوفة" .
- ↑ كيسي، أغنان؛ ستريمر، كوربينيان؛ ليوين، أليكس (2018). "التبييض الأمثل وإزالة الارتباط" . الإحصائي الأمريكي . 72 (4). تايلور وفرانسيس: 309-314 . arXiv : 1512.00809 . doi : 10.1080/00031305.2016.1277159 .
- ↑ شير، أوم؛ أ. يهودايوف (2020). "حول علاقة التغاير-هيسيان في استراتيجيات التطور" . علوم الحاسوب النظرية . 801. إلسيفير: 157-174 . arXiv : 1806.03674 . doi : 10.1016/j.tcs.2019.09.002 .
- ↑ إل جيه فراسينسكي "تقنيات رسم خرائط التغاير" مجلة الفيزياء ب: الذرية والجزيئية والبصرية 49 152004 (2016)، doi : 10.1088/0953-4075/49/15/152004
- 1 2 O Kornilov, M Eckstein, M Rosenblatt, CP Schulz, K Motomura, A Rouzée, J Klei, L Foucar, M Siano, A Lübcke, F. Schapper, P Johnsson, DMP Holland, T Schlatholter, T Marchenko, S Düsterer, K Ueda, MJJ Vrakking and LJ Frasinski "انفجار كولوم للجزيئات ثنائية الذرة في حقول الأشعة فوق البنفسجية الشديدة مُرسمة بواسطة التغاير الجزئي" J. Phys. B: At. Mol. Opt. Phys. 46 164028 (2013), doi : 10.1088/0953-4075/46/16/164028
- ↑ نودا، إ. (1993). "طريقة الارتباط ثنائية الأبعاد المعممة القابلة للتطبيق على الأشعة تحت الحمراء، ورامان، وأنواع أخرى من التحليل الطيفي". التحليل الطيفي التطبيقي . 47 (9): 1329-1336 . Bibcode : 1993ApSpe..47.1329N . doi : 10.1366/0003702934067694 .
للمزيد من القراءة
- "مصفوفة التغاير" ، موسوعة الرياضيات ، دار نشر EMS، 2001 [1994]
- " شرح مصفوفة التغاير بالصور "، طريقة سهلة لتصور مصفوفات التغاير!
- وايسشتاين، إريك دبليو. "مصفوفة التغاير" . ماث وورلد .
- فان كامبن، إن جي (1981). العمليات العشوائية في الفيزياء والكيمياء . نيويورك: نورث هولاند. ISBN 0-444-86200-5.
- التغاير والارتباط
- المصفوفات (الرياضيات)
- إحصائيات موجزة
