اختبار أندرسون-دارلينج

اختبار أندرسون -دارلينج هو اختبار إحصائي يُستخدم لتحديد ما إذا كانت عينة بيانات معينة مُستمدة من توزيع احتمالي مُحدد . في شكله الأساسي، يفترض الاختبار عدم وجود معلمات مطلوب تقديرها في التوزيع قيد الاختبار، وفي هذه الحالة يكون الاختبار ومجموعة قيمه الحرجة مستقلين عن التوزيع. مع ذلك، يُستخدم الاختبار غالبًا في سياقات يتم فيها اختبار مجموعة من التوزيعات، حيث يلزم تقدير معلمات تلك المجموعة، ويجب مراعاة ذلك عند تعديل إحصائية الاختبار أو قيمها الحرجة. عند تطبيقه لاختبار ما إذا كان التوزيع الطبيعي يصف مجموعة بيانات بشكل كافٍ، يُعدّ هذا الاختبار من أقوى الأدوات الإحصائية للكشف عن معظم الانحرافات عن التوزيع الطبيعي . [ 1 ] [ 2 ] تتوفر اختبارات أندرسون-دارلينج لعينات متعددة (K) لاختبار ما إذا كان من الممكن نمذجة عدة مجموعات من الملاحظات على أنها تنتمي إلى مجتمع إحصائي واحد، حيث لا يلزم تحديد دالة التوزيع .

بالإضافة إلى استخدامه كاختبار لمدى ملاءمة التوزيعات، يمكن استخدامه في تقدير المعلمات كأساس لشكل من أشكال إجراء تقدير المسافة الدنيا .

سمي الاختبار على اسم ثيودور ويلبر أندرسون (1918-2016) ودونالد أ. دارلينج (1915-2014)، اللذين اخترعاه في عام 1952. [ 3 ]

اختبار العينة الواحدة

تنتمي إحصائيات أندرسون-دارلينج وكريمر-فون ميزس إلى فئة إحصائيات دالة التوزيع التجريبية التربيعية (الاختبارات القائمة على دالة التوزيع التجريبية ). [ 2 ] إذا كان التوزيع المفترض هوF{\displaystyle F}ودالة التوزيع التراكمي التجريبية (للعينة) هيFن{\displaystyle F_{n}}ثم تقيس إحصائيات EDF التربيعية المسافة بينF{\displaystyle F}وFن{\displaystyle F_{n}}بواسطة ن-(Fن(x)-F(x))2w(x)دF(x)،{\displaystyle n\int _{-\infty }^{\infty }{\left(F_{n}(x)-F(x)\right)}^{2}\,w(x)\,dF(x),} أينن{\displaystyle n}يمثل عدد العناصر في العينة، وw(x){\displaystyle w(x)}هي دالة ترجيح. عندما تكون دالة الترجيحw(x)=1{\displaystyle w(x)=1}الإحصائية المستخدمة هي إحصائية كرامر-فون ميزس . يعتمد اختبار أندرسون-دارلينج (1954) [ 4 ] على المسافة أ2=ن-(Fن(x)-F(x))2F(x)(1-F(x))دF(x)،{\displaystyle A^{2}=n\int _{-\infty }^{\infty }{\frac {{\left(F_{n}(x)-F(x)\right)}^{2}}{F(x)\left(1-F(x)\right)}}\,dF(x),} والتي يتم الحصول عليها عندما تكون دالة الوزنw(x)=[F(x)(1-F(x))]-1{\displaystyle w(x)={\left[F(x)\left(1-F(x)\right)\right]}^{-1}}وبالتالي، بالمقارنة مع مسافة كرامر-فون ميزس ، فإن مسافة أندرسون-دارلينج تعطي وزناً أكبر للملاحظات في ذيول التوزيع.

إحصائية الاختبار الأساسية

يقيس اختبار أندرسون-دارلينج ما إذا كانت عينة ما تنتمي إلى توزيع محدد. ويعتمد هذا الاختبار على حقيقة أنه عند افتراض توزيع أساسي معين، وبافتراض أن البيانات تنتمي إلى هذا التوزيع، يمكن تحويل دالة التوزيع التراكمي (CDF) للبيانات إلى ما يُفترض أن يتبع توزيعًا منتظمًا . بعد ذلك، يمكن اختبار انتظام البيانات باستخدام اختبار المسافة (شابيرو، 1980). صيغة إحصائية الاختبار هيأ{\displaystyle A}لتقييم ما إذا كانت البيانات{Y1<<Yن}{\displaystyle \{Y_{1}<\cdots <Y_{n}\}}(لاحظ أنه يجب ترتيب البيانات) يأتي من دالة التوزيع التراكمي (CDF)F{\displaystyle F}يكون

أ2=-ن-S،{\displaystyle A^{2}=-nS\,,}

أين

S=أنا=1ن2أنا-1ن[ln(F(Yأنا))+ln(1-F(Yن+1-أنا))].{\displaystyle S=\sum _{i=1}^{n}{\frac {2i-1}{n}}\left[\ln(F(Y_{i}))+\ln \left(1-F(Y_{n+1-i})\right)\right].}

يمكن بعد ذلك مقارنة إحصائية الاختبار بالقيم الحرجة للتوزيع النظري. في هذه الحالة، لا يتم تقدير أي معلمات فيما يتعلق بدالة التوزيع التراكمي.F{\displaystyle F}.

اختبارات لعائلات التوزيعات

يمكن استخدام نفس إحصائية الاختبار بشكل أساسي في اختبار مدى ملاءمة عائلة من التوزيعات، ولكن بعد ذلك يجب مقارنتها بالقيم الحرجة المناسبة لتلك العائلة من التوزيعات النظرية وتعتمد أيضًا على الطريقة المستخدمة لتقدير المعلمات.

اختبار التوزيع الطبيعي

أظهرت الاختبارات التجريبية [ 5 ] أن اختبار أندرسون-دارلينج ليس بجودة اختبار شابيرو-ويلك ، ولكنه أفضل من الاختبارات الأخرى. وقد وجد ستيفنز [ 1 ]أ2{\displaystyle A^{2}}لتكون واحدة من أفضل إحصائيات دالة التوزيع التجريبية للكشف عن معظم الانحرافات عن التوزيع الطبيعي.

تختلف الحسابات بناءً على ما هو معروف عن التوزيع: [ 6 ]

  • الحالة 0: المتوسطμ{\displaystyle \mu }والتباينσ2{\displaystyle \sigma ^{2}}كلاهما معروف.
  • الحالة 1: التباينσ2{\displaystyle \sigma ^{2}}معروف، لكن المتوسطμ{\displaystyle \mu }غير معروف.
  • الحالة الثانية: المتوسطμ{\displaystyle \mu }معروف، لكن التباينσ2{\displaystyle \sigma ^{2}}غير معروف.
  • الحالة الثالثة: كلا المتوسطينμ{\displaystyle \mu }والتباينσ2{\displaystyle \sigma ^{2}}غير معروفة.

الملاحظات n ،Xأنا{\displaystyle X_{i}}، لأنا=1،...ن{\displaystyle i=1,\ldots n}، من المتغيرX{\displaystyle X}يجب فرزها بحيثX1X2Xن{\displaystyle X_{1}\leq X_{2}\leq \dots \leq X_{n}}ويفترض الترميز الوارد فيما يلي أن X i يمثل المشاهدات المرتبة. μ^={μ،إذا كان المتوسط ​​معروفاً.X¯=1نأنا=1نXأنا،خلاف ذلك.{\displaystyle {\hat {\mu }}={\begin{cases}\mu ,&{\text{إذا كان المتوسط ​​معروفًا.}}\\{\bar {X}}={\frac {1}{n}}\sum _{i=1}^{n}X_{i},&{\text{فيما عدا ذلك.}}\end{cases}}}

σ^2={σ2،إذا كان التباين معروفاً.1نأنا=1ن(Xأنا-μ)2،إذا كان التباين غير معروف، ولكن المتوسط ​​معروف.1ن-1أنا=1ن(Xأنا-X¯)2،خلاف ذلك.{\displaystyle {\hat {\sigma }}^{2}={\begin{cases}\sigma ^{2},&{\text{إذا كان التباين معروفًا.}}\\{\frac {1}{n}}\sum _{i=1}^{n}(X_{i}-\mu )^{2},&{\text{إذا كان التباين غير معروف، ولكن المتوسط ​​معروف.}}\\{\frac {1}{n-1}}\sum _{i=1}^{n}(X_{i}-{\bar {X}})^{2},&{\text{فيما عدا ذلك.}}\end{cases}}} القيمXأنا{\displaystyle X_{i}}يتم توحيدها لخلق قيم جديدةYأنا{\displaystyle Y_{i}}، مقدمة من Yأنا=Xأنا-μ^σ^.{\displaystyle Y_{i}={\frac {X_{i}-{\hat {\mu }}}{\hat {\sigma }}}.} مع دالة التوزيع التراكمي القياسية العاديةΦ{\displaystyle \Phi }،أ2{\displaystyle A^{2}}يتم حسابها باستخدام أ2=-ن-1نأنا=1ن(2أنا-1)[lnΦ(Yأنا)+ln(1-Φ(Yن+1-أنا))].{\displaystyle A^{2}=-n-{\frac {1}{n}}\sum _{i=1}^{n}\left(2i-1\right)\left[\ln \Phi (Y_{i})+\ln(1-\Phi (Y_{n+1-i}))\right].} صيغة بديلة يتم فيها التعامل مع ملاحظة واحدة فقط في كل خطوة من خطوات الجمع هي: أ2=-ن-1نأنا=1ن[(2أنا-1)lnΦ(Yأنا)+(2(ن-أنا)+1)ln(1-Φ(Yأنا))].{\displaystyle A^{2}=-n-{\frac {1}{n}}\sum _{i=1}^{n}\left[(2i-1)\ln \Phi (Y_{i})+(2(n-i)+1)\ln(1-\Phi (Y_{i}))\right].} يمكن حساب إحصائية معدلة باستخدام أ*2={أ2(1+0.75ن+2.25ن2)،إذا كان كل من التباين والمتوسط ​​غير معروفين.أ2،خلاف ذلك.{\displaystyle A^{*2}={\begin{cases}A^{2}\left(1+{\frac {0.75}{n}}+{\frac {2.25}{n^{2}}}\right),&{\text{if the variance and the mean are both unknown.}}\\A^{2},&{\text{otherwise.}}\end{cases}}}

[ 2 ] إذاأ2{\displaystyle A^{2}}أوأ*2{\displaystyle A^{*2}}إذا تجاوزت قيمة معينة قيمة حرجة، يتم رفض فرضية التوزيع الطبيعي بمستوى دلالة معين. ترد القيم الحرجة في الجدول أدناه لقيمأ*2{\displaystyle A^{*2}}[ 1 ] [ 2 ] [ 7 ]

قضيةن15%10%5%2.5%1%
0 51.6211.9332.4923.0703.857
1 200.7820.8941.0871.2851.551
2 201.4301.7432.3082.8983.702
30.5610.6310.7520.8731.035

ملاحظة 1: إذاσ^{\displaystyle {\hat {\sigma }}}= 0 أو أيΦ(Yأنا)={\displaystyle \Phi (Y_{i})=}(0 أو 1) ثمأ2{\displaystyle A^{2}}لا يمكن حسابها وهي غير محددة.

ملاحظة 2: الصيغة المذكورة أعلاه للإحصائية المعدلةأ*2{\displaystyle A^{*2}}هذا مقتبس من داغوستينو (1986، ص  123). يجب توخي الحذر عند المقارنة بين المصادر المختلفة، حيث لا يتم ذكر صيغة التعديل المحددة في كثير من الأحيان.

ملاحظة 3: يشير ستيفنز [ 1 ] إلى أن الاختبار يصبح أفضل عندما يتم حساب المعلمات من البيانات، حتى لو كانت معروفة.

ملاحظة 4: يقدم Marsaglia & Marsaglia [ 7 ] نتيجة أكثر دقة للحالة 0 عند 85٪ و 99٪.

اختبارات لتوزيعات أخرى

أعلاه، تم افتراض أن المتغيرXأنا{\displaystyle X_{i}}كان يتم اختبار التوزيع الطبيعي. يمكن اختبار أي عائلة أخرى من التوزيعات، ولكن يتم تطبيق اختبار كل عائلة باستخدام تعديل مختلف لإحصائية الاختبار الأساسية، مع الإشارة إلى القيم الحرجة الخاصة بتلك العائلة من التوزيعات. قدم ستيفنز (1986) [ 2 ] تعديلات الإحصائية وجداول القيم الحرجة لتوزيعات الأسي، والقيمة القصوى، وويبول، وجاما، واللوجستي، وكوشي، وفون ميزس. يمكن تطبيق اختبارات التوزيع اللوغاريتمي الطبيعي (ذو المعلمتين) عن طريق تحويل البيانات باستخدام اللوغاريتم واستخدام اختبار التوزيع الطبيعي المذكور أعلاه. نُشرت تفاصيل التعديلات المطلوبة على إحصائية الاختبار والقيم الحرجة للتوزيع الطبيعي والتوزيع الأسي بواسطة بيرسون وهارتلي (1972، الجدول 54). كما قدم شوراك وويلنر (1986، ص 239) تفاصيل هذه التوزيعات، بالإضافة إلى توزيع جامبل . يُقدّم ستيفنز (1979) تفاصيل التوزيع اللوجستي . ويمكن الحصول على اختبار لتوزيع ويبول (ذي المعلمتين) بالاستفادة من حقيقة أن لوغاريتم متغير ويبول يتبع توزيع غامبل .

اختبارات k -sample غير المعلمية

ناقش فريتز شولز ومايكل أ. ستيفنز (1987) اختبارًا، قائمًا على مقياس أندرسون-دارلينج للتوافق بين التوزيعات، لتحديد ما إذا كان عدد من العينات العشوائية ذات أحجام عينات مختلفة قد تكون ناتجة عن نفس التوزيع، حيث يكون هذا التوزيع غير محدد. [ 8 ] تُنفذ حزمة kSamples في لغة R وحزمة Scipy في لغة بايثون اختبار الرتب هذا لمقارنة k عينة من بين العديد من اختبارات الرتب الأخرى المماثلة. [ 9 ] [ 10 ]

لك{\displaystyle k}يمكن حساب الإحصائية للعينات على النحو التالي بافتراض أن دالة التوزيعFأنا{\displaystyle F_{i}}لأنا{\displaystyle i}العينة رقم -th متصلة

أكشمال2=1شمالأنا=1ك1نأناج=1شمال-1(شمالمأناج-جنأنا)2ج(شمال-ج){\displaystyle A_{kN}^{2}={\frac {1}{N}}\sum _{i=1}^{k}{\frac {1}{n_{i}}}\sum _{j=1}^{N-1}{\frac {(NM_{ij}-jn_{i})^{2}}{j(N-j)}}}

أين

  • نأنا{\displaystyle n_{i}}يمثل عدد المشاهدات فيأنا{\displaystyle i}العينة رقم -
  • شمال{\displaystyle N}يمثل العدد الإجمالي للملاحظات في جميع العينات
  • Z1<<Zشمال{\displaystyle Z_{1}<\cdots <Z_{N}}هي العينة المرتبة المجمعة
  • مأناج{\displaystyle M_{ij}}يمثل عدد المشاهدات فيأنا{\displaystyle i}العينة رقم - التي لا تتجاوزZج{\displaystyle Z_{j}}[ 8 ]

انظر أيضاً

مراجع

  1. 1 2 3 4 ستيفنز، ماجستير (1974). "إحصائيات EDF لجودة المطابقة وبعض المقارنات". مجلة الجمعية الإحصائية الأمريكية . 69 (347): 730-737 . doi : 10.2307/2286009 . JSTOR 2286009 . 
  2. 1 2 3 4 5 م. أ. ستيفنز (1986). "اختبارات مبنية على إحصاءات EDF". في داغوستينو، ر. ب.؛ ستيفنز، م. أ. (محرران). تقنيات جودة المطابقة . نيويورك: مارسيل ديكر. ISBN 0-8247-7487-6.
  3. أندرسون، تي دبليو ؛ دارلينج، دي إيه (1952). "النظرية التقاربية لمعايير "جودة المطابقة" المحددة القائمة على العمليات العشوائية" . حوليات الإحصاء الرياضي . 23 (2): 193-212 . doi : 10.1214/aoms/1177729437 .
  4. أندرسون، تي دبليو؛ دارلينج، دي إيه (1954). "اختبار جودة المطابقة". مجلة الجمعية الإحصائية الأمريكية . 49 (268): 765-769 . doi : 10.2307/2281537 . JSTOR 2281537 . 
  5. رزالي، نورناديا؛ واه، ياب بي (2011). "مقارنات قوة اختبارات شابيرو-ويلك، وكولموغوروف-سميرنوف، وليليفورز، وأندرسون-دارلينغ". مجلة النمذجة الإحصائية والتحليل . 2 (1): 21-33 .
  6. رالف ب. داغوستينو (1986). "اختبارات التوزيع الطبيعي". في داغوستينو، ر.ب.؛ ستيفنز، م.أ. (محرران). تقنيات جودة المطابقة . نيويورك: مارسيل ديكر. ISBN 0-8247-7487-6.
  7. 1 2 مارساجليا، ج. (2004). "تقييم توزيع أندرسون-دارلينج" . مجلة البرمجيات الإحصائية . 9 (2): 730-737 . CiteSeerX 10.1.1.686.1363 . doi : 10.18637/jss.v009.i02 . 
  8. 1 2 شولز، إف دبليو؛ ستيفنز، إم إيه (1987). "اختبارات أندرسون-دارلينج للعينات المتعددة". مجلة الجمعية الإحصائية الأمريكية . 82 (399): 918-924 . doi : 10.1080/01621459.1987.10478517 .
  9. "kSamples: اختبارات رتب العينات K وتراكيبها" . مشروع R. 7 أكتوبر 2023.
  10. "اختبار أندرسون-دارلينج لعينات k. حزمة Scipy" .

للمزيد من القراءة

  • كوردر، جي دبليو، فورمان، دي آي (2009). الإحصاءات اللامعلمية لغير الإحصائيين: منهج خطوة بخطوة. وايلي، ISBN 978-0-470-45461-9
  • ميهتا، س. (2014) موضوعات في الإحصاء ISBN 978-1499273533
  • بيرسون إي إس، هارتلي إتش أو (محرران) (1972) جداول بيومتريكا للإحصائيين ، المجلد الثاني. مطبعة جامعة كامبريدج. رقم ISBN 0-521-06937-8.
  • شابيرو، إس إس (1980) كيفية اختبار التوزيع الطبيعي وافتراضات التوزيع الأخرى. في: المراجع الأساسية لجمعية مراقبة الجودة الأمريكية في مراقبة الجودة: التقنيات الإحصائية 3، ص  1-78.
  • شوراك، جي آر ، وويلنر، جيه إيه (1986) العمليات التجريبية مع تطبيقات في الإحصاء ، وايلي. ISBN 0-471-86725-X.
  • ستيفنز، ماجستير (1979) اختبار مدى ملاءمة التوزيع اللوجستي بناءً على دالة التوزيع التجريبية ، Biometrika، 66(3)، 591-5.