قابلية التكرار

الموسوعة الحرة

تُعدّ قابلية التكرار ، المرتبطة ارتباطًا وثيقًا بإمكانية الاستنساخ والتكرار ، مبدأً أساسيًا في المنهج العلمي . ولكي تكون نتائج دراسة ما قابلة للتكرار، يجب أن تُعاد النتائج التي تم الحصول عليها من خلال تجربة أو دراسة رصدية أو تحليل إحصائي لمجموعة بيانات بدرجة عالية من الموثوقية عند تكرار الدراسة. توجد أنواع مختلفة من التكرار [ 1 ] ، ولكن عادةً ما تتضمن دراسات التكرار باحثين مختلفين يستخدمون المنهجية نفسها. ولا تُعتبر النتيجة معرفة علمية إلا بعد نجاح عملية تكرار واحدة أو عدة عمليات من هذا القبيل.

تاريخ

كانت مضخة الهواء التي ابتكرها بويل، وفقًا لمعايير القرن السابع عشر، جهازًا علميًا معقدًا ومكلفًا، مما جعل تكرار النتائج أمرًا صعبًا.

كان الكيميائي الأنجلو-إيرلندي روبرت بويل ، في إنجلترا خلال القرن السابع عشر، أول من أكد على أهمية قابلية التكرار في العلوم . صُممت مضخة الهواء التي ابتكرها بويل لتوليد الفراغ ودراسته ، وهو مفهوم كان مثيرًا للجدل آنذاك. بل إن فلاسفة بارزين مثل رينيه ديكارت وتوماس هوبز أنكروا إمكانية وجود الفراغ من الأساس. يصف مؤرخا العلوم ستيفن شابين وسيمون شافير ، في كتابهما " ليفياثان ومضخة الهواء" الصادر عام ١٩٨٥ ، النقاش بين بويل وهوبز، الذي دار ظاهريًا حول طبيعة الفراغ، بأنه في جوهره جدال حول كيفية اكتساب المعرفة المفيدة. أكد بويل، رائد المنهج التجريبي ، أن أسس المعرفة يجب أن تُبنى على حقائق مُنتجة تجريبيًا، يمكن جعلها مقبولة لدى المجتمع العلمي من خلال قابليتها للتكرار. جادل بويل بأنه من خلال تكرار التجربة نفسها مرارًا وتكرارًا، ستظهر حقيقة اليقين.

أدت مضخة الهواء، التي كانت في القرن السابع عشر جهازًا معقدًا ومكلفًا، إلى واحدة من أولى الخلافات الموثقة حول إمكانية تكرار ظاهرة علمية معينة . في ستينيات القرن السابع عشر، بنى العالم الهولندي كريستيان هويغنز مضخة هواء خاصة به في أمستردام ، وكانت الأولى التي تُصنع خارج الإشراف المباشر لبويل ومساعده آنذاك روبرت هوك . أبلغ هويغنز عن ظاهرة أطلق عليها اسم "التعليق الشاذ"، حيث بدا الماء وكأنه يطفو في وعاء زجاجي داخل مضخة الهواء (معلقًا في الواقع فوق فقاعة هواء)، لكن بويل وهوك لم يتمكنا من تكرار هذه الظاهرة في مضخاتهما. وكما يصف شابين وشافر، "أصبح من الواضح أنه ما لم يُمكن إنتاج هذه الظاهرة في إنجلترا باستخدام إحدى المضختين المتاحتين، فلن يقبل أحد في إنجلترا ادعاءات هويغنز أو كفاءته في تشغيل المضخة". دُعي هويغنز أخيرًا إلى إنجلترا عام 1663، وتحت إشرافه الشخصي، تمكن هوك من تكرار ظاهرة التعليق الشاذ للماء. بعد ذلك، انتُخب هيغنز عضوًا أجنبيًا في الجمعية الملكية . ومع ذلك، يشير شابين وشافر أيضًا إلى أن "إنجاز التكرار كان يعتمد على قرارات مشروطة. لا يمكن وضع صيغة تحدد متى تم تحقيق التكرار أو لم يتم تحقيقه". [ 2 ]

أشار فيلسوف العلم كارل بوبر بإيجاز في كتابه الشهير " منطق الاكتشاف العلمي" الصادر عام 1934 إلى أن "الظواهر الفردية غير القابلة للتكرار لا قيمة لها في العلم". [ 3 ] وكتب الإحصائي رونالد فيشر في كتابه " تصميم التجارب" الصادر عام 1935 ، والذي وضع أسس الممارسة العلمية الحديثة لاختبار الفرضيات والدلالة الإحصائية ، أنه "يمكننا القول إن ظاهرة ما قابلة للإثبات تجريبياً عندما نعرف كيفية إجراء تجربة نادراً ما تفشل في إعطائنا نتائج ذات دلالة إحصائية". [ 4 ] تعبر هذه التأكيدات عن عقيدة شائعة في العلم الحديث مفادها أن قابلية التكرار شرط ضروري (وإن لم يكن كافياً بالضرورة ) لإثبات حقيقة علمية، وفي الواقع العملي لإثبات المرجعية العلمية في أي مجال من مجالات المعرفة. ومع ذلك، وكما أشار شابين وشافر أعلاه، فإن هذه العقيدة غير مصاغة كمياً بشكل جيد، كالدلالة الإحصائية على سبيل المثال، وبالتالي لم يتم تحديد عدد مرات تكرار حقيقة ما بشكل صريح حتى تُعتبر قابلة للتكرار.

مصطلحات

إن قابلية التكرار وقابلية التكرار مصطلحات ذات صلة مرادفة بشكل عام أو بشكل فضفاض لقابلية الاستنساخ (على سبيل المثال، بين عامة الناس)، ولكن غالبًا ما يتم التمييز بينها بشكل مفيد بمعانٍ أكثر دقة، كما يلي.

يمكن التمييز بين خطوتين رئيسيتين فيما يتعلق بإمكانية تكرار الدراسات التجريبية أو الرصدية: عند الحصول على بيانات جديدة في محاولة لتحقيق ذلك، يُستخدم مصطلح "إمكانية التكرار "، وتكون الدراسة الجديدة تكرارًا أو نسخة طبق الأصل من الدراسة الأصلية. أما عند الحصول على النتائج نفسها عند تحليل مجموعة بيانات الدراسة الأصلية مرة أخرى باستخدام الإجراءات نفسها، فيستخدم العديد من الباحثين مصطلح " إمكانية التكرار" بمعناه التقني الضيق، المستمد من استخدامه في البحوث الحاسوبية. وتتعلق إمكانية التكرار بإعادة التجربة ضمن الدراسة نفسها من قِبل الباحثين أنفسهم. ولا تُعتبر إمكانية التكرار بالمعنى الأصلي الواسع إلا إذا نجح التكرار الذي يُجريه فريق بحثي مستقل .

يظهر مصطلحا "إمكانية التكرار" و"إمكانية إعادة الإنتاج" أحيانًا في الأدبيات العلمية بمعنى معكوس، [ 5 ] [ 6 ] حيث استقرت مجالات البحث المختلفة على تعريفاتها الخاصة لنفس المصطلحات. [ 7 ]

مقاييس قابلية التكرار والتكرار

في الكيمياء، يُستخدم مصطلحا "قابلية التكرار" و"قابلية الاستنساخ" بمعنى كمي محدد. [ 8 ] في التجارب بين المختبرات، يُقاس تركيز أو كمية أخرى لمادة كيميائية بشكل متكرر في مختبرات مختلفة لتقييم تباين القياسات. يُطلق على الانحراف المعياري للفرق بين قيمتين تم الحصول عليهما داخل المختبر نفسه اسم "قابلية الاستنساخ". أما الانحراف المعياري للفرق بين قياسين من مختبرين مختلفين فيُطلق عليه اسم " قابلية الاستنساخ" . [ 9 ] ترتبط هذه المقاييس بالمفهوم الأعم لمكونات التباين في علم القياس .

بحث قابل للتكرار

منهج بحث قابل للتكرار

يشير مصطلح البحث القابل للتكرار إلى فكرة ضرورة توثيق النتائج العلمية بطريقة تضمن شفافية استنتاجاتها بشكل كامل. ويتطلب ذلك وصفًا تفصيليًا للأساليب المستخدمة في الحصول على البيانات [ 10 ] [ 11 ] ، وإتاحة الوصول بسهولة إلى مجموعة البيانات الكاملة والبرنامج المستخدم لحساب النتائج [ 12 ] [ 13 ] [ 14 ] [ 15 ] [ 16 ] [ 17 ] . وهذا هو جوهر العلم المفتوح .

لضمان إمكانية إعادة إنتاج أي مشروع بحثي حاسوبيًا، تتضمن الممارسات العامة فصل جميع البيانات والملفات وتصنيفها وتوثيقها بوضوح. ينبغي توثيق جميع العمليات بالكامل وأتمتتها قدر الإمكان، مع تجنب التدخل اليدوي حيثما أمكن. يجب تصميم سير العمل كسلسلة من الخطوات الصغيرة المدمجة بحيث تُستخدم مخرجات كل خطوة كمدخلات مباشرة للخطوة التالية. يُنصح باستخدام نظام التحكم في الإصدارات لأنه يتيح مراجعة تاريخ المشروع بسهولة، كما يسمح بتوثيق التغييرات وتتبعها بشفافية.

تتضمن آلية العمل الأساسية للبحث القابل للتكرار جمع البيانات ومعالجتها وتحليلها. يتألف جمع البيانات بشكل أساسي من الحصول على البيانات الأولية من مصدر أولي، مثل الاستبيانات أو الملاحظات الميدانية أو البحوث التجريبية، أو الحصول على البيانات من مصدر موجود. تشمل معالجة البيانات معالجة ومراجعة البيانات الأولية التي جُمعت في المرحلة الأولى، وتتضمن إدخال البيانات ومعالجتها وتصفيتها، ويمكن القيام بذلك باستخدام برامج متخصصة. ينبغي رقمنة البيانات وإعدادها للتحليل. يمكن تحليل البيانات باستخدام برامج متخصصة لتفسير أو عرض الإحصاءات أو البيانات بصريًا، بهدف الحصول على النتائج المرجوة من البحث، مثل النتائج الكمية التي تتضمن الرسوم البيانية والجداول. يُعزز استخدام البرامج والأتمتة من إمكانية تكرار أساليب البحث. [ 18 ]

توجد أنظمة تُسهّل توثيق هذه الأبحاث، مثل لغة R Markdown [ 19 ] أو دفتر Jupyter . [ 20 ] [ 21 ] [ 22 ] يوفر إطار العلوم المفتوحة منصة وأدوات مفيدة لدعم البحوث القابلة للتكرار.

البحث القابل للتكرار في الممارسة

شهد علم النفس تجددًا في المخاوف الداخلية بشأن النتائج غير القابلة للتكرار (انظر مدخل أزمة قابلية التكرار للاطلاع على النتائج التجريبية المتعلقة بمعدلات نجاح عمليات التكرار). أظهر باحثون في دراسة أجريت عام 2006 أن 103 مؤلفين (73%) من أصل 141 مؤلفًا لمقالات تجريبية منشورة في مجلة الجمعية الأمريكية لعلم النفس (APA) لم يقدموا بياناتهم خلال فترة ستة أشهر. [ 23 ] وفي دراسة متابعة نُشرت عام 2015، وُجد أن 246 مؤلفًا من أصل 394 مؤلفًا تم التواصل معهم لأوراق بحثية في مجلات APA لم يشاركوا بياناتهم عند الطلب (62%). [ 24 ] وفي ورقة بحثية نُشرت عام 2012، اقتُرح أن ينشر الباحثون البيانات مع أعمالهم، وتم إصدار مجموعة بيانات كمثال توضيحي. [ 25 ] وفي عام 2017، أشارت مقالة نُشرت في مجلة Scientific Data إلى أن هذا قد لا يكون كافيًا، وأنه ينبغي الكشف عن سياق التحليل بالكامل. [ 26 ]

في مجال الاقتصاد، أُثيرت مخاوف بشأن مصداقية وموثوقية الأبحاث المنشورة. في العلوم الأخرى، تُعتبر إمكانية إعادة إنتاج النتائج أمرًا أساسيًا، وغالبًا ما تكون شرطًا أساسيًا لنشر الأبحاث، إلا أنها لا تُعدّ أولوية قصوى في العلوم الاقتصادية. لا تتخذ معظم المجلات الاقتصادية المحكمة أي إجراءات جوهرية لضمان إمكانية إعادة إنتاج النتائج المنشورة، مع ذلك، بدأت المجلات الاقتصادية الرائدة في تبني أرشيفات إلزامية للبيانات والبرمجيات. [ 27 ] لا توجد حوافز تُذكر للباحثين لمشاركة بياناتهم، ويتعين على المؤلفين تحمل تكاليف تجميع البيانات في صيغ قابلة لإعادة الاستخدام. غالبًا ما تكون الأبحاث الاقتصادية غير قابلة لإعادة الإنتاج، إذ أن جزءًا فقط من المجلات لديه سياسات إفصاح كافية لمجموعات البيانات وبرمجياتها، وحتى إن وُجدت، فإن المؤلفين غالبًا لا يلتزمون بها أو لا يُلزم الناشرون بتطبيقها. كشفت دراسة شملت 599 مقالة منشورة في 37 مجلة محكمة أن بعض المجلات حققت معدلات امتثال عالية، بينما لم يمتثل جزء كبير منها إلا جزئيًا، أو لم يمتثل على الإطلاق. وعلى مستوى المقالة الواحدة، بلغ متوسط ​​معدل الامتثال 47.5%، وعلى مستوى المجلة الواحدة، بلغ متوسط ​​معدل الامتثال 38%، وتراوح بين 13% و99%. [ 28 ]

وجدت دراسة أجريت عام 2018 ونُشرت في مجلة PLOS ONE أن 14.4% من عينة من الباحثين في مجال إحصاءات الصحة العامة قد شاركوا بياناتهم أو برامجهم أو كليهما. [ 29 ]

لقد ظهرت مبادرات لتحسين الإبلاغ، وبالتالي تعزيز إمكانية تكرار النتائج في الأدبيات الطبية، على مدى سنوات عديدة، بدءًا من مبادرة CONSORT ، التي أصبحت الآن جزءًا من مبادرة أوسع نطاقًا، وهي شبكة EQUATOR . وقد وجّهت هذه المجموعة اهتمامها مؤخرًا إلى كيفية مساهمة تحسين الإبلاغ في الحد من الهدر في البحوث، [ 30 ] وخاصة البحوث الطبية الحيوية.

يُعدّ البحث القابل للتكرار أساسيًا للاكتشافات الجديدة في علم الأدوية . فبعد اكتشاف المرحلة الأولى، تُجرى تجارب المرحلة الثانية لتكرار النتائج مع تطور الدواء وصولًا إلى الإنتاج التجاري. وفي العقود الأخيرة، انخفض معدل نجاح المرحلة الثانية من 28% إلى 18%. وقد وجدت دراسة أجريت عام 2011 أن 65% من الدراسات الطبية كانت نتائجها غير متسقة عند إعادة اختبارها، وأن 6% فقط منها كانت قابلة للتكرار بشكل كامل. [ 31 ]

بُذلت بعض الجهود لزيادة إمكانية تكرار الدراسات خارج نطاق العلوم الاجتماعية والطبية الحيوية. تميل الدراسات في العلوم الإنسانية إلى الاعتماد بشكل أكبر على الخبرة والتأويل، مما قد يزيد من صعوبة تكرارها. ومع ذلك، بُذلت بعض الجهود للدعوة إلى مزيد من الشفافية والتوثيق في العلوم الإنسانية. [ 32 ]

نتائج جديرة بالملاحظة وغير قابلة للتكرار

ادعى هيديو نوغوتشي أنه استطاع استزراع العامل البكتيري المسبب لمرض الزهري في مختبره. ولم يتمكن أي شخص آخر من تحقيق هذه النتيجة. [ 33 ]

في مارس 1989، أعلن الكيميائيان ستانلي بونس ومارتن فليشمان من جامعة يوتا عن إنتاج حرارة زائدة لا يمكن تفسيرها إلا بعملية نووية (" الاندماج البارد "). كان التقرير مذهلاً بالنظر إلى بساطة الجهاز: فهو عبارة عن خلية تحليل كهربائي تحتوي على ماء ثقيل ومهبط من البلاديوم يمتص الديوتيريوم الناتج أثناء التحليل الكهربائي بسرعة. تناقلت وسائل الإعلام الخبر على نطاق واسع، وتصدر الخبر الصفحات الأولى للعديد من الصحف حول العالم (انظر: العلم من خلال المؤتمرات الصحفية ). على مدى الأشهر التالية، حاول آخرون تكرار التجربة، لكنهم لم ينجحوا. [ 34 ]

ادّعى نيكولا تيسلا في وقت مبكر من عام 1899 أنه استخدم تيارًا عالي التردد لإضاءة مصابيح مملوءة بالغاز من مسافة تزيد عن 40 كيلومترًا (25 ميلًا) دون استخدام أسلاك . وفي عام 1904، بنى برج واردنكليف في لونغ آيلاند لعرض وسائل إرسال واستقبال الطاقة دون توصيل أسلاك. لم يُشغّل هذا المرفق بكامل طاقته قط، ولم يُستكمل بسبب مشاكل اقتصادية، لذا لم تُجرَ أي محاولة لتكرار نتيجته الأولى. [ 35 ] 

أمثلة أخرى حيث دحضت الأدلة المخالفة الادعاء الأصلي:

انظر أيضاً

مراجع

  1. ↑ تسانغ، إريك دبليو كيه؛ كوان، كاي مان (1999). "التكرار وتطوير النظرية في العلوم التنظيمية: منظور واقعي نقدي". مجلة أكاديمية الإدارة . 24 (4): 759-780 . doi : 10.5465/amr.1999.2553252 . ISSN 0363-7425 . 
  2. ↑ ستيفن شابين وسيمون شافير ، ليفياثان ومضخة الهواء ، مطبعة جامعة برينستون، برينستون، نيو جيرسي (1985).
  3. ↑ هذا الاقتباس مأخوذ من ترجمة عام 1959 إلى الإنجليزية، كارل بوبر ، منطق الاكتشاف العلمي ، روتليدج، لندن، 1992، ص 66.
  4. ↑ رونالد فيشر ، تصميم التجارب ، (1971) [1935] (الطبعة التاسعة)، ماكميلان، ص 14.
  5. ↑ باربا، لورينا أ. (2018). "مصطلحات البحث القابل للتكرار". arXiv : 1802.03311 [ cs.DL ].
  6. ↑ ليبرمان، مارك. "إمكانية التكرار مقابل إمكانية إعادة الإنتاج - أم العكس؟" . تم الاسترجاع في 15 أكتوبر 2020 .
  7. ↑ فان إيجن، هانز؛ فان دن برينك، جيسبرت؛ بيلز، ريك (2024). "بروك حول أطروحة ميرتون: تكرار مباشر لفصل جون هيدلي بروك حول الإصلاح العلمي والديني" . زيجون . 59 (2).
  8. ↑ "IUPAC - قابلية التكرار (R05305)" . الاتحاد الدولي للكيمياء البحتة والتطبيقية . doi : 10.1351/goldbook.R05305 . تاريخ الاسترجاع: 4 مارس 2022 .
  9. ↑ اللجنة الفرعية E11.20 المعنية بتقييم أساليب الاختبار ومراقبة الجودة (2014). "الممارسة القياسية لاستخدام مصطلحي الدقة والتحيز في أساليب اختبار ASTM" . ASTM International. ASTM E177.{{cite web}}: CS1 maint: أسماء رقمية: قائمة المؤلفين ( رابط ) (الاشتراك مطلوب)
  10. ↑ كينغ، غاري (1995). "التكرار، التكرار" . PS: العلوم السياسية والسياسة . 28 (3): 444-452 . doi : 10.2307 /420301 . ISSN 1049-0965 . JSTOR 420301. S2CID 250480339 .   
  11. ↑ كوهن، مارتن؛ ليهر، أندرياس و. (2009). "تحسين إدارة المعلومات التقليدية في العلوم الطبيعية" . مجلة علوم البيانات . 8 (1): 18-27 . doi : 10.2481/dsj.8.18 .
  12. ↑ فوميل، سيرجي؛ كليربوت، جون (2009). "مقدمة المحررين الضيوف: البحث القابل للتكرار". الحوسبة في العلوم والهندسة . 11 (1): 5-7 . Bibcode : 2009CSE....11a...5F . doi : 10.1109/MCSE.2009.14 .
  13. ↑ بوكهايت، جوناثان ب.؛ دونوهو، ديفيد ل. (مايو 1995). برنامج WaveLab والبحث القابل للتكرار ( تقرير بصيغة PDF). كاليفورنيا، الولايات المتحدة: جامعة ستانفورد ، قسم الإحصاء. التقرير الفني رقم 474. مؤرشف (بصيغة PDF) من الأصل بتاريخ 9 يناير 2015. تم الاطلاع عليه بتاريخ 5 يناير 2015 .
  14. ↑ "مائدة مستديرة لكلية الحقوق بجامعة ييل حول مشاركة البيانات والأساسيات: "البحث القابل للتكرار"". الحوسبة في العلوم والهندسة . 12 (5): 8– 12. 2010. doi : 10.1109/MCSE.2010.113 .
  15. ↑ مارويك، بن (2016). "إمكانية التكرار الحاسوبي في البحوث الأثرية: المبادئ الأساسية ودراسة حالة لتطبيقها" . مجلة المنهج والنظرية الأثرية . 24 (2): 424-450 . doi : 10.1007/s10816-015-9272-9 . S2CID 43958561 . 
  16. ↑ غودمان، ستيفن ن.؛ فانيلي، دانييلي؛ إيوانيديس، جون ب.أ. (1 يونيو 2016). "ماذا تعني قابلية تكرار البحث؟" . مجلة ساينس ترانسليشنال ميديسين . 8 (341): 341ps12. doi : 10.1126/scitranslmed.aaf5027 . PMID 27252173 . 
  17. ↑ هاريس جيه كيه؛ جونسون كيه جيه؛ كومبس تي بي؛ كاروثرز بي جيه؛ لوك دي إيه؛ وانغ إكس (2019). " ثلاثة تغييرات يمكن لعلماء الصحة العامة إجراؤها للمساعدة في بناء ثقافة البحث القابل للتكرار" . تقارير الصحة العامة . 134 (2): 109-111 . doi : 10.1177/0033354918821076 . ISSN 0033-3549 . OCLC 7991854250. PMC 6410469. PMID 30657732 .    
  18. ↑ كيتز، جاستن؛ توريك، دانيال؛ دينيز، فاطمة (2018). ممارسة دراسات الحالة البحثية القابلة للتكرار والدروس المستفادة من العلوم كثيفة البيانات . أوكلاند، كاليفورنيا: مطبعة جامعة كاليفورنيا. ص 19-30 . ISBN  978-0-520-29474-5JSTOR 10.1525 / j.ctv1wxsc7 . 
  19. ↑ مارويك، بن؛ بوتيجر، كارل؛ مولين، لينكولن (29 سبتمبر 2017). "تغليف أعمال تحليل البيانات بشكل قابل للتكرار باستخدام لغة R (وما يرتبط بها)" . الإحصائي الأمريكي . 72 : 80-88 . doi : 10.1080/00031305.2017.1375986 . S2CID 125412832 . 
  20. ↑ كلوفر، توماس؛ راغان-كيلي، بنجامين؛ بيريز، فرناندو؛ غرانجر، برايان؛ بوسونييه، ماتياس؛ فريدريك، جوناثان؛ كيلي، كايل؛ هامريك، جيسيكا؛ غراوت، جيسون؛ كورلاي، سيلفان (2016). "دفاتر جوبيتر - صيغة نشر لسير العمل الحسابي القابل للتكرار" (ملف PDF) . في: لويزيدس، ف؛ شميدت، ب (محرران). التموضع والسلطة في النشر الأكاديمي: اللاعبون والجهات الفاعلة والأجندات . المؤتمر الدولي العشرون للنشر الإلكتروني. دار نشر IOS. الصفحات 87-90 . doi : 10.3233/978-1-61499-649-1-87 . مؤرشف (ملف PDF) من الأصل بتاريخ 10 يناير 2018. 
  21. ↑ بيج، ماريجان؛ تاكا، جولييت؛ كلوفر، توماس؛ كونوفالوف، ألكسندر؛ راجان-كيلي، مين؛ ثيري، نيكولاس م.؛ فانجور، هانز (1 مارس 2021). "استخدام جوبيتر لسير العمل العلمي القابل للتكرار". الحوسبة في العلوم والهندسة . 23 (2): 36-46 . arXiv : 2102.09562 . Bibcode : 2021CSE....23b..36B . doi : 10.1109/MCSE.2021.3052101 . S2CID 231979203 . 
  22. ↑ غرانجر، برايان إي؛ بيريز، فرناندو (1 مارس 2021). "جوبيتر: التفكير وسرد القصص باستخدام الشفرة والبيانات" . الحوسبة في العلوم والهندسة . 23 (2): 7-14 . Bibcode : 2021CSE....23b...7G . doi : 10.1109/MCSE.2021.3059263 . S2CID 232413965 . 
  23. ↑ ويشيرتس، جيه إم؛ بورس بوم، دي؛ كاتس، جيه؛ مولينار، دي (2006). "ضعف توافر بيانات البحث النفسي لإعادة التحليل". عالم النفس الأمريكي . 61 (7): 726-728 . doi : 10.1037/0003-066X.61.7.726 . PMID 17032082 . 
  24. ↑ فانباميل، دبليو؛ فيرمورجن، إم؛ ديريمايكر، إل؛ ستورمز، جي (2015). "هل نهدر فرصة ثمينة في مواجهة الأزمة؟ مدى توافر بيانات البحث النفسي بعد العاصفة" . كولابرا . 1 (1): 1-5 . doi : 10.1525/collabra.13 .
  25. ↑ ويشيرتس، جيه إم؛ باكر، إم. (2012). "انشر (بياناتك) أو (دع البيانات) تندثر! لماذا لا تنشر بياناتك أيضًا؟". الذكاء . 40 (2): 73-76 . doi : 10.1016/j.intell.2012.01.004 .
  26. ^ باسكييه، توماس. لاو، ماثيو ك.؛ تريسوفيتش، آنا؛ بوز، إيمري ر.؛ كوتورييه، بن؛ كروساس، ميرسي؛ إليسون، آرون م. جيبسون، فاليري؛ جونز، كريس ر. سيلتزر ، مارجو (5 سبتمبر 2017). "إذا كانت هذه البيانات يمكن أن تتحدث" . بيانات علمية . 4 (1): 170114. بيب كود : 2017NatSD...470114P . دوى : 10.1038/sdata.2017.114 . بمك 5584398 . بميد 28872630 .  
  27. ↑ ماكولوغ، بروس (مارس 2009). "مجلات الاقتصاد ذات الوصول المفتوح وسوق البحوث الاقتصادية القابلة للتكرار". التحليل الاقتصادي والسياسة . 39 (1): 117-126 . doi : 10.1016/S0313-5926(09)50047-1 .
  28. ↑ فلامينك، سفين؛ بودكراجاك، فيليكس (10 ديسمبر 2017). "المجلات في العلوم الاقتصادية: هل هي مجرد كلام عن البحث القابل للتكرار؟" . مجلة IASSIST الفصلية . 41 ( 1-4 ): 16. doi : 10.29173/iq6 . hdl : 11108/359 . S2CID 96499437 . 
  29. ↑ هاريس، جينين ك.؛ جونسون، كيمبرلي ج.؛ كاروثرز، بوبي ج.؛ كومبس، تود ب.؛ لوك، دوغلاس أ.؛ وانغ، شياويان (2018). "استخدام ممارسات البحث القابلة للتكرار في الصحة العامة: دراسة استقصائية لمحللي الصحة العامة" . PLOS ONE . 13 ( 9) e0202447. Bibcode : 2018PLoSO..1302447H . doi : 10.1371/journal.pone.0202447 . ISSN 1932-6203 . OCLC 7891624396. PMC 6135378. PMID 30208041 .    
  30. ↑ "مؤتمر نفايات البحث/إكواتور | نفايات البحث" . researchwaste.net . مؤرشف من الأصل بتاريخ 29 أكتوبر 2016. تم الاطلاع عليه بتاريخ 18 أكتوبر 2015 .
  31. ↑ برينز، ف.؛ شلانج، ت.؛ أسد الله، ك. (2011). "صدق أو لا تصدق: إلى أي مدى يمكننا الاعتماد على البيانات المنشورة حول الأهداف الدوائية المحتملة؟" . مجلة نيتشر ريفيوز لاكتشاف الأدوية . 10 (9): 712. Bibcode : 2011NRvDD..10..712P . doi : 10.1038/nrd3439-c1 . PMID 21892149 . 
  32. ↑ فان إيغين، هانز؛ فان دن برينك، جيسبرت؛ بيلز، ريك (2024). "بروك حول أطروحة ميرتون: تكرار مباشر لفصل جون هيدلي بروك حول الإصلاح العلمي والديني" . زيغون: مجلة الدين والعلم . 59 (2). doi : 10.16995/zygon.11497 . hdl : 1871.1/01fa0acb-01e8-4c9f-abfe-fe9443283801 .
  33. ↑ تان، إس واي؛ فوروباياشي، جيه (2014). "هيديو نوغوتشي (1876-1928): عالم بكتيريا متميز" . مجلة سنغافورة الطبية . 55 (10): 550-551 . doi : 10.11622/smedj.2014140 . ISSN 0037-5675 . PMC 4293967. PMID 25631898 .   
  34. ↑ براون، مالكولم (3 مايو 1989). "الفيزيائيون يدحضون ادعاء وجود نوع جديد من الاندماج النووي" . نيويورك تايمز . تم الاطلاع عليه في 3 فبراير 2017 .
  35. ↑ تشيني، مارغريت (1999)، تسلا، سيد البرق ، نيويورك: كتب بارنز أند نوبل، رقم ISBN 0-7607-1005-8، ص 107.؛ "ولعدم قدرته على التغلب على أعبائه المالية، اضطر إلى إغلاق المختبر في عام 1905."
  36. ↑ دومينوس، سوزان (18 أكتوبر 2017). "عندما جاءت الثورة لأيمي كادي" . مجلة نيويورك تايمز .
  37. ↑ كومار، كابيل؛ كومار كارن، نافنيت؛ كومار، يوجيش؛ أوانا، في بي إس (7 نوفمبر 2023). " غياب الموصلية الفائقة في LK-99 في الظروف المحيطة" . ACS Omega . 8 (44): 41737–41743 . doi : 10.1021/acsomega.3c06096 . PMC 10633996. PMID 37969980 .  
  38. ↑ غاريستو، دان (24 أغسطس 2023). "LK-99 ليس موصلًا فائقًا - كيف حلّ الباحثون العلميون اللغز". مجلة نيتشر . 620 (7975): 705-706 . Bibcode : 2023Natur.620..705G . doi : 10.1038/d41586-023-02585-7 . PMID 37587284 . 

للمزيد من القراءة