بوتسير

كان بوتسير نظام معلومات وأداة بحث عبر الإنترنت، يُستخدم لإجراء أبحاث حول برامج الروبوت على الإنترنت واتجاهات تطبيق بروتوكول استبعاد الروبوتات والالتزام به. وقد أنشأه وصممه كل من يانغ صن ^{[ 1 ]} ، وإسحاق جي. كونسيل ^{[ 2 ]} ، وزيمينغ تشوانغ ^{[ 3 ]} ، وسي . لي جايلز . وكان بوتسير يعمل من عام 2007 إلى عام 2010 تقريبًا.

كان برنامج BotSeer بمثابة مصدر لدراسة تنظيم وسلوك برامج الروبوت على الإنترنت، بالإضافة إلى معلومات حول إنشاء ملفات robots.txt فعّالة وتطبيقات برامج الزحف. وكان متاحًا للجمهور على شبكة الإنترنت العالمية في كلية علوم وتكنولوجيا المعلومات بجامعة ولاية بنسلفانيا .

قدّم برنامج BotSeer خدماتٍ شملت البحث في ملف robots.txt، وتحليل تحيّز الروبوتات، ^{[ 4 ] [ 5 ]} وتحليل السجلات التي تُنشئها الروبوتات. كما أتاح النموذج الأولي لبرنامج BotSeer للمستخدمين البحث في 6000 ملف توثيق وشفرة مصدرية من 18 مشروعًا مفتوح المصدر لبرامج الزحف.

قام برنامج BotSeer بفهرسة وتحليل 2.2 مليون ملف robots.txt تم الحصول عليها من 13.2 مليون موقع ويب، بالإضافة إلى سجل ضخم لخادم الويب يرصد سلوك الروبوتات في العالم الحقيقي والتحليلات ذات الصلة. كانت أهداف BotSeer مساعدة الباحثين، ومديري المواقع، ومطوري برامج زحف الويب، وغيرهم ممن لديهم احتياجات بحثية ومعلوماتية متعلقة بروبوتات الويب. مع ذلك، تلقى BotSeer ردود فعل سلبية من البعض، بحجة أنه يتعارض مع الغرض من معيار robots.txt. ^{[ 6 ]}

كما قام بوتسير بإنشاء مصيدة عسل ^{[ 7 ]} لاختبار أخلاقيات وأداء وسلوك برامج الزحف على الويب .

• "قد يؤثر مشرفو المواقع على نتائج البحث" . نيوزفاين. أسوشيتد برس. 28 نوفمبر 2007. تاريخ الاسترجاع: 11 ديسمبر 2011 .

• "جوجل مفضلة لدى مديري المواقع الإلكترونية" . عالم الشبكات. 15 نوفمبر 2007. مؤرشف من الأصل في 18 ديسمبر 2007. تم الاطلاع عليه بتاريخ 19 ديسمبر 2007 .

• "بوتسير: محرك بحث لملف Robots.txt وبرنامج زحف الويب" . مؤرشف من الأصل بتاريخ 8 فبراير 2010. تم الاطلاع عليه بتاريخ 11 ديسمبر 2011 .