برنامج زحف الويب

يُعدّ WebCrawler محرك بحث ، وهو من أقدم محركات البحث التي لا تزال تعمل على الإنترنت حتى اليوم. لسنوات عديدة، عمل كمحرك بحث شامل . وكان WebCrawler أول محرك بحث على الإنترنت يُتيح البحث في النصوص الكاملة . ^{[ 1 ]}

بدأ برايان بينكرتون العمل على برنامج WebCrawler، الذي كان في الأصل تطبيقًا مكتبيًا، في 27 يناير 1994 في جامعة واشنطن . ^{[ 2 ]} وفي 15 مارس 1994، أنشأ قائمة بأفضل 25 موقعًا إلكترونيًا. ^{[ 1 ]}

انطلق محرك البحث WebCrawler في 21 أبريل 1994، وكان يحتوي على أكثر من 4000 موقع ويب مختلف في قاعدة بياناته ^{[ 2 ]} ، وفي 14 نوفمبر 1994، قدم WebCrawler مليون استعلام بحث ^{[ 2 ]} عن "تصميم وبحوث الأسلحة النووية". ^{[ 3 ]}

في الأول من ديسمبر عام ١٩٩٤، حصل موقع WebCrawler على راعيين، هما DealerNet و Starwave ، اللذان وفّرا التمويل اللازم لاستمرار تشغيله. ^{[ ٢ ]} ابتداءً من الثالث من أكتوبر عام ١٩٩٥، أصبح WebCrawler يعتمد كلياً على الإعلانات، ولكنه فصل الإعلانات عن نتائج البحث. ^{[ ٢ ]}

في الأول من يونيو عام 1995، استحوذت شركة أمريكا أونلاين (AOL) على موقع ويب كراولر. ^{[ 2 ]} بعد استحواذ AOL عليه، قدم الموقع تميمته "سبايدي" في الأول من سبتمبر عام 1995. ^{[ 2 ]}

ابتداءً من أبريل 1996، ^{[ 2 ]} أضاف برنامج WebCrawler أيضاً دليل الإنترنت GNN Select الذي كان يخضع للتحرير البشري ، والذي كان أيضاً مملوكاً لشركة AOL. ^{[ 4 ] [ 5 ]}

في الأول من أبريل عام 1997، استحوذت شركة إكسايت على برنامج ويب كراولر من شركة إيه أو إل مقابل 12.3 مليون دولار. ^{[ 2 ] [ 6 ]}

خضع برنامج WebCrawler لإعادة تصميم في 16 يونيو 1997، حيث تمت إضافة اختصارات WebCrawler، التي تقترح روابط بديلة للمواد المتعلقة بموضوع البحث. ^{[ 7 ]}

كانت شركة Excite تُدير محرك البحث WebCrawler كمحرك بحث مستقل بقاعدة بيانات خاصة به حتى عام 2001، حين بدأ باستخدام قاعدة بيانات Excite، مما أنهى فعليًا عمل WebCrawler كمحرك بحث مستقل. ^{[ 8 ]} وفي وقت لاحق من ذلك العام، أفلست شركة Excite (التي كانت تُسمى آنذاك Excite@Home )، واستحوذت شركة InfoSpace على WebCrawler في عام 2001. ^{[ 2 ]}

قاد بينكرتون، مبتكر برنامج WebCrawler، قسم البحث في Amazon A9.com اعتبارًا من عام 2012. ^{[ 9 ] [ 10 ]}

في يوليو 2016، باعت شركة بلوكورا، الشركة الأم، شركة إنفوسبيس إلى أوبن ميل مقابل 45 مليون دولار، مما جعل ويب كراولر تحت ملكية أوبن ميل. ^{[ 11 ]} وتم تغيير اسم أوبن ميل لاحقًا إلى سيستم 1. ^{[ 12 ]}

في عام 2018، أُعيد تصميم WebCrawler من الصفر، وتم تغيير شعاره. ^{[ 13 ] [ 14 ]}

حقق موقع WebCrawler نجاحًا كبيرًا في بداياته. ^{[ 15 ]} وفي مرحلة ما، أصبح غير قابل للاستخدام خلال أوقات الذروة بسبب ضغط الخوادم. ^{[ 16 ]} كان ثاني أكثر المواقع زيارة على الإنترنت في فبراير 1996، لكنه سرعان ما تراجع خلف محركات البحث والفهارس المنافسة مثل Yahoo! و Infoseek و Lycos و Excite في عام 1997. ^{[ 17 ]}

• موقع Aliweb
• فضاء المعلومات
• كومة من الكلاب
• ميتا كراولر
• قائمة محركات البحث
• محرك البحث
• مقارنة محركات البحث

• الموقع الرسمي