فكرة عن عناكب Yahoo! Slurp و Google Spider و Alexa

السلام عليكم ...
طبعا المعظم منكم يدخل بالمتواجدون ويشوف واحد اسمه

عناكب Google Spider او عناكب جوجل او عناكب Yahoo! Slurp أو عناكب Alexa أو عناكب MSN
قاعد يتفرج واحيانا يشارك بس لما ترجع للصفحة الرئيسية ما تشوفه اسمه

ويمكن فيه البعض منكم مستغرب من الشي ها
انا بوضح لكم شو يعني الاسم ها

عنكبوت محركات البحث
وظيفته التغلغل بداخل موقعك وفهرسة الكلمات الموجودة فيه
بحيث يظهر موقعك في نتائج البحث في جوجل اذا توفرت فيه الكلمة

تقوم مواقع محراكات البحث وبواسطة برنامج يسمى العنكبوت spider بتجميع قوائم بالكلمات الموجودة على الشبكة وتسمى هذه العملية *** crawling

وبذلك فعندما تبحث عن كلمة معينة فأنها تبحث عنها في تلك القوائم المعدة من قبل العنكبوت

طريقة عمل هذا العنكبوت : ( مهم جداً )
تقوم اولا هذه العناكب spiders بزيارة السيرفرات التي تتمتع بعدد كبير من الزيارات ( عليها ضغط ) والمواقع المشهورة

ثم يقوم بتفصيل الكلمات في هذا الموقع وبزيارة جميع الوصلات في تلك المواقع , وبذلك يكون العنكبوت قد زار اشهر واكبر المواقع وجميع الوصلات الموجودة بها وقام بتصنيف شامل لجميع الكلمات الموجودة بها

وهذه الطريقة متبعه من قل موقع GOOGLE الشهير
وبحسبة بسيطه اذا علمنا ان كل عنكبوت يستطيع 25 صفحة بالثانية
بذلك اذا قمنا بتشغيل 4 عناكب فاننا نحصل على 100 صفحة بالثانية والتي ينتج عنها حوالي 600 كيلو بايت في الثانية :D
وبذلك يمكننا ان نتصور الكم الهائل من المعلومات يتم تجميعه في الثانية الواحده بالنسبة لموقع مثل GOOGLE

ودمتم بكل ود