מהם עכבישים של מנועי חיפוש ?
היכולת של מנועי החיפוש לאסוף מידע מאתרי אינטרנט ולקטלגם תוך כדי ניתוח התוכן המצוי בהם.
המונח המקצועי של "עכבישים" השייכים למנועי החיפוש נקרא באנגלית: Search engines spiders או Search engines crawlers.
בעוד כמות מנועי חיפוש ברשת רק הולכת וגוברת, מפתחים מנועי החיפוש באופן מתמיד טכנולוגיות אשר יאפשרו להן להציג מידע טרי, רלוונטי ועדכני בתוצאות החיפוש אשר מוצגות לגולשים. טכנולוגיות מתקדמות שכאלו מיושמות באמצעות מודולים או אפליקציות אשר נקראות "עכבישים" המופעלים על ידי אלגוריתם ותפקידם לנתח, למיין ולאחסן את המידע אשר מוצג במגוון האתרים הקיימים ברשת האינטרנט. פעולה זו המתבצעת על ידי מנועי החיפוש מחזיקה בכינוי רישום אתרים, קטלוג אתרים, אינדוקס אתרים או עמודים.
מטרת העכבישים בסופו של דבר היא לאסוף את אותו מידע רלוונטי מן אתרי האינטרנט שאנו הגולשים מעונינים בו, ולהציג אותו בפנינו כאשר נקיש מילת מפתח בשדה החיפוש.
דוגמאות ושמות עכבישים השייכים למנועי החיפוש המובילים:
| שם העכביש |
שם מנוע החיפוש |
|
Architextspider
|
Excite |
| Googlebot |
Google |
Infoseek Sidewinder
Mozilla
Ultraseek |
Infoseek |
| Lycos_spider |
Lycos |
| Scooter |
Alta Vista |
| Slurp |
Hotbot |
על מנת לאפשר קידום אתרים יעיל ולאפשר לאותם "עכבישים" לסרוק, לאנדקס ולרשום בצורה אולטימטיבית את אתר האינטרנט על כל עמודיו יש לבצע אופטימיזציה לאתר האינטרנט אשר בדרך כלל מתבצעת על ידי מוסמך קידום אתרים.
