All Posts Tagged Tag: ‘גוגלבוט’

מהו ה-Googlebot?

Googlebot

Googlebot הוא רובוט הסריקה של גוגל, הסורק את מליוני האתרים ברשת האינטרנט. במהלך הסריקה ה-Googlebot מכיר דפי אינטרנט חדשים, ומצרף אותם לאינדקס של גוגל. ה-Googlebot מונחה באמצעות אלגוריתמים המחליטים אילו דפים לסרוק מתוך מליארדי הדפים ברשת, באיזו תדירות לסרוק אותם ואת אילו דפים יש לאנדקס. ה-Googlebot סורק את האתרים שהוא מכיר מסריקות קודמות, תוך שהוא מתייחס בנוסף למפות אתר שמנהלי …

קרא עוד