תקציב סריקה (Crawl Budget)
Crawl Budget בעברית — תרגום, פירוש ומשמעות:
כמות העמודים שגוגל מוכנה לסרוק באתר שלך בפרק זמן נתון, לפני שהיא עוברת הלאה.
תקציב סריקה (Crawl Budget) הוא כמות העמודים שגוגל מקצה לסריקה באתר שלך בפרק זמן מסוים. לרובוט של גוגל יש משאבים מוגבלים, והוא לא סורק כל אתר עד אינסוף. הוא מחליט כמה עמודים לבקר בכל ביקור, ואם הוא מבזבז את המכסה על עמודים חסרי ערך, ייתכן שעמודים חשובים יתעדכנו במנוע באיחור או בכלל לא.
הכנות: לרוב האתרים הקטנים והבינוניים זו לא בעיה אמיתית. אם יש לך אתר קטן עד בינוני, גוגל תסרוק את כולם בקלות ואין טעם לאבד שינה על זה. הנושא הופך למשמעותי באתרים גדולים — חנויות עם אלפי מוצרים, אתרים עם ריבוי פילטרים ופרמטרים, או אתרים איטיים שמבזבזים את זמן הרובוט. שם אני מתחיל לנהל את התקציב באופן פעיל.
איך לא לבזבז את התקציב
הרעיון הוא לכוון את הרובוט לעמודים שחשובים ולהרחיק אותו מזבל. אני מונע סריקה של עמודי פילטר אינסופיים, תוצאות חיפוש פנימי ודפים כפולים, מנקה שרשראות הפניה, ומשתמש במפת אתר XML כדי להצביע בבירור על העמודים שאני רוצה שיסרקו. מהירות טעינה גם משחקת כאן: ככל שהעמודים נטענים מהר, כך הרובוט מספיק לבקר ביותר מהם באותה מכסה. המטרה היא שכל ביקור של גוגל יושקע בעמודים שבאמת מכניסים לקוחות.
שאלות נפוצות
האם תקציב סריקה משפיע על העסק שלי? רק אם האתר שלך גדול או בזבזני. אצל עסק קטן עם אתר ממוקד, גוגל סורקת את הכול בלי בעיה וזה לא צוואר בקבוק. אני ממליץ לא להשקיע בזה אנרגיה לפני שהאתר באמת גדל למאות ואלפי עמודים.
מה ההבדל בין סריקה לאינדוקס? סריקה היא שלב הגילוי — הרובוט קורא את העמוד. אינדוקס הוא שלב האחסון — גוגל מחליטה לשמור אותו במאגר ולהציג אותו בתוצאות. עמוד יכול להיסרק ובכל זאת לא להיכלל, ולכן שני הדברים נבדקים בנפרד.
איך יודעים אם יש בעיית סריקה? דוח הסטטיסטיקות ב-Search Console מראה כמה עמודים גוגל סורקת ובאיזו קצב. אם רואים שהרובוט מבלה זמן רב בעמודים חסרי ערך, או שעמודים חדשים לוקח להם הרבה זמן להופיע, זה סימן לבדוק את ניהול התקציב.
להעמקה, ראה המדריך ל-SEO טכני. כדאי לקרוא גם על אינדוקס שהוא השלב הבא אחרי הסריקה.