מהו תקציב הסריקה

מונח שמוזכר היום רבות בקהילת SEO הוא תקציב הסריקה. אם נתרגם את זה, זה היה נקרא "מעקב אחר תקציב". זהו קרקע אמצעית נדירה, אך זהו מושג ישן מאוד בתחום קידום אתרים.

מי שעובד עם פרויקטים רחבי היקף כמו מסחר אלקטרוני גדול, פורטלי תוכן ומומחי קידום אתרים, מבין את תקציב הסריקה כזמן בו גוגל מבלה בקריאת דפי האתר שלך ביום נתון.

מדד התוכן

זה הזמן שלסורק גוגל לוקח לקרוא את דפי האתר. אך הפעם הסורק מוציא באתר האינטרנט שלך תלוי בכמה גורמים; כגון רשות אתר, אחוז מתוכן כפול, שגיאות בדף ורבים אחרים.

עם זאת, על פי הבלוג הרשמי של מנהלי האתרים של גוגל, נאמר שלא כולם צריכים להיות מודאגים בנושא זה של תקציב הסריקה. כלומר, אם יש להם אתר עם כמה עשרות עמודים, אין צורך לדאוג בשאלה זו של סריקת דפים, מכיוון שגוגל תעשה זאת ללא בעיה.

אבל אם יש לך חנות מקוונת או כל פרויקט אינטרנט אחר עם כמה אלפי עמודים, תצטרך לשים לב מקרוב ולייעל את תקציב הסריקה באשר לאתר שלך.

סרוק תקציב ומיקום באינטרנט

מגוגל הם מאשרים כי תקציב הסריקה אינו משפיע על המיקום, אך עם זאת הוא יכול להשפיע ולפעמים גם לשלוט, באופן שלילי על יותר מ -200 גורמים שיש לדרג במנוע החיפוש.

אך מדוע אנו רוצים שגוגל תסרוק את דפי האתר שלנו פעמים רבות יותר? מצד שני, אנו מוצאים כמה מומחי קידום אתרים אשר מבטיחים כי קיום תקציב זחילה טוב ישפר את המיקום הכללי של דפי האתר בדירוג ובכך יגדיל את התנועה האורגנית.

בעיקרון, לגוגל יש זמן מסוים לבלות באתר שלך, מכיוון שהיא צריכה להחליט כמה זמן היא הולכת לבזבז בכל אחד מהאתרים ברחבי העולם, שעבורם היא תצטרך לחשב כמה חיבורים בו זמנית היא תוכל ליצור כדי להיות מסוגלים קרא את דפי האתר שלך.

איכות האתר

גוגל מקדישה זמן לחיבור לאתר, לקרוא דפים אלה ולהפסיק את הקריאה הזו. חזור על כך לאורך כל היום, אך תמיד יש חלק מהזמן. חלק זה של הזמן בדרך כלל פרופורציונאלי לסמכות האתר שלך, למספר העמודים החדשים ולרלוונטיות שיש לו כלפי גוגל.

זה ניתן על ידי איכות התוכן שלך והקישורים שמצביעים לאתר, כלומר אם יש לך הרבה קישורים איכותיים המצביעים, יכול להיות שגוגל מבינה אותך באיכות גבוהה יותר ומבלה יותר זמן באתר שלך, כל עוד יש נפח גבוה יותר של דפים.

באופן כללי, תקציב הסריקה לא משתנה הרבה עבור אתר בן 10, 50 או 100 עמודים, כך שבדפים בודדים אין הרבה הבדל. אך באתרים גדולים, אם לגוגל יש שנייה לעבור באתר שלך ואתה אומר לו מה לקרוא, זה יהיה שימושי מאוד לסורק, וישלים את משימת הסריקה שלהם במהירות רבה יותר.

קבע מהם העמודים החשובים

ראשית, עליך למפות ארכיטקטורה מסודרת יותר של מידע על אתרים, לקבוע אילו דפים אינם נחוצים ולא לתת לאינדקס לדפים מסוימים על ידי בדיקת קובץ robots.txt.

על גוגל לא לבלות בקטע החיפוש באתר או אפילו בקטע בו יש ניווט פילטרים, למשל כמו בחנות מקוונת, שם תוכלו לבחור את גודל הנעל, גודל הדירה או צבע החולצה. מסננים אלה הם מה שאנשים מכנים בדרך כלל "ניווט פנים" או "מסנני ניווט".

מנהלי אתרים מסוימים נוטים לחסום את המסננים הללו ואת החיפושים האלה בקובץ robots.txt, רק כדי שגוגל לא תבלה זמן בקריאת הדפים הללו, מכיוון שלמעשה הם ממוקדים על המשתמש שמחפש את החוויה הזו, והם תוכן שכבר נמצא זמין בדפים פנימיים אחרים באתר.

אנו ממליצים לקרוא: שגיאות שיש להימנע מהן בעת ​​יצירת אתר אינטרנט

שורה נוספת היא שעל ידי קביעת העמודים החשובים באתר שלך, אתה חוסך את זמן גוגל בדפים שיש בהם תוכן כפול, כמו למשל מקרה של ניווט בפני פנים, דף מדיניות הפרטיות, תנאים והגבלות, ולא אתה רוצה שיקראו אותם. דפים אלה יהיו זמינים רק למשתמשים שרוצים לראות דפים אלה.

אסור לבזבז זמן בדפים בעלי ערך נמוך, מכיוון שאינך מעוניין לדרג עבורם והם לא עושים את ההבדל הכי פחות בחייך, אבל הם חייבים להיות שם מכיוון שיש משתמשים שרוצים להתייעץ עם מידע זה בכל מקרה.

כיצד תקציב הסריקה עובד באופן פנימי

באופן כללי, תקציב הסריקה מבוסס על ארכיטקטורה. אתה מגדיר את הקישורים לדפים שגוגל תוכל לקרוא ולתעדף אותם לפי רמת החשיבות שלהם.

אחרי הכל, הקישורים שיוצאים מדפים אלה הם אלה שעלולים להיות בעלי סדרי עדיפות על ידי גוגל. אז כדאי להיגיון לחשוב היטב על קישור פנימי ועל אופן הבניית הדף שלכם.

תקציב הסריקה הוא הזמן בו גוגל מבלה כדי לקרוא, להבין את המידע באתר ולהעריך אלמנטים כמו ארגון האדריכלות וחסימה ב- robots.txt. השימוש בתג nofollow בקישור מונע מ- Google לעקוב אחר הקישור הזה. לדוגמה, אם לקישור יש תכונה nofollow, אך לקישור פנימי אחר אין קישור להגיע לדף, גוגל הולכת לעבור את הנתיב השני, ובכך תבלה פחות זמן.

היתרונות של אתר מותאם

ישנם דברים שיעזרו לכם לקרוא דפים נוספים על בסיס יומי, שיכולים להועיל לכל אתר אינטרנט. לדוגמה, אם השרת שלך מהיר יותר, גוגל תבקש באותה עת דפים נוספים.

אם הדף שלך דחוס, גוגל תבקש בבקשות אלה דפים נוספים. ואם יש לך קוד נקי והולם, גוגל גם תקבל עמוד דחוס יותר בסוף היום, עם קטעים טובים יותר. כלומר, מיטוב האתר, מהירות האתר והשרת משפיעים מאוד על נושא תקציב הסריקה.

כיצד לחשב את תקציב הסריקה של האתר שלך

מספר הפעמים שעכביש מנועי החיפוש של גוגל סורק את האתר שלך בהקצאת זמן מסוים הוא מה שאנחנו מכנים "תקציב זחילה". לכן, אם Googlebot מבקר באתר שלך 32 פעמים ביום, אנו יכולים לומר שתקציב המעקב של גוגל הוא כ 960 בחודש.

אתה יכול להשתמש בכלים כמו מסוף החיפוש של Google וכלי מנהלי האתרים של Bing כדי לחשב את תקציב הסריקה המשוער של אתרך. פשוט התחבר ופנה למעקב> סטטיסטיקת מעקב כדי לראות את המספר הממוצע של דפים במעקב ביום.

סריקת תקציב ו- SEO: האם הם זהים?

כן ולא בעוד ששני סוגי האופטימיזציה שמטרתם להפוך את הדף שלך ליותר גלוי ולהשפיע על ה- SERPs שלך, SEO שם דגש רב יותר על חוויית המשתמש, ואילו אופטימיזציה של עכבישים כוללת בעיקר משיכת בוטים.

אופטימיזציה למנועי חיפוש (SEO) ממוקדת יותר בתהליך האופטימיזציה עבור שאילתות משתמשים. במקום זאת, אופטימיזציה של Googlebot מתמקדת באופן בו הסורק של גוגל ניגש לאתר שלך.

כיצד לבצע אופטימיזציה של תקציב הסריקה

ישנן כמה דרכים לייעל את תקציב הסריקה של כל אתר אינטרנט, בהתאם לכל פרויקט אינטרנט, מספר דפים ונושאים אחרים, הנה כמה נקודות שכדאי לקחת בחשבון:

ודא שאפשר לעקוב אחר הדפים שלך

ניתן לעקוב אחר הדף שלך אם עכבישים של מנועי חיפוש יכולים לאתר ולעקוב אחר קישורים באתר שלך, כך שתצטרך להגדיר את קבצי ה- .htaccess ו- robots.txt כך שהם לא יחסמו דפים קריטיים באתר שלך. יתכן שתרצה לספק גרסאות טקסט של דפים המסתמכים מאוד על קבצי מדיה עשירים, כגון Flash ו- Silverlight.

כמובן שההיפך הוא הנכון אם ברצונך למנוע הופעה של דף בתוצאות החיפוש. עם זאת, הגדרת קובץ robots.txt ל"אסור "אינה מספיקה אם ברצונך למנוע אינדקס של דף. על פי גוגל, הכלל "אי-אישור" אינו מתחייב שדף אינו מופיע בתוצאות.

אם מידע חיצוני (לדוגמה, קישורים נכנסים) ממשיך להעביר תנועה לדף שדחתם, גוגל עשויה להחליט שהדף עדיין רלוונטי. במקרה זה, עליך לחסום ידנית את אינדקס הדף באמצעות המטא תג noindex או כותרת ה- X-Robots-Tag של

- מטא תג של Noindex: הכניס מטא תג זה לקטע של הדף שלך בכדי למנוע מרוב סורקי האינטרנט להוסיף אינדקס לדף שלך:

noindex "/>

- תג רובוטים X - מציב את הדברים הבאים בתגובת כותרת HTTP כדי להורות לסורקים שלא להוסיף אינדקס לדף:

X-Robots-Tag: noindex

שים לב שאם אתה משתמש בתג המטא של noindex או בתג -הרובוטים X, אסור שתאסור את הדף ב- robots.txt. יש לסרוק את הדף לפני שנראה התג ולציית לו.

שימוש זהיר בקבצי מדיה עשירה

הייתה תקופה בה Googlebot לא הצליחה לסרוק תוכן כמו JavaScript, Flash ו- HTML. הזמנים האלה חלפו מזמן (אם כי ל- Googlebot עדיין יש בעיות עם Silverlight וכמה קבצים אחרים).

עם זאת, גם אם גוגל יכולה לקרוא את קבצי המדיה העשירה ביותר, ייתכן שמנועי חיפוש אחרים לא יוכלו, מה שאומר שעליך להשתמש בקבצים אלה בשיקול דעת, וכנראה שתרצה להימנע מהם לחלוטין בדפים שאתה רוצה. עמדה.

הימנע ממיתרי הפניה מחדש

כל כתובת אתר שתפנה מחדש גורמת לך לבזבז מעט מתקציב הסריקה שלך. כאשר באתר שלך יש מחרוזות להפניה מחדש ארוכות, כלומר מספר גדול של הפניות 301 ו- 302 ברציפות, יתכן כי עכבישים כמו Googlebot יתרסקו לפני שהם מגיעים לדף הנחיתה, כלומר הדף לא יהיה באינדקס.. השיטה הטובה ביותר להפניה מחדש היא להיות כמה שפחות הפניות באתר באתר ולא יותר משניים ברציפות.

תקן קישורים שבורים

כשנשאל ג'ון מולר האם קישורים שבורים משפיעים על המיקום או לא, הוא השיב שהוא ממוקד מעט יותר בחוויית המשתמש מאשר למטרות מיקום.

זה אחד ההבדלים המהותיים בין קידום אתרים לאופטימיזציה של Googlebot, מכיוון שזה אומר שקישורים מקולקלים אינם ממלאים תפקיד מהותי בדירוג, למרות שהם פוגעים מאוד ביכולתה של Googlebot לאינדקס ולדרג אתר..

עם זאת, עליכם לעקוב אחר עצתו של מולר בהתחשב בכך שהאלגוריתם של גוגל השתפר משמעותית במהלך השנים, וכל מה שמשפיע על חווית המשתמש עשוי להשפיע על SERPs.

הגדר פרמטרים בכתובות אתרים דינמיות

עכבישים מתייחסים לכתובות אתרים דינמיות המובילות לאותו דף כמו דפים נפרדים, מה שאומר שאתה מבזבז שלא לצורך את תקציב הסריקה שלך. אתה יכול לנהל פרמטרים של URL על ידי גישה למסוף החיפוש ולחיצה על מעקב> פרמטרי URL. מכאן אתה יכול ליידע את Googlebot אם ה- CMS שלך מוסיף פרמטרים לכתובות האתרים שלך שלא משנים את תוכן העמוד.

נקה את מפת האתר

קובצי Sitemap של XML עוזרים למבקרים וגם לרובוטי עכביש, מה שהופך את התוכן לארגן טוב יותר וקל יותר למצוא אותו. לכן, נסה לשמור על מעודכן של מפת האתר וטיהור אותו מכל העומס שעלול לפגוע בשימושיות של האתר שלך, כולל 400 דפים ברמה, הפניות מיותרות, דפים שאינם קאנוניים ודפים חסומים.

הדרך הקלה ביותר לנקות את מפת האתר היא להשתמש בכלי כמו מבקר אתרים. אתה יכול להשתמש במחולל ה- Sitemap של XML של מבקר האתר כדי ליצור מפת אתר נקייה שמייתר את כל הדפים החסומים מהאינדקס. יתר על כן, על ידי מעבר לאפשרות "ביקורת אתרים" באפשרותך לאתר ולתקן את כל שגיאות 4xx, הפניות 301 ו- 302 והדפים הלא-קאנוניים.

השתמש בעדכונים

שתי העדכונים, RSS, XML ו- Atom מאפשרים העברת תוכן לעוקבים כאשר הם לא גולשים באתר. זה מאפשר למשתמשים להירשם לאתרים המועדפים עליהם ולקבל עדכונים שוטפים בכל פעם שמתפרסם תוכן חדש.

בנוסף לעובדה שעדכוני RSS היו מזמן דרך טובה להגדיל את קהל הקוראים והמעורבות, הם גם מהאתרים המתוירים ביותר על ידי Googlebot. כאשר האתר שלך מקבל עדכון (לדוגמה, מוצרים חדשים, פוסטים בבלוגים, עדכוני דפים וכו '), שלח אותו למבער הזנות של גוגל כדי לוודא שהוא צמוד לאינדקס בצורה נכונה.

צור קישורים חיצוניים

בניית קישורים נותרה נושא חם, ואין שום הצצה שהיא תיעלם בקרוב.

טיפוח מערכות יחסים ברשת, גילוי קהילות חדשות, בניית ערך מותג; הזכיות הקטנות הללו כבר צריכות להיות מודפסות בתהליך תכנון הקישורים שלך. אמנם ישנם אלמנטים ייחודיים של בניית קישורים שכעת הם ב -1990, אך הצורך האנושי להתחבר לאחרים לעולם לא ישתנה.

נכון לעכשיו, יש לנו כבר הוכחות לכך שקישורים חיצוניים קשורים בקשר הדוק למספר ביקורי העכביש שהאתר שלך מקבל.

שמור על שלמות הקישור הפנימי

למרות שיצירת קישורים פנימיים אינה ממלאת תפקיד מהותי במהירות הסריקה, זה לא אומר שניתן להתעלם ממנה לחלוטין. מבנה אתרים מתוחזק היטב הופך את התוכן שלך לגלוי בקלות על ידי רובוטי החיפוש מבלי לבזבז את תקציב הסריקה שלך.

מבנה קישורים פנימי מסודר יכול גם לשפר את חוויית המשתמש, במיוחד אם משתמשים יכולים להגיע לאזור כלשהו באתר שלך בשלושה לחיצות. הפיכת הכל לנגיש יותר באופן כללי פירושה שהמבקרים ישארו זמן רב יותר, מה שיכול לשפר את ה- SERP.

איזו מסקנה אנו מסיקים?

שוב, כחיזוק מה שכבר הוזכר לעיל, נושא זה של תקציב הסריקה יהיה חשוב עבור אתרים גדולים עם מאות ואלפי דפי אינטרנט, אחרת לא כדאי לדאוג מכיוון שגוגל תעקוב אחר אתר בצורה חלקה.

אסור לסבך את סריקת דפי האתר שלנו ל- Google. ישנם אתרים רבים עם מספיק שגיאות, ואפילו עם חסמים שנוצרו על ידי קבצי robots.txt ו- sitemap.xml המונעים מגוגל לגשת לתוכן. אם אנו רוצים לשפר את המיקום בדירוג גוגל, עלינו לאשר ולפשט את דפי האתר כך שגוגל תוכל לגשת במהירות, לאינדקס ולמיקום. פשוט מאוד.

כעת, בוודאי שמתם לב למגמה במאמר זה: שיטות עבודה מומלצות למעקב יכולות גם לשפר את יכולת החיפוש. אז אם אתה תוהה אם אופטימיזציה של תקציב לזחילה חשובה לאתר שלך, התשובה היא כן.

במילים פשוטות, אם תקל על גוגל לגלות ולאתר את האתר שלך, תוכל ליהנות מסריקה רבה יותר, שמשמעותה עדכונים מהירים יותר כשאתה מפרסם תוכן חדש. תוכלו גם לשפר את חוויית המשתמש הכוללת, לשפר את הנראות ובסופו של דבר, את דירוג ה- SERP.

אלה רק חלק מהנקודות, בין רבות אחרות, לשיפור וביצוע אופטימיזציה של תקציב הסריקה של אתר אינטרנט.