בדיקת אינדקס גוגל: שלבי הבדיקה ותיקון עמוד שלא נכלל

איך מבצעים בדיקת אינדקס גוגל צעד אחר צעד

כדי לבדוק אם עמוד נכנס לאינדקס גוגל, פותחים את Search Console, בוחרים את האתר ומדביקים את הכתובת המלאה בסרגל הבדיקה העליון. תוצאה שלפיה הכתובת נמצאת בגוגל מעידה שהיא יכולה להופיע בחיפוש, בכפוף למגבלות שהכלי אינו בודק. כשהכתובת אינה בגוגל, פותחים את פרטי הוספת העמוד לאינדקס ומבררים את הסיבה.

הבדיקה הראשונית מציגה מידע שנשמר אצל גוגל. אם שיניתם את העמוד מאז, מפעילים גם בדיקה של הכתובת הפעילה. הצלחה בבדיקה הפעילה מעידה על המצב הנוכחי שנבדק, והיא אינה אישור שהעמוד כבר נוסף לאינדקס. זה ההבדל המרכזי בין שתי הבדיקות, לפי התיעוד של כלי בדיקת הכתובת.

לפני שמתחילים, הכינו את כתובת העמוד וגישה לנכס המתאים במערכת. אם האתר עדיין אינו מחובר, התחילו עם חיבור האתר לכלי מנהל האתרים. לצורך בקשת אינדוקס בהמשך נדרשת הרשאת בעלים או משתמש מלא.

1. בחרו את נכס האתר והדביקו את הכתובת המדויקת, כולל הנתיב של העמוד.
2. קראו את התוצאה ופתחו את פרטי האינדוקס, הסריקה והכתובת הקנונית שנבחרה.
3. אם יש בעיה, תקנו אותה לפי הסיבה שדווחה והפעילו בדיקה חיה.
4. לאחר תיקון רלוונטי, בקשו אינדוקס ועקבו אחר התוצאה. גוגל מפרטת את התנאים בהנחיות לבקשת סריקה מחדש.

חיפוש מהיר בלי גישה לאתר: מה אפשר להסיק

בלי גישה ל־Search Console אפשר לחפש בגוגל באמצעות האופרטור site: ואחריו כתובת העמוד המלאה, ללא רווח ביניהם. אפשר גם לחפש כך את הדומיין כדי לראות מבחר עמודים שמופיעים ממנו. זו בדיקת עזר שימושית לפני שפונים למי שמנהל את האתר.

תוצאה חסרה אינה הוכחה שהעמוד מחוץ לאינדקס. לפי התיעוד של גוגל על חיפוש site:, החיפוש אינו מחזיר בהכרח את כל הכתובות המאונדקסות, וגם כתובת שנכללת באינדקס אינה מובטחת להופיע בו. לכן אל תשתמשו במספר התוצאות כדי לחשב כמה עמודים באתר מאונדקסים.

אם העמוד נמצא באינדקס אך אינו מופיע בביטוי הרצוי, המשיכו לבדיקת מיקומים בגוגל. הכללה באינדקס והופעה בשאילתה מסוימת הן שאלות נפרדות, והיעדר תוצאה בחיפוש אחד אינו מספיק כדי לאבחן תקלה באינדוקס.

בודקים שהעמוד נגיש ומחזיר תוכן תקין

השלב הבא הוא לוודא שגוגל יכולה להגיע לעמוד ולקבל תוכן שאפשר לאנדקס. הדרישות הטכניות של גוגל כוללות גישה לסורק, תשובת שרת תקינה מסוג 200 ותוכן שניתן לאינדוקס. גם עמידה בדרישות האלה אינה מבטיחה הכללה באינדקס.

פתחו את העמוד בלי להתחבר לחשבון ובדקו שמופיע התוכן המיועד לציבור. אם נדרשת כניסה, החליטו אם העמוד אכן אמור להיות ציבורי. עמוד פרטי אינו הופך לעמוד מתאים לחיפוש רק משום שביקשתם לאנדקס אותו.

קוד 404 מציין שהעמוד לא נמצא. אם כתובת שאמורה להציג שירות מחזירה אותו, צריך לתקן את הכתובת או להשיב את העמוד. כשהעמוד נמחק ואין לו תחליף, ייתכן שזו התנהגות תקינה. תשובת 200 עם עמוד ריק או הודעת שגיאה עלולה להיחשב soft 404, ולכן בדקו גם את התוכן בפועל.

שגיאות שרת מסוג 5xx עלולות להאט את הסריקה, ואם הן נמשכות גם לפגוע בהכללה של כתובות קיימות באינדקס. במקרה כזה בקשו ממנהל האחסון לבדוק זמינות ושגיאות, בהתאם להסבר הרשמי על קודי תשובת השרת. שמרו את הכתובת ואת מועד הופעת התקלה כדי לאפשר איתור ביומני השרת.

מסירים חסימת אינדוקס או סריקה שהוגדרה בטעות

הוראת noindex מבקשת ממנוע החיפוש שלא לכלול את העמוד באינדקס. היא יכולה להופיע בתגית בתוך העמוד או בכותרת תשובת השרת. אם העמוד צריך להופיע בגוגל, בדקו את הגדרת הנראות שלו במערכת הניהול ואת ההוראות שהשרת שולח. חשוב לא לבלבל בינה לבין הקובץ robots txt וחסימת סריקה.

נניח שעמוד שירות פורסם לאחר שהיה בטיוטת פיתוח, והוראת מניעת האינדוקס נשארה פעילה. במקרה ההיפותטי הזה, מתקנים את ההגדרה שמייצרת אותה ובודקים שוב את העמוד הציבורי. אין צורך להוסיף הוראה מיוחדת שמחייבת את גוגל לאנדקס אותו. צריך להסיר את החסימה ולוודא ששאר התנאים מתקיימים.

כדי שגוגל תוכל לקרוא noindex, עליה להיות מסוגלת לסרוק את העמוד. חסימה במקביל בקובץ robots.txt עלולה למנוע ממנה לראות את ההוראה, כפי שמוסבר בהנחיות לשימוש ב־noindex.

קובץ robots.txt קובע לאילו כתובות מותר לסורק לגשת. אם כלל בו חוסם עמוד שצריך להיסרק, מתקנים את הכלל המסוים. אל תמחקו את כל ההגדרות בלי להבין אילו חלקים באתר הן משרתות. לפי המבוא הרשמי לקובץ robots.txt, חסימת סריקה גם אינה דרך מובטחת להסתיר כתובת מתוצאות החיפוש.

בודקים אם גוגל בחרה כתובת אחרת

כתובת קנונית היא הגרסה המועדפת של תוכן שמופיע בכתובות כפולות או דומות מאוד. כשגוגל בוחרת גרסה אחרת, ייתכן שהעמוד שבדקתם לא יופיע ככתובת עצמאית בחיפוש. בדקו אם הכתובת שנבחרה אכן מייצגת את התוכן שרציתם לקדם.

השוו בין הגרסה המועדפת שהאתר מצהיר עליה לבין הכתובת שגוגל בחרה. בדקו גם שהקישורים הפנימיים ומפת האתר מפנים לגרסה הרצויה. הנחיות גוגל לאיחוד כתובות כפולות ממליצות להימנע מסימנים סותרים, למשל כתובת אחת בתגית הקנונית וכתובת אחרת במפת האתר.

נניח שלעמוד מוצר יש כתובת רגילה וגרסה נוספת עם פרמטר מיון. אם שתיהן מציגות אותו תוכן והגרסה הרגילה נבחרה, אין בהכרח תקלה שדורשת תיקון. אם מדובר בתוכן נפרד שנועד לענות על צורך אחר, בחנו אם ההבדל בין העמודים ברור ומוצדק.

כאשר עמוד עבר לכתובת חדשה, הפניה קבועה יכולה לסמן את המעבר. בדקו את הכתובת החדשה ואת יעד ההפניה בעזרת רשימת הבדיקה להפניות 301. בדרך כלל אין סיבה לנסות להשיב לאינדקס כתובת ישנה שהעברתם בכוונה.

מטפלים בעמוד שהתגלה או נסרק ועדיין לא באינדקס

ההודעה שלפיה עמוד התגלה אך טרם נוסף לאינדקס פירושה שגוגל מכירה את הכתובת ועדיין לא סרקה אותה. כשהעמוד נסרק אך לא נוסף לאינדקס, הסריקה כבר התרחשה. ההבחנה מופיעה בדוח הוספת הדפים לאינדקס, והיא קובעת היכן להתחיל את הבירור.

בעמוד שטרם נסרק, בדקו שיש אליו קישור מעמוד נגיש ושהוא נכלל במפת האתר המתאימה. מפת אתר מסייעת לגוגל לגלות כתובות, אך אינה מבטיחה שכל כתובת תיסרק ותאונדקס. ודאו שהעמוד משתלב בניווט או בתוכן האתר, ושאפשר להגיע אליו דרך קישורים.

אם עמודים רבים אינם נסרקים ויש סימני עומס, בדקו גם את נתוני הסריקה וזמינות האתר. גוגל מציעה בהנחיות לאבחון תקלות סריקה להשוות בין בעיות הזמינות המדווחות לבין תקלות בשרת. ההודעה לבדה אינה מוכיחה שהאחסון שלכם חלש.

בעמוד שכבר נסרק, בדקו מה גוגל מצליחה לקבל. תוכן שנטען בעזרת JavaScript עשוי לדרוש עיבוד נוסף לפני שהוא זמין לאינדוקס. לפי התיעוד של גוגל לעמודים המבוססים על JavaScript, גוגל משתמשת בתוכן המעובד לצורך אינדוקס. אם טקסט השירות או המוצר חסר בתוצאה המעובדת, העבירו למפתח דוגמה ממוקדת לתיקון.

כאשר הבעיה נוגעת לתבנית שמשותפת לעמודים רבים, אפשר להיעזר בשירות קידום האתרים של ברנדיני, הסוכנות שמפעילה את המגזין, לבירור טכני. בקשו שהאבחון יפרט את הכתובות שנפגעו, את השינוי המוצע ואת הדרך לבדוק אותו לאחר הביצוע.

רשימת בדיקה לאחר התיקון

לאחר שינוי, הפעילו בדיקה חיה והחליטו אם יש הצדקה לבקש אינדוקס מחדש. גוגל מציינת שסריקה עשויה להימשך ימים עד שבועות, ובקשות חוזרות לאותה כתובת אינן מזרזות אותה. בהודעה על עמוד שכבר נסרק אך לא נוסף לאינדקס, אין צורך לשלוח שוב את הכתובת לסריקה רק בגלל עצם ההודעה.

• בדקו שהכתובת המיועדת לציבור מציגה את התוכן הנכון ואינה דורשת התחברות.
• ודאו שהוסרו חסימות לא מכוונות, ושהתיקון לא פתח עמודים פרטיים לסריקה.
• בדקו שהכתובת המועדפת עקבית בקישורים הפנימיים, בהצהרה הקנונית ובמפת האתר.
• שמרו תיעוד של הסיבה שדווחה, השינוי שבוצע ותוצאת הבדיקה לאחריו.
• חזרו בהמשך למצב האינדוקס השמור ובדקו אם גוגל כבר סרקה את הגרסה המתוקנת.

בדיקה חיה תקינה מסיימת את בדיקת הנגישות הנוכחית. את עדכון האינדקס מאמתים בנפרד לאחר שגוגל מעבדת את העמוד. אין בתהליך הזה הבטחה למיקום בחיפוש או למועד הכללה מסוים. להבנת ההבדל בין עמוד שנשמר לעמוד שמופיע, קראו מה זה אינדקס בגוגל.