סריקה ואינדוקס
איך גוגל ומנועי חיפוש מוצאים, סורקים ומכניסים עמודים לאינדקס: robots.txt, מפות אתר, קנוניקל, Search Console, תוכן כפול ואתרים גדולים.
llms.txt: מה הקובץ הזה, מי משתמש בו, והאם להוסיף אותו לאתר
להמשך קריאה — llms.txt: מה הקובץ הזה, מי משתמש בו, והאם להוסיף אותו לאתרעמודים פרוגרמטיים: איך מייצרים אלפי עמודים מנתונים בלי ספאם
להמשך קריאה — עמודים פרוגרמטיים: איך מייצרים אלפי עמודים מנתונים בלי ספאםבדיקת אתר: מה בודקים, באילו כלים ואיך מתעדפים
להמשך קריאה — בדיקת אתר: מה בודקים, באילו כלים ואיך מתעדפיםAI Overviews של גוגל: מה בעלי אתרים צריכים לדעת — טכנית
להמשך קריאה — AI Overviews של גוגל: מה בעלי אתרים צריכים לדעת — טכניתדפי ערים באינדקס: איך בונים עמודי מיקום שלא נחשבים לספאם
להמשך קריאה — דפי ערים באינדקס: איך בונים עמודי מיקום שלא נחשבים לספאם429 Too Many Requests: הגבלת קצב — כשהיא מגינה וכשהיא חוסמת בטעות
להמשך קריאה — 429 Too Many Requests: הגבלת קצב — כשהיא מגינה וכשהיא חוסמת בטעותקישורים חיצוניים: nofollow, sponsored, ugc ולשונית חדשה
להמשך קריאה — קישורים חיצוניים: nofollow, sponsored, ugc ולשונית חדשהעמודים יתומים: איך מוצאים עמודים בלי קישורים פנימיים ומה עושים איתם
להמשך קריאה — עמודים יתומים: איך מוצאים עמודים בלי קישורים פנימיים ומה עושים איתםלפני דירוג יש אינדוקס
עמוד שלא נכנס לאינדקס של גוגל לא יופיע בתוצאות, לא משנה כמה הוא טוב. הדרך לשם עוברת בשלושה שלבים: גוגל צריכה למצוא את הכתובת (דרך קישורים ומפת אתר), לסרוק אותה (לטעון את העמוד ולהבין אותו), ולהחליט שהיא שווה מקום באינדקס — ולא כפילות של עמוד אחר. המדריכים כאן עוסקים בתשתית הטכנית של השלבים האלה. אני לא מספק שירותי קידום; אני בונה אתרים שהקוד והמבנה שלהם לא עומדים בדרך.
מתחילים כאן
- אינדוקס בגוגל: למה עמוד לא נכנס לאינדקס — הסיבות הנפוצות ואיך בודקים.
- Google Search Console — הקמה, והדוחות שמראים מה גוגל רואה באתר.
- robots.txt — מה הקובץ עושה, ובעיקר מה הוא לא עושה.
- מפת אתר XML — איך בונים מפה שעוזרת לגוגל ולא מבלבלת אותה.
כפילויות וכתובות מיותרות
אחת הבעיות השקטות ביותר היא אתר שמייצר הרבה כתובות לאותו תוכן — פרמטרים, סינונים, גרסאות עם ובלי www. גוגל בוחרת כתובת אחת, ולא תמיד את זו שרציתם. הכלים לטפל בזה: תוכן כפול, תג קנוניקל והפניה 301. בחנויות ובאינדקסים, סינונים ועימוד הם המקור העיקרי לבעיה — ראו עימוד וסינונים באתר גדול.
אתרים גדולים: אלפי עמודים
באתר של עשרות עמודים, גוגל סורקת הכול בלי בעיה. באינדקס עסקים, בחנות גדולה או באתר עם דפי ערים, השאלה הופכת לשאלה של סדרי עדיפויות: תקציב סריקה, עמודים יתומים, ואיך בונים עמודים פרוגרמטיים או דפי ערים שלא נחשבים לעמודים דלים.
שינויים גדולים: השקה והעברה
רוב הנזקים לאינדוקס קורים ברגע אחד — השקה של אתר חדש או מעבר כתובות. שני צ'קליסטים שכדאי לעבור לפני: השקת אתר והעברת אתר בלי לאבד תנועה.
מה לבדוק כשעמוד חשוב לא מופיע בגוגל
לפני שמחפשים בעיה מורכבת, עוברים על הבסיס: האם העמוד חוסם את עצמו עם noindex? האם robots.txt חוסם את הסריקה שלו? האם יש עליו תג קנוניקל שמצביע לעמוד אחר? האם יש אליו קישורים פנימיים מעמודים אחרים באתר? ובדוח בדיקת הכתובת ב-Search Console אפשר לראות בדיוק מה גוגל יודעת על העמוד ומתי סרקה אותו לאחרונה. ברוב המקרים התשובה נמצאת באחת מהבדיקות האלה.
נושאים קרובים: מבנה כתובות, הפניות ונתונים מובנים.
רוצים תשתית שגוגל מבינה מהיום הראשון? בעמוד תשתית טכנית מוכנה למנועי חיפוש מפורט מה אני בונה, ואפשר לספר לי על הפרויקט.
בואו נבנה יחד!
מתכננים אתר חדש, פורטל, חנות או מערכת ניהול תוכן? ספרו לי על הפרויקט, ואחזור אליכם בעצמי. אני מתחיל תמיד בהבנת הצרכים העסקיים והטכניים — ורק אז ממליץ על הפתרון הנכון.








