בניית פורטלים ואינדקסים

פורטלים ואינדקסים הם מהפרויקטים המורכבים ביותר מבחינה טכנית, גם כשהם נראים פשוטים מבחוץ. אלפי עמודים, שילובים של קטגוריות ומיקומים, סינונים, עימוד ותוכן שמתעדכן כל הזמן — וכל החלטה ארכיטקטונית משפיעה ישירות על השאלה אם גוגל יסרוק את העמודים החשובים או יבזבז את זמנו על כפילויות. פיתחתי כמה אינדקסים ארציים כאלה בעצמי, ואת אותו ידע אני מביא לפורטל שלכם.

מה אני בונה בפורטל או באינדקס

• מבנה קטגוריות: קטגוריות ותתי-קטגוריות עם עמודי נחיתה ייעודיים, והחלטה מראש אם עסק יכול להופיע בכמה קטגוריות.
• עמודי מיקום: עמודים לפי אזור ועיר, ושילובים של קטגוריה × מיקום ("חשמלאים בחיפה") — שהם לרוב העמודים הכי חשובים באינדקס.
• כרטיסי עסק: תיאור, כתובת, שעות פעילות, גלריה, מפה, חיוג וכפתור וואטסאפ — עם נתונים מובנים מסוג LocalBusiness.
• חיפוש וסינון מהירים: בלי לייצר אלפי כתובות כפולות שמבזבזות את תקציב הסריקה.
• אזור מפרסמים: אזור אישי שבו בעלי עסקים מעדכנים את הפרטים שלהם.
• ייבוא נתונים: טעינת רשומות בהיקף גדול ממקורות חיצוניים, וסנכרון שוטף כשצריך.
• שכבת תוכן: מדריכים ומאמרים שמחזקים את עמודי הקטגוריה ועונים על שאלות הגולשים.

הדגש שלי: שליטה במה שנסרק

הבעיה הנפוצה באינדקסים היא לא חוסר בעמודים — אלא עודף. כל שילוב של סינון, מיון ועימוד יכול להפוך לכתובת חדשה, ותוך זמן קצר יש לאתר מאות אלפי כתובות שרובן כמעט זהות. אינדקס טוב יודע להחליט אילו שילובים יקבלו עמוד שנסרק, ואילו יישארו לשימוש הגולש בלבד. אני בונה את הלוגיקה הזו לתוך המערכת:

• תגיות canonical שמפנות מווריאציות סינון לעמוד הבסיס.
• noindex מבוקר לעמודים דלים — קטגוריה ריקה או שילוב עם עסק אחד.
• עימוד בקישורים רגילים שהסורק יכול לעבור בהם, ולא רק כפתור "טען עוד" ב-JavaScript.
• מפות אתר מחולקות לפי סוג עמוד, כך שקל לראות בכלי הניטור מה נסרק ומה לא.
• קישוריות פנימית בין אזורים, ערים, קטגוריות ומדריכים, כך שהסורק מגיע לכל רשומה.

גוגל מפרסמת הנחיות מפורטות בנושא במדריך לניהול סריקה של ניווט בסינונים, ועליהן מבוסס התכנון.

אינדקסים שפיתחתי

• יפה — פורטל היופי והאסתטיקה: אינדקס ארצי עם יותר מ-1,000 בעלי מקצוע, קטגוריות לפי תחום (איפור קבוע, ציפורניים, הסרת שיער, קוסמטיקה ועוד), חיפוש לפי מיקום וכרטיסי עסק מלאים.
• סודי — אינדקס חדרים, מוטלים וצימרים, מחולק לאזורים ולעמודים ייעודיים ליותר ממאה יישובים, עם גלריות, מפות ושכבת מדריכים.
• iGrar — אינדקס שירותי גרירה עם יותר מ-40 עמודי עיר ואזור, שבנוי קודם כול לגולש שנתקע עם הרכב ומחפש מהטלפון.

שלושתם שלי — פלטפורמות שתכננתי, פיתחתי ואני מפעיל. זה אומר שאת ההחלטות שמתוארות כאן קיבלתי בעצמי, וראיתי מה קורה להן לאורך זמן.

איך אני עובד

1. אפיון המבנה: אילו ישויות יש (עסקים, קטגוריות, מיקומים, ביקורות, מדריכים), איך הן מתחברות ואיך נראית כל כתובת.
2. החלטות סריקה: אילו שילובים מקבלים עמוד, מה הסף המינימלי לתוכן, ואיך מטפלים בסינונים ובעימוד.
3. בחירת פלטפורמה: וורדפרס עם מבנה מותאם לאינדקסים בינוניים, או פיתוח בהתאמה אישית כשההיקף והלוגיקה מצדיקים זאת.
4. פיתוח וייבוא נתונים, כולל בדיקה של כל סוג עמוד בכלי סריקה.
5. השקה וניטור: מעקב אחרי מה שגוגל סורק ומאנדקס בפועל, ותיקון מהיר של מה שחורג.

אילו עמודים צריכים להיסרק: מדריך החלטה

זו ההחלטה הטכנית החשובה ביותר באינדקס, ושווה לקבל אותה לפני הפיתוח. כך נראית חלוקה טיפוסית:

הכלל המנחה: עמוד נסרק רק אם יש מאחוריו חיפוש אמיתי של אנשים, ותוכן שמצדיק אותו.

מבנה הנתונים שמאחורי אינדקס

אינדקס הוא קודם כול מסד נתונים, והמבנה שלו קובע מה אפשר לעשות בו בעתיד:

• עסק — עם שדות קבועים (שם, טלפון, כתובת, שעות) ושדות שתלויים בתחום.
• קטגוריה — היררכית, ועסק יכול להשתייך לכמה קטגוריות בלי שייווצר עמוד כפול.
• מיקום — אזור, עיר, ולפעמים שכונה, עם שמות חלופיים ואיותים שונים (תל אביב / תל-אביב יפו).
• תוכן משלים — מדריכים ומאמרים שמקושרים לקטגוריות ולמיקומים הרלוונטיים.

כשהמבנה נכון, אפשר להוסיף תחום חדש, אזור חדש או סוג מידע חדש בלי לבנות את האתר מחדש.

טעויות נפוצות באינדקסים

• "טען עוד" בלבד: רשימות שנטענות רק בגלילה ב-JavaScript, כך שהסורק לא מגיע לעסקים שבעמודים הבאים.
• עמוד לכל שילוב: יצירה אוטומטית של עמוד לכל קטגוריה בכל יישוב, כולל אלפי עמודים ריקים.
• טקסט תבנית זהה: אותה פסקה בכל עמוד עיר, עם שם העיר מוחלף — זה לא תוכן ייחודי.
• כרטיסי עסק דלים: שם וטלפון בלבד, בלי תיאור, שעות או אזור שירות.
• בלי שליטה על הנתונים: כשאין אזור מפרסמים או תהליך עדכון, הפרטים מתיישנים והגולשים מאבדים אמון.

שאלות נפוצות

וורדפרס מתאימה לאינדקס?

לאינדקס בהיקף בינוני — כן, עם מבנה נתונים מותאם ותבנית ייעודית, כמו בסודי. לאינדקס עם הרבה לוגיקה עסקית, תשלומים ממפרסמים או נתונים בהיקף גדול מאוד, פיתוח ייעודי בדרך כלל עדיף.

איך מונעים תוכן כפול באינדקס?

בשלושה כלים עיקריים: מחליטים מראש אילו שילובים מקבלים עמוד, מסמנים את השאר ב-canonical או ב-noindex, ומוודאים שלכל עמוד שנסרק יש תוכן ייחודי מספיק. פירוט במאמר 7 החלטות טכניות בבניית אינדקס עסקים.

מה עושים עם עמוד קטגוריה שאין בו עסקים?

עמוד ריק לא מוסיף ערך לגולש או לגוגל. הוא מסומן שלא ייסרק עד שיש בו מספיק תוכן, או שהוא מציג תוכן משלים כמו מדריך ועסקים מאזורים סמוכים.

אפשר להעביר אינדקס קיים למערכת חדשה?

כן, כולל מיפוי של כל כתובות העסקים, הקטגוריות והמיקומים לכתובות החדשות. פירוט בעמוד שדרוג והעברת אתרים.

מתכננים פורטל או אינדקס חדש, או שהאינדקס הקיים נתקע? ספרו לי על התחום ועל היקף הנתונים, ונבנה מבנה שמחזיק.