כל מנהל אתרים יודע שכדי שאנשים יתחילו לבקר את המשאב שלו ממנועי חיפוש, צריך להוסיף אותו לאינדקס. על מהו אינדקס אתרים, כיצד הוא מתבצע ומה המשמעות שלו, נספר במאמר זה.
מה זה יצירת אינדקס?
אז, המילה "אינדקס" כשלעצמה פירושה הזנת משהו לפנקס, מפקד של חומרים זמינים. אותו עיקרון חל על אינדקס אתרים. למעשה, תהליך זה יכול להיקרא גם הזנת מידע על משאבי אינטרנט למסד הנתונים של מנועי החיפוש.
לכן, ברגע שהמשתמש יזין ביטוי נוסף בשדה החיפוש של גוגל, הסקריפט יחזיר לו תוצאה, כולל כותרת האתר שלך והתיאור הקצר שלו, אותו אנו רואים למטה.
איך מתבצע יצירת אינדקס?
אינדקס עצמו ("Yandex" הוא, או גוגל - לא משחק תפקיד) הוא די פשוט. כל הרשת של האינטרנט, המתמקדת במסד הנתונים של כתובות ה-ip שיש למנועי החיפוש, נסרקת על ידי רובוטים רבי עוצמה - "עכבישים" שאוספיםמידע על האתר שלך. לכל אחד ממנועי החיפוש יש מספר עצום מהם, והם עובדים אוטומטית 24 שעות ביממה. המשימה שלהם היא להיכנס לאתר שלך ו"לקרוא" את כל התוכן בו, תוך כדי הזנת הנתונים למסד הנתונים.
כתוצאה מכך, בתיאוריה, אינדקס אתרים לא תלוי הרבה בבעלים של המשאב. הגורם המכריע כאן הוא רובוט החיפוש שמגיע לאתר וחוקר אותו. זה מה שמשפיע על המהירות שבה האתר שלך מופיע בתוצאות החיפוש.
תנאים לאינדקס?
כמובן, מועיל לכל מנהל אתרים שהמשאב שלו יופיע בתוצאות החיפוש במהירות האפשרית. הדבר ישפיע, ראשית, על התנאים להבאת האתר למיקומים הראשונים, ושנית, מתי יתחילו השלבים הראשונים למונטיזציה של האתר. לפיכך, ככל שרובוט החיפוש "יאכל" מוקדם יותר את כל דפי המשאב שלך, כך ייטב.
לכל מנוע חיפוש יש אלגוריתם משלו להזנת נתוני אתר למסד הנתונים שלו. לדוגמה, הוספה לאינדקס של דפים ב- Yandex מתבצעת בשלבים: רובוטים סורקים אתרים ללא הרף, ואז מסדרים את המידע, ולאחר מכן מתרחש מה שנקרא "עדכון", כאשר כל השינויים נכנסים לתוקף. תקינותם של אירועים כאלה אינה נקבעת על ידי החברה: הם מתקיימים אחת ל-5-7 ימים (ככלל), עם זאת, הם יכולים להתקיים גם 2 וגם 15 ימים מראש.
במקביל, יצירת האינדקס של האתר בגוגל פועלת לפי מודל אחר. במנוע חיפוש זה, "עדכונים" (עדכוני בסיס) כאלה מתרחשים באופן קבוע, לכן יש להמתין בכל פעם עד שהרובוטים יכניסו את המידע למסד הנתונים, ואזיוזמן כל כמה ימים, לא צריך.
בהתבסס על האמור לעיל, נוכל להסיק את המסקנה הבאה: דפים ב-Yandex מתווספים לאחר 1-2 "עדכונים" (כלומר, תוך 7-20 ימים בממוצע), ובגוגל זה יכול לקרות הרבה יותר מהר - ממש ביום.
במקביל, כמובן, לכל מנוע חיפוש יש את המוזרויות שלו לגבי אופן ביצוע האינדקס. ל-Yandex, למשל, יש מה שנקרא "בוט מהיר" - רובוט שיכול להכניס נתונים לבעיה תוך מספר שעות. נכון, לא קל לגרום לו לבקר במשאב שלך: זה נוגע בעיקר לחדשות ולאירועים מתוקשרים שונים המתפתחים בזמן אמת.
איך להיכנס לאינדקס?
התשובה לשאלה כיצד להוסיף את האתר שלך לאינדקס במנועי החיפוש היא פשוטה ומורכבת כאחד. הוספה לאינדקס של דפים היא תופעה טבעית, ואם אתה אפילו לא חושב על זה, אלא פשוט, נניח, תשמור על הבלוג שלך, תמלא אותו בהדרגה במידע, מנועי החיפוש "יבלעו" את התוכן שלך בצורה מושלמת לאורך זמן.
דבר נוסף הוא כאשר אתה צריך להאיץ את הוספה לאינדקס של דפים, למשל, אם יש לך רשת של מה שנקרא "לוויינים" (אתרים שנועדו למכור קישורים או לפרסם מודעות, שהאיכות שלהם בדרך כלל גרועה יותר). במקרה זה, עליך לנקוט באמצעים כדי שהרובוטים ישימו לב לאתר שלך. הדברים הבאים נחשבים נפוצים: הוספת כתובת האתר לטופס מיוחד (זה נקרא "AddUrl"); הפעלת כתובת המשאב דרך ספריות הקישורים; הוסף כתובת לספריותסימניות ועוד. ישנם דיונים רבים בפורומים של SEO על איך כל אחת מהשיטות הללו עובדת. כפי שמראה בפועל, כל מקרה הוא ייחודי, וקשה למצוא בצורה מדויקת יותר את הסיבות לכך שאתר אחד הוכנס לאינדקס תוך 10 ימים, והשני תוך 2 חודשים.
איך להאיץ את הכניסה לאינדקס?
עם זאת, ההיגיון מאחורי הכנסת אתר לאינדקס מהר יותר מבוסס על קישור אליו. בפרט, אנחנו מדברים על הגדרת כתובות אתרים באתרים חינמיים וציבוריים (סימניות, ספריות, בלוגים, פורומים); לגבי קניית קישורים באתרים גדולים ופופולריים (באמצעות בורסת Sape, למשל); כמו גם הוספת מפת אתר לטופס addURL. אולי ישנן שיטות אחרות, אבל אלה שכבר נרשמו יכולות להיקרא בבטחה הפופולריות ביותר. כזכור, באופן כללי, הכל תלוי באתר ובמזל הבעלים שלו.
אילו אתרים מתווספים לאינדקס?
לפי העמדה הרשמית של כל מנועי החיפוש, אתרים שעוברים סדרת מסננים נכנסים לאינדקס. איש אינו יודע אילו דרישות מכילות האחרונות. רק ידוע שעם הזמן כולם משתפרים בצורה כזו שמסננים אתרים פסאודו שנוצרו כדי להרוויח כסף על ידי מכירת קישורים ומשאבים אחרים שאינם נושאים מידע שימושי עבור המשתמש. כמובן שעבור יוצרי האתרים הללו, המשימה העיקרית היא לבצע אינדקס עמודים ככל האפשר (כדי למשוך מבקרים, למכור קישורים וכו').הבא).
אילו משאבים מנועי חיפוש אוסרים?
בהתבסס על המידע הקודם, נוכל להסיק אילו אתרים צפויים לא להיכנס ל-SERPs. אותו מידע מושמע על ידי נציגים רשמיים של מנועי החיפוש. קודם כל, מדובר באתרים המכילים תוכן לא ייחודי שנוצר אוטומטית, שאינו שימושי למבקרים. לאחר מכן, משאבים שבהם יש מינימום של מידע, שנוצרו כדי למכור קישורים וכן הלאה.
נכון, אם תנתח את התוצאות של מנועי החיפוש, תוכל למצוא בו את כל האתרים האלה. לכן, אם מדברים על אתרים שלא יהיו נוכחים בתוצאות החיפוש, יש לשים לב לא רק לתוכן לא ייחודי, אלא גם למספר גורמים נוספים - קישורים רבים, מבנה לא מאורגן וכדומה.
הסתרת תוכן. כיצד להשבית את הוספה לאינדקס של דפים?
מנועי חיפוש סורקים את כל התוכן באתר. עם זאת, ישנה טכניקה שבאמצעותה ניתן להגביל את הגישה של רובוטי חיפוש למקטע מסוים. זה נעשה באמצעות קובץ robots.txt, אליו מגיבים ה"עכבישים" של מנועי החיפוש.
אם קובץ זה ממוקם בשורש האתר, האינדקס של הדפים ימשיך לפי הסקריפט הכתוב בו. בפרט, אתה יכול לבטל את האינדקס בפקודה אחת - Disallow. בנוסף אליו, ניתן לציין בקובץ גם קטעים באתר עליהם יחול איסור זה. לדוגמה, כדי לאסור את האינדקס של האתר כולו, מספיק לצייןקו לוכסן אחד "/"; וכדי לא לכלול את הקטע "חנות" מתוצאות החיפוש, מספיק לציין את המאפיין הבא בקובץ שלך: "/shop". כפי שאתה יכול לראות, הכל הגיוני ופשוט ביותר. הוספת דפים לאינדקס נסגרת בקלות רבה. במקביל, רובוטי חיפוש מבקרים בדף שלך, קוראים robots.txt ולא מכניסים נתונים למסד הנתונים. אז אתה יכול לעשות מניפולציות בקלות כדי לראות מאפיינים מסוימים של אתרים בחיפוש. עכשיו בואו נדבר על איך המדד נבדק.
איך אוכל לבדוק את הוספה לאינדקס של דפים?
ישנן מספר דרכים לגלות כמה ואיזה דפים קיימים במסד הנתונים של Yandex או Google. הראשון - הפשוט ביותר - הוא להגדיר את הבקשה המתאימה בטופס החיפוש. זה נראה כך: site:domen.ru, שבו במקום domen.ru אתה כותב, בהתאמה, את הכתובת של האתר שלך. כאשר תגיש בקשה כזו, מנוע החיפוש יציג את כל התוצאות (העמודים) הממוקמים בכתובת ה-URL שצוינה. יתרה מכך, בנוסף לרישום פשוט של כל הדפים, אתה יכול גם לראות את המספר הכולל של החומרים שנוספו לאינדקס (מימין לביטוי "מספר התוצאות").
הדרך השנייה היא לבדוק את הוספה לאינדקס של דפים באמצעות שירותים מיוחדים. יש כעת מספר גדול מהם, באופן ישיר ניתן לקרוא להם xseo.in ו-cy-pr.com. במשאבים כאלה, אתה יכול לא רק לראות את המספר הכולל של הדפים, אלא גם לקבוע את האיכות של חלק מהם. עם זאת, אתה צריך את זה רק אם אתה מבין יותר לעומק את הנושא הזה. ככלל, מדובר בכלים מקצועיים לקידום אתרים.
על יצירת אינדקס "כפויה"
אני גם רוצה לכתוב קצת על מה שנקראאינדקס "כפוי", כאשר אדם מנסה להכניס את האתר שלו לאינדקס בשיטות "אגרסיביות" שונות. כלי אופטימיזציה לא ממליצים לעשות זאת.
מנועי חיפוש, לכל הפחות, שמבחינים בפעילות מוגזמת הקשורה למשאב חדש, עלולים להטיל סוג של סנקציות שמשפיעות לרעה על מצב האתר. לכן, עדיף לעשות הכל כדי שהאינדקס של הדפים ייראה כמה שיותר אורגני, הדרגתי וחלק.
