כיצד לשלוט על אופן הסריקה של קבצי מדיה על ידי גוגל
בתזמון מצויין, זמו לא רב לאחר הפוסט לגבי אופטימיזציה של קבצי PDF, גוגל מודיעים על השקת טג חדש, X-Robots-Tag, שמאפשר הכנסת טג META ROBOTS גם בקבצים שאינם קבצי HTML, כגון קבצי PDF, קבצי קול, ווידאו וכדומה. מכיוון שלא ניתן להוסיף טג לתוכן של קבצים אלו, על טג זה להישלח כחלק מכותרות ה - HTTP.
מניעת הכנסת הקובץ לאינדקס:
X-Robots-Tag: noindex
מניעת שמירת מטמון של הקובץ, כמו גם הצגת תאורו בתוצאות החיפוש:
X-Robots-Tag: noarchive, nosnippet
הוצאת העמוד מהאינדקס לאחר תאריך ספציפי (בדומה לטג ה META הזהה):
X-Robots-Tag: unavailable_after: 23 Jul 2007 10:30:00 GMT
הוספת כותרת HTTP ניתמכת ע”י כל אחת מפלטפורמות הפיתוח כגון PHP ,ASP וכדומה, הן ברמה של עמוד ספציפי והן ברמה של ספריה או אף אתר שלם, כמו גם ע”י IIS ו - APACHE.
נהניתם מהפוסט? קבלו עדכונים ברסס







