זמן קריאה: < 1 דקות
דני סאליבן כותב כאן כי גוגל החלו למלא טפסים ולסרוק דפים באתר שעד כה נתפסו כנסתרים מעיניי מנוע החיפוש. ההודעה לגבי שינוי זה מקורה
בגוגל, הטוענת כי במהלך החודשים האחרונים מנוע החיפוש שלה מילא טפסים במספר מצומצם של אתרים איכותיים במיוחד. בצורה זו רובוטי הסריקה של גוגל יכולים להגיע לדפי HTML ולגלות דפים חדשים שעד כה לא היו זמינים לגולשים שחיפוש מידע בגוגל.
לפי גוגל ניתן לחסום את הסריקה של דפי הטפסים על ידי שימוש בקובץ robots.txt. כמו כן, היא מדווחת כי טפסים בעלי שדות סיסמא או לוגין של משתמשים לא יסרקו.
