You are viewing a single comment's thread from:

RE: Seiten, die Google nicht zeigen darf

in #google7 years ago

Gibt es doch:

User-Agent: *
Disallow: *
Allow: /img/*
Allow: /sites/*

Mal ganz davon abgesehen finden Suchmaschinen den "Link für deine Kumpels" nur, wenn er irgendwo im Internet steht.
Der Google Spider-Bot geht auf neue Internetseiten, schaut welche Links da sind, merkt die sich für später, analysiert dann die aktuelle Seite, und macht dann mit den für später gemerkten Links weiter.
Wenn dein Link nirgendwo steht wird er nicht indiziert.