meta name = "robots"

<< zurück

Die Meta-Angabe robots dient dazu, einem Suchdienst das Auslesen einer Webseite zu verbieten. Dieses Verbieten kann sinnvoll sein, wenn z.B. Testseiten auf den Server geladen werden oder wenn es sich um irrelevante Seiten handelt.
Beispiel:

noindex,nofollow = Seite nicht auslesen, Links nicht folgen
index,nofollow = Seite auslesen, Links nicht folgen
noindex,follow = Seite nicht indexieren, aber den Links folgen
index,follow = Seite auslesen, allen Links folgen

Hinweis: Webseiten werden auch ohne die Angabe "index, follow" ausgelesen. In Dublin Core wird das robots-Tag nicht verwendet. Statt dessen empfiehlt sich der Einsatz der Datei robots.txt.
Beim Einsatz der Datei robots.txt ist eine wiederholte Angabe innerhalb der HTML-Seite durch das robots-Tag nicht nötig.

Beachten Sie: Durch Eingabe von "http://www.IhreDomain.de/robots.txt" kann ein neugieriger User den Pfad zu Ihren "geheimen Testbereichen" ausfindig machen und sich dann z.B. Ihre verbotenen Seiten anschauen.
Diejenigen Seiten, die in der Datei robots.txt aufgeführt sind, sollen aber i.d.R. weder indexiert noch von irgendjemandem betrachtet werden.
Wenn es Ihnen darauf ankommt, dass dort niemand herumschnüffelt, empfiehlt es sich, diese Bereiche mit .htaccess passwortgeschützt zu sichern.

info@metatab.de