Autor Gast
Datum 09.07.2011 06:14
Beiträge:
Ist da ein Fehler oder gibt es da eine Möglichkeit wo man dies auch verhindern kann.


ich denke ja

Mit dem User-agent: * sperrst du deine angegebenen Verzeichnisse für alle Bots und Spider, das ist korrekt.

Danach schreibst du jedoch
User-agent: googlebot
Disallow: /safetytrap

Der Googlebot hält sich an deine Anweisung, da du die ja für den Googlebot explizit definiert hast.
Das Verzeichnis /safetytrap wird nicht mehr durchsucht, jedoch alles andere.

Nimm also den Eintrag vom Googlebot weg, oder ergänze diesen mit den Verzeichnisse welche nicht durchsucht werden sollen und warte ein paar Tage.

Teste das ganzen über die Webmastertools.


Flash













Diese Seite drucken
Diese Seite schließen

Dieser Artikel kommt von: OpenPHPNuke - das Open Source CMS

http://www.openphpnuke.info/