[Alexander Keil]

Hallo!

Wie sieht denn die ideale robots.txt aus? Sollte man zuerst die Allow’s bringen oder erst die Disallow’s? Auf meiner Webseite würde ich gerne ein paar Verzeichnisse sperren, und hätte das mal so gemacht:

User-agent: *
Disallow: /bin
Disallow: /App_data
Disallow: /content
Disallow: /picture_library
Disallow: /service
Allow: /

Hebt der letzte „Allow“ evtl. die Disallow’s wieder auf?

Gruß & Danke!

Alex

[Consi]

Du brauchst gar keinen Allow, sondern nur Disallows. Die Suchmaschinen gehen grundsätzlich davon aus, dass sie alle Inhalte deiner Internetseite besuchen dürfen.

[Autor]

Beiträge