# robots.txt fuer http://www.beispiel.de/
User-agent: *
Disallow: /admin/       # Die Dateien sind sehr kurzlebig
Disallow: /classes/   # Die ändern sich jeden Tag
Disallow: /functions/     # Bilder nicht downloaden
Disallow: /img/    # CGI Ausgaben nicht indexieren
Disallow: /lib/
Disallow: /modules/
Disallow: /sites/
Disallow: /skins/
Disallow: /uploads/
Disallow: /templates/
Disallow: redirect.php
Disallow: includes.php  # Die news.html ändert sich täglich
Disallow: compresscss.php
Disallow: compressjs.php
Disallow: settings.php