# robots.txt fuer http://www.crazylose.de
User-agent: *
Disallow: /temp/       # Die Dateien sind sehr kurzlebig
Disallow: /logfiles/   # Die ändern sich jeden Tag
Disallow: /images/     # Bilder nicht downloaden
Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren
Disallow: /crons/
Disallow: /game-images/
Disallow: /acp-pro/
Disallow: /adminforce/
Disallow: /cgi-bin/
Disallow: /ads/
Disallow: /lib/
Disallow: /mysqldumper/


# Massendownloader vom CGI Verzeichnis fernhalten
User-agent: wget
User-agent: webzip
User-agent: webmirror
User-agent: webcopy
Disallow: /images/     # Bilder nicht downloaden
Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren
Disallow: /crons/
Disallow: /game-images/
Disallow: /acp-pro/
Disallow: /adminforce/
Disallow: /cgi-bin/
Disallow: /ads/
Disallow: /lib/
Disallow: /mysqldumper/