# robots.txt fuer http://www.mc-blatten.ch/
User-agent: *
Disallow: /cron/       # Die Dateien sind sehr kurzlebig
Disallow: /css/   # Die ändern sich jeden Tag
Disallow: /doc/     # Bilder nicht downloaden
Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren
Disallow: /fundgrube   # Die news.html ändert sich täglich
Disallow: /java   # Die news.html ändert sich täglich
Disallow: /lib   # Die news.html ändert sich täglich
Disallow: /pic   # Die news.html ändert sich täglich
Disallow: /scripts   # Die news.html ändert sich täglich
Disallow: /tmp   # Die news.html ändert sich täglich
Disallow: /*.php   # Die news.html ändert sich täglich
Allow: /index.php