# robots.txt fuer http://www.it-bessler.de User-agent: Googlebot Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren Disallow: /temp/ # Die Dateien sind sehr kurzlebig Disallow: /logfiles/ # Die ändern sich jeden Tag Disallow: /images/ # Bilder nicht downloaden Disallow: /styles/ # Nicht downloaden Disallow: /java/ # Nicht downloaden