User-agent: * Disallow: /img User-Agent: sitecheck.internetseer.com Disallow: / # Diese robots.txt wurde vor allem gemacht, # damit es keine 404-File-not-Found-Fehlermeldung mehr gibt. # Somit wird das Log-File etwas uebersichtlicher, d.h. # es werden nur noch die richtig fehlenden Dateien angezeigt...