# robots.txt User-agent: msnbot Crawl-delay: 1800 User-agent: * # Alle Suchmaschinen werden angesprochen Disallow: /cgi-bin/ # Keinen Zugriff auf die folgenden Resourcen Disallow: /shell-cgi/ Disallow: /statistik/ Disallow: /cache/ Disallow: /temp/ Disallow: /test/