# robots.txt User-agent: msnbot Disallow: / User-agent: * # Alle Suchmaschinen werden angesprochen Disallow: /cgi-bin/ # Keinen Zugriff auf die folgenden Resourcen Disallow: /shell-cgi/ Disallow: /statistik/