# robots.txt for this # Zugriff auf alle Dateien erlauben User-agent: * Disallow: /css Disallow: /files Disallow: /img Disallow: /js Crawl-delay: 60 User-agent: msnbot Crawl-delay: 120