# robots.txt for http://www.yosmin.ch # # Die folgenden Dateien sollen indiziert werden: # - index.html # - alle html files in files directory # # Zugriff f¸r alle Crawler erlauben User-agent: * # # Zugriff auf folgende Verzeichnisse sperren Disallow: /css/ Disallow: /cgi_bin/ Disallow: /db/ Disallow: /img/ Disallow: /js/ Disallow: /log/ Disallow: /php/ # # explizit erlauben der files (nicht sicher ob noetig) Allow: /files/