# =================================== # Generator: http://pixelfolk.net/tools/robots # Erstellt am: 04.08.2017, 07:27 # Webseite: http://wibss.ch # =================================== Sitemap: http://www.wibss.ch/sitemap.xml Sitemap: http://wibss.ch/sitemap.xml Sitemap: https://www.wibss.ch/sitemap.xml Sitemap: https://wibss.ch/sitemap.xml # =================================== # Folgende Seiten sollen nicht indexiert werden: # =================================== User-agent: * Disallow: /admin/ Disallow: /cgi-bin/ Disallow: /temp/ Disallow: /testpages/ Disallow: /wp-admin/ # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: baiduspider Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: nutch Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: cityreview Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebReaper Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebCopier Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: Offline Explorer Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: HTTrack Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: Microsoft.URL.Control Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: EmailCollector Disallow: / # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: penthesilea Disallow: /