Sitemap: sitemap.xml # Diese Webcrawler schließe ich aus User-agent: Sidewinder Disallow: / User-agent: Microsoft.URL.Control Disallow: / User-agent: Microsoft.URL.Control Disallow: / User-agent: AMZNKAssocBot Disallow: / User-agent: SimilarPages/Nutch-1.0-dev Disallow: / User-agent: SimilarPages Disallow: / User-agent: SimilarPages Nutch Crawler Disallow: / # Diese Verzeichnisse/Dateien sollen nicht durchsucht werden User-agent: * Disallow: /clipboard.asp Disallow: /kasse1.asp Disallow: /kasse2.asp Disallow: /stats.asp Disallow: /details.asp?wk=3 Disallow: /details.asp?wk=1 Disallow: /details.asp?wk=9 Disallow: /intern Disallow: /adminchange.asp Disallow: /agnmessage.asp Disallow: /agnmessage1.asp Disallow: /agnmessage2.asp Disallow: /autom_artikelscan.asp Disallow: /bestellbestaetigung_sms.asp Disallow: /bestellbestaetigung7.asp Disallow: /bestellbestaetigung7allg.asp Disallow: /bestellbestaetigung7bm.asp Disallow: /bestellbestaetigungb7.asp Disallow: /bestellbestaetigunglking.asp Disallow: /bild.asp Disallow: /bilddetail.asp Disallow: /bilddetaillaterne.asp Disallow: /c.asp Disallow: /intern/default.asp