# Erlaube das Crawlen für alle Seiten User-agent: * Allow: / # Schliesse folgende Crawler komplett aus: User-agent: WebReaper User-agent: WebCopier User-agent: Offline Explorer User-agent: HTTrack User-agent: Microsoft.URL.Control User-agent: EmailCollector User-agent: penthesilea User-agent: Bytespider User-agent: DataForSeoBot User-agent: AhrefsBot Disallow: / # # Sitemap: https://www.e-partner-webshop.de/export/sitemaps/sitemapIndex_shop_1.xml Sitemap: https://www.sovido.de/61b32f130e0db6000a4bbbf4/projects/61b32fb90e0db6000a4bbc1d/domains/e-partner-webshop.de/sitemap