User-agent: * Disallow: /dataset/rate/ Disallow: /revision/ Disallow: /dataset/*/history Disallow: /api/ User-agent: SemrushBot Disallow: / User-agent: AhrefsBot Disallow: / User-agent: Scrapy Disallow: / Crawl-Delay: 10
Folgende Keywords wurden erkannt. Überprüfe die Optimierung dieser Keywords für Deine Seite.
(Nice to have)