#Setetup roles for crawling bots User-Agent: Yandex Disallow: / User-Agent: YandexBot Disallow: / User-Agent: Applebot Disallow: / User-Agent: PetalBot Disallow: / User-Agent: MJ12bot Disallow: / User-Agent: DotBot Disallow: / User-Agent: SemrushBot Disallow: / User-Agent: BLEXBot Disallow: / User-Agent: coccocbot-web Disallow: / User-Agent: SeekportBot Disallow: / User-Agent: AwarioBot Disallow: / User-Agent: SentiBot Disallow: / User-Agent: Bytespider Disallow: / User-Agent: Baiduspider Disallow: / User-Agent: DataForSeoBot Disallow: / User-agent: * Crawl-delay: 5
Folgende Keywords wurden erkannt. Überprüfe die Optimierung dieser Keywords für Deine Seite.
(Nice to have)