User-agent: * Disallow: /_include/ # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebReaper User-agent: WebCopier User-agent: Offline Explorer User-agent: HTTrack User-agent: Microsoft.URL.Control User-agent: EmailCollector User-agent: penthesilea Disallow: / # Robots die durchdrehen fliegen raus User-agent: GagaRobot Disallow: / # Alle PDF-Dateien werden ignoriert Disallow: /*.pdf$ # Die Datei wird ignoriert Disallow: /ueber-uns/_aside-team-inc.php Disallow: /ueber-uns/_kontakt-inc.php
Folgende Keywords wurden erkannt. Überprüfe die Optimierung dieser Keywords für Deine Seite.
(Nice to have)