# Internet Archiver Wayback Machine User-agent: ia_archiver Disallow: / User-agent: ia_archiver/1.6 Disallow: / # Massendownloader vom CGI Verzeichnis fernhalten User-agent: wget User-agent: webzip User-agent: webmirror User-agent: webcopy Disallow: /cgi-bin/ # Emailadress-Sammler ausschlieen User-agent: EmailCollector Disallow: / User-agent: * Disallow: /admin/ # Massendownloader fernhalten User-agent: wget User-agent: webzip User-agent: webmirror User-agent: webcopy Disallow: / User-agent: * Disallow: /cgi-bin/ # Keine Scripte lesen! User-agent: cugeCrawler 1.2 - cuge.org Disallow: / User-agent: cuge.org Disallow: / User-agent: slurp Disallow: / User-agent: MSNbot Disallow: / User-agent: PagesInventory Disallow: /
Folgende Keywords wurden erkannt. Überprüfe die Optimierung dieser Keywords für Deine Seite.
(Nice to have)