# robots.txt für Thomas Weiss Präzisionsdrehteile GmbH # ########################################################## # Diese Datei gibt an, welche Unterverzeichnisse NICHT durch # Crawler (Spider, Robots, etc...) durchsucht werden sollen! # Alle Robots ausschließen (nur bestimmte Verzeichnisse) User-agent: * Disallow: /form/ Disallow: /inc/ # Kompletter Ausschluß User-agent: ALittle Client Disallow: / User-agent: AhrefsBot Disallow: / User-agent: Baiduspider Disallow: / User-agent: MJ12bot Disallow: / User-agent: Nimbostratus Disallow: / User-agent: Pixray Disallow: / User-agent: scalaj-http Disallow: / User-agent: SemrushBot Disallow: / User-agent: Sogou web spider Disallow: / User-agent: Turnitin Disallow: / User-agent: Turnitinbot Disallow: / User-agent: webprosbot Disallow:/
Se han encontrado las siguientes palabras clave. Comprueba si esta página está bien optimizada para cada palabra clave en concreto.
(Deseable)