User-agent: * Crawl-delay: 10 # Paths (clean URLs) Disallow: /admin/ Disallow: /comment/reply/ Disallow: /contact/ Disallow: /logout/ Disallow: /node/add/ Disallow: /search/ Disallow: /user/register/ Disallow: /user/password/ Disallow: /user/login/ # Paths (no clean URLs) Disallow: /?q=admin/ Disallow: /?q=comment/reply/ Disallow: /?q=contact/ Disallow: /?q=logout/ Disallow: /?q=node/add/ Disallow: /?q=search/ Disallow: /?q=user/password/ Disallow: /?q=user/register/ Disallow: /?q=user/login/ # others Disallow: /l/ Disallow: /dlp/ Disallow: /reg/ Disallow: /box/ Disallow: /registration/ #Disallow: /info/ Disallow: /gh/ Disallow: /n/ Disallow: /node/ Disallow: /tracking Disallow: /pxcon Disallow: /*? Disallow: /logout.html Disallow: /Logout.html Disallow: /boost_stats.php Disallow: /print/ Disallow: /printpdf/ Allow: /gh/home1.html Allow: /gh/home2.html Allow: *.css? Allow: *.js? Allow: *.jpg? Allow: *.png? User-agent: MJ12bot Disallow: /
Shares / Likes / Kommentare |
---|
0 |
Es werden nur die Daten zu der angegebenen URL abgefragt und nicht zu einer eventuell vorhandenen und auf der Seite verlinkten Facebook Seite.
Folgende Keywords wurden erkannt. Überprüfe die Optimierung dieser Keywords für Deine Seite.
(Nice to have)