User-Agent: * Allow: / # folders Disallow: /t3lib/ Disallow: /typo3/ Disallow: /typo3conf/ Allow: /typo3conf/ext/ Allow: /typo3temp/ # parameters Disallow: /*?id=* # non-realurl URLs Disallow: /*cHash # no cHash Disallow: /*tx_powermail_pi1 # no powermail thanks pages Disallow: *.sql Disallow: *.sql.gz ### Disable some useless crawler-bots ### User-agent: wget User-agent: sitecheck.internetseer.com User-agent: Zealbot User-agent: MSIECrawler User-agent: SiteSnagger User-agent: WebStripper User-agent: WebCopier User-agent: Teleport User-agent: TeleportPro User-agent: WebZIP User-agent: HTTrack User-agent: k2spider User-agent: WebReaper Disallow: / # sitemap #Sitemap: https://www.example.com/sitemap.xml
Folgende Keywords wurden erkannt. Überprüfe die Optimierung dieser Keywords für Deine Seite.
(Nice to have)