Die Seite ist nicht abrufbar

Diese Seite ist für den Seobility Bot nicht erreichbar. Unser Bot wird von der Robots.txt Datei ausgeschlossen. Der Seobility Bot crawlt nichts was Seobility oder * ausschließt.

Problematische URL: http://linux.die.net

# Serve relevant ads on any page:

User-agent: Mediapartners-Google
User-agent: Adsbot-Google
Disallow:

# Big, public search engines can access most of the site:

User-agent: ArchitextSpider
User-agent: DuckDuckBot
User-agent: Googlebot
User-agent: Googlebot-Image
User-agent: Googlebot-Mobile
User-agent: ia_archiver
User-agent: MJ12bot
User-agent: MSNBot
User-agent: MSNBot-Media
User-agent: Robozilla
User-agent: Scooter
User-agent: Slurp
User-agent: Teoma
User-agent: Yahoo-MMCrawler
User-agent: Yahoo-Blogs
Disallow: /include/
Disallow: /icons/
Disallow: /this-is-a-bad-url/

# Some AI crawlers need to specifically be told no:

User-agent: ClaudeBot
User-agent: cohere-ai
User-agent: FacebookBot
User-Agent: Google-Extended
User-agent: GPTBot
User-agent: PerplexityBot
Disallow: /

# Everyone else is not welcome to crawl:

User-agent: *
Disallow: /

# And here's where to find everything:

Sitemap: http://linux.die.net/sitemap.xml.gz