User-agent: * Disallow: /dataset/rate/ Disallow: /revision/ Disallow: /dataset/*/history Disallow: /api/ User-agent: SemrushBot Disallow: / User-agent: AhrefsBot Disallow: / User-agent: Scrapy Disallow: / Crawl-Delay: 10
Se han encontrado las siguientes palabras clave. Comprueba si esta página está bien optimizada para cada palabra clave en concreto.
(Deseable)