Herramienta gratis de SEO y rastreo IA
Generador gratuito de robots.txt
Cree un robots.txt listo para producción en WordPress, Blogger, Wix, Shopify y cualquier CMS. Controle rastreadores de búsqueda y bots de IA (GPTBot, ClaudeBot, PerplexityBot, Google-Extended y más), añada sitemaps, y descargue o copie con un clic.
Sitemap(s)
Permitir directorios
Bloquear directorios
Permitir user-agents
Elija Todos para incluir cada rastreador de abajo (quedarán marcados y bloqueados). O elija bots concretos de búsqueda e IA.
Buscadores y bots SEO
Rastreadores de IA
Bloquear user-agents
Bloquee rastreadores de entrenamiento (por ejemplo GPTBot, ClaudeBot, Google-Extended) y deje pasar bots de búsqueda si quiere citas de IA sin uso para entrenar modelos.
Buscadores y bots SEO
Rastreadores de IA