Herramienta gratuita de búsqueda con IA
Generador de robots.txt para IA
Decide cuáles de los 36 rastreadores de IA, bots de búsqueda y asistentes pueden leer tu sitio y consigue en segundos un robots.txt listo para subir.
Empieza con un ajuste predefinido
Elige un punto de partida y ajusta después cualquier bot de abajo.
Elige bot por bot
Desactiva un bot para bloquearlo. Junto a cada uno aparece la empresa que lo gestiona.
Reglas opcionales para todos los bots
Una ruta por línea. Los bots que permitas no rastrearán estas rutas.
Opcional. Ayuda a todos los rastreadores a encontrar tus páginas.
Permitidos: 36 Bloqueados: 0
Publícalo
Sube el archivo a la raíz de tu dominio, por ejemplo example.com/robots.txt. Después comprueba cómo lo lee cada bot de IA.
Comprueba tu robots.txt publicadoAntes de bloquear
¿Qué bots de IA deberías bloquear?
Los bots de IA se dividen en tres grupos. Bloquear cada grupo tiene un coste distinto, así que decide grupo por grupo en lugar de bloquearlo todo.
Rastreadores de búsqueda con IA
Indexan páginas para que los buscadores con IA y sus respuestas puedan citarlas y enlazarlas.
Si los bloqueas: la búsqueda con IA dejará de citar y enlazar tus páginas.
OAI-SearchBot, PerplexityBot, Claude-SearchBot, Applebot
Asistentes de IA activados por el usuario
Acceden a una página cuando alguien pide a un asistente de IA que la abra o la lea.
Si los bloqueas: los asistentes no podrán abrir tus páginas cuando alguien les pregunte por ti.
ChatGPT-User, Perplexity-User, Claude-User, Meta-ExternalFetcher
Rastreadores de entrenamiento de IA
Recopilan páginas para entrenar modelos de IA y crear sus conjuntos de datos.
Si los bloqueas: los modelos futuros aprenderán menos sobre ti, aunque la búsqueda con IA podrá seguir citándote.
GPTBot, ClaudeBot, Claude-Web, anthropic-ai
Preguntas sobre robots.txt e IA
Cómo leen los rastreadores de IA el robots.txt y qué cambia si los bloqueas.
Explora más herramientas gratuitas de búsqueda con IA
LLM Pulse es la plataforma integral de búsqueda con IA y GEO. Usa estas herramientas gratuitas para auditar cómo ven los motores de IA tu marca y luego monitoriza todo en un solo lugar.
Descubre con qué frecuencia los motores de IA mencionan tu marca en ChatGPT, Perplexity y Gemini.
Comprueba si las respuestas de IA mencionan tu marca en los prompts que importan.
Mide hasta qué punto los motores de IA descubren tu marca.
Busca anuncios observados en ChatGPT por anunciante, país, mensaje y fecha.
Crea una regex de GA4 que agrupe ChatGPT, Perplexity, Gemini y otros asistentes de IA en un único canal.
Puntúa tu dominio según los archivos, formatos e interfaces que buscan los agentes de IA.
Comprueba si los motores de IA pueden rastrear y renderizar tus páginas.
Comprueba si los rastreadores de IA tienen permiso para leer tu sitio.
Elige qué rastreadores de IA, bots de búsqueda y asistentes pueden leer tu sitio y obtén un robots.txt listo para usar.
Genera un archivo llms.txt para que los rastreadores de IA entiendan tu sitio.
Comprueba si tu sitio aparece en Common Crawl, el corpus abierto con el que se entrena la mayoría de los modelos de IA.
Comprueba si la estructura de tu sitio ayuda a los motores de IA a entenderte.
Audita tus datos estructurados para que la IA y los motores de búsqueda entiendan tus páginas.
Evalúa el grado de optimización de una página para los motores de respuesta de IA.
Comprueba si tu contenido está listo para citarse en las respuestas de IA.
Valida tu feed de productos para ChatGPT Shopping.
Elimina caracteres ocultos, espaciados extraños y formatos sobrantes del texto pegado.
Detecta caracteres de marca de agua invisibles en el texto, decodifica las cargas ocultas y elimínalos del texto.
Descubre qué bots de IA leen tu web
Descubre qué bots de IA visitan realmente tu web, qué páginas leen y con qué frecuencia las respuestas de IA mencionan tu marca.