Comprobador de datos de entrenamiento de IA
de
Common Crawl es el corpus web abierto que alimenta la mayoría de los datos de entrenamiento de IA. Comprueba si tus páginas están en él, consulta las URLs reales capturadas y aprende qué corregir.
Los grandes modelos de lenguaje aprenden de la web abierta, y Common Crawl es de donde procede la mayor parte de esa web. Descubre si tus páginas consiguieron entrar.
Comprueba el corpus abierto con el que se entrenan los modelos de IA
Cobertura en los rastreos mensuales recientes
URLs reales capturadas de tu sitio
Una puntuación de presencia sencilla
¿Qué comprueba esta herramienta?
Common Crawl es un archivo de la web gratuito y de periodicidad mensual, y la mayor fuente pública de datos de entrenamiento de IA. Aparecer en él significa que los rastreadores que alimentan a los modelos de IA pudieron acceder a tus páginas.
Comprueba tu sitio
Usamos tu correo para enviarte este informe y nuestra newsletter sobre búsqueda con IA. Puedes darte de baja cuando quieras.
Descubre si los modelos de IA se entrenaron con tu contenido
La mayoría de los grandes modelos de lenguaje aprenden de la web abierta, y Common Crawl es la mayor fuente pública de esa web. Si tus páginas no están en Common Crawl, es menos probable que hayan formado parte de los datos con los que se entrenaron los modelos de IA actuales.
Esta herramienta gratuita comprueba si tu dominio aparece en las capturas recientes de Common Crawl, muestra las URLs reales capturadas y te indica qué corregir si tu contenido no aparece.
Qué te muestra este comprobador
Este comprobador gratuito convierte el índice público de Common Crawl en una respuesta clara sobre tu huella en el entrenamiento de IA.
Presencia en los rastreos recientes
Si tu dominio aparece en las capturas más recientes de Common Crawl.
Muestras de páginas capturadas
URLs de ejemplo reales de tu sitio que Common Crawl capturó.
Fecha de la última captura
Cuándo capturó Common Crawl tus páginas por última vez.
Recomendaciones prácticas
Próximos pasos claros si los rastreadores de IA no encuentran tu contenido.
Cómo funciona
Comprueba tu huella en los datos de entrenamiento de IA en tres pasos
Un vistazo rápido a cómo comprobamos tu cobertura en Common Crawl.
Introduce tu sitio web
Indícanos el dominio que quieres comprobar. No hace falta cuenta.
Comprobamos los rastreos recientes
Consultamos el índice de Common Crawl en sus capturas mensuales más recientes.
Recibe tu informe
Descubre si te capturaron, con URLs de ejemplo reales y qué corregir.
Más sobre los datos de entrenamiento de IA
Respuestas a las preguntas más habituales sobre Common Crawl y los datos de entrenamiento de IA.
Explora más herramientas gratuitas de búsqueda con IA
LLM Pulse es la plataforma integral de búsqueda con IA y GEO. Usa estas herramientas gratuitas para auditar cómo ven los motores de IA tu marca y luego monitoriza todo en un solo lugar.
Descubre con qué frecuencia los motores de IA mencionan tu marca en ChatGPT, Perplexity y Gemini.
Comprueba si las respuestas de IA mencionan tu marca en los prompts que importan.
Descubre qué posición ocupa tu marca en la búsqueda con IA frente a los competidores que nombran las respuestas de IA.
Mide hasta qué punto los motores de IA descubren tu marca.
Busca anuncios observados en ChatGPT por anunciante, país, mensaje y fecha.
Crea una regex de GA4 que agrupe ChatGPT, Perplexity, Gemini y otros asistentes de IA en un único canal.
Puntúa tu dominio según los archivos, formatos e interfaces que buscan los agentes de IA.
Comprueba si los motores de IA pueden rastrear y renderizar tus páginas.
Comprueba si los rastreadores de IA tienen permiso para leer tu sitio.
Elige qué rastreadores de IA, bots de búsqueda y asistentes pueden leer tu sitio y obtén un robots.txt listo para usar.
Encuentra todos los sitemaps XML de un sitio, también los que robots.txt no incluye, y los problemas que hay que corregir.
Genera un archivo llms.txt para que los rastreadores de IA entiendan tu sitio.
Comprueba si tu sitio aparece en Common Crawl, el corpus abierto con el que se entrena la mayoría de los modelos de IA.
Comprueba si la estructura de tu sitio ayuda a los motores de IA a entenderte.
Audita tus datos estructurados para que la IA y los motores de búsqueda entiendan tus páginas.
Evalúa el grado de optimización de una página para los motores de respuesta de IA.
Comprueba si tu contenido está listo para citarse en las respuestas de IA.
Valida tu feed de productos para ChatGPT Shopping.
Elimina caracteres ocultos, espaciados extraños y formatos sobrantes del texto pegado.
Detecta caracteres de marca de agua invisibles en el texto, decodifica las cargas ocultas y elimínalos del texto.
Descubre cómo hablan realmente los motores de IA de tu marca
Saber que estás en los datos de entrenamiento es el primer paso. LLM Pulse monitoriza cómo ChatGPT, Perplexity y Gemini mencionan y citan realmente tu marca, todo en un mismo lugar.