Anthropic
ClaudeBot es el rastreador web de Anthropic que recopila datos de entrenamiento para Claude, uno de los asistentes de IA más destacados, conocido por su enfoque centrado en la seguridad.
Current Rank
#3
Traffic Share
9.48%
Operator
Anthropic
Category
Rastreador de entrenamiento de IA
ClaudeBot es un rastreador web operado por Anthropic que recopila contenido web disponible públicamente para entrenar a Claude, el asistente de IA de Anthropic. Claude se caracteriza por su enfoque en la seguridad, la utilidad y la honestidad.
Anthropic creó ClaudeBot para identificar de forma transparente su actividad de rastreo. El bot respeta las directivas de robots.txt, lo que da a los propietarios de sitios web control total sobre si su contenido se usa para el entrenamiento de Claude.
ClaudeBot se centra en contenido web público y de alta calidad. Anthropic ha declarado su compromiso con unas prácticas responsables de recopilación de datos, en línea con su misión de desarrollar una IA segura.
Para evitar que ClaudeBot rastree tu sitio web, añade lo siguiente a tu archivo robots.txt:
robots.txt
User-agent: ClaudeBot Disallow: /
Bloquear ClaudeBot evita que tu contenido se use en el entrenamiento de futuros modelos de Claude. Sin embargo, Claude puede seguir mencionando tu marca a partir de datos de entrenamiento anteriores. El bloqueo no afecta a la capacidad de Claude de resumir o analizar tu contenido si un usuario lo pega directamente.
Anthropic no publica actualmente los rangos de IP de ClaudeBot. Verifica ClaudeBot consultando la cadena User-Agent. Para bloquearlo a nivel de servidor, revisa en tus registros de acceso el user-agent de ClaudeBot.
Cadena User-Agent: ClaudeBot (https://www.anthropic.com)
Respeta las directivas de robots.txt
Se usa exclusivamente para entrenar los modelos de IA de Claude
Anthropic publica documentación sobre el rastreador y respeta las solicitudes de exclusión
Filtra el contenido privado y de pago
Agentes relacionados de Anthropic: Claude-User obtiene páginas durante las conversaciones en directo con los usuarios y Claude-SearchBot indexa contenido para la búsqueda web de Claude. ClaudeBot solo recopila datos de entrenamiento, y cada agente puede permitirse o bloquearse por separado en robots.txt.
Permitir ClaudeBot implica que tu contenido puede influir en cómo Claude habla de tu marca, tu sector y tus productos. Dado que millones de personas y empresas usan Claude, una representación precisa en sus datos de entrenamiento puede beneficiar a tu marca.
Claude está integrado en muchos flujos de trabajo empresariales y herramientas de productividad. El contenido que indexa ClaudeBot alimenta la base de conocimientos de Claude, que es la que impulsa estas aplicaciones.
LLM Pulse monitors how AI models mention your brand. See which crawlers visit your site and how that translates into AI visibility.