Saltar al contenido

Comprobador de robots.txt para IA

Escribe tu web y te decimos, bot a bot, qué IAs pueden entrar según tu robots.txt.

Tratamos tu email según la Política de privacidad. ¿Tienes cuenta? Inicia sesión o crea tu cuenta con Google.

Leemos el archivo público de tu web en este momento.

Por qué importa el robots.txt para las IAs

Las IAs usan bots distintos para cosas distintas. Unos entrenan modelos; otros buscan en la web para responder con enlaces, o leen una página cuando alguien la pide en la conversación. Si bloqueas los de búsqueda, es difícil que esa IA te cite. Bloquear los de entrenamiento es una decisión legítima y no te quita de las respuestas con búsqueda.

Los bots que comprobamos

Bot (user-agent)De quiénPara qué
GPTBotChatGPT (OpenAI)Entrenamiento
OAI-SearchBotChatGPT (OpenAI)Búsqueda
ChatGPT-UserChatGPT (OpenAI)Visita pedida por un usuario
ClaudeBotClaude (Anthropic)Entrenamiento
Claude-SearchBotClaude (Anthropic)Búsqueda
Claude-UserClaude (Anthropic)Visita pedida por un usuario
anthropic-aiClaude (Anthropic)Entrenamiento
PerplexityBotPerplexityBúsqueda
Perplexity-UserPerplexityVisita pedida por un usuario
Google-ExtendedGoogle (Gemini / AI Overviews)Entrenamiento · solo en robots.txt
GooglebotGoogle (Gemini / AI Overviews)Búsqueda (buscador general)
Applebot-ExtendedApple IntelligenceEntrenamiento · solo en robots.txt
ApplebotApple IntelligenceBúsqueda (buscador general)
meta-externalagentMeta AIEntrenamiento
Meta-ExternalFetcherMeta AILectura al responder
BytespiderByteDanceEntrenamiento
AmazonbotAmazonBúsqueda
cohere-aiCohereEntrenamiento
YouBotYou.comBúsqueda
DuckAssistBotDuckDuckGoLectura al responder
MistralAI-UserMistralVisita pedida por un usuario
CCBotCommon CrawlEntrenamiento

Cómo lo comprobamos

Leemos el robots.txt público de tu web en ese momento y comprobamos la portada (/) según el estándar (RFC 9309). Lo que dice el robots.txt es lo que la web pide; cada bot decide si lo respeta.

¿Y qué dicen de verdad las IAs de tu marca?

Que un bot pueda entrar no significa que la IA te recomiende. VisibAI hace a las IAs las preguntas que harían tus clientes y te enseña si apareces, quién sale en tu lugar y qué mejorar.

Analizar mi marca gratis Ver planes