Bots de IA permitidos en robots.txt

Qué significa

Correcto: Su robots.txt da la bienvenida a los asistentes de IA. ChatGPT, Claude, Gemini y Perplexity pueden leer su sitio.

Parcial: Su robots.txt bloquea algunos asistentes de IA. Revise las reglas para GPTBot, ClaudeBot, Google-Extended y PerplexityBot.

Necesita mejoras: Su robots.txt bloquea a los asistentes de IA impidiendo que lean su sitio. Abra el acceso a GPTBot, ClaudeBot, Google-Extended y PerplexityBot para que ChatGPT y otros servicios puedan encontrarle.

Permitir rastreadores de IA en /robots.txt

robots.txt permite el acceso por defecto, por lo que los rastreadores de IA solo se bloquean mediante un Disallow explícito; no es necesario indicar cada bot. Actúe únicamente si una regla Disallow impide que los rastreadores accedan al contenido que desea mostrar en las respuestas de IA. Nota: Google-Extended es independiente; controla si Google puede usar su contenido para entrenar y fundamentar Gemini y Vertex AI, no si Google puede rastrear o indexar su sitio.

Guía completa

Paso a paso para su plataforma: por qué lo leen los motores de IA y cómo comprobar el resultado: robots.txt: lista de permitidos para bots de IA + Sitemap.