No todos los bots de IA hacen lo mismo. Jazui los clasifica por su uso:
- Entrenamiento: recogen contenido para entrenar modelos (por ejemplo GPTBot, CCBot o Google-Extended).
- Buscador: indexan para las respuestas de un buscador con IA (por ejemplo OAI-SearchBot o PerplexityBot).
- A petición del usuario: leen una página porque alguien se lo ha pedido al asistente (por ejemplo ChatGPT-User o Claude-User).
Bloquear a los de entrenamiento es una decisión de cada uno; bloquear a los de búsqueda o a los que responden a usuarios hace que la IA no pueda citarte.
Qué puedes hacer con cada uno
En Ajustes del sitio › Bots de IA está la lista completa, con su empresa, su uso y sus peticiones y rechazos de los últimos 30 días (primero los que te han visitado). Para cada uno:
| Política | Efecto |
|---|---|
| Permitir (por defecto) | Recibe tus páginas renderizadas como cualquier bot. |
| Bloquear | Recibe un 403 de Jazui (X-Jazui-Blocked: ai-bot). Solo para los bots que pasan por tu integración. |
| Bloquear y robots.txt | Además añade Disallow: / para ese bot en el robots.txt que genera Jazui, para que los que respetan robots.txt ni lo intenten. |
Hay acciones por lotes, incluida Bloquear los de entrenamiento. Algunos (como Google-Extended o Applebot-Extended) no visitan páginas: solo existen en robots.txt, así que para ellos solo hay «Bloquear y robots.txt».
llms.txt y Markdown para IA
Para que la IA te entienda mejor, Jazui publica para cada sitio verificado un llms.txt (índice de tu sitio para modelos de lenguaje) y una versión en Markdown de cada artículo del blog, enlazada desde su <head>. La descripción del llms.txt se escribe en Ajustes del sitio › Sitemap y robots.txt. Cómo publicarlos en tu dominio está en Sitemap, robots y llms.txt.
Medir
En Tráfico de bots ves cuántas peticiones hacen los bots de IA, y en la pestaña Visitas desde IA, cuántas personas llegan a tu web desde las respuestas de ChatGPT, Perplexity, Gemini y otros asistentes. Con Cómo te ve la IA compruebas qué lee un bot de IA de cualquier página.