No existe una política de bots de IA única. Lo razonable para un blog editorial es distinto de lo razonable para una clínica o una tienda. Esta matriz ayuda a proponer una decisión inicial y a documentarla con el cliente.
La matriz de partida
| Tipo de cliente | Entrenamiento | Búsqueda con IA | Visita a pedido |
|---|---|---|---|
| Servicios locales | Opcional | Permitir | Permitir |
| Tienda online | Valorar | Permitir | Permitir |
| Medio o contenido propio | Evaluar bloquear | Permitir si buscas citas | Permitir |
| SaaS con documentación pública | Valorar | Permitir | Permitir |
| Membresía o contenido de pago | Bloquear | Proteger con acceso | Proteger con acceso |
| Sitio nuevo sin autoridad | Permitir | Permitir | Permitir |
Es un punto de partida, no una regla. Los nombres y funciones de cada bot deben confirmarse en la documentación de su empresa.
Cómo aplicarla en cinco pasos
- Clasifica al cliente y su modelo de negocio.
- Pregunta qué quiere proteger y qué quiere ganar con la visibilidad.
- Genera el archivo con el generador de robots.txt con política de IA.
- Valídalo con el comprobador y revisa que Googlebot y Bingbot sigan permitidos.
- Documenta la decisión y la fecha de revisión.
Lo que conviene dejar por escrito
Anota qué bots se bloquean, por qué, quién lo aprobó y cuándo se revisará. Si el cliente cambia de opinión, tendrás el contexto. Revisa el archivo cada seis meses porque aparecen bots nuevos y cambian las políticas de las empresas.
La guía de qué bots de IA permitir en robots.txt detalla cada rastreador.
Una advertencia útil
El robots.txt es una solicitud, no un control de acceso. Para contenido que no debe ser público, la solución es una barrera real (login, contraseña o no publicarlo). Si el cliente espera blindaje legal, remítelo a un abogado especializado: tu servicio es técnico y estratégico, no jurídico.
En resumen
- La matriz de partida: Es un punto de partida, no una regla.
- Cómo aplicarla en cinco pasos: Clasifica al cliente y su modelo de negocio.; Pregunta qué quiere proteger y qué quiere ganar con la visibilidad.
- Lo que conviene dejar por escrito: Anota qué bots se bloquean, por qué, quién lo aprobó y cuándo se revisará.
- Una advertencia útil: El robots.txt es una solicitud, no un control de acceso.
Preguntas frecuentes
¿Cambio la política si el cliente cambia de modelo de negocio?
Sí, revísala cuando cambie el modelo, el catálogo o la estrategia de contenido.
¿Y si un cliente quiere bloquearlo todo?
Explica las consecuencias: puede dejar de ser citado en asistentes. Si lo decide con esa información, documenta y ejecuta.