Cloudflare establece un plazo para obligar a las empresas de IA a pagar a los editores
Cloudflare ha anunciado un cambio de política histórico diseñado para desacoplar el rastreo de búsqueda tradicional del entrenamiento de IA y los servicios agénticos. Mediante la implementación de nuevos valores predeterminados estrictos, el gigante de la computación perimetral (edge computing) busca proteger la propiedad intelectual y crear un ecosistema económico sostenible para los editores web.
El fin de los rastreadores de "uso mixto"
En un movimiento que desafía directamente el statu quo actual del raspado de datos (data-scraping), Cloudflare ha establecido el 15 de septiembre de 2026 como fecha límite para abordar el aumento de los rastreadores de "uso mixto". Se trata de bots que combinan la indexación de búsqueda tradicional con el entrenamiento de modelos de IA y funciones agénticas. A partir de esa fecha, la configuración predeterminada de Cloudflare bloqueará automáticamente el acceso de estos rastreadores híbridos a cualquier página que contenga anuncios.
Este cambio de política se aplica a todos los nuevos clientes de Cloudflare, a los nuevos sitios creados por clientes existentes y a todos los usuarios actuales del nivel gratuito. El objetivo es obligar a las empresas de IA a distinguir su intención: si un bot desea indexar un sitio para búsquedas, sigue un camino; si desea ingerir datos para entrenar un modelo de lenguaje extenso (LLM), debe seguir otro, uno que potencialmente requiere compensación.
Desafiando el dominio del gigante de las búsquedas
Un factor determinante detrás de esta decisión es la percepción de una ventaja injusta por parte de los principales motores de búsqueda. Cloudflare destacó específicamente que el motor de búsqueda más grande del mundo —que se entiende ampliamente que es Google— tiene actualmente acceso a aproximadamente "el doble de información" que sus competidores de IA.
Si bien Google ofrece "Google Extended" para permitir que los editores opten por no participar en el entrenamiento de IA sin afectar su visibilidad en las búsquedas, su Googlebot insignia continúa rastreando extensamente para potenciar funciones como los AI Overviews. La intervención de Cloudflare busca nivelar el campo de juego, asegurando que las empresas de IA no puedan aprovecharse de las masivas capacidades de indexación de los motores de búsqueda para entrenar sus modelos de forma gratuita.
Hacia modelos de "pago por uso"
Más allá del simple bloqueo, Cloudflare está construyendo activamente la infraestructura para una nueva economía de contenidos. La empresa está evolucionando su mercado de "Pay Per Crawl" hacia un modelo de "Pay Per Use" más sofisticado. Bajo este marco, los editores pueden cobrar a las empresas de IA no solo por el acto de obtener datos, sino cuando ese contenido realmente genera valor.
Para pilotar esto, Cloudflare se ha asociado con Ceramic.ai y You.com. A través de estas alianzas, los editores pueden recibir compensación directa cuando su contenido aparece en los resultados de búsqueda de IA de Ceramic o cuando You.com accede a material premium. Este cambio aborda una ineficiencia crítica en la web actual: los datos de Cloudflare revelan que más del 50% del tráfico de los rastreadores de IA se desperdicia volviendo a obtener páginas que no han cambiado, un proceso que agota tanto el ancho de banda de los editores como los recursos de computación de la IA.
Por qué esto es importante para el panorama de la IA
A medida que el tráfico no humano supera ahora al tráfico humano en internet, la era de "rastrear todo gratis" está chocando contra un muro. El movimiento de Cloudflare señala una transición hacia una web más regulada y transaccional. Para los desarrolladores de IA, esto significa que la era de la adquisición de datos sin fricciones y a coste cero está llegando a su fin, lo que requiere relaciones más transparentes y cooperativas con los creadores de contenido para garantizar la viabilidad de los datos a largo plazo.
Conclusiones clave
- Bloqueo predeterminado: A partir del 15 de septiembre de 2026, Cloudflare bloqueará por defecto a los rastreadores de "uso mixto" en las páginas que contienen anuncios.
- Cambio en la monetización: Cloudflare está pasando de un modelo de "Pay Per Crawl" a uno de "Pay Per Use", lo que permite a los editores cobrar a las empresas de IA basándose en el valor del contenido.
- Ganancias de eficiencia: La nueva política tiene como objetivo reducir el 50% del tráfico de rastreo de IA que actualmente se desperdicia volviendo a obtener páginas web que no han cambiado.
