Cloudflare está obligando a las empresas de IA a elegir entre la indexación de búsqueda y el entrenamiento de modelos en sitios web con publicidad, un cambio que podría redefinir cómo se accede y monetiza un contenido digital valorado en 200.000 millones de dólares.
Cloudflare bloqueará por defecto los rastreadores web de uso mixto en páginas con publicidad a partir del 15 de septiembre de 2026, forzando a las empresas de IA a separar la indexación de búsqueda del entrenamiento de modelos, o a pagar a los editores por el acceso. La política apunta a los rastreadores que combinan en un solo bot la búsqueda tradicional, el uso de agentes de IA y el entrenamiento de modelos.
"La gran mayoría de nuestros clientes quiere que la IA interactúe con su contenido", afirmó Stephanie Cohen, directora de estrategia de Cloudflare. "Sin embargo, para quienes dependen de la publicidad y las suscripciones, el desafío es distinto: quieren seguir siendo detectables sin verse obligados a regalar su trabajo".
La medida se aplicará por defecto a los nuevos clientes de Cloudflare, a los nuevos sitios configurados por clientes existentes y a todos los usuarios gratuitos actuales, con la opción de ajustar la configuración a través de sus paneles de control. Cloudflare también está evolucionando su experimento Pay Per Crawl hacia un modelo más amplio de Pago por Uso, en el que los editores reciben una compensación cuando su contenido aparece en los resultados de búsqueda de IA o cuando un agente adquiere información premium. Ceramic.ai y You.com son los primeros socios del programa. Los datos de Cloudflare muestran que más del 50% del tráfico de rastreadores de IA implica volver a buscar páginas que no han cambiado, desperdiciando ancho de banda tanto para los editores como para las empresas de IA.
La medida aborda una ruptura estructural en el modelo económico de la web. Los motores de respuesta de IA extraen información y presentan resúmenes sin enviar a los usuarios a la fuente original. Según datos de Adexchanger, Anthropic rastrea 11.122 páginas por cada referencia que envía, mientras que las referencias de chatbots de IA generan aproximadamente un 96% menos de tráfico que la búsqueda tradicional, y los usuarios hacen clic en las fuentes citadas solo en aproximadamente el 1% de las ocasiones. Los editores han perdido entre el 20% y el 90% de su tráfico e ingresos en el último año, lo que ha creado urgencia por un nuevo marco de compensación.
Cloudflare señaló específicamente a Google por tener acceso a aproximadamente el doble de información que otras empresas de IA, ya que el gigante de las búsquedas dificulta que los clientes sigan siendo detectables sin ser utilizados para el entrenamiento de IA. Google ofrece un bot llamado Google Extended que permite a los propietarios de sitios optar por no participar en el uso de IA, pero su emblemático Googlebot rastrea para la Búsqueda, incluyendo funciones de IA como AI Overviews y AI Mode. "Ahora que la mayoría del tráfico en Internet no es humano, debemos ir más allá y actuar más rápido para que pueda surgir un ecosistema sostenible", declaró Matthew Prince, cofundador y CEO de Cloudflare, al anunciar la política.
El proveedor de infraestructura no es el único que apunta a la oportunidad de licencias de contenido. TollBit, ProRata y Microsoft también han incursionado en este espacio, cada uno con un enfoque diferente sobre quién controla los términos. Really Simple Licensing impulsa un estándar abierto antes de que una sola empresa fije las reglas. Casi el 70% de los editores espera que los acuerdos de licencia de IA generen al menos algunos ingresos en los próximos tres años, según Press Gazette, aunque la mayoría lo considera una fuente menor en la actualidad.
Cloudflare planea lanzar un panel de Attribution Business Insights que muestre cómo los bots de IA acceden al contenido, dónde se cita ese contenido y cuánto tráfico humano devuelven las diferentes plataformas de IA. Esta herramienta haría medible por primera vez la optimización para motores de respuesta —la práctica de hacer que el contenido sea localizable por la IA en lugar de solo por los motores de búsqueda.
Los riesgos del enfoque de Cloudflare son significativos. La empresa podría potencialmente controlar la identificación de agentes, la capa de permisos, la medición del uso y la infraestructura de pagos, concentrando el poder en un único intermediario. La atribución también sigue sin resolverse: una respuesta generada por IA puede combinar docenas de fuentes o parafrasear una idea original sin mostrar una cita. El acceso de pago también podría consolidar las ventajas existentes para las plataformas de IA con buen financiamiento, al tiempo que encarece la web para startups, investigadores y desarrolladores de código abierto.
Cloudflare cotiza aproximadamente a 45 veces las ganancias futuras, lo que refleja la expectativa del mercado de que su posición en infraestructura se traduzca en nuevas fuentes de ingresos. El modelo de Pago por Uso de la compañía, si se adopta ampliamente, podría añadir una línea de ingresos recurrentes vinculada al consumo de contenido de IA, un modelo de negocio que ningún proveedor de infraestructura en la nube ha demostrado aún a escala.
Este artículo es solo para fines informativos y no constituye asesoramiento de inversión.