Cloudflare cree que el tráfico de bots será 1.000 veces el humano en cinco años

Matthew Prince, consejero delegado de Cloudflare, cree que dentro de cinco años el tráfico automatizado multiplicará por 1.000 al humano. Lo dijo en el Decoder de The Verge, el podcast de Nilay Patel, y añadió un detalle que da bastante contexto: todas sus predicciones anteriores sobre bots fallaron, pero fallaron porque el crecimiento fue más rápido de lo que esperaba. Todo lo que dijo de menos acabó ocurriendo antes.

La cronología lo deja claro. En el Web Summit del pasado noviembre situaba el cruce entre tráfico humano y automatizado en la segunda mitad de 2027. En marzo, los datos de la compañía apuntaban ya a la primera mitad de 2027. En mayo, su equipo le comunicó que ese punto ya se había superado. Cloudflare se coloca por delante de más del 20% de la web, así que sus métricas de tráfico son una foto razonable de lo que circula por internet, con el sesgo de que solo ve lo que pasa por su red. El crecimiento viene de los scrapers de IA y de los agentes. El tráfico humano, dice Prince, se mantendrá más o menos plano.

Cobrar a los bots

El modelo de negocio de la web lleva unos 30 años sostenido por publicidad, y ese modelo no sirve para tráfico automatizado. "Los bots no hacen clic en los anuncios", resumió. De ahí que Cloudflare esté trabajando con Coinbase y Stripe para resucitar HTTP 402, el código de "pago requerido" que se definió en los primeros años de la web y nunca llegó a usarse de forma masiva. La idea es que el dueño de un sitio cobre a los agentes de IA una fracción de céntimo por cada página que consulten, con precios más altos para el contenido que valga la pena. Prince sostiene que tanto las compañías de IA que compran como los grandes editores que venden están dispuestos. Patel le plantó cara en ese punto: preguntó si un mercado así daría a alguien motivos reales para publicar. La semana pasada, el consejero delegado de Yahoo, Jim Lanzone, ya había dicho que los micropagos nunca bastarán a los editores.

Bloquear a Google por defecto

Desde el 15 de septiembre, Cloudflare pone a sus clientes gratuitos el bloqueo de Google para entrenamiento de IA activado por defecto. El dueño del sitio puede desactivarlo. "Si no van a distinguir entre entrenamiento de IA y entrenamiento de buscador, los bloqueamos sin más", dijo Prince. Añade que Google se ha comprometido a más transparencia sobre su crawler: tras un fallo en Reino Unido, la compañía señaló que su rastreador declarará qué está haciendo en cada página, y aplicará ese comportamiento fuera del país. Bruselas también pregunta a los editores si el mecanismo de exclusión de IA de Google funciona.

Prince y su mujer son dueños del Park Record, un periódico local de Park City (Utah). Espera sacar este año más dinero de acuerdos de licencia para IA que de publicidad digital en ese medio. Como referencia de precios, dice que Reddit ingresa entre siete y catorce veces más por token que The New York Times.

Lo que hay que seguir no es la predicción de los 1.000x, que es un ejercicio de extrapolación, sino tres cosas concretas: si HTTP 402 llega a desplegarse con volúmenes reales, cómo afecta el bloqueo por defecto a las visitas de los sitios que lo apliquen y si el rastreador de Google declara por fin su propósito página a página. Cualquiera de las tres cambia cómo se configura un sitio y a quién se le deja entrar.