Noticias de Tecnología 5-8 minutos

Cloudflare bloquea por defecto a los rastreadores de IA en las webs con anuncios: qué cambia desde hoy

Diego Cortés
Diego Cortés
Full Stack Developer & SEO Specialist
Compartir:
Cloudflare bloquea por defecto a los rastreadores de IA en las webs con anuncios: qué cambia desde hoy
Imagen generada con IA

Desde hoy Cloudflare aplica por defecto una configuración que casi nadie cambió a mano: en las páginas que muestran anuncios, los rastreadores de IA quedan bloqueados. El detalle incómodo es que Googlebot puede acabar del mismo lado que los bots que se querían frenar.

Qué cambia desde hoy en Cloudflare

La fecha se conocía desde el 1 de julio de 2026, cuando Cloudflare anunció la medida coincidiendo con la segunda edición de su jornada Content Independence Day. Este 15 de septiembre los nuevos valores por defecto dejan de ser opcionales para los dominios que no los hayan tocado a mano.

Conviene precisarlo: no es un apagón de la IA sobre internet. Es un valor por defecto que pasa de permitir a bloquear, y solo en un tipo concreto de página, las que muestran anuncios.

Búsqueda sí, entrenamiento y agentes no

Los rastreadores de búsqueda siguen pasando sin cambios. Los que quedan fuera son los que descargan contenido para entrenar modelos y los que navegan en nombre de un agente de IA.

Las tres categorías: Search, Agent y Training

Cloudflare clasifica los bots en tres grupos. Search alimenta la búsqueda tradicional. Training extrae contenido para entrenar modelos. Agent actúa en nombre de un asistente que navega por el usuario. La nueva configuración por defecto permite el primero y bloquea los otros dos en páginas con anuncios.

A quién le aplica: dominios nuevos, sitios nuevos y cuentas gratuitas sin tocar

El alcance es más acotado de lo que sugiere el titular. Afecta a dominios nuevos añadidos a Cloudflare, a sitios nuevos que un cliente existente sume a su cuenta y a cuentas del plan gratuito cuya configuración siga intacta. Hasta el 15 de septiembre, cualquier cliente podía salir de esos valores por defecto; a partir de hoy, quien no lo hizo se queda con ellos.

Qué es un rastreador de uso mixto y por qué es el centro del problema

La parte que genera dudas no es el bloqueo en sí, sino cómo se clasifica lo que llega.

Un solo user agent para tres trabajos

Un rastreador de uso mixto mezcla tres tareas bajo una misma identidad: indexar para la búsqueda tradicional, buscar páginas para agentes de IA y extraer contenido para entrenar. Cloudflare los evalúa por comportamiento, y cuando dos reglas se solapan, gana la más restrictiva.

El dato: más de un tercio del rastreo es de uso mixto

Cloudflare publicó en julio de 2026 que más del 36% de la actividad de rastreadores corresponde a bots de uso mixto, y que los rastreadores de IA rondan el 20% del tráfico de bots verificado. La compañía también mide cuántas visitas devuelve cada bot: Google devuelve una visita cada pocos rastreos, mientras algunos rastreadores de entrenamiento necesitan decenas de miles de páginas por cada visita referida.

Googlebot: búsqueda, AI Overviews y AI Mode con la misma identidad

Aquí está el nudo. El rastreo de la Búsqueda, de AI Overviews y de AI Mode comparten un mismo user agent: Googlebot. Para la clasificación de Cloudflare, eso lo convierte en un rastreador de uso mixto.

El efecto colateral: Googlebot puede acabar bloqueado

Es un reporte de especialistas SEO difundido en las últimas semanas, no una confirmación oficial de Google. Pero la explicación técnica se sostiene en la propia documentación de Cloudflare.

La regla más restrictiva gana

Si dos reglas apuntan al mismo bot, prevalece la más restrictiva. Como Googlebot es de uso mixto, cualquier configuración que bloquee el entrenamiento de IA alcanza también a los rastreadores mixtos. Eso incluye la opción antigua de bloquear bots de IA, que mucha gente activó hace meses y ya no recuerda tener puesta.

Cómo comprobarlo: 403 en los logs y el sitemap en Search Console

La comprobación es sencilla y se hace en minutos: mirar la configuración de bots en el panel de Cloudflare, buscar respuestas 403 servidas a Googlebot en los logs del servidor y verificar en Search Console que el sitemap se descarga y que la inspección de URL responde. Una caída de impresiones sin cambio de contenido es otra señal de alarma.

Qué pasa con la opción antigua de bloquear bots de IA

Quien activó el bloqueo genérico de bots de IA sigue sujeto a él. La diferencia con los nuevos valores por defecto es que aquella opción no distinguía categorías: bloqueaba todo lo que Cloudflare identificara como IA, sin separar búsqueda de entrenamiento.

Pay Per Crawl se convierte en Pay Per Use

El mismo anuncio de julio trajo un giro económico que va en la dirección contraria a bloquear.

Pagar cuando el contenido aparece en una respuesta, no cuando te visitan

El antiguo Pay Per Crawl cobraba cuando un bot descargaba la página. El nuevo Pay Per Use cobra cuando el contenido aporta valor, es decir, cuando aparece dentro de una respuesta de IA. El cambio mueve el cobro del acceso al resultado.

x402, You.com y Ceramic: los primeros socios

La liquidación se apoya en el protocolo x402 y los primeros socios anunciados son You.com y Ceramic.ai, con una Monetization Gateway en lista de espera.

El otro lado de la balanza: perder visibilidad en las respuestas de IA

Bloquear no es gratis en ninguna dirección. Proteges tu contenido y no pierdes búsqueda, pero también te dejas fuera de las respuestas generadas por IA, que cada vez resuelven más consultas sin clic.

Cómo revisar tu configuración en dos minutos

Panel de Cloudflare: Block AI bots y AI Crawl Control

En el panel, la configuración de bots vive en la sección de seguridad. Ahí conviven la opción clásica de bloquear bots de IA y el control más granular por categorías.

Antes de tocar nada: qué se bloquea, qué se permite y quién lo decide

Antes de cambiar un ajuste, conviene decidirlo con criterio: si vives de los anuncios y no del contenido, bloquear el entrenamiento es razonable; si tu tráfico depende de aparecer en respuestas de IA, quizá no lo sea. Lo que no es razonable es dejarlo por inercia sin saber qué está activo.

Ojo con el proxy: si tu dominio está en modo solo DNS, esto no te aplica

Las políticas de bots actúan en el borde de la red de Cloudflare, así que solo afectan al tráfico que pasa por su proxy. Si tu dominio está configurado en modo solo DNS, los nuevos valores por defecto no te tocan.

Qué significa que Cloudflare bloquee los rastreadores de IA para un blog pequeño

Para un blog o una tienda con anuncios, el efecto práctico es un cambio de equilibrio: menos rastreo de entrenamiento y menos coste de ancho de banda, a cambio de menos presencia en respuestas generadas. La decisión razonable es revisar la configuración una vez, decidirla a conciencia y volver a mirarla solo cuando cambien las reglas.

Conclusión

La noticia no es que la IA deje de leer internet, sino que un valor por defecto dejó de ser neutral. Revisa tu configuración de bots, comprueba que Googlebot no esté recibiendo 403 y decide con datos si te conviene bloquear o cobrar. Si quieres el contexto de cómo llegamos aquí, te dejo el análisis del peaje a los bots de IA, la integración de las APIs HTTP de Node.js en Cloudflare Workers y una explicación de cómo funcionan los algoritmos de Google y las AI Overviews.

Categorías