Cloudflare bloquea el entrenamiento de IA sin afectar el search
Cloudflare lanzó un nuevo setting de Disallow AI Training que le permite a los dueños de sitios bloquear a los crawlers de IA para que no entrenen con su contenido — mientras el sitio sigue indexado en Google. Resuelve un tradeoff real: los crawlers de uso mixto como los de Google y Apple se usaban tanto para search como para entrenar modelos, así que tu contenido alimentaba a los sistemas de IA sin que lo supieras.
Apple, Google y Microsoft ya se comprometieron a respetar el setting. Cloudflare va a desplegar controles más granulares para los resúmenes de IA a principios del próximo año.
Es uno de esos cambios quietos en la infra que van a definir cuánto de la web alimenta a los sistemas de IA. El setting es por dominio, no por crawler, así que es amplio por defecto. Nadie tiene que ir revisando crawler por crawler — si tu sitio está en Cloudflare, ya está activo.
Por qué nos importa: los sitios que usamos — blogs, foros, páginas de negocios chiquitos — dejan de alimentar a los modelos de IA en silencio sin preguntar, así que la web se queda nuestra en vez de convertirse en un set de entrenamiento gratis.
“Los crawlers de uso mixto se estaban comiendo nuestro contenido para search y para entrenamiento — este setting por fin los separa.”