Rastreadores de AI artículos.

Pay Per Crawl de Cloudflare convierte el tráfico de bots de IA en una línea de ingresos

Cloudflare ahora bloquea a los rastreadores de IA de forma predeterminada para los nuevos dominios y, según sus propios informes, procesa más de mil millones de respuestas HTTP 402 'payment required' al día, con su función Pay Per Crawl (aún en beta privada), que ofrece a los editores una forma de permitir, cobrar por o bloquear bots de IA. Esto es lo que la emergente economía del rastreo a la referencia (crawl-to-refer) significa para los propietarios de contenido.