Cloudflare combate el scraping masivo de datos con su nueva función AI Labyrinth
La inteligencia artificial generativa ha revolucionado la creación de contenidos, pero también ha traído consigo prácticas poco éticas como el scraping masivo de datos. En este contexto, Cloudflare ha lanzado AI Labyrinth, una herramienta que busca frenar a los bots que rastrean y extraen información de las páginas web sin permiso, empleando para ello un ingenioso sistema basado en páginas generadas por IA. Desde el auge de plataformas como ChatGPT, Claude, Perplexity, Llama o Gemini, la carrera por entrenar modelos de inteligencia artificial cada vez más avanzados ha intensificado la necesidad de grandes volúmenes de datos. Esto ha provocado que algunas empresas recurran al scraping de sitios web, incluso ignorando directrices de exclusión como el ‘no crawl’. Según cifras de