Cloudflare Adds Block For AI Scrapers And Similar Bots
Cloudflare está ampliando sus capacidades para bloquear bots con el fin de restringir el tráfico automatizado procedente de desarrolladores de modelos de lenguaje grandes. Este cambio aborda la importante carga de ancho de banda causada por el raspado de datos, que efectivamente obliga a los propietarios de sitios web a subsidiar el entrenamiento de modelos de inteligencia artificial sin su consentimiento ni compensación. Al dirigirse a patrones de comportamiento específicos y a cadenas de agente de usuario, los proveedores buscan filtrar estas solicitudes antes de que consuman recursos. Este enfoque refleja una tendencia más amplia en la industria, en la que los administradores de sitios buscan activamente proteger su infraestructura del creciente volumen de tráfico artificial generado con fines de inteligencia artificial generativa. Este desarrollo es crucial para los defensores de los datos abiertos, ya que pone de manifiesto la tensión entre la disponibilidad de la información pública y la extracción comercial por parte de la IA. Subraya la urgente necesidad de marcos sostenibles y éticos para la obtención de datos que respeten la infraestructura de origen, al tiempo que permiten la investigación y la innovación legítimas.
Source: hackaday.comPublished on 2024-07-05