Hacker News Front Page · Kevin Maimann ·
Bots are raiding library collections to feed AI — shutting out researchers and the public | CBC News
Los bots de extracción de datos usados por empresas de IA están saturando los sitios de bibliotecas universitarias y dificultando el acceso de estudiantes, investigadores y el público. Algunas instituciones reciben miles de solicitudes en un día, mientras que bloquear direcciones IP resulta poco eficaz y los CAPTCHA o los inicios de sesión también pueden obstaculizar el acceso legítimo. Aunque varias empresas respaldan una señal voluntaria de exclusión en robots.txt, el acuerdo no cubre a todos los bots; las instituciones buscan proteger sus colecciones abiertas sin restringir su consulta por personas ni por bots respetuosos.
Academic libraries are fighting off swarms of data-scraping bots — that are slowing or crashing sites meant for students, researchers and the public — as AI companies continue hunting for content to feed their large language models.