Cloudflare lancia strumento gratuito per bloccare bot AI

Cloudflare ha lanciato un nuovo strumento gratuito per prevenire che i bot AI facciano scraping dei siti web ospitati sulla sua piattaforma. Alcuni fornitori di AI permettono ai proprietari dei siti di bloccare i bot tramite il file robots.txt, ma non tutti rispettano questa direttiva. “Abbiamo paura che alcune compagnie di AI persistano ad aggirare le regole per accedere ai contenuti”, scrive Cloudflare. Lo strumento analizza il traffico dei bot AI per perfezionare i modelli di rilevamento, considerando fattori come la mimica del comportamento umano. Gli host possono anche segnalare bot AI sospetti tramite un modulo dedicato. Il problema è diventato rilevante con l’aumento della domanda di dati per l’addestramento dei modelli generativi di AI.