- Cloudflare bloqueja automàticament els rastrejadors d'IA en milions de llocs web, protegint el contingut original d'usos no autoritzats.
- La companyia llança el sistema 'Pay Per Crawl', permetent als editors cobrar a les empreses d'IA per accedir a la seva informació.
- La mesura pretén reequilibrar les relacions entre creadors de contingut i desenvolupadors d'intel·ligència artificial, oferint més control i possibles ingressos als propietaris de llocs web.
- El debat inclou reptes legals i tècnics, amb experts advertint de possibles estratègies per evitar aquests bloquejos.
En les últimes setmanes, Cloudflare ha fet un important pas en la protecció dels continguts allotjats a la seva infraestructura en decidir bloquejar per defecte els rastrejadors d'intel·ligència artificial que accedien a pàgines web sense l'autorització dels seus creadors. Aquesta mesura no només té implicacions tècniques, sinó que també obre el debat sobre el futur de l'economia digital i el paper dels grans desenvolupadors d'IA davant de propietaris de continguts originals.
La iniciativa sorgeix després de mesos de preocupació per part de mitjans de comunicació, artistes, autors i empreses editorials que veuen com els models d'intel·ligència artificial entrenen amb grans volums de dades obtingudes sovint sense permís ni compensació per als que generen els continguts. Des de mitjans internacionals fins a figures de la indústria creativa han demanat més protecció i reconeixement per a la seva feina, i Cloudflare sembla haver recollit aquesta demanda.
Un bloqueig per a rastrejadors d'IA per defecte
La decisió afecta a milions de llocs web repartits a tot el món, incloent plataformes de gran trànsit com Sky News, Associated Press o BuzzFeed, que utilitzen la infraestructura de Cloudflare. A partir d'ara, qualsevol rastrejador d'IA reconegut que intenti recopilar informació sense autorització es trobarà amb barreres automàtiques. Segons la companyia, els bots d'AI generen més de 50.000 milions de sol·licituds diàries a la seva xarxa, cosa que il·lustra la magnitud del desafiament.
El problema, però, va més enllà del que és tècnic. Tradicionalment, els motors de cerca han indexat llocs web respectant protocols com el fitxer robots.txt, que deixa marge als propietaris per decidir quines parts són accessibles als bots. En el cas dels rastrejadors d'IA, molts han ignorat aquestes directrius, generant tensions amb els creadors, que observen com el trànsit i els ingressos publicitaris es veuen afectats pel fet que els usuaris reben respostes directes de models d'IA sense visitar les webs originals.
“Pay Per Crawl”: el nou model de Cloudflare
La gran novetat en aquesta estratègia de Cloudflare és la introducció del sistema “Pay Per Crawl”, que va molt més enllà del simple bloqueig. Aquest programa, actualment en fase beta, dóna la possibilitat als propietaris destablir tarifes econòmiques que han de pagar les empreses dIA si volen accedir a les dades per entrenar els seus sistemes o alimentar chatbots. l'accés als continguts es converteix en una transacció regulada que aporta alhora control i potencials ingressos als creadors.
El CEO de Cloudflare, Matthew Prince, ha ressaltat que l‟objectiu d‟aquesta mesura és restablir un equilibri en la relació entre editors i desenvolupadors d'IA. Segons Prince, mentre que els motors de cerca tradicionals dirigien trànsit cap als creadors, els chatbots d'IA poden desincentivar l'accés a les fonts originals, minant el model econòmic de la web.
Tecnologia contra l'scraping no autoritzat
La tasca de Cloudflare no només consisteix a posar barreres automàtiques, sinó que també incorpora sistemes d'identificació avançats, recolzant-se en l'aprenentatge automàtic i l'anàlisi de comportament, per distingir entre bots acceptats (com els de cercadors), rastrejadors d'IA i altres actors menys legítims. A més, la companyia està col·laborant amb empreses tecnològiques perquè els bots d'IA revelin la seva identitat i el propòsit del rastreig, donant així als propietaris la informació necessària per decidir si en permeten l'accés.
Entre les eines implementades destaca l'AI Labyrinth, que redirigeix als bots sospitosos cap a rutes sense informació rellevant, frenant l'scraping massiu i lús indegut de continguts. No obstant això, Cloudflare és conscient que alguns actors buscaran eludir les noves restriccions, de manera que el sistema està cridat a evolucionar i reforçar-se davant de mesures evasives.
Implicacions legals i reaccions del sector
La reacció a l'ecosistema digital ha estat variada. Organitzacions mediàtiques i editorials com The Associated Press i directius de grans grups com Condé Nast han aplaudit la mesura, considerant-la un pas transcendental per protegir l'autoria i enfortir el periodisme de qualitat. No obstant això, part dels experts i representants legals adverteixen que, encara que la tecnologia ajuda, es requereix una base legal més sòlida per blindar els drets dels creadors davant de l'ús no consentit per empreses d'IA.
No hi manquen exemples de litigis i amenaces legals, com el cas de la BBC al Regne Unit, que ha exigit a empreses d'IA aturar l'ús dels seus continguts i compensar els materials ja emprats. L'explosió d'eines generatives i el creixent ús de scraping sense límits han portat a una autèntica “guerra legislativa” entre governs, creadors i tecnològiques tant a Europa com als EE. UU.
Per ara, Cloudflare ha situat la discussió al centre del debat digital, proposant solucions pràctiques que, encara que no són definitives, representen un avenç rellevant en la protecció dels interessos dels qui alimenten la xarxa amb el seu treball creatiu i intel·lectual.
Sóc un apassionat de la tecnologia que ha convertit els seus interessos frikis en professió. Porto més de 10 anys de la meva vida utilitzant tecnologia d'avantguarda i traslladant tota mena de programes per pura curiositat. Ara he especialitzat en tecnologia d'ordinador i videojocs. Això és perquè des de fa més de 5 anys que treballo redactant per a diverses webs en matèria de tecnologia i videojocs, creant articles que busquen donar-te la informació que necessites amb un llenguatge comprensible per tothom.
Si tens qualsevol pregunta, els meus coneixements van des de tot allò relacionat amb el sistema operatiu Windows així com Android per a mòbils. I és que el meu compromís és amb tu, sempre estic disposat a dedicar-te uns minuts i ajudar-te a resoldre qualsevol dubte que tinguis a aquest món d'internet.