Cloudflare milijonuose svetainių pagal numatytuosius nustatymus blokuoja DI botus

Antradienį „Cloudflare“ ↗ 0.00% pradėjo taikyti naujas numatytąsias taisykles, kurios automatiškai blokuoja DI mokymo ir agentų botus milijonuose svetainių. Tai žymi vieną didžiausių pokyčių iki šiol, kaip leidėjai valdo santykius su DI pramone.

Kas keičiasi šiandien

Pagal naująją politiką, bet kuriam naujam domenui, prisijungusiam prie „Cloudflare“, ir visiems esamiems nemokamo plano klientams, kurie nepakeitė nustatymų iki nustatyto termino, DI mokymo ir agentų naršyklės bus blokuojamos pagal numatytuosius nustatymus puslapiuose, kuriuose rodoma reklama. Paieškos naršyklės, kurios indeksuoja turinį, kad vartotojai galėtų jį rasti vėliau, lieka leidžiamos.gulfnews+3

Bendrovė apie pokyčius pirmą kartą pranešė 2026 m. liepos 1 d., minėdama antrąją kasmetinę „Turinio nepriklausomybės dieną“, ir suteikė svetainių savininkams maždaug dviejų su puse mėnesio langą nustatymams sukonfigūruoti prieš įsigaliojant numatytosioms taisyklėms. „Cloudflare“ valdo daugiau nei 20 % interneto domenų, todėl ši politika daro didžiulę įtaką visam internetui.cloudflare+2

Trijų kategorijų sistema

Vietoj to, kad visos DI naršyklės būtų vertinamos vienodai, „Cloudflare“ dabar automatizuotą srautą skirsto į tris kategorijas: Paieška, Mokymas ir Agentas. Svetainių savininkai gali blokuoti kiekvieną kategoriją atskirai ir kiekvienai pasirinkti: blokuoti visuose puslapiuose, blokuoti tik puslapiuose su reklamomis arba leisti prieigą visiškai.developers.cloudflare+2

Svarbus aspektas yra susijęs su universaliomis naršyklėmis. Botams, tokiems kaip „Googlebot“, „Applebot“ ir „BingBot“, kurie atlieka tiek paieškos indeksavimo, tiek DI mokymo funkcijas, bus taikoma griežčiausia taisyklė. Tai reiškia, kad svetainės, pasirinkusios blokuoti mokymo naršykles, įskaitant tas, kurios anksčiau buvo įjungusios senąjį nustatymą „Blokuoti DI botus“, gali netyčia užblokuoti ir bendrovės „Alphabet Inc.“ ↘ 1.48% „Google“ naršyklę.cloudflare+3

Įtampa tarp leidėjų

Ši politika atspindi didėjančį leidėjų nusivylimą dėl to, kad DI bendrovės naudoja jų turinį, neatsiųsdamos reikšmingo lankytojų srauto atgal. Tradicinės paieškos sistemų naršyklės nuskaito bei indeksuoja puslapius ir nukreipia vartotojus į šaltinį. Generatyvinio DI paslaugos dažnai tiesiog išgauna informaciją ir pateikia atsakymus tiesiogiai, sumažindamos apsilankymus pradinėje svetainėje.gulfnews

„Cloudflare“ taip pat teikia kai kuriems klientams analitiką, rodančią, kaip dažnai atskiri DI operatoriai nuskaito jų svetaines, palyginti su generuojamu nukreipiamuoju srautu. Gen. direktorius Matthew Prince teigė, kad ši iniciatyva nėra visiškas DI blokavimas, o būdas leisti svetainių savininkams atskirti paslaugas, kurios padeda žmonėms atrasti turinį, nuo tų, kurios jį naudoja kitiems tikslams.marketscreener+2