A Cloudflare és más infrastruktúra-szolgáltatók adatai egyaránt azt mutatják, hogy a crawlerek, indexelők és AI-botok aktivitása gyors ütemben emelkedik, és sikerült átlépni egy kritikus mérföldkövet.
Az automatizált forgalom elképesztő tempóval növekszik a neten annak köszönhetően, hogy a robotok már nem csak indexelik vagy kaparják az adatokat, de aktívan használják is azokat. A generatív mesterséges intelligencia korszaka előtt az internet forgalmának körülbelül 20%-át tették ki a botok, így ez a folyamat csak gyorsul a különféle AI-ügynökök érkezésével – jósolta még korábban a rendszeres forgalmi statisztikákkal szolgáló Cloudflare.
A cég vezérigazgatója, Mathew Prince márciusban még arról beszélt, hogy a botok 2027-re jó eséllyel megelőzhetik az emberek internethasználatát, már ami a forgalmat illeti. Ez azonban a vártnál hamarabb jöhetett el, ugyanis Prince június 3-án közzétett bejegyzése szerint a botok és az emberek által generált webes forgalom (HTTP-kérések) közötti arány már határozottan az előbbi csoport javára áll 57,5% – 42,5% arányban.
Az adatokhoz érdemes hozzátenni, hogy a Cloudflare Radar az internet jelentős részét ugyan lefedi, de az összes weboldal körülbelül egyötöde halad át a vállalat infrastruktúráján. A bot-ember arány pedig a HTML-tartalomra vonatkozó kéréseken alapul, és a cég rendszere viselkedéselemzést használ az automatizált és az emberi tevékenység megkülönböztetésére.
Davi Ottenheimer kiberbiztonsági szakértő szerint a Cloudflare kommunikációját érdemes némi fenntartással kezelni, mivel a vállalat részhalmaz-adatokat emel ki, melyek nem reprezentálják az internet teljes forgalmát. A kritika szerint a nyilvánosan elérhető Cloudflare Radar adatok alapján az összesített internetes forgalom továbbra is döntően emberi eredetű, és nem támasztja alá egyértelműen azt az állítást, hogy a botok már többségbe kerültek volna.
Az X-en közzétett posztjára adott válaszok közt maga Prince is megjegyzi, hogy nehéz lenne megmondani, mikor volt fordulópont, mert az „adatok kissé kuszák”, de már „egyértelműen a másik oldalon vagyunk”.
Félreértések adódhatnak abból is, ki miként értelmezni a botok által generált forgalmat. A kategória ugyanis több eltérő típusú automatizált rendszert lefed: ide vehetők a keresőmotorok robotjai, az AI-modellek tanítására használt adatgyűjtő crawlerek, az AI-asszisztensek háttérfolyamatai, a legitim monitoring és indexelő szolgáltatások, valamint a rosszindulatú vagy kéretlen automatizált rendszerek. A kritikusok szerint a különböző célú botok egyetlen kategóriába történő összevonása torzíthat az összképen.
A kritikusabb hangok szerint a Cloudflare számára üzleti szempontból is előnyös lehet, hogy ennyire hangsúlyozza a botforgalom növekedését, mivel a vállalat az utóbbi időszakban több megoldást is bevezetett az AI-crawlerek korlátozásához, és bár ez önmagában nem teszi érvénytelenné a cég állításait, de az üzleti kontextus is szerepet játszhat abban, miként kommunikál a vállalat.
Tovább a cikkre: hwsw.hu (Dömös Zsuzsanna)
Lerohanták a botok az internetet
Az interneten zajló automatizált forgalom 2025-ben csaknem nyolcszor gyorsabb tempóval nőtt, mint az emberi tevékenység, ez pedig az AI-ügynökök terjedésével csak durvább lesz.
A Human Security kiberbiztonsági cég friss jelentése szerint az automatizált forgalom elképesztő tempóval növekszik a neten annak köszönhetően, hogy a robotok már nem csak indexelik vagy kaparják az adatokat, de aktívan használják is azokat. Számszerűsítve a 2025-ös év folyamán 23,5 százalékkal nőtt az automatizált forgalom az előző évhez viszonyítva, és ez nyolcszorosa az emberek által generált forgalom növekedési rátájának, ami mindössze 3,1 százalék volt. Ebben főszerepet játszott az olyan nagyméretű nyelvi modellek elterjedése, mint az OpenAI, ChatGPT, az Anthropic Claude és a Google Gemini.
A jelentés egybevág a Cloudflare-vezérigazgató Mathew Prince múlt heti jóslatával, miszerint a botok 2027-re megelőzhetik az emberek internethasználatát, már ami a forgalmat illeti. A generatív mesterséges intelligencia korszaka előtt az internet forgalmának körülbelül 20%-át tették ki a botok, így ez a folyamat csak gyorsulni fog a különféle AI-ügynökök érkezésével.
Az automatizált forgalom definíciója lefed a tanulmány készítői szerint minden olyan internetes forgalmat, amit szoftverrendszerek és nem valódi emberek generálnak, beleértve a keresőmotorokhoz tartozó automatizált robotokat, a hagyományos adatgyűjtő eszközöket és már az AI által vezérelt forgalmat. Az elemzés alapjául szolgáló mintát több mint egy kvadrillió interakció (kérés/esemény) adta, 2022-2025 közt közötti összesített, anonimizált adatokkal.
Az AI-szolgáltatásokhoz és eszközökhöz kapcsolható automatizált forgalom jelentősen hozzájárult az összesített növekedéshez, az ilyen forrású interakciók átlagos havi mennyisége 187%-kal nőtt éves szinten. A felhasználók nevében feladatokat végrehajtó AI-ügynökök hatását egyelőre még nehéz számszerűsíteni, de a jövőben kétségkívül még hangsúlyosabbá válnak.
Az AI-ügynökök (pl. OpenClaw) tevékenysége és az integrált ügynökökkel felszerelt böngészők (pl. OpenAI Atlas, Perplexity Comet) által generált forgalom közel 8000%-kal nőtt éves szinten, de mivel 2024-ben még nem voltak szélesebb körben hozzáférhetőek, így nem olyan meglepő ez az érték. Az AI-ügynökökhöz kapcsolódó kérések 77 százaléka termék- vagy keresőoldalon történt, ezeknek közel 9 százaléka érintett fiókszintű interakciókat, és közel 2 százalék jutott el valamilyen fizetési folyamatig.
A kimondottan AI-generált forgalom legnagyobb szelete, körülbelül 67,5 százalék származott a modellekhez adatokat gyűjtő crawlerekből. A jövőben a crawlere valószínűleg már csak kisebb részesedést kapnak a valós idejű adatgyűjtő botok (scraperek) és az ügynökök aktívabbá válásával és skálázódásával. A valós idejű adatgyűjtők az AI által vezérelt kereséshez és válaszadáshoz biztosítják az információkat a netről, ezek forgalma közel 600 százalékot nőtt 2025-ben.
Tovább a cikkre: hwsw.hu (Dömös Zsuzsanna)
