Op woensdag kondigde Web Infrastructure Provider Cloudflare een nieuwe functie aan met de naam “AI Labyrinth” die tot doel heeft ongeautoriseerde AI-gegevens te bestrijden om te schrapen door nep-gegenereerde inhoud aan BOTS. De tool zal proberen AI -bedrijven te dwarsbomen die websites zonder toestemming kruipen om trainingsgegevens te verzamelen voor grote taalmodellen die AI -assistenten zoals ChatGPT aanbrengen.
Cloudflare, opgericht in 2009, is waarschijnlijk het best bekend als een bedrijf dat infrastructuur- en beveiligingsdiensten biedt voor websites, met name bescherming tegen gedistribueerde Denial-of-Service (DDOS) -aanvallen en ander kwaadaardig verkeer.
In plaats van eenvoudigweg bots te blokkeren, lokt het nieuwe systeem van Cloudflare ze naar een “doolhof” van realistisch ogende maar irrelevante pagina’s, waardoor de computerbronnen van de crawler worden verspild. De aanpak is een opmerkelijke verschuiving van de standaard blok-en-verdedigingsstrategie die door de meeste websitebeschermingsdiensten wordt gebruikt. Cloudflare zegt dat het blokkeren van bots soms averechts werkt omdat het de operators van de crawler waarschuwt dat ze zijn gedetecteerd.
“Wanneer we ongeoorloofde kruipen detecteren, in plaats van het verzoek te blokkeren, zullen we linken naar een reeks door AI gegenereerde pagina’s die overtuigend genoeg zijn om een crawler te verleiden om ze te doorkruisen”, schrijft Cloudflare. “Maar hoewel hij er echt uitziet, is deze inhoud eigenlijk niet de inhoud van de site die we beschermen, dus de crawler verspilt tijd en middelen.”
Het bedrijf zegt dat de inhoud die aan bots wordt geserveerd, opzettelijk irrelevant is dat de website wordt gecrawld, maar het wordt zorgvuldig geproduceerd of gegenereerd met behulp van echte wetenschappelijke feiten – zoals neutrale informatie over biologie, natuurkunde of wiskunde – om te voorkomen dat deze aanpak verkeerde informatie verspreidt (of deze aanpak effectief voorkomt dat effectief misvorming voorkomt). Cloudflare maakt deze inhoud met behulp van zijn Workers AI -service, een commercieel platform dat AI -taken uitvoert.
Cloudflare ontwierp de TRAP -pagina’s en links om onzichtbaar en ontoegankelijk te blijven voor reguliere bezoekers, dus mensen die op internet bladeren, komen ze niet per ongeluk tegen.
Een slimmer honeypot
AI Labyrinth functioneert als wat CloudFlare een “volgende generatie honeypot” noemt. Traditionele honeypots zijn onzichtbare links die menselijke bezoekers niet kunnen zien, maar bots die HTML -code parseren, kunnen volgen. Maar Cloudflare zegt dat moderne bots bedreven zijn geworden in het spotten van deze eenvoudige vallen, waardoor meer verfijnde misleiding nodig is. De valse links bevatten geschikte metatrichtlijnen om te voorkomen dat zoekmachine-indexering, terwijl het aantrekkelijk blijft voor bots voor gegevensopnames.
