AI -Bots, die Ihre Daten kratzen? Dieses kostenlose Werkzeug gibt diesen lästigen Krabbern den Run-Around

Der Aufstieg von KI-generierten Inhalten, oft als synthetische Medien bezeichnet, hat mehrere Herausforderungen mit sich gebracht, einschließlich der Verbreitung von Fehlinformationen, der unbefugten Nutzung von Künstlerwerken und einem Rückgang des Vertrauens in Online-Inhalte. Cloudflare hat jedoch möglicherweise eine nützliche Anwendung für KI gefunden, die darauf abzielt, Originalinhalte vor der Ausbeutung durch KI-Unternehmen zu schützen.

Am Mittwoch stellte Cloudflare AI Labyrinth vor, ein Tool, das entwickelt wurde, um KI-generierte Inhalte zu nutzen, um unbefugte KI-Crawler zu „verlangsamen, zu verwirren und Ressourcen zu verschwenden“.

Jüngste Studien haben gezeigt, dass KI-Chatbots wie ChatGPT und Perplexity weiterhin auf Inhalte von Websites zugreifen, die ihre Crawler blockiert haben. Cloudflare betonte in ihrer Ankündigung, dass diese Crawler täglich über 50 Milliarden Anfragen an ihr Netzwerk stellen, was knapp unter 1 % aller von ihnen beobachteten Webanfragen ausmacht. Die Methode, diese Crawler zu blockieren, ist entscheidend.

Cloudflare erklärte, dass sie zwar mehrere Tools zur Identifizierung und Blockierung unbefugter KI-Crawling-Aktivitäten haben, eine einfache Blockierung dieser Bots die Angreifer alarmieren könnte, was zu einem fortlaufenden Zyklus von Ausweichstrategien führt. Sie wollten eine neue Methode entwickeln, um diese unerwünschten Bots abzuschrecken, ohne zu signalisieren, dass sie entdeckt wurden.

Wenn Cloudflare eine unbefugte Crawling-Anfrage erkennt, blockiert AI Labyrinth den Crawler nicht einfach; stattdessen verlinkt es auf mehrere KI-generierte Webseiten, die authentisch genug erscheinen, um den Crawler glauben zu lassen, sie seien legitim. Auf diese Weise glaubt der Crawler fälschlicherweise, er habe die gewünschten Inhalte erfolgreich abgeschöpft, während die echten Daten der Website geschützt bleiben. Zusätzlich verbraucht dieser Ansatz die Rechenressourcen des Crawlers, was Cloudflare als Vorteil ansieht.

Cloudflare gab in ihrer Ankündigung an, dass das Tool automatisch eine Reihe von KI-generierten verlinkten Seiten bereitstellt, sOJ wenn unangemessene Bot-Aktivitäten erkannt werden, ohne dass Kunden benutzerdefinierte Regeln einrichten müssen.

Zur Erstellung dieser Seiten nutzte Cloudflare Workers AI und ein Open-Source-Modell, um im Voraus einzigartige, menschenähnliche synthetische Seiten zu verschiedenen Themen zu erstellen. Diese Vorab-Generierungspipeline bereinigt nicht nur die Inhalte, um XSS-Schwachstellen zu verhindern, sondern speichert sie auch in R2 für schnelleren Zugriff.

AI Labyrinth zeigt diese Links nur KI-Scrapern an, sodass die Inhalte für menschliche Besucher verborgen bleiben und die Struktur, das Aussehen oder das SEO der Website nicht beeinträchtigen.

Cloudflare betonte ihr Engagement, nicht zur Verbreitung von Fehlinformationen beizutragen, und stellt sicher, dass die generierten Inhalte faktenbasiert und auf wissenschaftliche Themen bezogen sind, jedoch für die durchsuchte Website irrelevant.

Darüber hinaus sieht Cloudflare AI Labyrinth als potenziellen Honeypot, um neue illegale Crawler zu identifizieren. Sie stellten fest, dass echte menschliche Besucher kaum durch „ein Labyrinth aus KI-generiertem Unsinn“ navigieren würden, was dem Tool ermöglicht, neue Bots anhand von Klickmustern zu erkennen. Diese Erkenntnis wird AI Labyrinth dabei helfen, böswillige Akteure effektiver zu identifizieren.

Da Bots immer besser darin werden, traditionelle Honeypot-Techniken zu erkennen, plant Cloudflare, AI Labyrinth weiterzuentwickeln und realistischere Netzwerke von verlinkten URLs zu schaffen, die für automatisierte Programme schwerer zu identifizieren sind.

Für Verlage oder Einzelpersonen, die besorgt sind, dass ihre Inhalte zum Trainieren von KI oder durch Chatbots falsch dargestellt werden, könnte AI Labyrinth ein wertvolles Werkzeug sein.

Alle Cloudflare-Kunden, einschließlich derer im Free-Tarif, können AI Labyrinth ab heute aktivieren, indem sie auf ihr Cloudflare-Dashboard zugreifen, zum Bereich Bot-Management navigieren und die Option AI Labyrinth aktivieren.

[ttpp]