Zum Inhalt springen

Cloudflare differenziert KI-Crawler nach Einsatzzweck

Auf den Punkt: Cloudflare ermöglicht eine granulare Kontrolle über KI-Crawler statt pauschaler Blockade und unterscheidet dabei zwischen verschiedenen Zwecken wie Trainings- oder Rechercheanfragen.

Cloudflare erweitert sein Angebot zur Steuerung von KI-Crawlern und ermöglicht Websitebetreibern, Zugriffe nach dem Einsatzzweck gezielt freizugeben oder zu blockieren.

Cloudflare hat seine Möglichkeiten zur Verwaltung von KI-Crawlern erweitert. Anstatt sämtliche Anfragen von KI-Systemen pauschal zu blockieren, können Websitebetreiber nun eine differenzierte Kontrolle ausüben und einzelne Crawler-Typen je nach Zweck freigeben oder sperren.

Diese Funktion richtet sich an Website-Verantwortliche, die Trainingsdaten für Large Language Models von ihren Inhalten fernhalten möchten, aber gleichzeitig legitime Recherche- oder Indexierungsanfragen zulassen wollen. Die granulare Steuerung ermöglicht es, zwischen verschiedenen KI-Anwendungsfällen zu unterscheiden und somit weniger restriktiv vorzugehen als mit einer Komplettblockade.

Das Feature trägt zur Debatte über die Kontrolle von Datennutzung durch KI-Systeme bei und bietet eine pragmatische Mittelposition zwischen vollständiger Öffnung und totaler Sperrung. Betreiber können damit ihre Content-Strategien besser an ihre eigenen Anforderungen und Geschäftsmodelle anpassen.


Quelle: www.heise.de · Erschienen 2. Juli 2026
Lumi AI News — KI-assistierte Kuratierung gemaess Art. 50 EU AI Act. Paraphrase und Klassifikation durch Lumi News Pipeline v1.7.2.

Share on: