KI-Suchtraffic entwickelt sich zu einem schlechten Geschäft für das offene Web: Verlage stellen weiterhin die Inhalte bereit, Crawler sammeln sie ein, doch Antwortboxen halten die Nutzer zunehmend auf der Plattform. Laut Browsing-Daten des Pew Research Center klickten Google-Nutzer, die eine KI-Zusammenfassung sahen, nur in 8 % der Fälle auf ein traditionelles Ergebnis, verglichen mit 15 %, wenn keine Zusammenfassung angezeigt wurde. Auf einen Link innerhalb der KI-Zusammenfassung klickten sie lediglich in 1 % der Besuche auf Seiten mit einer solchen Zusammenfassung[s].
Unser Chefredakteur, der die Schecks unterschreibt und gelegentlich auf den Rauch deutet, wollte dies unmissverständlich gesagt haben: Die Maschine sollte nicht kostenlos die Geschichte und das Publikum bekommen.
Das ist das Zero-Click-Problem in seiner reinsten Form. Suchmaschinen funktionierten früher nach einem Tauschprinzip: Der Crawler durfte die Seite lesen, dafür bekam der Verlag eine Chance auf den Leser. Heute kann die Seite zu einer Antwort werden, die Antwort den Nutzer zufriedenstellen, und der Verlag bleibt mit einem Zitat zurück, dem fast niemand folgt. Pew fand zudem heraus, dass Nutzer ihre Browsing-Sitzung nach 26 % der Suchseiten mit einer KI-Zusammenfassung beendeten, verglichen mit 16 % der Seiten mit ausschließlich traditionellen Ergebnissen[s].
KI-Suchtraffic bricht den alten Deal
Cloudflare beschrieb den alten Crawler-Deal mit klaren Worten: Websites akzeptierten das Crawling, weil Crawler im Gegenzug Verweise zurückschickten. Doch Cloudflare argumentiert nun, dass KI-Systeme Inhalte übernehmen können, ohne dem ursprünglichen Anbieter nennenswerten Mehrwert zu bieten[s]. Dieser Deal war nie ein heiliges Gesetz. Es war eine wirtschaftliche Gewohnheit. Er funktionierte, weil beide Seiten plausibel behaupten konnten, einander zu helfen.
KI-Suchtraffic untergräbt diese Gewohnheit, weil die Antwortmaschine den Nutzer nicht mehr benötigt, um den Kreislauf zu schließen. Die Plattform kann ein Rezept, eine Rezension, eine juristische Erklärung oder einen investigativen Bericht crawlen; dann kann sie die Arbeit auf wenige Absätze komprimieren und den Nutzer in der Oberfläche halten. Der Verlag erhält Sichtbarkeit, doch Sichtbarkeit ohne Besuch ist nicht dasselbe Produkt. Werbung wird nicht geladen. Newsletter werden nicht abonniert. Mitgliedschaftsangebote erscheinen nicht. Die Beziehung zum Publikum kommt gar nicht erst zustande.
Verlage erkennen die Klippe bereits. Der Trends Report 2026 des Reuters Institute, basierend auf einer strategischen Stichprobe von 280 Digitalverantwortlichen aus 51 Ländern und Territorien, prognostiziert, dass Verlage einen Rückgang des Traffics von Suchmaschinen um mehr als 40 % in den nächsten drei Jahren erwarten[s]. Derselbe Bericht zeigt, dass der Verweis-Traffic auf Nachrichtenwebsites bereits um 43 % von Facebook und um 46 % von X in den vorangegangenen drei Jahren zurückgegangen war[s].
Deshalb klingen Verlage weniger geduldig als während des ersten Zusammenbruchs der sozialen Medien. Sie haben bereits beobachtet, wie Plattformen Nutzer darauf trainierten, Schlagzeilen und Ausschnitte woanders zu konsumieren. KI-Antworten drohen dieses Muster zu vollenden, indem sie auch den Fließtext übernehmen. Neben diesem Streit steht eine Krise der Archivierung journalistischer Inhalte: Wenn automatisierte Sammlung als räuberisch empfunden wird, greifen Verlage zu Blockade-Tools, und das langfristige Archiv wird dünner.
Das Klick-Problem ist messbar
Der stärkste Beleg hierfür ist kein moralisches Bauchgefühl. Pew analysierte Browsing-Daten von 900 US-Erwachsenen, die ihre Aktivitäten teilten, und 58 % führten im März 2025 mindestens eine Google-Suche durch, die eine KI-generierte Zusammenfassung erzeugte[s]. Über alle Google-Suchen in dieser Studie hinweg produzierten 18 % eine KI-Zusammenfassung[s].
Diese Zahlen beweisen nicht, dass jeder fehlende Klick gestohlen wurde. Manche Suchanfragen werden durch jede gute Antwort befriedigt. Manche Nutzer hätten ohnehin nicht weitergeklickt. Manche Verlagsseiten sind schwach, aufgebläht oder darauf ausgelegt, eine Suchanfrage zu fangen, statt dem Leser zu dienen. Das ehrliche Argument gegen Panik lautet, dass Suchmaschinen schon immer manche Fragen direkt beantwortet haben, von Wettervorhersagen über Sportergebnisse bis zu Wörterbuchdefinitionen.
Doch das Muster ändert sich, wenn Zusammenfassungen breitere Fragen abdecken und mehrere Quellen zitieren, während sie dem Nutzer kaum einen Grund geben, die Plattform zu verlassen. In Pews Studie war die Seite mit KI-Zusammenfassung kein besserer Einstieg. Sie glich eher einem Wartezimmer, in dem der Ausgang hinter einer Fußnote versteckt ist. Genau das unterscheidet KI-Suchtraffic von älteren Snippets. KI-Suchtraffic wird so zu einem Vertriebskanal, der redaktionelle Arbeit abschöpft, während er die wichtigste Form der Vergütung reduziert: die Zeit des Lesers auf der Website des Verlags.
Das betrifft vor allem Arbeit, die nicht günstig produziert werden kann. Investigative Recherchen, Ressortberichterstattung, Faktenchecks, Lektorat, Fotografie und juristische Prüfungen kosten Geld, bevor überhaupt ein Leser kommt. Wenn die Antwortmaschine die Nachfrage abschöpft, während der Verlag die Kosten trägt, entsteht im Web ein eigener synthetischer Datenengpass: Immer weniger Institutionen werden bereit sein, Menschen für die Erstellung des Originalmaterials zu bezahlen, das Maschinen später zusammenfassen.
Googles Verteidigung ist berechtigt, aber unvollständig
Die Plattform-Seite hat ein ernstzunehmendes Argument, und das sollte nicht einfach beiseitegewischt werden. Googles Crawler-Dokumentation erklärt, dass seine Standard-Crawler zum Aufbau von Suchindizes, für produktspezifisches Crawling und Analysen genutzt werden und dass sie die robots.txt-Regeln bei automatisiertem Crawling befolgen[s]. Google betont zudem, dass Google-Extended Verlagen ermöglicht, zu steuern, ob Inhalte, die von ihren Seiten gecrawlt werden, für das Training zukünftiger Gemini-Modelle oder zur Einbindung in Gemini-Apps genutzt werden dürfen, ohne die Aufnahme in die Google-Suche oder das Ranking-Signal zu beeinflussen[s].
Das ist nicht nichts. Ein Verlag, der in die Suche aufgenommen werden möchte, aber bestimmte Modellnutzungen ablehnt, hat einen formalen Hebel. robots.txt ist weiterhin relevant. Die Identität des Crawlers spielt weiterhin eine Rolle. Das offene Web kann nicht funktionieren, wenn jede automatisierte Anfrage als Diebstahl behandelt wird.
Das Problem ist, dass Suche, Training und Antwortgenerierung heute zu eng miteinander verknüpft sind, als dass alte Kontrollmechanismen ausreichen würden. Googles eigene Dokumentation erklärt, dass Präferenzen, die an Googlebot gerichtet sind, die Google-Suche beeinflussen, einschließlich aller Google-Suchfunktionen[s]. Wenn das umstrittene Produkt eine KI-Antwort innerhalb der Suche ist, besteht für Verlage keine klare Wahl zwischen Suche und Training. Für Verlage ist KI-Suchtraffic der Ort, an dem diese Kategorien kollidieren. Die Wahl besteht zwischen Auffindbarkeit und Substitution.
Cloudflare versucht, diese Unterscheidung klarer zu machen. Seine neue Taxonomie trennt Such-, Agenten- und Trainingsnutzung: Suche sammelt oder indexiert Inhalte, um später Fragen zu beantworten; Agentenaktivität handelt in Echtzeit im Auftrag einer Person; Training integriert Inhalte in die zugrundeliegende Architektur des Modells[s]. Das ist die richtige konzeptionelle Trennung. Das Web braucht sie, weil „KI-Bot“ eine zu grobe Kategorie für den nächsten Kampf ist.
Bezahlung verändert die Argumentation, wenn sie funktioniert
Cloudflares politischer Schritt ist nicht subtil. Das Unternehmen erklärt, dass ab dem 15. September 2026 neue Domains, die Cloudflare nutzen, standardmäßig Trainings- und Agenten-Kategorien auf Seiten mit Werbung blockieren werden, während Suche weiterhin erlaubt bleibt[s]. Zudem können Mehrzweck-Crawler wie Googlebot, Applebot und BingBot unter der restriktivsten Regel blockiert werden, wenn Kunden sich für die Blockade von Training entschieden haben[s].
Das klingt aggressiv, und das ist es auch. Es ist jedoch eine rationale Reaktion auf einen Markt, in dem die Standardeinstellung Extraktion war. Wenn Crawler-Betreiber Vertrauen wollen, sollten sie ihre Zwecke trennen. Wenn sie Suchzugriff wünschen, sollten sie diesen nicht mit Training oder agentischer Wiederverwendung bündeln und sich dann empört zeigen, wenn Verlage Einwände erheben.
Die bessere Idee ist nicht universelle Blockade. Es ist bezahlte Einwilligung. Cloudflares „Pay Per Crawl“-Vorschlag beschreibt einen dritten Weg für Verlage, die KI-Crawler zulassen, aber dafür entschädigt werden möchten[s]. In diesem Modell kann ein Crawler seine Zahlungsabsicht über Anfrage-Header übermitteln und erhält entweder eine erfolgreiche 200-Antwort oder eine 402-Antwort mit dem Status „Payment Required“ und Preisangabe[s]. TechCrunch berichtete zudem, dass sich Cloudflares Ansatz in Richtung „Pay Per Use“ entwickelt, bei dem Verlage abrechnen können, wenn Inhalte Wert schaffen, und nicht nur, wenn sie abgerufen werden[s].
All das beweist nicht, dass der Markt funktionieren wird. Ein Zahlungs-Header legt keinen fairen Preis fest. Ein privates Infrastrukturunternehmen sollte nicht zum einzigen Mautsystem des Webs werden. Große Verlage werden bessere Konditionen aushandeln als kleine Websites. KI-Unternehmen könnten entscheiden, dass die Bezahlung hochwertiger Quellen weniger attraktiv ist als das Crawlen dessen, was noch offen bleibt.
Dennoch ist das Prinzip stärker als der Status quo. Einwilligung sollte granular sein. Bezahlung sollte der Substitution folgen. Für KI-Suchtraffic muss der Unterschied zwischen Indexierung und Substitution durchsetzbar werden. Ein Crawler, der indexiert und verlinkt, ist nicht dasselbe wie ein System, das reproduziert und speichert. KI-Suchtraffic sollte danach beurteilt werden, was er mit der Arbeit macht, und nicht nach dem höflichen Namen des Bots.
Was Verlage ablehnen sollten
Verlage sollten die falsche Wahl zwischen Unsichtbarkeit und Kapitulation ablehnen. Sie sollten nicht alle Automatisierung blockieren müssen, um Modell-Training zu stoppen. Sie sollten nicht akzeptieren müssen, dass die Substitution durch Antwortboxen der Preis für die Sichtbarkeit in der Suche ist. Ihnen sollte nicht eingeredet werden, dass ein Zitat, auf das niemand klickt, eine angemessene Vergütung darstellt. Es geht nicht darum, KI-Suchtraffic zu killen; es geht darum, den Deal transparent zu gestalten.
Der praktische Standard ist einfach:
- Such-Crawler sollten von Trainings-Crawlern getrennt sein.
- KI-Antwortprodukte sollten aussagekräftige Daten zu ausgehenden Klicks liefern.
- Plattformen sollten zahlen, wenn ihre Antworten Besuche ersetzen.
- Verlage sollten die Möglichkeit behalten, Indexierung zu erlauben, während sie die Aufnahme in Modelle ablehnen.
- Kleine Websites sollten nutzbare Kontrollen erhalten, nicht Verträge, die nur Unternehmen mit Anwälten vorbehalten sind.
Die KI-Branche hat auch ein Eigeninteresse daran, zu zahlen. Ein Web mit weniger bezahlten Reportern, Redakteuren, Forschern, Prüfern und Spezialisten ist eine schlechtere Datenquelle. Modellkollaps wird oft als technisches Risiko diskutiert, doch in diesem Konflikt ist er auch eine wirtschaftliche Warnung: Systeme, die den Anreiz untergraben, zuverlässige menschliche Arbeit zu schaffen, schaden letztlich der Quelle, von der sie abhängen.
Deshalb ist KI-Suchtraffic ein medienökonomisches Thema, und kein Nischendisput über Crawler.
Das offene Web war nie kostenlos in dem Sinne, wie es KI-Unternehmen manchmal suggerieren. Es wurde durch Aufmerksamkeit, Reputation, Abonnements, Werbung, Spenden und die Hoffnung subventioniert, dass die Suche den nächsten Leser schicken würde. Wenn KI-Suchtraffic den Leser entfernt, aber die Seite behält, bricht er den Deal. Die Lösung ist keine Nostalgie nach alten blauen Links. Die Lösung ist eine neue Regel: Wenn eine Antwortmaschine das offene Web als Rohmaterial nutzt, muss sie denjenigen Wert zurückgeben, die die Antwort erst möglich gemacht haben.
