# Wenn die zehn blauen Links verschwinden

> Cloudflare stellt am 15. September um, wer eine Website automatisiert lesen darf. Warum daraus eine Geschäftsentscheidung wird und was nach der Suchmaschinenoptimierung kommt.

- **Autor:** Dominic Asche
- **Datum:** 09 / 2026
- **Lesezeit:** 6 min
- **URL:** https://fse-group.de/thinktank/wenn-die-zehn-blauen-links-verschwinden

Der Handel des Webs lautete: Inhalte crawlen, in der Suche erscheinen, Besucher bekommen, Besucher monetarisieren. KI verschiebt das letzte Glied dieser Kette, und Cloudflare macht daraus ab dem 15. September eine Entscheidung, die jeder Betreiber treffen muss.

Am 15. September 2026 ändert Cloudflare die Voreinstellungen für automatisierte Zugriffe auf Websites. Das klingt nach einer Konfigurationsfrage. Es berührt aber das Geschäft, auf dem das Web seit zwanzig Jahren aufbaut: den Tausch zwischen Suchmaschinen und denen, die Inhalte veröffentlichen.

Der Handel lautete lange: Inhalte crawlen, in der Suche erscheinen, Besucher bekommen, Besucher monetarisieren. Jedes Glied dieser Kette hatte seinen Preis, und am Ende stand ein Mensch auf einer Seite.

KI verschiebt das letzte Glied. Inhalte crawlen, Informationen verarbeiten, Antwort direkt ausspielen, möglicherweise keinen Besucher mehr schicken. Für Publisher ist dieser Unterschied erheblich: Ihre Inhalte können weiter die Grundlage einer Antwort sein, während der Traffic ausbleibt, über den Werbung und Abonnements verkauft wurden.

![Zweiteiliger Comic. Die linke Hälfte ist mit Alte Welt überschrieben und erklärt: Inhalte bringen Menschen auf deine Website, und Menschen werden zu Kunden. Vier Schritte laufen quer darüber: ein Roboter mit Google-Logo crawlt Inhalte, die Seite erscheint in der Google-Suche zur Anfrage beste Wanderwege, ein Mensch mit Rucksack kommt auf die Website, und dort steht ein Knopf mit Jetzt buchen, daneben die Notiz Schön, hier zu sein. Die rechte Hälfte ist mit Neue Welt überschrieben und erklärt: Inhalte werden von KI gelesen, verarbeitet und als Antwort ausgespielt, ohne dass Menschen die Website besuchen müssen. Auch hier vier Schritte: ein KI-Roboter crawlt dieselben Inhalte, ein zweiter verarbeitet sie und denkt dabei Zusammenfassen, Verstehen, Vergleichen, Antwort erstellen, eine KI-Suche nennt daraufhin direkt drei Wanderwege in den Alpen, und möglicherweise wird kein Besucher mehr geschickt. Der Mensch sitzt mit einer Tasse im Sessel und denkt, das sei genau die Information, die er wollte.](https://fse-group.de/media/think-pieces/20260907_thinktank-blue-links-welten.png)

### Eine Geschäftsentscheidung, keine Einstellung

Cloudflare sortiert automatisierten Verkehr künftig nicht mehr nur nach Absender, sondern nach Zweck: Search, Agent und Training. Das wirkt wie eine saubere Trennung. Interessanter ist, was mit Crawlern passiert, die mehrere Zwecke gleichzeitig erfüllen.

Googlebot, Applebot und BingBot zählt Cloudflare zu diesen Mehrzweck-Crawlern. Für sie gilt künftig die restriktivste konfigurierte Regel. Wer also Training blockiert, blockiert damit möglicherweise einen Crawler, der zugleich die Suche bedient. [1]

Damit wird aus einer technischen Einstellung eine Abwägung mit Preis: Will ich verhindern, dass meine Inhalte für bestimmte KI-Zwecke genutzt werden, wenn ich dafür Sichtbarkeit in der Suche riskiere?

Matthew Prince, CEO von Cloudflare, formuliert es offensiver. Im Big Technology Podcast kündigte er am 2. September an, Google bei werbe- oder abonnementfinanzierten Angeboten standardmäßig zu blockieren, sofern der Betreiber nicht widerspricht. [2]

Bei Google selbst verläuft die Trennlinie anders. Über Google-Extended lässt sich seit längerem steuern, ob gecrawlte Inhalte für das Training künftiger Gemini-Modelle und bestimmte Grounding-Anwendungen genutzt werden dürfen. Google gibt an, dass diese Einstellung weder die Aufnahme in die Suche noch das Ranking beeinflusst. [3]

KI-Übersichten und der KI-Modus innerhalb der Google-Suche gehören für Google aber zur Suche. Wer sie nicht will, muss den Googlebot blockieren, und verliert damit die Suche mit.

Die Wahl lautet nicht mehr, ob eine Maschine lesen darf. Sie lautet, zu welchem Zweck, zu welchem Preis und mit welcher Gegenleistung.

### Wenn die Antwort den Klick ersetzt

Dass KI-Suche weniger Website-Verkehr erzeugt, ist inzwischen mehr als eine Vermutung.

Pew Research hat das Browserverhalten von 900 US-Erwachsenen untersucht und 68.879 Google-Suchen ausgewertet. Erschien eine KI-Zusammenfassung, klickten Nutzer in 8 Prozent der Fälle auf ein klassisches Suchergebnis. Ohne Zusammenfassung waren es 15 Prozent. Einen in der Zusammenfassung genannten Quellenlink öffneten sie bei 1 Prozent der Besuche. [4]

Eine 2026 veröffentlichte experimentelle Untersuchung hat Nutzer zufällig einer Suche mit oder ohne KI-Übersicht zugeordnet. Erschien eine Übersicht, gingen organische Klicks nach außen um 39,8 Prozent zurück, Suchen ohne jeden Klick stiegen um 34,5 Prozent. [5]

Der Inhalt kann dabei wertvoll bleiben. Was sinkt, ist sein Traffic-Wert.

![Infografik mit dem Titel Wenn die Antwort den Klick ersetzt. Oben eine Kette in vier Schritten: Inhalte werden gecrawlt, die KI verarbeitet sie, die Antwort wird direkt ausgespielt, der Besucher bleibt aus. Darunter ein Balkenvergleich mit dem Titel Mit KI-Zusammenfassung halbiert sich die Klickrate, erhoben von Pew Research bei 900 US-Erwachsenen und 68.879 Google-Suchen: ohne Zusammenfassung enden 15 Prozent der Suchen mit einem Klick auf ein Suchergebnis, mit Zusammenfassung 8 Prozent, und nur 1 Prozent führt zu einer in der Zusammenfassung zitierten Quelle. Ein Experiment von Agarwal und Sen aus dem Jahr 2026 bestätigt die Richtung: organische Klicks gehen um 39,8 Prozent zurück, Suchen ohne jeden Klick steigen um 34,5 Prozent. Am Fuß drei Folgerungen: der Inhalt bleibt wertvoll, während sein Traffic-Wert sinkt; der Website-Besuch ist nicht mehr die einzige Einheit der Distribution; aus Suchmaschinenoptimierung wird eine Zugriffsstrategie.](https://fse-group.de/media/think-pieces/20260907_thinktank-blue-links-klickrate.png)

### Was kostet ein Crawl?

Cloudflares Antwort besteht nicht nur darin, Bots auszusperren. Mit Pay Per Crawl können teilnehmende Betreiber einen KI-Crawler erlauben, blockieren oder zur Zahlung verpflichten. Als Mindestpreis nennt Cloudflare derzeit 0,001 US-Dollar pro erfolgreichem Crawl. [6]

Der Betrag allein wäre kaum eine Nachricht. Interessant ist der Mechanismus: Ein Crawler kann angeben, welchen Preis er höchstens akzeptiert. Passt das Angebot nicht, antwortet der Server mit dem Statuscode 402, Payment Required. [7]

Damit wird der Zugriff selbst zur Transaktion: Anfrage, Preis, Zahlung, Zugriff. Zum ersten Mal lässt sich maschineller Zugriff nicht nur technisch erlauben oder verbieten, sondern an eine wirtschaftliche Bedingung binden.

### Publisher und Händler rechnen unterschiedlich

Für einen Publisher können Artikel, Archive und Recherchen das eigentliche Produkt sein. Der Wunsch, deren Nutzung durch KI-Anbieter zu lizenzieren, ist nachvollziehbar, und dieser Markt existiert längst. OpenAI hat Vereinbarungen mit Axel Springer, der Financial Times, The Atlantic, Condé Nast und der Washington Post bekanntgegeben. [8]

Bei einem Onlineshop funktioniert die Rechnung anders. Eine Produktbeschreibung soll keinen Seitenaufruf monetarisieren, sie soll ein Produkt verkaufen. Ein Agent, der Preis, Eigenschaften, Verfügbarkeit und Lieferbedingungen ausliest, kann für den Händler wertvoll sein, obwohl kein Mensch die Produktseite je gesehen hat. Diesen Agenten für den Crawl zahlen zu lassen, wäre widersinnig.

Content-Unternehmen wollen den Zugriff monetarisieren. Handelsunternehmen das Ergebnis.

Für Händler ist die interessantere Frage deshalb eine andere: Wie stellen sie sicher, dass ihre Produkte für kaufende Agenten auffindbar, vergleichbar und kaufbar sind? Denn wenn ein Agent für den Kunden auswählt, verschiebt sich die Optimierung vom menschlichen Seitenbesuch auf die Qualität der zugrunde liegenden Daten.

Ein etabliertes Unternehmen startet dabei von einem anderen Punkt als ein neuer Anbieter: Bewertungen, Produktinformationen, Erwähnungen und Lieferhistorien existieren bereits. Ein kaufender Agent braucht allerdings andere Dinge als ein Mensch: strukturierte Produktdaten, eindeutige Preise, aktuelle Verfügbarkeit, belastbare Unternehmensdaten und im besten Fall einen Weg, die Transaktion direkt auszuführen. Für kleine Anbieter kann daraus ein Verteilungsproblem werden. Es kann genauso eine Chance sein, denn wer objektiv verglichen wird, braucht weniger Bekanntheit.

### Nach SEO kommt nicht GEO, sondern die Zugriffsstrategie

Unternehmen haben ihre Websites bisher für zwei Gruppen gebaut: für Menschen und für Suchmaschinen, die Menschen vermitteln. Jetzt kommt eine dritte hinzu, die selbst liest, vergleicht, entscheidet und zunehmend handelt.

Dafür reicht die Unterscheidung zwischen öffentlich und nicht öffentlich nicht mehr. Eine Zugriffsstrategie braucht vier Antworten:

- **Discover:** Informationen, die möglichst breit gefunden, indexiert und zitiert werden sollen.

- **Transact:** Produkt-, Preis- und Serviceinformationen, die Agenten zuverlässig verarbeiten und für Transaktionen nutzen können.

- **Monetize:** Inhalte, Daten, Schnittstellen oder Dienste, deren maschineller Zugriff selbst einen Wert hat.

- **Protect:** Inhalte und Nutzungsarten, für die automatisierter Zugriff nicht erwünscht ist.

Nicht jedes Unternehmen braucht alle vier. Aber jedes mit relevanter digitaler Distribution wird sich mit dieser Abwägung beschäftigen müssen, und zwar bevor eine Voreinstellung sie für das Unternehmen trifft.

Suchmaschinenoptimierung ist damit nicht erledigt. Wer in KI-Antworten als Quelle vorkommen will, muss im Index stehen. Aber der Website-Klick ist nicht mehr das einzige relevante Ergebnis guter Auffindbarkeit. Ein Unternehmen kann in einer Antwort auftauchen, bei einer Kaufentscheidung berücksichtigt werden oder einem Agenten Daten liefern, ohne dass daraus je eine Sitzung im Analysewerkzeug wird.

Die entscheidende Veränderung liegt deshalb vielleicht nicht darin, dass weniger Menschen auf zehn blaue Links klicken. Sie liegt darin, dass der Website-Besuch nicht mehr zwingend die Einheit ist, in der digitale Distribution gemessen und bezahlt wird.

#### Quellenverzeichnis

- [1] Cloudflare, Jin-Hee Lee und Bryan Becker: [*Your site, your rules: new AI traffic options for all customers*](https://blog.cloudflare.com/), 1. Juli 2026. Neue Verkehrsklassifizierung, Voreinstellungen ab 15. September 2026 und Behandlung von Mehrzweck-Crawlern.

- [2] Big Technology Podcast, Alex Kantrowitz mit Matthew Prince: *Cloudflare CEO: We’re Ready To Block Millions Of Websites From AI*, 2. September 2026.

- [3] Google for Developers: [*Google’s common crawlers, Google-Extended*](https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers), zuletzt aktualisiert am 14. Juli 2026.

- [4] Pew Research Center, Athena Chapekis und Anna Lieb: [*Google users are less likely to click on links when an AI summary appears in the results*](https://www.pewresearch.org/short-reads/2025/07/22/google-users-are-less-likely-to-click-on-links-when-an-ai-summary-appears-in-the-results/), 22. Juli 2025.

- [5] Saharsh Agarwal und Ananya Sen: [*The Impact of Google AI Overviews on Publisher Traffic and User Experience*](https://papers.ssrn.com/sol3/papers.cfm?abstract_id=5174691), SSRN, 3. April 2026, überarbeitet am 8. Juli 2026.

- [6] Cloudflare Developers: [*Pay Per Crawl*](https://developers.cloudflare.com/ai-crawl-control/features/pay-per-crawl/).

- [7] Cloudflare, Rohin Lohe, Justin Ridgely und Will Papper: [*Announcing the Monetization Gateway: charge for any resource behind Cloudflare via x402*](https://blog.cloudflare.com/), 1. Juli 2026.

- [8] OpenAI: [*We’re bringing the Financial Times’ world-class journalism to ChatGPT*](https://openai.com/index/content-partnership-with-financial-times/), 29. April 2024, sowie die veröffentlichten Partnerschaften mit Axel Springer, The Atlantic, Condé Nast und der Washington Post.
