Dev News Daily ENDE

Cloudflare: Automatisierter Verkehr hat im Mai 2026 den menschlichen überholt

Cloudflare hat am 27. September, seinem 16. Geburtstag, den jährlichen Brief der Gründer veröffentlicht, und er enthält eine Zahl, die für alle Websitebetreiber interessant ist. Cloudflare hatte nach eigenen Angaben erwartet, dass automatisierter Verkehr den menschlichen in der zweiten Hälfte 2027 überholt; der Aufstieg von KI-Agenten und Crawlern habe diesen Zeitpunkt auf Mai 2026 vorgezogen. Setzen sich die Trends fort, werde automatisierter Verkehr in fünf Jahren tausendmal so groß sein wie der menschliche - nicht weil Menschen weniger surfen, sondern weil der Verkehr von Agenten weiter wächst.

Zwei weitere Aussagen stützt der Brief auf Cloudflares eigene Daten. Das Web, das zwischen 2012 und 2025 stagniert oder nach manchen Maßstäben sogar geschrumpft sei, wachse seit Mitte 2025 wieder schnell - weniger durch KI-Füllmaterial als durch Menschen, die mit KI-Programmierwerkzeugen Websites bauen; Cloudflare nennt mehr als 7 Millionen Entwickler auf seiner Plattform. Und mehr als die Hälfte dessen, was sich gut benehmende Bots abrufen, habe sich seit ihrem letzten Besuch nicht verändert.

Das Argument dreht sich darum, wer bezahlt. Ein Agent, der ein Mittagslokal aussuchen soll, liest womöglich tausend Speisekarten, um eines zu empfehlen, und die übrigen 999 tragen die Kosten dafür. Cloudflare spricht von einer Tragik der Allmende und warnt zudem, dass Agenten bevorzugen, worüber sie die meisten Informationen haben, was es neuen Unternehmen schwerer machen könnte, gefunden zu werden. Angekündigt sind für diese Woche Wege, wie Crawler nur Geändertes abrufen und Betreiber bezahlt werden, wenn Agenten ihre Inhalte nutzen, sowie Partnerschaften.

Cloudflare: Automatisierter Verkehr hat im Mai 2026 den menschlichen überholt
Cloudflare: Automatisierter Verkehr hat im Mai 2026 den menschlichen überholt — Dev News Daily

Was das bedeutet

Die Verkehrszahlen sind Cloudflares eigene Messungen im eigenen Netz, keine unabhängige Studie, doch das Netz ist groß genug, dass sich die Richtung kaum wegdiskutieren lässt. Für Betreiber ist die Zahl zu unveränderten Inhalten die praktische: Holt mehr als die Hälfte der Anfragen guter Bots Seiten, die sich nicht geändert haben, sind saubere ETag- und Last-Modified-Behandlung, Sitemaps mit ehrlichen lastmod-Werten und sinnvolles Caching keine Hausarbeit mehr, sondern Kapazitätsplanung.

Die kommerziellen Vorschläge folgen im Lauf der Woche und sollten beurteilt werden, wenn sie vorliegen. Der Brief beschreibt das Problem, für das Cloudflare Lösungen verkaufen will; die Zahlen hinter diesem Problem sind der Teil, den man behalten sollte.