Bots überholen Menschen im weltweiten Webverkehr – historischer Meilenstein

Der unabhängige Imperva Bad Bot Report 2025 bestätigte, dass automatisierter Verkehr erstmals seit einem Jahrzehnt die 50 %-Grenze überschritten hat und im Jahr 2024 51 % des gesamten globalen Webverkehrs ausmachte. Das eigene Netzwerk, das weltweit etwa 1 von 5 Websites bedient, wies ein Verhältnis rund 53 % zu 47 % aus.

Bis Ende 2025 werden 47 % aller HTML-Anfragen Matthew Prince hatte bereits Anfang dieses Jahres auf der SXSW prognostiziert, dass der Bot-Traffic den menschlichen Traffic bis 2027 übersteigen werde – eine Vorhersage, die nun vorzeitig eingetroffen ist.

Prince wies auf die Größenordnung der Unterschiede zwischen menschlichem und KI-gesteuertem Surfverhalten hin: Während ein Mensch bei der Produktsuche möglicherweise fünf Websites besucht, kann ein KI-Agent für dieselbe Aufgabe bis zu 5.000 Seiten abfragen.

Technik und Auswirkungen

Dieses Muster wird hauptsächlich durch KI-gesteuerte Scraper, Crawler für das Training großer Sprachmodelle (LLM) sowie autonome Suchagenten angetrieben, die auf Modellen wie OpenAIs GPT, Anthropics Claude und Googles Gemini basieren.

Der KI-gesteuerte Traffic stieg im Jahr 2025 spezifisch um 187 % an und wuchs damit fast achtmal schneller als die menschliche Webaktivität im selben Zeitraum. Der Anstieg des Bot-Traffics hat schwerwiegende Sicherheitsimplikationen. 37 % als bösartige, sogenannte „bad bots", eingestuft, während lediglich 14 % legitime Crawler darstellen.

Verlage und Werbetreibende müssen sich nun mit grundlegend verzerrten Analysen auseinandersetzen, da Traffic-Dashboards das Verhalten Publikumsengagement. Als Reaktion darauf gewinnen neue Rahmenwerke wie „pay-to-crawl"-Protokolle an Bedeutung.

Technischer Hintergrund

Cloudflare hat bereits dazu übergegangen, KI-gesteuerte Crawler standardmäßig zu blockieren, es sei denn, diese kompensieren die Inhaltsersteller. Da autonome Agenten, KI-gestützte Suchwerkzeuge und LLM-Pipelines zunehmend an Zahl gewinnen, wird sich das Verhältnis weiter zugunsten der Automatisierung verschieben.

Die „Agent Economy" ist keine Prognose für das Jahr 2027 mehr, sondern die gegenwärtige Realität des Internets; die Infrastruktur des Webs, seine Monetarisierungsmodelle und seine Sicherheitsarchitekturen müssen sich entsprechend anpassen.