KI-Crawler belasten Websites massiv – Meta und OpenAI führen die Liste an

The Register – Headlines Original ≈1 Min. Lesezeit
Anzeige

Fastly hat einen Bericht veröffentlicht, der zeigt, dass KI‑Crawler die offene Weblandschaft stark belasten. Ein Beispiel aus dem Bericht: Ein Fetcher‑Bot traf eine Website mit 39.000 Anfragen pro Minute.

Der Bericht schätzt, dass KI‑Crawler 80 % des gesamten KI‑Bot‑Verkehrs ausmachen, während Fetcher die restlichen 20 % ausmachen. Diese Bots können Daten von einer einzigen Seite in tausenden Anfragen pro Minute abrufen.

Die hohe Belastung führt zu Engpässen und erhöhtem Ressourcenverbrauch für Betreiber von Websites. Betreiber sollten ihre Infrastruktur prüfen und Schutzmaßnahmen gegen übermäßige Bot‑Aktivität implementieren.

Ähnliche Artikel