01.06.2025 - Tom Brigl

Google bestätigt crawlbudget Regel: Optimierte datenbank statt million seiten

Tom 01.06.2025

„`html Google bestätigt, dass die **1-Million-Seiten-Grenze für Crawl-Budget** weiterhin relevant ist. Diese Richtlinie bleibt seit fünf Jahren unverändert. Entscheidend ist nicht nur die Anzahl der Seiten, sondern vor allem die Effizienz der Datenbanken. Gary Illyes von Google erklärte, dass langsame Datenbankabfragen problematischer sind, als eine hohe Seitenzahl. Datenbankgeschwindigkeit ist der

AI Agenten überfluten Internet: Gary Illyes warnt Webseiten vor Überlastung

Tom 01.06.2025

Google’s Gary Illyes hat darauf hingewiesen, dass AI-Agents und automatisierte Bots bald das Internet mit Traffic überschwemmen werden. Er erklärte, dass mittlerweile „jeder und seine Großmutter einen Crawler startet“. Diese Bemerkung wurde in einem Podcast der Google Search Relations diskutiert und warnt vor bevorstehender Überlastung des Webs durch die massive