Ein spannender und gleichzeitig unterhaltsamer Artikel über ein Problem, das uns als Webhosting-Anbieter auch schon viel beschäftigt hat: Bots, Crawler und Scraper verursachen inzwischen einen erstaunlich großen Teil des Website-Traffics – oft weitgehend unsichtbar in klassischen Analytics-Tools.
Nick Gray beschreibt sehr anschaulich, wie bei PatronView mehr als 99 % der ausgelieferten Seiten von Bots abgerufen werden, welche Rolle dabei AI-Crawler und Botnetze spielen und mit welchen Cloudflare-Regeln er versucht, die Last in den Griff zu bekommen. Besonders interessant sind seine konkreten Zahlen und Erfahrungen aus einem Jahr Bot-Abwehr.
Absolut lesenswert: 99% of My Website Traffic Is Bots
