Wir haben es geschafft: Der Scraper ist (vorerst) erledigt

Dienstag, den 29. September 2026 um 07:14 Uhr Gut zu wissen - Internet & Computer
| Drucken |

Symbolfigur: Visualisierter Scraper - KI-generiert

[www] Wer die Nase in den Wind hält, also: wer etwas wagt, der kann verlieren. Wer aber gar nichts wagt, der kann auch nicht gewinnen. Wir haben Datenklauern Paroli geboten und sehen jetzt den Erfolg: Der größte und gemeinste Dieb hat aufgegeben. Unsere Statitik zeigt wieder normale Zugriffszahlen.

Vorgeschichte: Scraper-Besuche: Wir werden etwas ändern ...

Gut zu wissen

Besuche von Crawlern und Scrapern auf öffentlichen Internetseiten unterscheiden sich durch Zweck und Verhalten: Ein Crawler wie Google bewegt sich durch das Web, um Inhalte zu entdecken, zu bewerten und zu indexieren. Er folgt Links, arbeitet gemäßigt, identifiziert sich brav über seinen User‑Agent und respektiert die Anweisungen in robots.txt.

Sein Zugriffsmuster ist geordnet, aber nicht übermäßig. Er kopiert und lädt sich nur das, was für die Bewertung einer Seite nötig ist.

Ein Scraper dagegen sammelt unerlaubt Mengen von Daten. Er lädt sich Internetseiten in perfekter Reihenfolge, blitzschnell und vollständig, inklusive allem, was er kriegen kann. So erzeugt extrem hohe Datenabrufe.

Sein Verhalten ist maschinell gleichförmig und dient nicht der Indexierung, sondern der Extraktion, also dem Auslesen und damit einer kostenlosen Ernte.


Ausschnitt: Besucher-Statistik bis heute (c) HESSENMAGAZIN.deWir haben in den letzten Wochen die Struktur so verändert, dass Scraper nicht mehr an Texte und Bilder kommen, die sie bei uns lohnenswert finden. Ihnen wurde auf diese Weise die Grundlage entzogen.

Als Ergebnis zeigt zeigt die Nutzung der HESSENMAGAZIN.de Seite im Monat September 2026 ein klares technisches Muster: In den ersten drei Wochen sorgte ein automatisierter Ausleser für künstlich hohe und gleichförmige Abrufzahlen.

Ab dem 24. September brachen die Werte deutlich ein, und der sonst typische Wochenendverlauf wurde sichtbar – ein Zeichen dafür, dass der Scraper nicht mehr aktiv ist und die Statistik wieder das reale Verhalten menschlicher Nutzer abbildet.

Lachend

Quelle: Brigitta Möllermann, HESSENMAGAZIN.de