Leitfäden, Tutorials & Einblicke
Erfahren Sie vom Shifter-Team mehr über Residential-Proxys, Web Scraping, Datenerfassungsstrategien und bewährte Branchenpraktiken.
Kosten pro sauberem Datensatz: Die Scraping-Kennzahl, die das Finanzwesen wirklich versteht
Gigabyte und Anfragenzahlen sagen dem Finanzwesen nicht, was Daten kosten. So misst man Kosten pro sauberem Datensatz und pro nützlicher Änderung, und welche Stellhebel am meisten bewirken.
Änderungserkennung im großen Maßstab: Webseiten vergleichen, ohne im Rauschen zu ertrinken
Seiten ändern sich bei jedem Laden: Werbung, Zeitstempel, Tokens. Wie man echte Änderungen vom Rauschen unterscheidet, mit Normalisierung, feldbasierten Diffs und Simhash, inklusive getestetem Code.
Schluss mit HTML-Parsing: Strukturierte Daten aus JSON-LD und eingebetteten Daten extrahieren
Die meisten Seiten enthalten bereits maschinenlesbare Daten. Wie man JSON-LD und eingebettetes JSON extrahiert statt sich auf brüchige Selektoren zu verlassen, und was zu tun ist, wenn die Daten unvollständig sind.
robots.txt, KI-Opt-outs und Reservierungssignale: Was Webdatensammler 2026 beachten sollten
robots.txt hat in der EU inzwischen rechtliches Gewicht, und neue KI-Signale verbreiten sich. Was jedes einzelne bedeutet, welche KI-Crawler sie beachten und wie Datenteams reagieren sollten.
Wie Marken gerichtsfeste Beweise aus Online-Fälschungsangeboten erstellen
Ein gefälschtes Angebot zu finden ist einfach. Es später zu beweisen nicht. Wie man Angebotsbeweise erfasst, hasht, mit Zeitstempel versieht und aufbewahrt, damit sie vor Gericht Bestand haben.
Überprüfung von ESG-Behauptungen mit öffentlichen Web-Nachweisen
Neue EU-Vorschriften zu Umweltaussagen gelten ab 27. September 2026. Eine praktische Methode zur Überprüfung von Nachhaltigkeitsaussagen anhand öffentlicher Nachweise sowie zur Verfolgung von Änderungen.
Überwachung der öffentlichen Präsenz Ihrer Lieferanten: Eine praktische Erfassungsmethode
Lieferantenrisiken zeigen sich meist öffentlich, bevor sie ein Audit erreichen. Eine schrittweise Methode zur Überwachung von Sanktionslisten, Registern, Websites und lokalen Nachrichten.
Machen Airlines und Hotels je nach Ausreiseland unterschiedliche Preise? Wir haben es geprüft
Wir haben dieselben Ryanair-Tarife und Booking.com-Hotelpreise aus sechs Ländern über residential IPs abgerufen. Was sich änderte, was gleich blieb und was wir nicht erreichen konnten.
Wochentag, Wochenende, Feiertag: Wie sich Blockraten mit dem Kalender verändern
Niemand veröffentlicht Scraper-Blockraten nach Wochentag. Was Bot-, Feiertags- und Peak-Event-Daten darüber zeigen, warum sie sich verändern, und wie Sie Ihren eigenen Kalender messen.