Guides, tutoriels et analyses
Découvrez les proxies résidentiels, le web scraping, les stratégies de collecte de données et les meilleures pratiques du secteur avec l'équipe Shifter.
Comment utiliser des proxys résidentiels dans Puppeteer (avec page.authenticate)
Les proxys dans Puppeteer : le proxy va dans les args de lancement, les identifiants dans page.authenticate, rotation géo par page via un gateway, et blocage de ressources.
Chris Collins · 5 août 2026 Surveiller un pipeline de scraping : les métriques qui vous disent qu'il casse avant vos données
Un scraper échoue en silence : le cron se déclenche, les logs disent 200, les données se gâtent. Les métriques et alertes qui l'attrapent dans le pipeline, pas au conseil.
Chris Collins · 4 août 2026 L'état du web scraping en 2026
L'IA a rendu la collecte de données stratégique, l'anti-bot est passé au niveau réseau, les blocages sont devenus invisibles, et le prix est passé à la bande passante. Où en est le web scraping en 2026.
James Meadow · 3 août 2026 Comment utiliser des proxys résidentiels en C# avec HttpClient
Les proxys en C# : WebProxy avec NetworkCredential, SocketsHttpHandler et PooledConnectionLifetime, IHttpClientFactory, et des clients par identité pour la rotation géo.
Chris Collins · 2 août 2026 Construire ou acheter : devriez-vous gérer votre propre infrastructure de scraping ?
Un scraper de démo prend un après-midi. Le faire tourner à l'échelle est un produit. Un cadre pour quoi construire, quoi acheter, et la seule couche à toujours louer.
Chris Collins · 1 août 2026 Comment savoir quand un site vous sert du contenu faux ou bloqué
L'échec de scraping dangereux n'est pas le 403 que vous voyez, c'est le 200 OK plein de déchets. Comment détecter les blocages doux, les honeypots et les données empoisonnées.
Chris Collins · 31 juillet 2026 Nous lançons la recharge automatique du portefeuille
Fixez un seuil et un montant de recharge, et votre portefeuille Shifter se recharge tout seul pour que les frais à l'usage ne mettent jamais vos proxys en pause. Plafond mensuel, désactivable quand vous voulez.
James Meadow · 30 juillet 2026 Comment utiliser des proxys résidentiels en Node.js avec Axios et Got
Les proxys en Node.js : pourquoi Axios a besoin de https-proxy-agent et proxy:false, l'option agent de Got, le ProxyAgent d'undici pour fetch, et la rotation géo par requête.
Chris Collins · 29 juillet 2026 Comment mettre à l'échelle des charges de scraping avec proxys résidentiels via Kubernetes
Scraping sur Kubernetes : identifiants de proxy en Secrets, identité de session par pod via la Downward API, autoscaling piloté par la file, et arrêt propre.
Chris Collins · 28 juillet 2026