Guías, Tutoriales e Ideas
Aprende sobre proxies residenciales, web scraping, estrategias de recopilación de datos y buenas prácticas del sector con el equipo de Shifter.
Contagio de subred: cuando una IP bloqueada envenena a sus vecinas
Las listas de bloqueo y los sistemas de reputación a menudo juzgan a una IP por sus vecinas. Lo que muestra la investigación sobre el bloqueo a nivel de rango, sus daños colaterales y cómo detectarlo.
La tasa de fallos silenciosos: qué porcentaje de solicitudes exitosas devuelve el contenido equivocado
Un HTTP 200 no significa que hayas obtenido la página. Lo que muestra la investigación sobre páginas de bloqueo, soft 404s y desafíos ocultos tras el éxito, y cómo medir el tuyo propio.
Cómo construir un Target Health Score: saber cuándo un sitio se está volviendo en tu contra
Los sitios rara vez bloquean un rastreador en un solo paso. Primero desafían, aplican bloqueos parciales y ralentizan. Cómo convertir esas señales en una puntuación por sitio, y actuar en consecuencia.
Programación de rastreo con conciencia de costes: gastar tu presupuesto donde cambia
La mayor parte del presupuesto de rerastreo se gasta en confirmar que nada ha cambiado. Cómo programar según el valor esperado por coste, y por qué las páginas que cambian más rápido no son la mejor compra.
Backpressure y control de flujo en crawlers distribuidos
Un crawler es una tubería, y su etapa más rápida inundará a la más lenta. Cómo las colas acotadas, el trabajo basado en extracción y los límites adaptativos por host mantienen estable a un crawler.
Ejecución de scrapers en CI/CD: credenciales de proxy, secretos y ejecuciones de prueba
Cómo ejecutar scrapers en CI sin filtrar credenciales de proxy ni consumir ancho de banda en cada push: almacenamiento de secretos, niveles de prueba, sesiones, comprobaciones de cuota y rotación.
¿Reflejan las herramientas de SEO el volumen de búsqueda real? Tres proveedores frente a la realidad del SERP
Keyword Planner, Semrush y Ahrefs estiman el volumen de búsqueda de forma diferente. Qué revelaron las pruebas independientes y por qué el SERP en vivo importa más que la cifra.
Qué países sufren más bloqueos geográficos, y por parte de quién
Los países sancionados encabezan todas las mediciones de bloqueo geográfico, pero no son toda la historia. Lo que muestra la investigación sobre quién bloquea a quién, y cómo.
Carga publicitaria por mercado: qué porcentaje de una página es publicidad, país por país
Nadie ha publicado los bytes de anuncios como proporción de los bytes de página por país. Esto es lo que muestran los datos, y por qué Chrome acaba de hacer posible la respuesta real.