Soluciones

Proxies para la monitorización de precios y stock

Monitorizar precios significa hacer una y otra vez las mismas preguntas a las mismas páginas. Hacerlo desde una sola dirección se nota enseguida; repartir la carga mantiene sus datos fluyendo.

Monitorización de precios
Proxy residencialDesde 350 TRY / mes

El desafío

Qué hace difícil esta tarea

  • Patrones de solicitud repetitivos

    Las revisiones regulares de las mismas URL son fáciles de detectar y bloquear para las defensas.

  • Precios personalizados

    Los precios pueden depender del país, del dispositivo o del historial de navegación, de modo que los resultados de una configuración pueden no generalizarse.

  • Volumen

    Los catálogos grandes de muchos minoristas suman millones de solicitudes al mes.

El enfoque

Cómo ayudan los proxies adecuados

  1. Use volumen barato siempre que pueda

    Las IP de centro de datos atienden los sitios minoristas tolerantes al menor coste por solicitud.

  2. Use residenciales para los sitios protegidos

    Las IP residenciales rotativas pasan donde se filtran los rangos de centros de datos.

  3. Segmente por país

    Seleccione el país cuyo precio quiere registrar para comparar mercados de forma coherente.

En detalle

Los detalles que deciden el resultado

Clasificar los SKU por niveles y presupuestar una sola observación

Comprobar todos los productos con la misma frecuencia malgasta dinero en artículos que rara vez cambian y muestrea poco los que se mueven. Divida el catálogo en niveles: artículos calientes (más vendidos, competidores directos, cualquier cosa en promoción) cada hora, artículos templados cada día, artículos fríos cada semana. Para un catálogo ilustrativo de 10,000 SKU con 500 SKU calientes, 2,500 templados y 7,000 fríos, son 15,500 descargas al día, unas 465,000 al mes. Comprobar los 10,000 cada hora serían 7.2 millones al mes, más de quince veces más, con poca información adicional que mostrar.

Ahora valore esas 465,000 descargas de dos maneras. Con un paquete de proxies IPv4 de centro de datos de 100 IP (400 TRY al mes), la carga es de unas 11 solicitudes por minuto repartidas entre 100 direcciones, aproximadamente 0.1 por dirección, a unos 0.0009 TRY por descarga. Con el pool de proxies residenciales, a unos 100 KB ilustrativos por página, las mismas descargas suman unos 46.5 GB, que caben en el plan de 50 GB (2,500 TRY) a unos 0.0054 TRY por descarga. El centro de datos es aproximadamente seis veces más barato, así que úselo siempre que un comercio lo acepte y pague residencial solo donde no sea así.

Los picos necesitan otro tipo de plan. Durante una venta estacional podría comprobar los 500 SKU calientes cada 10 minutos durante 24 horas: 72,000 descargas, unos 7.2 GB a 100 KB cada una, que cubre un plan de proxies residenciales de 10 GB (650 TRY). El plan residencial rotativo ilimitado diario cuesta 5,000 TRY, lo que equivale a unos 167 GB a los 30 TRY por GB del plan de 300 GB, así que solo compensa para ráfagas más de veinte veces mayores. Consulte con ventas las condiciones de uso razonable de los planes ilimitados, que aquí no se publican.

NivelSKU (ejemplo)FrecuenciaDescargas al mes
Calientes500Cada hora360,000
Templados2,500Diaria75,000
Fríos7,000Semanal30,000
Total10,000Mixta465,000

Obtener el mismo precio dos veces: normalización

Un monitor de precios es tan bueno como su comparabilidad. Fije las condiciones de observación: un país de salida por mercado, un idioma, una sesión limpia sin cookies, un perfil de dispositivo y una marca de tiempo en UTC. Después decida a qué precio se refiere: el precio de lista, el precio de oferta actual, el precio por unidad o el precio con impuestos y entrega incluidos. Los comercios los presentan de forma distinta según el país, y mezclarlos produce rebajas fantasma. Capture también la variante, porque la talla, el color y el número de unidades del pack suelen tener precios distintos bajo una misma URL de producto.

Prefiera las fuentes estructuradas a rascar la maquetación visible. Muchas páginas de producto incrustan datos estructurados schema.org con el precio ofrecido, la moneda y la disponibilidad, y muchos sitios cargan los precios desde un endpoint JSON que llama la propia página; ambos son más ligeros que un renderizado completo y menos frágiles cuando cambia el diseño. Use solo los endpoints que la página llama públicamente, dentro de las condiciones del sitio. Si debe renderizar con un navegador headless, cuente con varias veces los bytes del HTML solo, así que recalcule el tamaño de su plan por GB a partir de bytes medidos y no del tamaño del HTML.

CampoPor qué se desvíaQué guardar
Moneda e impuestosLos precios se muestran con o sin impuestos según el mercadoImporte, código de moneda ISO e indicador de impuestos incluidos
Precio de oferta frente a precio de listaLos precios tachados cambian según su propio calendarioAmbos valores más la etiqueta de descuento
VarianteLa talla, el color o el número de unidades cambian el precioID de variante junto con el precio, no solo la URL de la página
DisponibilidadEn stock, poco stock, pendiente de reposición y agotado se parecen en el textoUn estado enumerado, nunca deducido de la ausencia de precio
Coste de entregaGratis por encima de un umbral o variable según la regiónGastos de envío y umbral cuando se muestren

Validar, alertar y actuar ante un cambio

Separe tres sucesos que se parecen: un cambio real de precio, un fallo de análisis y un bloqueo. Un campo de precio ausente no es un precio cero ni una etiqueta de agotado; regístrelo como desconocido y cuéntelo en su métrica de fallos de análisis. Valide cada valor con reglas antes de que llegue a un panel. Una moneda distinta de la del mercado, un precio que cae a cero o que varía más de, digamos, un 50 % en un solo paso, y una página mucho más pequeña de lo habitual en el comercio son señales para retener el valor y revisarlo.

Confirme antes de alertar. Cuando un valor supere el umbral de cambio que haya fijado, vuelva a descargarlo desde otra IP y, en los cambios grandes, desde una segunda ubicación unos minutos después; alerte solo si las observaciones coinciden. Esta única regla elimina muchas falsas alertas causadas por pruebas A/B, nodos de borde con caché y errores momentáneos. Conserve las instantáneas sin procesar, HTML o JSON, durante el periodo de retención que elija, para que, cuando alguien cuestione una alerta, pueda mostrar lo que devolvió la página. Almacene solo datos públicos de producto, nunca información personal.

Guía de trabajo

Un plan de implementación práctico

Cuatro pasos desde la primera prueba hasta una operación estable y supervisada.

  1. Cree el mapa de SKU y los niveles

    Asocie cada uno de sus productos con las URL y variantes de la competencia, y asigne una frecuencia caliente, templada o fría según el impacto en ventas y la volatilidad del precio.

  2. Haga un piloto de cada comercio con el tipo de IP más económico

    Descargue 500 páginas desde IP de centro de datos, mida la tasa de precios válidos y la tasa de bloqueo, y pase un comercio a residencial solo si no alcanza su umbral.

  3. Normalice y valide

    Guarde importe, moneda, indicador de impuestos, variante, disponibilidad, país de salida y hora UTC, y aplique reglas de plausibilidad antes de que cualquier valor llegue a un informe.

  4. Programe, alerte y revise

    Reparta las comprobaciones con jitter y límites por dominio, confirme los cambios con una segunda descarga y revise cada semana la cobertura y la tasa de falsas alertas.

Escenarios resueltos

Cómo se ve en la práctica

Ejemplos ilustrativos: las cifras son supuestos para mostrar el razonamiento, no resultados medidos.

Pequeño comercio, tres competidores

Una tienda sigue 150 SKU en tres sitios de la competencia dos veces al día: 900 descargas al día, 27,000 al mes. El paquete de proxies IPv4 de centro de datos de 30 IP (250 TRY al mes) lo soporta a unas 0.6 solicitudes por minuto en total, aproximadamente 0.009 TRY por descarga. El piloto decide si alguno de los tres sitios necesita residencial en su lugar.

Comparación de precios en cuatro países

Una marca registra su propia página de producto en cuatro países, 60 productos al día: 240 descargas y unos 36 MB al día a razón de 150 KB ilustrativos cada una, es decir, aproximadamente 1.1 GB al mes. Un plan de proxies residenciales de 5 GB (350 TRY) lo cubre con margen, y cada registro guarda la moneda y el indicador de impuestos para que las comparaciones sigan siendo válidas.

Escaparate con mucho JavaScript

Un equipo renderiza primero 3,000 páginas de producto al día en un navegador headless, a razón de 1.5 MB ilustrativos cada una, lo que son 4.5 GB al día y 135 GB al mes, y por tanto un plan de 200 GB (7,000 TRY). Tras encontrar el endpoint JSON que la propia página llama públicamente, a unos 8 KB por respuesta, el mismo trabajo supone aproximadamente 0.7 GB al mes y cabe en un plan de 5 GB (350 TRY).

Qué medir

Haga el seguimiento desde el primer día para que los problemas aparezcan como números y no como sorpresas.

  • Cobertura, la proporción de SKU con una observación válida dentro de la ventana de su nivel (cada hora, a diario o cada semana).
  • Tasa de éxito del análisis y tasa de bloqueo por comercio, seguidas por separado para que un cambio de diseño no se confunda con un bloqueo.
  • Coste por cada 1,000 observaciones válidas, combinando el precio del plan, los reintentos y los bytes desperdiciados.
  • Tasa de falsas alertas, es decir, la proporción de alertas de cambio de precio que una nueva descarga de confirmación no reprodujo.
  • Retraso de observación, el tiempo desde el cambio real de un comercio hasta el cambio registrado por usted, estimado a partir de eventos muestreados.

Errores comunes

Patrones que desperdician presupuesto o provocan bloqueos.

  • Tratar un precio ausente como cero o como agotado, lo que crea rebajas fantasma y falsas alertas de disponibilidad.
  • Comparar importes entre monedas, tratamientos fiscales o variantes sin normalizarlos antes.
  • Comprobar todos los SKU con la misma frecuencia, gastando de más en los artículos estables y muestreando poco los volátiles.
  • Programar todas las tareas a la hora en punto, un patrón regular y fácil de reconocer que además acumula carga; añada jitter.
  • Omitir las instantáneas sin procesar, lo que no deja pruebas para explicar una alerta cuestionada ni para corregir retroactivamente un error del analizador.

Consejos prácticos

  • Aleatorice las horas de comprobación y mantenga moderado el número de solicitudes por minuto.
  • Descargue solo los datos que necesita, no todos los recursos de la página.
  • Guarde el país de la IP con cada dato de precio.
  • Vuelva a comprobar desde una segunda ubicación las bajadas de precio sorprendentes antes de actuar.

Use los proxies de forma responsable

Monitorice información mostrada públicamente, respete los términos del sitio y los límites de solicitudes, y no sobrecargue las tiendas pequeñas. No use los datos extraídos de formas que infrinjan las normas de competencia o de protección de datos.

¿Centro de datos o residencial para el seguimiento de precios?

Pruebe primero el centro de datos por coste; pase a residencial para los minoristas que bloquean los rangos de centros de datos.

¿Cómo evito que los precios personalizados distorsionen los resultados?

Use sesiones limpias sin cookies, una ubicación y un user agent coherentes, y compare lo comparable.

¿Puedo monitorizar precios en varios países?

Sí, con la segmentación por país del pool residencial.

¿Necesito proxies residenciales para todos los comercios?

No. Haga primero un piloto de cada comercio con IP de centro de datos y mida la proporción de respuestas con precio válido. Muchas tiendas aceptan comprobaciones de bajo volumen desde rangos de centros de datos mientras que otras los filtran, y solo estas últimas necesitan residencial. Así se mantiene bajo el coste por observación.

¿Cómo gestiono los precios que se cargan con JavaScript?

Busque primero datos estructurados incrustados en la página, o un endpoint JSON que la propia página llame públicamente, porque ambos son mucho más ligeros que renderizar. Si debe usar un navegador headless, bloquee imágenes, fuentes y contenido multimedia y mida los bytes por página antes de dimensionar un plan por GB. Manténgase siempre dentro de las condiciones del sitio.

¿Cómo distingo una prueba A/B o un precio personalizado de un cambio real?

Repita la descarga desde una sesión limpia y, en los cambios importantes, desde una segunda IP y ubicación con unos minutos de diferencia. Un cambio real aparece en todas las observaciones, mientras que una prueba o un precio personalizado tiende a aparecer solo en algunas. Guarde el país de salida y la hora con cada valor para que el patrón sea visible.

Empresas

¿Necesita volumen, ubicaciones a medida o una configuración apta para compras corporativas?

Hable con ventas sobre grandes cantidades de IP, contratos largos e incorporación dedicada. Indíquenos los países de destino y el perfil de tráfico y le propondremos una solución.