Проверять все товары с одинаковой частотой — значит тратить деньги на позиции, которые редко меняются, и недодавать замеров тем, что меняются. Разбейте каталог на уровни: горячие позиции (бестселлеры, прямые конкуренты, всё, что участвует в акции) — ежечасно, тёплые — ежедневно, холодные — еженедельно. Для условного каталога из 10,000 SKU с 500 горячими, 2,500 тёплыми и 7,000 холодными SKU это 15,500 загрузок в сутки, около 465,000 в месяц. Проверка всех 10,000 ежечасно дала бы 7.2 миллиона в месяц — более чем в пятнадцать раз больше, при этом почти без дополнительной информации.
Теперь оцените эти 465,000 загрузок двумя способами. На пакете из 100 серверных IPv4-прокси (400 TRY в месяц) нагрузка составляет около 11 запросов в минуту на 100 адресов, примерно по 0.1 на адрес, при стоимости около 0.0009 TRY за загрузку. На пуле резидентных прокси при условных 100 КБ на страницу те же загрузки составляют около 46.5 ГБ, что укладывается в тариф на 50 ГБ (2,500 TRY), при стоимости около 0.0054 TRY за загрузку. Серверные прокси примерно в шесть раз дешевле, поэтому используйте их везде, где ритейлер их принимает, а за резидентные платите только там, где нет.
Для всплесков нужен другой тип тарифа. Во время сезонной распродажи вы можете проверять 500 горячих SKU каждые 10 минут в течение 24 часов: 72,000 загрузок, около 7.2 ГБ при 100 КБ каждая, что покрывает тариф резидентных прокси на 10 ГБ (650 TRY). Суточный безлимитный ротационный резидентный тариф стоит 5,000 TRY, что соответствует примерно 167 ГБ по цене тарифа на 300 ГБ — 30 TRY за ГБ, поэтому он окупается только для всплесков, более чем в двадцать раз превышающих этот. Условия добросовестного использования безлимитных тарифов уточните в отделе продаж: здесь они не опубликованы.
| Уровень | SKU (пример) | Периодичность | Загрузок в месяц |
|---|
| Горячие | 500 | Ежечасно | 360,000 |
|---|
| Тёплые | 2,500 | Ежедневно | 75,000 |
|---|
| Холодные | 7,000 | Еженедельно | 30,000 |
|---|
| Итого | 10,000 | Смешанная | 465,000 |
|---|