Резидентные и серверные прокси: различия, стоимость и сценарии
Источник выходного IP определяет всё: стоимость, скорость и отношение сайтов к вам. В этом руководстве мы честно сравниваем два типа.
Важнейшее свойство прокси — источник его выходного IP. Серверные (datacenter) прокси используют адреса хостинговых компаний; резидентные — адреса, выданные домашним интернет-подключениям. Сайты обычно способны отличить одни от других, и именно это определяет компромиссы.
Серверные прокси
- Быстрые, стабильные и дешёвые в пересчёте на IP.
- Легко распознаются: диапазоны адресов публично приписаны хостинговым сетям.
- Лучше всего подходят для лояльных целей, API, массовой загрузки, QA и вашей собственной инфраструктуры.
Резидентные прокси
- Адреса принадлежат домашним ISP, поэтому трафик похож на трафик обычных посетителей.
- Обычно тарифицируются за ГБ, с ротацией и таргетингом по странам.
- Медленнее и менее стабильны, поскольку основаны на потребительских линиях связи.
- Лучше всего подходят для защищённых потребительских сайтов, сбора данных с геотаргетингом и верификации рекламы.
Где место ISP-прокси
ISP-прокси — это статические адреса, зарегистрированные за домашними провайдерами, но размещённые на серверном оборудовании. Они занимают промежуточное положение: стабильны и быстры, как серверные прокси, и при этом имеют репутацию адресов, зарегистрированных за ISP. Они подходят для работы с аккаунтами и длительных сессий.
Практическое руководство по выбору
- Терпима ли цель к автоматическому трафику? Начните с серверных прокси и измерьте долю блокировок.
- Фильтрует ли она диапазоны дата-центров или вам нужна страна, отличная от вашей? Используйте резидентные.
- Нужна ли одна постоянная идентичность на дни или недели? Используйте ISP или мобильные.
- Доверие — главный приоритет, а скорость вторична? Используйте мобильные.
Как сайт отличает эти два типа
Классификация — по большей части учёт. Каждый публичный адрес IPv4 анонсируется автономной системой, а данные реестра указывают организацию за ним. Коммерческие базы данных IP-аналитики берут эти сырые данные, добавляют собственные исследования и помечают каждый диапазон типом: хостинг, потребительский ISP, бизнес или мобильный. Сайт, обращающийся к такой базе, может решить уже по самому первому запросу, приходит ли посетитель из хостингового диапазона. Инструмент «Информация об IP» на этом сайте показывает данные реестра (RDAP), обратный DNS и класс адреса для любого IP — это сырьё, с которого начинают такие базы. Это данные реестра, а не геолокация, поэтому он не скажет, какой город база присваивает адресу.
Тип IP — не единственный сигнал. Сайты также следят за частотой запросов на адрес и на подсеть, TLS- и HTTP/2-отпечатками вашей клиентской библиотеки, порядком заголовков, обработкой cookie и тем, выполняется ли JavaScript. Резидентный адрес, которым управляет скрипт, отправляющий 50 запросов в секунду, всё равно выглядит как скрипт, а серверный адрес с настоящим браузером в человеческом темпе нередко принимается нетребовательными сайтами. Считайте тип IP тем, что задаёт вашу стартовую репутацию, а не конечный результат.
Соседи разделяют судьбу
Серверные диапазоны выделяются непрерывными блоками, и защитники это знают. Когда много адресов внутри одного /24 (блока из 256) ведут себя недобросовестно, сайт может заблокировать весь блок или всю хостинговую сеть, а не гоняться за отдельными IP. Для вас это означает, что набор последовательных адресов может отказать целиком, тогда как набор, распределённый по нескольким подсетям, деградирует мягче. Узнайте, как распределены адреса тарифа; BuyProxy, например, поставляет свои ISP-тарифы из смешанных подсетей, а о других линейках может рассказать отдел продаж. У пулов резидентных прокси риск обратный: минуту назад адрес принадлежал кому-то другому, и его недавняя история вне вашего контроля.
Стоимость успешной страницы, а не цена тарифа
Серверные тарифы оцениваются по числу IP при безлимитном трафике, а резидентные — по гигабайтам, поэтому сравнить их можно, только пересчитав оба в стоимость на 1 000 успешных страниц. Возьмём иллюстративную задачу: 100 000 страниц по примерно 120 KB. Если серверные IP успешны в 70% запросов, а резидентные — в 97% (иллюстративные цифры, не измерения), неудачные запросы приходится повторять, так что нужно примерно 142 857 запросов на серверных IP и 103 093 на резидентных.
В тарифе с оплатой за гигабайт 103 093 запроса по 120 KB дают около 12,4 GB, так что размер тарифа 50 GB покроет задачу с запасом на повторы, а 10 GB — нет. На серверной стороне трафик ничего не стоит дополнительно, зато 42 857 повторов стоят времени и создают лишнюю нагрузку на ваши IP. Что дешевле, зависит от реальных цен на странице цен, поэтому проведите те же расчёты с ними: общая стоимость, делённая на число успешных страниц и умноженная на 1 000.
Пропускная способность: сколько нужно IP
С серверными или другими статическими IP ёмкость равна числу адресов, умноженному на безопасную частоту запросов на адрес. Если цель терпит примерно один запрос в 5 секунд на IP (иллюстративно), то 100 IP выдерживают 20 запросов в секунду, значит 400 000 страниц займут около 20 000 секунд, или 5,6 часа. Вдвое снизьте безопасную частоту — и для той же длительности понадобится вдвое больше IP. Указаны серверные пакеты по 30, 100, 250 и 1 000 IP, так что эти расчёты напрямую соотносятся с размером пакета. Ротационные резидентные тарифы переворачивают модель: IP вы не считаете, потому что пул велик, а ограничениями становятся ваш лимит в GB и 30-дневный период использования.
Признаки сбоев по типу IP
- Серверные: 403 или CAPTCHA уже на самом первом запросе, одинаковые сбои на соседних IP и отличная скорость на нетребовательных целях.
- Резидентные ротационные: в основном успехи с редкими сбоями, более широкий разброс времени ответа и периодические медленные ответы или обрывы сеансов, когда ротация попадает на более слабое соединение.
- Оба типа: ответы 429, которые следуют за вашей частотой запросов, а не за типом IP. Замедлитесь, прежде чем менять тип прокси.
- Не та страна или город: база данных IP не согласуется с таргетингом провайдера. Проверьте адрес инструментом «Информация об IP» и вторым источником, затем обратитесь в отдел продаж.
Смешивание типов в одном конвейере
Мало какие серьёзные конвейеры используют один тип везде. Распространённый приём — эскалация: начинайте каждый запрос с самого дешёвого уровня, который работает, и переводите домен на более сильный уровень только после повторных блокировок, запоминая решение по каждому домену, чтобы не платить за неудачные попытки. В наброске ниже сначала пробуются серверные IP, а при 403 или 429 происходит откат на резидентные. Добавьте повторные попытки и обработку исключений, как в вашем обычном скрапере, а ISP- и мобильные IP оставьте для работы под логином, где стабильная идентичность важнее объёма.
import requests
POOLS = {
"datacenter": "http://user:pass@dc.proxy.example.com:8080",
"residential": "http://user:pass@res.proxy.example.com:8080",
}
tier_for_domain = {}
def fetch(url, domain):
tiers = ["datacenter", "residential"]
if tier_for_domain.get(domain) == "residential":
tiers = ["residential"]
for tier in tiers:
proxy = POOLS[tier]
r = requests.get(url, proxies={"http": proxy, "https": proxy}, timeout=20)
if r.status_code not in (403, 429):
tier_for_domain[domain] = tier
return r
return NoneЧасто задаваемые вопросы
Всегда ли резидентные прокси лучше обходят блокировки?
Нет. Многие цели принимают серверный трафик при разумном темпе, а резидентный адрес не поможет, если клиент ведёт себя как бот. В резидентных пулах также может сохраняться недавняя история домохозяйства, пользовавшегося адресом до вас. Измерьте долю успешных запросов на своих целях, прежде чем платить более высокую цену за гигабайт.
Почему город резидентного IP различается на разных сайтах проверки?
Геолокация на уровне города берётся из коммерческих баз, которые оценивают положение по данным реестра и другим источникам, и они часто расходятся, особенно для мобильных и недавно переназначенных диапазонов. Таргетинг по стране и штату на резидентных тарифах — это заявления провайдера. Если вам нужен конкретный город, оператор или ASN, спросите отдел продаж в WhatsApp до заказа.
Означает ли безлимитный трафик на серверном тарифе безлимитную скорость?
Нет. Безлимитный трафик значит отсутствие счётчика GB, а скорость — отдельный показатель; серверные тарифы указывают до 100 Mbit. Указанный потолок — не измеренный результат, и он делится между вашими параллельными соединениями. Проверьте пропускную способность со своей локации на своих реальных целях.