Websites entscheiden anhand mehrerer Signale zugleich, ob eine Datacenter-Anfrage willkommen ist. Eines ist der Netzbesitz: Das Tool „IP-Informationen“ zeigt den Registry-Eintrag (RDAP) und das Reverse DNS für jede Adresse, also dieselbe Art von Besitzerdaten, die ein Ziel nachschlagen kann, wenn es Ihre Adresse mit Listen von Hosting-Bereichen abgleicht. Ein weiteres ist das Verhalten: Anfragerate pro IP, fehlende oder widersprüchliche Header, keine Cookies, ein TLS-Handshake, der nicht zum angegebenen Browser passt, und streng sequenzielles Crawling. Eine saubere IP mit einem robotischen Client wird trotzdem herausgefordert; beheben Sie daher zuerst den Client, bevor Sie dem Pool die Schuld geben.
Messen Sie Ergebnisse pro IP, nicht nur im Gesamtbild. Erfassen Sie vier Werte pro Stunde: Erfolgsquote (2xx-Antworten geteilt durch Versuche), Blockquote (403, 429 und Challenge-Seiten), Median und 95. Perzentil der Latenz sowie Bytes pro erfolgreicher Seite. Zur Veranschaulichung: Nehmen Sie jede IP automatisch aus dem Einsatz, sobald ihre Blockquote innerhalb einer Stunde 5% übersteigt. Um das Paket selbst zu prüfen, testen Sie stichprobenartig bis zu 10 Proxys pro Anfrage mit dem Proxy-Checker; er ist ratenbegrenzt und daher kein Dauermonitor: Eine plötzliche Häufung von timeout- oder refused-Codes über viele IPs weist eher auf ein Netzwerk- oder Zugangsdatenproblem hin als auf eine Sperre durch das Ziel.
Datacenter-Proxys sind für rechtmäßige Automatisierung gedacht. Lesen Sie die Nutzungsbedingungen und die robots.txt des Ziels, bevorzugen Sie offizielle APIs oder Datenlizenzen, wo es sie gibt, geben Sie Ihren Crawler ehrlich zu erkennen, wenn die Website dies verlangt, und halten Sie die Anfrageraten so niedrig, dass Sie den Dienst für echte Nutzer nie beeinträchtigen. Ein Proxy ändert Ihre Netzwerkadresse; er macht eine Aktivität, die eine Website untersagt, nicht zulässig, und er ist kein Werkzeug für Betrug, Spam, Credential Stuffing oder das Umgehen von Durchsetzungsmaßnahmen. Sind personenbezogene Daten im Spiel, gelten die für Sie maßgeblichen Datenschutzregeln auch dann, wenn die Anfrage über einen Proxy kommt.