Integrationen · Automatisierung und Scraping
HProxy mit Puppeteer nutzen.
- 3 Schritte
- Funktionierender Code
- HTTP und SOCKS5
- Login in der Proxy-URL
Warum ein Proxy
Warum ein Proxy mit Puppeteer
Puppeteer steuert Chrome headless (oder sichtbar) aus Node, die erste Wahl für Scraping mit viel Rendering und automatisierte Tests in der JavaScript-Welt.
Headless Chrome von einer Rechenzentrums-IP ist ein Fingerabdruck, den Websites auf den ersten Blick erkennen. Ein Residential-Ausgang entfernt die Netzhälfte dieses Merkmals, sodass das Verhalten des Browsers beurteilt wird.
Setup
HProxy in Puppeteer einrichten
- 1
Starten Sie Chrome mit --proxy-server, das auf Ihren Host und Port zeigt.
- 2
Weil der Proxy einen Login braucht, rufen Sie vor der Navigation page.authenticate() mit Ihrem Benutzernamen und Passwort auf.
- 3
Navigieren Sie wie gewohnt; der ganze Seitenaufruf läuft jetzt über den Proxy.
Gut zu wissen
Benutzername und Passwort laufen über page.authenticate(); das Flag --proxy-server nimmt sie nicht an.
Host, Port und Login hier zeigen das Format; Ihre genauen Werte stehen in Ihrem Dashboard, bereit zum Kopieren.
Puppeteer mit HProxy
import puppeteer from "puppeteer";
const browser = await puppeteer.launch({
args: ["--proxy-server=example.hproxy.com:8080"],
});
const page = await browser.newPage();
await page.authenticate({ username: "user-country-us", password: "pass" });
await page.goto("https://ipinfo.io/json");Fragen zu Puppeteer
Häufige Fragen
Warum nimmt das Flag proxy-server meinen Benutzernamen und mein Passwort nicht an?
Weil dieses Chrome-Flag nur Host und Port annimmt. Zugangsdaten laufen stattdessen über page.authenticate, aufgerufen vor der Navigation. Das ist der häufigste Grund, warum ein Proxy-Setup mit Puppeteer Authentifizierungsfehler liefert, die so aussehen, als sei der Proxy falsch.
Muss ich mich auf jeder Seite authentifizieren?
Ja. Die Authentifizierung wird pro Seite statt pro Browser gesetzt, jede neu geöffnete Seite braucht den Aufruf also vor der Navigation. Wer ihn auf einer zweiten Seite vergisst, bekommt einen Fehler, der sporadisch aussieht und völlig vorhersehbar ist.
Wie gebe ich jeder Puppeteer-Seite eine andere IP?
Starten Sie pro Identität eine eigene Browser-Instanz, statt mehr Seiten zu öffnen, denn das Proxy-Flag wird beim Start gesetzt, und Seiten in einem Browser teilen es. Mit einem rotierenden Proxy nimmt jeder neue Start automatisch einen frischen Ausgang.
Wie verhindere ich, dass Puppeteer Bilder herunterlädt?
Schalten Sie das Abfangen von Anfragen ein und brechen Sie Anfragen ab, deren Ressourcentyp image, font, media oder stylesheet ist. Das ist die wirksamste Änderung bei Abrechnung pro Gigabyte, denn ein Headless-Browser holt standardmäßig alles davon, genau wie ein echter.
Andere Integrationen
Weitere Einrichtungsanleitungen
Bereit, wenn Sie es sind.
Ihr Dashboard ist zehn Sekunden entfernt. Kein Verkaufsgespräch, kein Abo, kein Mindestumsatz.

