ScrapingDog ist eine Web-Scraping-API, mit der Nutzer Daten von jeder beliebigen Website extrahieren können. Sie ist einfach zu bedienen und ermöglicht es Nutzern, so viele Daten zu sammeln, wie sie möchten. ScrapingDog ist ein Premium-Tool, bietet Nutzern jedoch eine kostenlose Testversion an, damit sie prüfen können, ob es ihnen gefällt oder nicht.
Da es sich um ein Automatisierungstool handelt, sperren Websites alle Konten und IP-Adressen, bei denen sie die Nutzung von ScrapingDog feststellen. Um dies zu verhindern, nutzt ScrapingDog Millionen von Proxys aus seinem Proxy-Pool. Der Grund dafür ist, dass ein ScrapingDog-Proxy alle Ihre Webanfragen für Sie abwickelt und als Vermittler zwischen Ihrem Gerät und dem Internet fungiert.
Durch die Nutzung eines ScrapingDog-Proxys wird verhindert, dass Websites Ihre IP-Adresse sehen können; stattdessen wird ihnen nur die IP-Adresse des Proxy-Servers angezeigt. Durch den Einsatz von Residential-Proxys und die kontinuierliche Rotation der IP-Adressen wird den Websites vorgetäuscht, dass die Anfragen von ScrapingDog von mehreren echten Nutzern stammen und nicht nur von einem einzigen Standort.
Richten wir nun einen ScrapingDog-Proxy-Server ein.
So verwenden Sie Proxys mit ScrapingDog
ScrapingDog verfügt über mehr als 7 Millionen Residential-Proxys und 40.000 Rechenzentrums-Proxys. Der Benutzername für den Proxy lautet „scrapingdog“ und das Passwort ist Ihr API-Schlüssel.
Wenn Sie andere private Proxys verwenden möchten, gehen Sie wie folgt vor:
Für Windows:
Um Proxys unter Windows einzurichten, suchen Sie einfach in der Windows-Suchleiste nach „Proxy-Einstellungen“ und öffnen Sie das Suchergebnis.
Sie haben dann zwei Optionen zur Auswahl: Automatische Proxy-Einrichtung oder manuelle Proxy-Einrichtung. Wenn Sie möchten, dass Windows Ihre Proxy-Einstellungen automatisch erkennt, wählen Sie die erste Option. Wählen Sie die zweite Option, wenn Sie eine bestimmte IP-Adresse und Portnummer verwenden möchten.
Wenn Sie die erste Option gewählt haben, gehen Sie wie folgt vor:
- Aktivieren Sie Einstellungen automatisch erkennen
- Aktivieren Sie Setup-Skript verwenden
- Geben Sie die Skriptadresse ein
- Klicken Sie auf Speichern
Wenn Sie die zweite Option gewählt haben, gehen Sie wie folgt vor:
- Aktivieren Sie „Proxy-Server verwenden“
- Geben Sie sowohl die Serveradresse als auch die Portnummer ein
- Wenn Sie Adressen haben, die Sie ohne Proxy aufrufen möchten, geben Sie diese hier ein
- Aktivieren Sie das Kontrollkästchen „Proxyserver für lokale Adressen nicht verwenden“, wenn Sie ohne Proxy auf einen lokalen Server zugreifen möchten
- Klicken Sie auf Speichern
Bild-Alt-Text: Automatische Proxy-Einrichtung unter Windows
Für Mac:
Um die Proxy-Einstellungen unter macOS zu konfigurieren, gehen Sie einfach wie folgt vor:
Schritt 1. Klicken Sie auf das Apple-Symbol.
Schritt 2. Klicken Sie im Dropdown-Menü auf „Systemeinstellungen“.
Schritt 3. Klicken Sie auf „Netzwerk“
Schritt 4. Klicken Sie auf „Erweitert“
Hinweis: Stellen Sie sicher, dass Sie zuerst eine Verbindung zu Ihrem WLAN herstellen.
Schritt 5. Klicken Sie auf „Proxys“
Dadurch sollten Sie zu den Proxy-Einstellungen von macOS weitergeleitet werden. Im Vergleich zu Windows ist die Vorgehensweise unter macOS einfacher. Sie haben nur eine Option, nämlich die manuelle Konfiguration Ihres Proxy-Servers.
Befolgen Sie dazu die folgenden Schritte:
- Wählen Sie das IP-Protokoll des Proxys aus, das Sie konfigurieren möchten. Dies hängt davon ab, welche Protokolle Ihr Proxy-Dienstanbieter anbietet.
- Aktivieren Sie „Secure Web Proxy“
- Geben Sie die Proxy-Server-Adresse und die Portnummer ein
- Klicken Sie auf „OK“, um die Einstellungen zu speichern
Hinweis: Möglicherweise werden Sie aufgefordert, Ihr Mac-Benutzerkennwort einzugeben, um Ihre Einstellungen zu speichern.
Bild-Alt-Text: Konfiguration der MacOS-Proxy-Einstellungen
Herzlichen Glückwunsch! Sie haben nun die Konfiguration eines ScrapingDog Proxy-Servers abgeschlossen.
