Scraping Robot ist eine Web-Scraping-API, mit der Nutzer Daten von beliebigen Websites im JSON-Format extrahieren können. Sie wurde speziell für erfahrene Nutzer wie Entwickler entwickelt und ermöglicht eine einfache Einbindung der Scraping-Robot-API. Scraping Robot übernimmt zudem alle Aufgaben, die beim Web-Scraping anfallen, wie beispielsweise die Proxy-Verwaltung und das Lösen von CAPTCHAs, sodass sich Nutzer ausschließlich auf die Datenextraktion konzentrieren können.
Da es sich um ein Automatisierungstool handelt, werden Websites Ihr Konto und Ihre IP-Adresse sperren, wenn sie feststellen, dass Sie Scraping Robot auf ihrer Website nutzen. Das liegt daran, dass Websites strenge Einschränkungen hinsichtlich der Nutzung von Bots auf ihrer Seite haben. Ohne einen Scraping-Robot-Proxy kann Ihnen dies beim Scraping einer Website passieren.
Ein Scraping-Robot-Proxy übernimmt Ihren gesamten Datenverkehr und fungiert als Vermittler zwischen Ihrem Gerät und dem Internet. Durch die Nutzung von Residential-Proxys und ständig wechselnden IP-Adressen verfügt Scraping Robot bei jeder Anfrage über eine andere IP-Adresse, sodass Websites fälschlicherweise annehmen, dass diese Anfragen von mehreren Nutzern stammen.
Richten wir nun einen Scraping-Robot-Proxy-Server ein.
Für Windows:
Um Proxys unter Windows einzurichten, suchen Sie einfach in der Windows-Suchleiste nach „Proxy-Einstellungen“ und öffnen Sie das Suchergebnis.
Sie haben dann zwei Optionen zur Auswahl: Automatische Proxy-Einrichtung oder manuelle Proxy-Einrichtung. Wenn Sie möchten, dass Windows Ihre Proxy-Einstellungen automatisch erkennt, wählen Sie die erste Option. Wählen Sie die zweite Option, wenn Sie eine bestimmte IP-Adresse und Portnummer verwenden möchten.
Wenn Sie die erste Option gewählt haben, gehen Sie wie folgt vor:
- Aktivieren Sie Einstellungen automatisch erkennen
- Aktivieren Sie Setup-Skript verwenden
- Geben Sie die Skriptadresse ein
- Klicken Sie auf Speichern
Wenn Sie die zweite Option gewählt haben, gehen Sie wie folgt vor:
- Aktivieren Sie „Proxyserver verwenden“
- Geben Sie sowohl die Serveradresse als auch die Portnummer ein
- Wenn Sie Adressen haben, die Sie ohne Proxy aufrufen möchten, geben Sie diese hier ein
- Aktivieren Sie das Kontrollkästchen „Proxyserver für lokale Adressen nicht verwenden“, wenn Sie ohne Proxy auf einen lokalen Server zugreifen möchten
- Klicken Sie auf Speichern
Bild-Alt-Text: Automatische Proxy-Einrichtung unter Windows
Für Mac:
Um mit der Konfiguration Ihrer Proxy-Einstellungen unter macOS zu beginnen, gehen Sie einfach wie folgt vor:
Schritt 1. Klicken Sie auf das Apple-Symbol.
Schritt 2. Klicken Sie im Dropdown-Menü auf „Systemeinstellungen“.
Schritt 3. Klicken Sie auf „Netzwerk“
Schritt 4. Klicken Sie auf „Erweitert“
Hinweis: Stellen Sie sicher, dass Sie zuerst eine Verbindung zu Ihrem WLAN herstellen.
Schritt 5. Klicken Sie auf „Proxys“
Dadurch sollten Sie zu den Proxy-Einstellungen von macOS weitergeleitet werden. Im Vergleich zu Windows ist die Vorgehensweise unter macOS einfacher. Sie haben nur eine Option: die manuelle Konfiguration Ihres Proxy-Servers.
Befolgen Sie dazu die folgenden Schritte:
- Wählen Sie das IP-Protokoll des Proxys aus, das Sie konfigurieren möchten. Dies hängt davon ab, welche Protokolle Ihr Proxy-Dienstanbieter anbietet.
- Aktivieren Sie „Secure Web Proxy“
- Geben Sie die Proxy-Server-Adresse und die Portnummer ein
- Klicken Sie auf „OK“, um die Einstellungen zu speichern
Hinweis: Möglicherweise werden Sie aufgefordert, Ihr Mac-Benutzerpasswort einzugeben, um Ihre Einstellungen zu speichern.
Bild-Alt-Text: Konfiguration der MacOS-Proxy-Einstellungen
Herzlichen Glückwunsch! Sie haben nun die Konfiguration eines Scraping-Robot-Proxy-Servers abgeschlossen.
