Die vom Internet Archive gegründete Wayback Machine ist ein digitales Archiv von Websites aus dem World Wide Web. Die Wayback Machine ist die historische Bibliothek des Internets, die es jedem Nutzer ermöglicht, eine archivierte Version einer Website aufzurufen. Nutzer können ganz einfach eine URL eingeben und den gewünschten Zeitraum auswählen.
Bis zum Jahr 2022 hat die Wayback Machine über 728 Milliarden Webseiten gespeichert. Es ist keine Übertreibung, die Wayback Machine als eine wahre Fundgrube der Internetgeschichte zu bezeichnen. Die Daten, die Sie daraus extrahieren können, lassen sich in vielerlei Hinsicht nutzen. Wenn Sie diese Daten jedoch schnell und effizient sammeln möchten, benötigen Sie einen Web-Scraper. Ein Web-Scraping-Tool extrahiert Daten aus der Wayback Machine schneller, als es einem Menschen möglich wäre.
Die Wayback Machine erlaubt zwar das Scrapen von Daten, jedoch nur bis zu einem bestimmten Umfang. Wenn Sie diese Beschränkungen umgehen und zudem Daten sicher scrapen möchten, müssen Sie Ihren Web-Scraper mit einem Proxy-Server kombinieren. Über einen Proxy haben Sie Zugriff auf Millionen von IP-Adressen, sodass Sie Ihre IP-Adresse problemlos ändern können, sobald Sie das Limit der Wayback Machine erreichen. Ein Proxy-Server verbirgt zudem Ihre privaten Informationen, sodass Sie sicher Daten auslesen können, ohne befürchten zu müssen, dass Ihre persönlichen Daten gestohlen werden.
Richten wir einen Proxy-Server ein, wenn wir Daten aus der Wayback Machine auslesen.
Die Proxy-Einstellungen der Wayback Machine
Für Windows:
Schritt 1
Geben Sie in der Suchleiste von Windows „Proxy-Einstellungen“ ein.
Schritt 2
Klicken Sie auf das Suchergebnis „Proxy-Einstellungen“.
Schritt 3
Sie haben die Wahl zwischen „Automatische Proxy-Einrichtung“ und „Manuelle Proxy-Einrichtung“. In diesem Beispiel wählen wir „Manuelle Proxy-Einrichtung“.
Schritt 4
Aktivieren Sie „Proxyserver verwenden“.
Nun müssen Sie die Daten Ihres Proxy-Anbieters aufrufen und die Proxy-Server-Daten abrufen. Wenn Sie diese von Geonode beziehen möchten, können Sie direkt zu „Proxy-Server-Daten über Geonode abrufen“ springen.
Schritt 5
Geben Sie den „Hostnamen“ oder die „IP-Adresse“ Ihres Proxys ein. Dies ist der erste Teil vor dem Semikolon, in unserem Beispiel also „premium-residential.geonode.com“.
Schritt 6
Geben Sie die „Portnummer“ Ihres Proxys ein. Dies ist der zweite Teil vor dem Semikolon, in unserem Beispiel also „9001“.
Schritt 7
Geben Sie alle „Website-Adressen“ ein, die Sie ohne Proxy besuchen möchten.
Wenn Sie ohne Proxy auf einen lokalen Server zugreifen möchten, aktivieren Sie das Kontrollkästchen „Proxy-Server für lokale Adressen nicht verwenden“.
Schritt 8
Klicken Sie auf „Speichern“.
Schritt 9
Rufen Sie abschließend eine beliebige Website in Google Chrome auf. Es erscheint ein Popup-Fenster, in dem Sie zur Eingabe Ihrer Anmeldedaten aufgefordert werden. Geben Sie den „Benutzernamen“ und das „Passwort“ Ihres Kontos ein. Klicken Sie anschließend auf „Anmelden“.
Herzlichen Glückwunsch! Sie haben nun einen Proxy-Server für Ihr Windows-Betriebssystem eingerichtet.
Proxy-Einstellungen unter macOS
Schritt 1
Klicken Sie auf das „Apple-Symbol“.
Schritt 2
Klicken Sie im Dropdown-Menü auf „Systemeinstellungen“.
Schritt 3
Klicken Sie auf „Netzwerk“.
Schritt 4
Klicken Sie auf „Erweitert“ Hinweis: Stellen Sie sicher, dass Sie zuerst eine Verbindung zu Ihrem WLAN herstellen.
Schritt 5
Klicken Sie auf „Proxys“
Dadurch sollten Sie zu den Proxy-Einstellungen von macOS weitergeleitet werden. Nun müssen Sie die Daten Ihres Proxy-Anbieters aufrufen und die Proxy-Server-Daten abrufen. Wenn Sie diese von Geonode beziehen möchten, können Sie direkt zu „Proxy-Server-Daten über Geonode abrufen“ springen.
Schritt 6
Wählen Sie das richtige Protokoll aus, das Sie verwenden möchten. In unserem Beispiel wählen wir „Web-Proxy (HTTP)“ aus.
Schritt 7
Geben Sie den „Hostnamen“ oder die „IP-Adresse“ Ihres Proxys ein. Dies ist der erste Teil vor dem Semikolon, in unserem Beispiel also „premium-residential.geonode.com“.
Schritt 8
Geben Sie die „Portnummer“ Ihres Proxys ein. Dies ist der zweite Teil vor dem Semikolon, in unserem Beispiel also „9001“.
Schritt 9
Aktivieren Sie „Proxyserver erfordert Passwort“.
Schritt 10
Geben Sie den „Benutzernamen“ und das „Passwort“ Ihres Proxy-Kontos ein.
Herzlichen Glückwunsch! Sie haben nun Ihren Proxy für Ihr Mac-Betriebssystem eingerichtet.
Proxy-Server-Daten über Geonode
abrufen ### Schritt 1
Rufen Sie **[Geonode
](https://app.geonode.com/login)** auf und melden Sie sich mit Ihrem bestehenden Konto an oder registrieren Sie sich, um ein neues Konto zu erstellen.
Schritt 2
Klicken Sie auf der Startseite auf „Residential Services“.
Schritt 3
Scrollen Sie nach unten, bis Sie „Endpoints“ sehen.
Schritt 4
Wählen Sie aus, welches „Proxy-Protokoll“ Sie verwenden möchten: „HTTP-Protokoll“ oder **„[SOCKS5
-Protokoll](https://geonode.com/blog/beginners-guide-to-socks5-proxies)“**.
Schritt 5
Wählen Sie den gewünschten „Session-Typ“ aus: „Rotating Proxy“ oder Sticky Proxy.
Schritt 6
Wählen Sie den Proxy aus, den Sie verwenden möchten. Als Beispiel verwenden wir den hervorgehobenen Proxy **„premium-residential.geonode
.com:9001“**.
Wenn Sie statt eines DNS eine IP-Adresse verwenden möchten, deaktivieren Sie einfach die Schaltfläche „DNS anzeigen“ – daraufhin werden die IP-Adressen angezeigt.
Schritt 7
Nun benötigen Sie die „Authentifizierungsdaten“ Ihres Proxy-Kontos. Bei Geonode
finden Sie diese auf der Startseite Ihres Kontos.
