Wikipedia ist eine Online-Enzyklopädie, die von einer Gruppe von Freiwilligen verfasst und gepflegt wird. Sie ist die größte und meistgenutzte Enzyklopädie der Welt und steht regelmäßig an der Spitze der beliebtesten Websites im Internet. Sie enthält Informationen zu fast jedem Thema aus allen Wissensbereichen. Obwohl es sich um das meistgelesene Nachschlagewerk der Welt handelt, stufen Schulen und Institutionen Wikipedia als unzuverlässige Quelle ein, da jeder die darin enthaltenen Artikel bearbeiten kann.
Als größte verfügbare Wissenssammlung in der digitalen Welt enthält es eine überwältigende Menge an Daten und Informationen, die für eine Vielzahl von Zwecken extrahiert werden können. Das manuelle Auslesen jeder einzelnen Wikipedia-Webseite würde jedoch viel Zeit und Mühe kosten. Bei über 56 Millionen Artikeln auf Wikipedia ist es für eine einzelne Person nahezu unmöglich, diese Seiten nacheinander auszulesen. Aus diesem Grund nutzen Anwender einen Wikipedia-Scraper-Bot.
Ein Wikipedia-Bot durchsucht automatisch die Wikipedia-Seiten und sammelt all diese Informationen für Sie. Ein Wikipedia-Bot allein reicht jedoch nicht aus, da Sie ihn mit einem Wikipedia-Proxy kombinieren müssen. Die meisten Websites haben strenge Einschränkungen hinsichtlich der Nutzung von Bots auf ihrer Website und würden jedes Konto, das dabei erwischt wird, sofort sperren. Ein Wikipedia-Proxy tarnt Ihren Bot so, dass er wie ein echter Nutzer erscheint. Dadurch verhindern Sie eine Sperrung und können jede beliebige Website scrapen.
Dies ist möglich, weil ein Wikipedia-Proxy Ihre IP-Adresse vor jeder von Ihnen besuchten Website verbirgt. Alle Anfragen Ihres Bots würden über den Proxy-Server abgewickelt. Das bedeutet, dass Websites nur die IP-Adresse des Proxy-Servers sehen und nicht Ihre eigene. Durch rotierende Proxys können Sie die IP-Adresse des Proxy-Servers kontinuierlich ändern und alle Anfragen Ihres Bots so gestalten, als kämen sie von verschiedenen Personen.
Richten wir nun einen Wikipedia-Proxy-Server ein.
Hinweis: Stelle sicher, dass der Webbrowser, den du für Wikipedia verwendest, so eingestellt ist, dass er die Proxy-Einstellungen deines Computers automatisch übernimmt. Google Chrome tut dies automatisch, daher wird empfohlen, diesen Browser zu verwenden.
Für Windows:
Um Proxys unter Windows einzurichten, suchen Sie einfach in der Windows-Suchleiste nach „Proxy-Einstellungen“ und öffnen Sie das Suchergebnis.
Sie haben dann zwei Optionen zur Auswahl: Automatische Proxy-Einrichtung oder manuelle Proxy-Einrichtung. Wenn Sie möchten, dass Windows Ihre Proxy-Einstellungen automatisch erkennt, wählen Sie die erste Option. Wählen Sie die zweite Option, wenn Sie eine bestimmte IP-Adresse und Portnummer verwenden möchten.
Wenn Sie die erste Option gewählt haben, gehen Sie wie folgt vor:
- Aktivieren Sie Einstellungen automatisch erkennen
- Aktivieren Sie Setup-Skript verwenden
- Geben Sie die Skriptadresse ein
- Klicken Sie auf Speichern
Wenn Sie die zweite Option gewählt haben, gehen Sie wie folgt vor:
- Aktivieren Sie „Proxyserver verwenden“
- Geben Sie sowohl die Serveradresse als auch die Portnummer ein
- Wenn Sie Adressen haben, die Sie ohne Proxy aufrufen möchten, geben Sie diese hier ein
- Aktivieren Sie das Kontrollkästchen „Proxyserver nicht für lokale Adressen verwenden“, wenn Sie ohne Proxy auf einen lokalen Server zugreifen möchten
- Klicken Sie auf Speichern
Für Mac.
Um die Proxy-Einstellungen unter macOS zu konfigurieren, gehen Sie einfach wie folgt vor:
Schritt 1. Klicken Sie auf das Apple-Symbol.
Schritt 2. Klicken Sie im Dropdown-Menü auf „Systemeinstellungen“.
Schritt 3. Klicken Sie auf „Netzwerk“
Schritt 4. Klicken Sie auf „Erweitert“
Hinweis: Stelle sicher, dass du zuerst eine Verbindung zu deinem WLAN herstellst.
Schritt 5. Klicke auf „Proxys“
Dadurch solltest du zu den Proxy-Einstellungen von macOS weitergeleitet werden. macOS ist im Vergleich zu Windows einfacher zu handhaben. Sie haben nur eine Option, nämlich die manuelle Konfiguration Ihres Proxy-Servers.
Hier sind die zu befolgenden Schritte:
- Wählen Sie das IP-Protokoll des Proxys aus, das Sie konfigurieren möchten. Dies hängt davon ab, welche Protokolle Ihr Proxy-Dienstanbieter anbietet.
- Aktivieren Sie „Sicherer Web-Proxy“
- Geben Sie die Proxy-Server-Adresse und die Portnummer ein.
- Klicken Sie auf OK, um die Einstellungen zu speichern.
Hinweis: Möglicherweise werden Sie aufgefordert, Ihr Mac-Benutzerkennwort einzugeben, um die Einstellungen zu speichern.
Für Mobilgeräte:
Um einen Wikipedia-Proxy-Server für Ihr Mobilgerät einzurichten, ändern Sie einfach die Proxy-Einstellungen Ihres Smartphones. Der Webbrowser, den Sie für Wikipedia verwenden, übernimmt automatisch die Proxy-Einstellungen Ihres Smartphones, sobald Sie ihn nutzen. Dies gilt sowohl für Android als auch für iOS. Hier finden Sie eine ausführliche Anleitung für Android und eine weitere für iPhone.
Herzlichen Glückwunsch! Sie haben die Einrichtung eines Wikipedia-Proxy-Servers nun abgeschlossen. Beachten Sie, dass beim ersten Besuch ein Pop-up-Fenster erscheint, in dem Sie nach Ihren Anmeldedaten gefragt werden.
