80legs est une plateforme cloud qui propose à la fois des services de web scraping et de web crawling. Elle est facile à utiliser et permet aux utilisateurs de modifier rapidement ses paramètres en fonction de leurs critères de crawling ou de scraping. 80legs propose également une formule d'abonnement gratuite, mais celle-ci offre évidemment des fonctionnalités limitées par rapport aux formules premium.
Pour profiter pleinement de 80legs, vous devez l'associer à un proxy 80legs lorsque vous effectuez du web scraping ou de l'exploration. En effet, la plupart des sites web imposent des restrictions strictes concernant l'utilisation de bots sur leur site, et un proxy vous permettra de contourner ces restrictions et d'éviter d'être banni par ces sites.
Cela est possible car un proxy 80legs gère toutes vos requêtes Web à votre place ; ainsi, tout site Web ne verra que l’adresse IP du serveur proxy et non la vôtre. Grâce à une rotation continue des proxys, vous pouvez faire croire à n’importe quel site web que vous souhaitez extraire que les requêtes de 80legs proviennent d’utilisateurs réels et non d’un bot.
Configurons un serveur proxy 80legs.
Pour Windows :
Pour configurer les proxys sous Windows, il suffit de rechercher « Paramètres de proxy » dans la barre de recherche de Windows et d’ouvrir le résultat de la recherche.
Deux options s’offrent alors à vous : Configuration automatique du proxy ou Configuration manuelle du proxy. Si vous souhaitez que Windows détecte automatiquement vos paramètres de proxy, choisissez la première option. Choisissez la deuxième option si vous souhaitez utiliser une adresse IP et un numéro de port spécifiques.
Si vous avez choisi la première option, procédez comme suit :
- Activez Détecter automatiquement les paramètres
- Activez Utiliser un script de configuration
- Saisissez l'adresse du script
- Cliquez sur Enregistrer
Si vous avez choisi la deuxième option, procédez comme suit :
- Activez Utiliser un serveur proxy
- Saisissez à la fois l’adresse du serveur et le numéro de port
- Si vous souhaitez accéder à certaines adresses sans passer par un proxy, saisissez-les ici
- Cochez la case « Ne pas utiliser le serveur proxy pour les adresses locales » si vous souhaitez accéder à un serveur local sans passer par un proxy
- Cliquez sur Enregistrer
Texte alternatif de l'image : Configuration automatique du proxy sous Windows
Pour Mac :
Pour commencer à configurer vos paramètres de proxy sous macOS, procédez simplement comme suit :
Étape 1. Cliquez sur l'icône Apple.
Étape 2. Dans le menu déroulant, cliquez sur « Préférences Système ».
Étape 3. Cliquez sur « Réseau »
Étape 4. Cliquez sur « Avancé »
Remarque : assurez-vous d’abord d’être connecté à votre réseau Wi-Fi.
Étape 5. Cliquez sur « Proxys »
Vous devriez alors être redirigé vers les paramètres de proxy de macOS. La procédure est plus simple sous macOS que sous Windows. Vous ne disposez que d’une seule option : configurer manuellement votre serveur proxy.
Voici les étapes à suivre :
- Sélectionnez le protocole IP du proxy que vous souhaitez configurer. Cela dépend des protocoles proposés par votre fournisseur de services proxy.
- Activez le proxy Web sécurisé
- Saisissez l’adresse du serveur proxy et le numéro de port
- Cliquez sur OK pour enregistrer les paramètres
Remarque : il se peut que le système vous demande votre mot de passe utilisateur Mac pour enregistrer vos paramètres.
Texte alternatif de l'image : Configuration des paramètres proxy sous macOS
Félicitations ! Vous avez maintenant terminé la configuration d'un serveur proxy 80legs.
