O 80legs é uma plataforma baseada na nuvem que oferece serviços de web scraping e web crawling. É fácil de utilizar e os utilizadores podem alterar rapidamente as suas definições de acordo com os seus critérios de crawling ou scraping. O 80legs também dispõe de um plano de subscrição gratuito, mas este tem, obviamente, funcionalidades limitadas em comparação com os planos premium.
Para obter a melhor experiência possível ao utilizar o 80legs, é necessário combiná-lo com um proxy do 80legs ao fazer web scraping ou crawling. Isto porque a maioria dos sites tem restrições rigorosas contra a utilização de bots nos seus sites e um proxy permite-lhe contornar essas restrições e evitar ser banido por esses sites.
Isto é possível porque um proxy do 80legs irá tratar de todos os seus pedidos web por si, de modo que qualquer site só poderá ver o endereço IP do servidor proxy e não o seu. Através da rotação contínua de proxies, pode fazer com que qualquer site que pretenda extrair dados pense que as solicitações do 80legs provêm de utilizadores reais e não de um bot.
Vamos configurar um servidor proxy do 80legs.
Para o Windows:
Para configurar proxies no Windows, basta procurar por «Definições de proxy» na barra de pesquisa do Windows e abrir o resultado da pesquisa.
Ser-lhe-ão então apresentadas duas opções à escolha: Configuração automática do proxy ou Configuração manual do proxy. Se pretender que o Windows detete automaticamente as suas definições de proxy, escolha a primeira opção. Escolha a segunda opção se pretender utilizar um endereço IP e um número de porta específicos.
Se tiver escolhido a primeira opção, então:
- Ative Detetar configurações automaticamente
- Ative Utilizar script de configuração
- Introduza o endereço do script
- Clique em Guardar
Se tiver escolhido a segunda opção, então:
- Ative Usar um servidor proxy
- Introduza tanto o endereço do servidor como o número da porta
- Se tiver algum endereço que pretenda visitar sem proxy, introduza-o aqui
- Marque a caixa de seleção «Não utilizar o servidor proxy para endereços locais» se pretender aceder a um servidor local sem proxy
- Clique em Guardar
Texto alternativo da imagem: Configuração automática do proxy do Windows
Para Mac:
Para começar a configurar as suas definições de proxy no macOS, basta:
Passo 1. Clique no ícone da Apple.
Passo 2. No menu suspenso, clique em «Preferências do Sistema».
Passo 3. Clique em «Rede»
Passo 4. Clique em «Avançado»
Nota: Certifique-se de que se liga primeiro à sua rede Wi-Fi.
Passo 5. Clique em «Proxies»
Isto deverá redirecioná-lo para as definições de proxy do macOS. O macOS é mais simples em comparação com o Windows. Tem apenas uma opção, que é configurar manualmente o seu servidor proxy.
Eis os passos a seguir:
- Selecione o protocolo IP do proxy que pretende configurar. Isto depende dos protocolos que o seu fornecedor de serviços de proxy oferece.
- Ative o Proxy Web Seguro
- Introduza o Endereço do Servidor Proxy e o Número da Porta
- Clique em OK para guardar as configurações
Nota: Poderá ser-lhe solicitada a palavra-passe de utilizador do Mac para guardar as suas definições.
Texto alternativo da imagem: Configurar as definições de proxy do macOS
Parabéns! Concluiu a configuração de um servidor proxy 80legs.
