Fundada pelo Internet Archive, a Wayback Machine é um arquivo digital de sítios da World Wide Web. A Wayback Machine é a biblioteca histórica da Internet que permite a qualquer utilizador aceder a uma versão arquivada de um sítio. Os utilizadores podem facilmente introduzir um URL e selecionar o intervalo de datas que pretendem visualizar.
Em 2022, a Wayback Machine já tinha guardado mais de 728 mil milhões de páginas web. Não seria exagero dizer que a Wayback Machine é um verdadeiro tesouro da história da Internet. Os dados que pode extrair deste arquivo podem ser utilizados em muitos contextos, mas se quiser recolher esses dados de forma rápida e eficiente, terá de utilizar um web scraper. Uma ferramenta de web scraping irá extrair dados da Wayback Machine mais rapidamente do que seria humanamente possível.
A Wayback Machine permite-lhe extrair dados, mas apenas até um determinado limite. Se quiser contornar estas limitações e também extrair dados com segurança, terá de combinar o seu web scraper com um servidor proxy. Através de um proxy, tem acesso a milhões de endereços IP, pelo que pode alterar facilmente o seu endereço IP caso atinja o limite da Wayback Machine. Um servidor proxy também ocultará as suas informações privadas, para que possa extrair dados com segurança sem ter de se preocupar com o roubo dos seus dados pessoais.
Vamos configurar um servidor proxy para extrair dados da Wayback Machine.
Configurações de proxy do Wayback Machine
Para o Windows:
Passo 1
Na barra de pesquisa do Windows, escreva «Definições de proxy».
Passo 2
Clique no resultado da pesquisa «Definições de proxy».
Passo 3
Ser-lhe-á apresentada a opção “Configuração automática do proxy” ou “Configuração manual do proxy”. Para efeitos de exemplo, vamos escolher «Configuração manual do proxy».
Passo 4
Ative a opção «Utilizar um servidor proxy».
Agora, tem de aceder ao seu fornecedor de proxy e obter os detalhes do servidor proxy. Se pretender obtê-los em Geonode, pode avançar para “Obter detalhes do servidor proxy com Geonode”.
Passo 5
Introduza o «Nome do anfitrião» ou o «Endereço IP» do seu proxy. Esta é a primeira parte antes do ponto e vírgula, que no nosso exemplo é «premium-residential.geonode.com».
Passo 6
Introduza o «Número da porta» do seu proxy. Esta é a segunda parte antes do ponto e vírgula, que no nosso exemplo é «9001».
Passo 7
Introduza quaisquer «endereços de sites» que pretenda visitar sem utilizar um proxy.
Se pretender aceder a um servidor local sem utilizar um proxy, ative a caixa de seleção «Não utilizar o servidor proxy para endereços locais».
Passo 8
Clique em «Guardar».
Passo 9
Por fim, aceda a qualquer site no Google Chrome e aparecerá uma janela pop-up a solicitar as credenciais da sua conta. Introduza o «Nome de utilizador» e a «Palavra-passe» da sua conta. Em seguida, clique em «Iniciar sessão».
Parabéns! Já configurou um servidor proxy para o seu sistema operativo Windows.
Configurações de proxy do macOS
Passo 1
Clique no «Ícone da Apple».
Passo 2
No menu suspenso, clique em «Preferências do Sistema».
Passo 3
Clique em «Rede».
Passo 4
Clique em «Avançado» Nota: Certifique-se de que se liga primeiro à sua rede Wi-Fi.
Passo 5
Clique em «Proxies»
Isto deverá redirecioná-lo para as definições de proxy do macOS. Agora, tem de aceder ao seu fornecedor de proxy e obter os detalhes do servidor proxy. Se pretender obtê-los em Geonode, pode avançar para «Obter detalhes do servidor proxy com Geonode».
Passo 6
Selecione o protocolo correto que irá utilizar. No nosso exemplo, iremos selecionar «Web Proxy (HTTP)».
Passo 7
Introduza o «Nome do anfitrião» ou o «Endereço IP» do seu proxy. Trata-se da primeira parte antes do ponto e vírgula, que no nosso exemplo é «premium-residential.geonode.com».
Passo 8
Introduza o «Número da porta» do seu proxy. Esta é a segunda parte antes do ponto e vírgula, que no nosso exemplo é «9001».
Passo 9
Ative a opção «O servidor proxy requer palavra-passe».
Passo 10
Introduza o «Nome de utilizador» e a «Palavra-passe» da sua conta de proxy.
Parabéns! Já configurou o seu proxy para o sistema operativo Mac.
Obter os detalhes do servidor proxy com o Geonode
Passo 1
Aceda a **[Geonode
](https://app.geonode.com/login)** e inicie sessão com a sua conta existente ou registe-se para criar uma nova.
Passo 2
Na página inicial, clique em «Serviços Residenciais».
Passo 3
Desça a página até ver «Endpoints».
Passo 4
Escolha qual o «Protocolo de proxy» que pretende utilizar: «Protocolo HTTP» ou **«[Protocolo SOCKS5
](https://geonode.com/blog/beginners-guide-to-socks5-proxies)»**.
Passo 5
Selecione o «Tipo de sessão» que pretende utilizar: «Proxy rotativo» ou Proxy fixo.
Passo 6
Escolha o proxy que pretende utilizar. A título de exemplo, vamos utilizar o proxy destacado **“premium-residential.geonode
.com:9001”**.
Se pretender utilizar um endereço IP em vez de um DNS, basta desativar o botão «Mostrar DNS» e os endereços IP serão apresentados.
Passo 7
Agora precisa dos «Detalhes de autenticação» da sua conta de proxy. No caso do Geonode
, estes encontram-se na página inicial da sua conta.
Passo 1*. Clique no "Ícone da Maçã ".
Passo 2*. No menu suspenso, clicar em "Preferências do Sistema".
Passo 3*. Clique em "Rede*".
Passo 4*. Clique em "Avançado*". Note: Certifique-se de se ligar primeiro à sua wi-fi.
Passo 5*. Clique em "Proxies*".
Isto deverá redireccioná-lo para definições de proxy MacOS. Agora, precisa de ir ao seu fornecedor de proxy e adquirir os detalhes do servidor proxy. Se quiser obtê-lo de Geonode, pode saltar para "Acquiring Proxy Server Details With Geonode".
Passo 6*. Seleccione o protocolo correcto que vai utilizar. Para o nosso exemplo, iremos seleccionar "Web Proxy (HTTP) ".
Passo 7*. Introduza o seu proxy's "Hostname " ou "Endereço IP ". Esta é a primeira parte antes do ponto-e-vírgula, que no nosso exemplo é "premium-residential.geonode.com ".
Passo 8*. Introduza o seu proxy's "Número da porta ". Esta é a segunda parte antes do ponto-e-vírgula, que no nosso exemplo é "9001".
Passo 9*. Ligar "Servidor proxy requer password ".
Passo 10*. Introduza o "Nome de utilizador " e "Palavra-passe " da sua conta proxy.
**Parabéns!**Agora, preparou o seu proxy para o seu sistema operativo Mac.
Adquirir Detalhes do Servidor Proxy com Geonode
Passo 1*. Ir para Geonode e iniciar sessão com a sua conta existente ou inscrever-se para criar uma nova conta.
Passo 2*. Na Home Page, clicar em "Serviços Residenciais ".
Passo 3*. Percorra para baixo até ver "Endpoints ".
Passo 4*. Escolha qual "Protocolo de Proxy " pretende utilizar: "Protocolo HTTP " ou "Protocolo SOCKS5".
Passo 5*. Seleccione qual "Tipo de sessão " pretende utilizar: "Proxy rotativo " ou "Proxy pegajoso ".
Passo 6*. Escolha qual proxy pretende utilizar. Por exemplo, vamos utilizar o proxy destacado "premium-residential.geonode.com:9001".
Se quiser utilizar um endereço IP em vez de um DNS, basta desligar o botão Mostrar DNS, e os endereços IP aparecerão.
Passo 7*. Agora precisa da sua conta proxy "Detalhes da Autenticação". Para Geonode, isto está na página inicial da sua conta.
