O Octoparse é uma ferramenta de web scraping fácil de utilizar e que permite extrair dados de qualquer site sem ser necessário ter muita experiência. É bastante simples fazer scraping com o Octoparse, pois basta introduzir o URL do site de destino, selecionar os dados que pretende extrair e, em seguida, executar a tarefa. Pode utilizar o Octoparse gratuitamente, mas também existem versões premium que oferecem mais funcionalidades.
Ao extrair uma grande quantidade de dados com um scraper da Web, estará a enviar muitos pedidos ao servidor do site. Por isso, a maioria dos sites banirá qualquer conta que seja apanhada a utilizar uma ferramenta automatizada e colocará o seu IP na lista negra. Para evitar que este bloqueio lhe aconteça, precisa de combinar o Octoparse com um proxy do Octoparse.
Um proxy funcionará como uma porta de acesso entre o seu dispositivo e a Internet, de modo que qualquer site que visitar só poderá ver o endereço IP do servidor proxy. Ao alternar continuamente entre proxies, o Octoparse terá um endereço IP diferente em cada intervalo de tempo. Isto faz com que qualquer site pense que as suas solicitações provêm de vários utilizadores diferentes, em vez de um único computador.
Vamos configurar um servidor proxy para o Octoparse.
