Os proxies de centros de dados são a opção mais económica, e «económica» significa, neste contexto, cinco a dez vezes mais barata do que os proxies residenciais para o mesmo volume de tráfego. São também mais rápidos, porque as máquinas estão localizadas em centros de dados reais, ligadas a ligações de backbone reais, em vez de o tráfego ser encaminhado através da ligação de banda larga doméstica de alguém.
A desvantagem resume-se a um único facto: os seus endereços são identificáveis como endereços de centros de dados. Qualquer pessoa que queira pode pesquisar o bloco de endereços e ver que pertence a uma empresa de alojamento, em vez de a um ISP de consumidores. Se isso importa ou não depende inteiramente daquilo a que se está a ligar — e é essa a decisão fundamental.
Há um segundo fator que determina a sua fatura, e quase ninguém escreve sobre isso: os fornecedores desta categoria dividem-se entre a faturação por IP e por GB, e a mesma carga de trabalho pode custar dez vezes mais num modelo do que no outro. O lado que deve escolher depende do seu padrão de utilização, não do preço anunciado.
Somos a Geonode e vendemos proxies residenciais e de centros de dados — por isso, somos um dos fornecedores aqui comparados. Leia a comparação tendo isso em mente. Isso também significa que seremos específicos quanto aos casos em que o nosso produto mais barato não é a escolha certa, porque indicar a alguém um proxy de centro de dados a 0,14 $/GB para um trabalho que requer um proxy residencial é apenas uma perda de tempo, tanto para essa pessoa como para nós.
O que são, na verdade, os proxies de centro de dados
Um proxy de centro de dados é um servidor localizado num centro de dados que reencaminha os seus pedidos. O site de destino vê o endereço IP do servidor, em vez do seu.
Esse endereço foi atribuído a um fornecedor de alojamento — uma empresa de nuvem, uma instalação de colocalização ou um fornecedor de servidores dedicados. Faz parte de um bloco registado em nome dessa organização, e o registo é público através dos registos regionais da Internet. Qualquer pessoa pode consultá-lo em segundos.
Por que razão são rápidos
Os centros de dados dispõem de uma infraestrutura de ponta: múltiplas ligações de uplink de gigabit, alimentação redundante e peering direto com as principais redes. Um proxy de centro de dados acrescenta um salto, e esse salto tem uma conectividade superior à da maioria das ligações domésticas.
Os proxies residenciais encaminham o tráfego através de dispositivos de consumidores com ligações de banda larga domésticas. As velocidades de upload domésticas são modestas, as ligações caem e o dispositivo pode ser um telemóvel com dados móveis instáveis. A latência e a fiabilidade são afetadas em conformidade.
A diferença prática é significativa. Para trabalhos de grande volume, em que cada pedido é pequeno e são efetuados em grande número, a velocidade do centro de dados traduz-se em horas poupadas.
Por que razão são baratos
Um fornecedor que opera proxies de centro de dados adquire servidores e alocações de IP. Trata-se de um custo de capital com uma economia previsível e que se adapta bem à escala.
Uma rede de proxies residenciais tem de adquirir e manter o acesso a ligações reais de consumidores — normalmente através da remuneração de pessoas que se inscrevem em aplicações que partilham largura de banda. Trata-se de um custo de aquisição contínuo por gigabyte, sendo a sua operação fundamentalmente mais dispendiosa.
A diferença de preço não se deve à margem. Reflete estruturas de custos genuinamente diferentes.
Por que razão são bloqueados
As pessoas comuns não navegam a partir de centros de dados. Por isso, um pedido proveniente de um endereço de centro de dados é, à primeira vista, mais suscetível de ser automatizado do que um pedido proveniente de um endereço residencial.
Os sites que se preocupam com isso mantêm listas de intervalos de endereços de centros de dados e tratam o tráfego proveniente desses endereços de forma diferente — com maior escrutínio, mais CAPTCHAs e, por vezes, um bloqueio total. As listas não são secretas nem difíceis de criar.
Esta é toda a limitação, e é binária por alvo. Um site verifica ou não verifica.
Residencial vs. Centro de Dados: A Verdadeira Diferença
Esta comparação é feita constantemente e, na maioria das vezes, de forma errada, porque é apresentada como uma classificação de qualidade. Não é isso. São produtos diferentes, destinados a públicos-alvo diferentes.
| Centro de Dados | Residencial |
|---|
| Origem do endereço | Fornecedor de alojamento | ISP do consumidor |
| Velocidade | Rápida | Mais lenta, mais variável |
| Fiabilidade | Elevada | Depende do dispositivo final |
| Custo por GB | Aproximadamente 0,14–1 $ | Aproximadamente 0,79–7 $ |
| Identificável como proxy | Sim, facilmente | Muito mais difícil |
| Funciona em sites protegidos | Muitas vezes não | Normalmente |
| Tamanho do conjunto | Menor | Milhões de endereços |
Quando o centro de dados é a escolha certa
O destino não verifica. Um número enorme de sites não inspeciona de todo a origem do endereço. Documentação, APIs públicas, fóruns, sites de pequena e média dimensão, a maioria das páginas governamentais e académicas. Para estes, pagar tarifas residenciais é um puro desperdício.
Você controla o destino. Testes de carga na sua própria infraestrutura, monitorização dos seus próprios terminais, testes ao seu próprio site a partir de outras regiões.
A velocidade é a restrição determinante. Milhões de pedidos em que cada milésimo de segundo de latência se multiplica.
O volume é elevado e as margens são reduzidas. Em grande escala, uma diferença de preço de 5 a 10 vezes deixa de ser um erro de arredondamento e passa a representar todo o orçamento.
Quando a opção residencial é a correta
Grandes plataformas de comércio eletrónico e marketplaces. Estes investem fortemente na deteção de bots e, geralmente, tratam o tráfego proveniente de centros de dados como suspeito por predefinição.
Plataformas sociais. Semelhante, além da lógica de ligação de contas que torna a origem do endereço parte do cálculo de confiança.
Motores de busca, para qualquer coisa que ultrapasse um volume casual.
Sites de viagens, companhias aéreas e hotelaria. A deteção agressiva é padrão, porque o scraping afeta diretamente a sua estratégia de preços.
Qualquer coisa que envolva contas com sessão iniciada. Um endereço residencial faz parte da aparência de um utilizador comum; um endereço de centro de dados é uma contradição evidente em relação a isso.
O teste que resolve a questão
Não tente raciocinar sobre isto. Meça-o.
Adquira o plano de centro de dados mais pequeno disponível, ou utilize um plano gratuito, e execute algumas centenas de pedidos para o seu alvo real. Conte os sucessos. Se estiver acima de cerca de 95%, o centro de dados funciona e acabou de poupar a maior parte do seu orçamento para proxies. Se estiver a encontrar bloqueios, CAPTCHAs ou respostas vazias, precisa de um endereço residencial e agora já sabe disso.
Dez minutos de testes valem mais do que qualquer quantidade de conselhos gerais, incluindo os deste artigo. Os sites diferem enormemente entre si e mudam de política.
O modelo de faturação que determina o valor da sua fatura
Eis a parte que altera as conclusões e que quase nunca é discutida em lado nenhum.
Os fornecedores de proxy de centros de dados dividem-se em dois modelos de faturação, e a mesma carga de trabalho pode custar montantes muito diferentes, dependendo do modelo que escolher.
Faturação por IP
Aluga-se um determinado número de endereços IP por uma mensalidade. O tráfego é ilimitado ou tem um limite generoso, dentro dos parâmetros de utilização razoável.
As tarifas típicas variam entre cerca de 1 e 3 dólares por IP por mês para volumes reduzidos, descendo para cerca de 1 dólar ou menos para volumes elevados. Alguns fornecedores premium cobram consideravelmente mais por IP por conjuntos de endereços mais «limpos».
Este modelo é vantajoso quando se transfere uma grande quantidade de dados através de poucos endereços. Transferência de ficheiros grandes, extração de conteúdo multimédia, trabalho de grande volume através de um conjunto de rotação modesto. Depois de pagar pelo IP, a largura de banda é, na prática, gratuita.
É menos vantajoso quando precisa de muitos endereços para pouco tráfego em cada um. Alugar 500 IPs para efetuar 500 pedidos significa pagar o preço mensal total por cada endereço para transferir apenas alguns kilobytes.
Faturação por GB
Paga-se pelos dados transferidos e utiliza-se um grande conjunto partilhado. As tarifas nesta categoria variam entre cerca de 0,14 $ e 1 $ por GB.
Este modelo é vantajoso quando precisa de diversidade de endereços sem grande volume. Rastreamentos abrangentes que abrangem muitos domínios, verificação de resultados de pesquisa em vários locais, trabalhos em que a rotação é mais importante do que o débito. Não está a pagar por endereços inativos.
Perde em transferências pesadas. Descarregar centenas de gigabytes através de um punhado de endereços torna-se dispendioso por GB quando uma taxa fixa por IP teria sido suficiente.
Descobrir qual é o seu caso
Divida os seus gigabytes mensais pelo número de endereços distintos de que necessita.
Muitos GB por IP — muitos dados, poucos endereços — opte pela tarifa por IP.
Poucos GB por IP — poucos dados, muitos endereços — opte pela tarifa por GB.
Um exemplo de cada caso. Transferir 500 GB de ficheiros através de 20 endereços rotativos: com a tarifa por IP, sem problemas. Fazer dois milhões de pequenas chamadas de API que precisam de parecer que vêm de todo o lado: por GB, sem problemas.
Errar nesta escolha é a forma mais comum de as pessoas pagarem a mais pelos proxies de centro de dados, e isso passa despercebido se comparares os fornecedores apenas pelo preço anunciado — porque os preços anunciados não estão nas mesmas unidades.
Partilhados vs. Dedicados
Um segundo eixo, ortogonal ao modelo de faturação.
Os proxies partilhados são utilizados por vários clientes em simultâneo. É a opção mais económica. O risco reside na reputação herdada — se outro cliente sobrecarregou um site através de um endereço, esse endereço poderá já estar bloqueado quando o utilizar. Não tem qualquer visibilidade sobre o que aconteceu antes de si.
Os proxies dedicados (privados) são exclusivamente seus durante o período de aluguer. São mais caros, e a reputação do endereço depende inteiramente do seu próprio comportamento. Para qualquer situação em que a consistência seja importante, vale a pena pagar a diferença.
Os semi-dedicados partilham um endereço entre um pequeno número de clientes — normalmente dois ou três. Uma posição intermédia e um valor razoável quando a dedicação total não se justifica.
Qual escolher
Os partilhados são adequados para trabalhos ocasionais e de baixo risco, em que um endereço bloqueado significa apenas tentar novamente com outro.
A opção dedicada é importante quando precisa de um comportamento previsível, quando está a manter qualquer tipo de sessão ou quando um bloqueio lhe custaria algo. Também é importante quando está a depurar — com um endereço partilhado, não consegue saber se uma falha é culpa sua.
O custo adicional é normalmente pequeno em relação ao tempo perdido a investigar falhas que não foram da sua responsabilidade.
O que avaliar
Para além do preço, há cinco aspetos que realmente diferenciam os fornecedores nesta categoria.
Qualidade do conjunto de endereços. Não é o tamanho — é a qualidade. Alguns intervalos de endereços de centros de dados já estão amplamente bloqueados devido à forma como foram utilizados no passado. Um fornecedor com alocações limpas e bem mantidas vale mais do que um com um conjunto maior de endereços desgastados. Isto é difícil de avaliar a partir do exterior, e é por isso que os testes são importantes.
Cobertura geográfica. Se precisar de países específicos, verifique se estes estão efetivamente disponíveis e não apenas listados. A cobertura dos centros de dados tende a ser forte nos principais mercados e escassa noutros locais — o que constitui uma limitação real quando comparada com as redes residenciais, que seguem a distribuição da população.
Controlo de rotação. É possível escolher entre rotação por pedido e sessões «sticky»? As sessões «sticky» são importantes sempre que uma sequência de pedidos precisa de parecer proveniente de um único visitante.
Protocolo e autenticação. Suporte a HTTP e SOCKS5, e se a autenticação é feita por nome de utilizador/palavra-passe ou lista branca de IP. A lista branca é conveniente a partir de um servidor fixo e inútil a partir de um portátil em redes variáveis.
Transparência na faturação. Tenha cuidado com sistemas de créditos que ocultam a tarifa real, multiplicadores de largura de banda em determinados alvos e compromissos mínimos. É mais fácil avaliar um fornecedor que apresenta um valor claro por GB ou por IP do que um que apresenta créditos que se convertem a uma taxa que depende do que solicitar.
A questão do período de teste
Quase todos os fornecedores oferecem um período de teste, um plano gratuito ou um pequeno plano inicial pago. Aproveite-o e utilize-o no seu alvo real, em vez de num site de verificação de proxies.
Esta é a única avaliação que se aplica na prática. Um fornecedor com bom desempenho num site pode ter um desempenho fraco noutro, e nenhum benchmark publicado abrange o seu alvo específico.
Comparação entre os fornecedores
As tarifas mudam frequentemente e cada fornecedor define os seus preços à sua maneira; por isso, a comparação útil não é uma coluna de números — é o modelo de faturação que cada um utiliza, porque é isso que determina o valor da sua fatura. Verifique os preços atuais no próprio site de cada fornecedor antes de se comprometer.
| Fornecedor | Modelo | Destaca-se por |
|---|
| Geonode | Por GB (~0,14 $/GB) | O modelo «por GB» para centros de dados é invulgar; adequado para muitos endereços e pouco tráfego |
| Webshare | Por IP | Baixa barreira à entrada, plano gratuito para testes |
| IPRoyal | Por IP | Endereços dedicados a preços acessíveis |
| Bright Data | Por IP | Grande infraestrutura, largura de banda generosa por IP |
| Oxylabs | Ambos | Orientado para empresas, ambos os modelos disponíveis |
| Rayobyte | Por IP | Especialista de longa data em centros de dados |
Como interpretar a tabela
A coluna que importa é Modelo. Uma tarifa por GB e uma mensalidade por IP não são unidades comparáveis — não é possível compará-las até saber a sua relação GB por IP, que é exatamente o cálculo da secção de faturação acima. Um número de destaque de qualquer um dos lados, por si só, não diz nada.
A maior parte deste mercado funciona por IP. Essa é a estrutura tradicional para proxies de centros de dados e adapta-se ao caso de utilização tradicional: um conjunto fixo de endereços que movimenta um tráfego substancial.
A nossa posição, explicada de forma clara O produto de centro de dados da
Geonode é cobrado por GB, a partir de 0,14 $/GB (preços atuais — verifique, pois as tarifas variam). Isso é deliberado e não é universalmente melhor — é melhor para um tipo específico de trabalho.
Onde se destaca: quando precisa de diversidade de endereços sem grande volume de transferência. Rastreamentos abrangentes, verificação de muitos alvos, trabalhos em que pretende rotação num grande conjunto de endereços e em que transfere kilobytes em vez de gigabytes por endereço. Paga pelo que transfere, em vez de alugar endereços que ficam inativos.
Quando um fornecedor por IP se destaca: quando está a transferir volumes significativos através de um pequeno conjunto de endereços. Transferência de ficheiros grandes, multimédia, trabalho que exige largura de banda elevada de forma sustentada. Com a faturação por GB, isso torna-se dispendioso, e uma mensalidade fixa por IP é simplesmente mais económica.
Se a sua utilização se enquadra no segundo perfil, opte pelo modelo por IP. Essa é a resposta honesta, e fingir o contrário custar-lhe-ia dinheiro e custar-nos-ia um cliente que se iria embora insatisfeito.
A título de referência sobre o outro produto: os nossos proxies residenciais começam nos 0,79 $/GB, com 1 TB grátis para novas contas, descendo para 0,50 $/GB a partir de 100 GB e para 0,27 $/GB a partir de 1 TB. As tarifas residenciais de mercado variam entre cerca de 0,79 $ e 7,00 $ por GB, pelo que vale a pena verificar quanto paga atualmente se se encontrar na extremidade superior desse intervalo.
Como escolher sem ter de adivinhar
Quatro passos, por ordem. Cada um elimina uma opção errada.
1. Verifique se o centro de dados funciona
Envie algumas centenas de pedidos para o seu alvo real a partir de um endereço do centro de dados. Utilize um plano gratuito ou o plano pago mais básico.
Se a taxa de sucesso for superior a ~95%: o centro de dados funciona; avance para o passo 2 e aproveite a poupança de 5 a 10 vezes no seu orçamento de proxy.
Bloqueios, CAPTCHAs ou respostas vazias: precisa de um serviço residencial. Pare por aqui — o resto deste artigo é sobre um produto que não vai servir para o seu trabalho, e por mais que procure fornecedores, não vai resolver o problema de um alvo que rejeita toda a categoria.
2. Calcule a sua relação GB por IP
Estime os gigabytes mensais e o número de endereços distintos de que necessita. Divida.
Relação elevada → fornecedores por IP. Relação baixa → fornecedores por GB. Este único número elimina cerca de metade do mercado.
3. Decida entre partilhado ou dedicado
Se os bloqueios forem baratos de absorver e puder simplesmente tentar novamente, o serviço partilhado poupa dinheiro. Se precisar de previsibilidade, estiver a manter sessões ou quiser poder depurar falhas, opte pelo serviço dedicado.
4. Teste dois fornecedores da lista de finalistas
O mesmo teste, o mesmo alvo, o mesmo volume, executados à mesma hora do dia. Compare primeiro a taxa de sucesso e, em segundo lugar, a velocidade — um proxy rápido que é bloqueado não vale nada, enquanto um mais lento que funciona vale a pena.
Todo o processo demora uma tarde e supera todas as comparações publicadas, porque avalia o seu alvo em vez do de outra pessoa.
Erros comuns
Adquirir serviços residenciais por predefinição. O erro mais caro e o mais comum. Muitos clientes nem sequer verificam a origem do endereço. Teste primeiro o centro de dados — se funcionar, terá reduzido os seus custos em quase uma ordem de grandeza.
Comparar preços nominais entre modelos de faturação. Uma tarifa por GB e uma mensalidade por IP não são valores comparáveis. Calcule a sua relação antes de analisar qualquer preço.
Testar num verificador de proxies em vez de no alvo real. Um site de verificação de proxies indica que a ligação funciona. Não diz nada sobre se o seu alvo real a aceita, que é a única questão que importa.
Ignorar os limites de taxa porque os proxies são baratos. A origem do endereço é um sinal. A taxa de pedidos é outro, e um sinal completamente independente. Bombardear um site a partir de endereços «limpos» ainda assim leva ao bloqueio — os intervalos entre pedidos são a forma mais económica de melhorar a fiabilidade.
Presumir que um bloqueio significa proxies de má qualidade. Pode ser o seu padrão de pedidos, os seus cabeçalhos, o seu timing ou um alvo que rejeita toda a categoria. Diagnostique antes de mudar de fornecedor, ou acabará por pagar mais pelo mesmo resultado.
Comprar um endereço partilhado e só depois proceder à depuração. Com um endereço partilhado, não é possível distinguir os seus problemas dos de outra pessoa. Para qualquer problema que precise de resolver, um endereço dedicado compensa-se com o tempo.
Esquecer a vertente legal e ética. Os termos de serviço continuam a aplicar-se. Os dados pessoais continuam a necessitar de uma base legal. Os limites de taxa são uma cortesia para com os utilizadores reais do site, bem como uma forma de evitar o bloqueio. Uma infraestrutura barata não altera nada disso.
Perguntas frequentes
Qual é a diferença entre proxies residenciais e proxies de centro de dados?
Os endereços de centro de dados pertencem a empresas de alojamento; os endereços residenciais pertencem a ISP de consumidores. Os endereços de centro de dados são mais rápidos e 5 a 10 vezes mais baratos, mas são identificáveis como endereços de centro de dados, o que alguns sites consideram suspeito. Os endereços residenciais são mais lentos e mais caros, mas parecem ser de um utilizador comum. Nenhum é melhor — servem para objetivos diferentes.
Vale a pena usar proxies de centro de dados?
Para objetivos que não verificam a origem do endereço, sem dúvida — são significativamente mais baratos e mais rápidos, e pagar tarifas residenciais nesses casos é um desperdício. Para sites com deteção ativa de bots, muitas vezes falham completamente. Um breve teste com o seu objetivo real responde a esta questão de forma definitiva.
Quanto custam os proxies de centro de dados?
Os fornecedores que cobram por IP cobram normalmente entre 1 e 3 dólares por endereço por mês, sendo o preço inferior em caso de volumes elevados. Os fornecedores que cobram por GB cobram entre cerca de 0,14 e 1 dólar por GB. O que é mais barato para si depende inteiramente da quantidade de dados que transfere por endereço.
Devo optar pelo faturamento por IP ou por GB?
Divida os seus gigabytes mensais pelo número de endereços distintos de que necessita. Um grande volume de dados através de poucos endereços favorece o faturamento por IP. Poucos dados através de muitos endereços favorecem o faturamento por GB. Inverter esta lógica é a forma mais comum de as pessoas pagarem a mais.
Proxies de centro de dados partilhados ou dedicados?
Os partilhados são mais baratos, mas herda a reputação que os utilizadores anteriores deixaram no endereço. Os dedicados custam mais e o comportamento do endereço é inteiramente seu — vale a pena sempre que precisar de previsibilidade, estiver a manter sessões ou quiser poder depurar falhas.
Porque é que os meus proxies de centro de dados continuam a ser bloqueados?
Ou o destino rejeita os intervalos de endereços de centro de dados como categoria — caso em que mudar de fornecedor não ajudará e precisará de endereços residenciais — ou a sua taxa e padrões de pedidos estão a ativar limites de taxa, independentemente da origem do endereço. Identifique a causa antes de gastar mais.
Posso utilizar proxies de centro de dados para redes sociais ou comércio eletrónico?
Normalmente, não com sucesso. Essas plataformas investem fortemente na deteção e, geralmente, tratam o tráfego de centro de dados como suspeito, particularmente no que diz respeito a contas com sessão iniciada. Os proxies residenciais são a opção mais realista neste caso.
Qual é o melhor fornecedor de proxies de centros de dados?
Não existe uma resposta única, porque o modelo de faturação é mais importante do que a marca. Calcule a sua relação GB por IP, selecione os fornecedores com o modelo adequado e, em seguida, teste dois deles com o seu alvo real. Esse teste é que decide.
Conclusão
Os proxies de centros de dados são a solução certa com mais frequência do que se pensa, e a solução errada num conjunto muito específico de casos.
São cinco a dez vezes mais baratos e significativamente mais rápidos. A sua única limitação é que os seus endereços são visivelmente endereços de centros de dados, e se isso importa ou não depende inteiramente do destino: grandes plataformas de comércio eletrónico, redes sociais, motores de busca, sites de viagens e qualquer coisa que envolva contas com início de sessão geralmente rejeitam-nos, enquanto uma grande parte do resto da Web nem sequer verifica.
Isso faz com que o primeiro passo seja um teste, não uma decisão. Algumas centenas de pedidos dirigidos ao seu alvo real indicam-lhe qual o produto de que necessita e, se a resposta for «centro de dados», acabou de reduzir o seu orçamento para proxies em quase uma ordem de grandeza.
O segundo passo é o modelo de faturação, que quase ninguém tem em conta. O modelo «por IP» é vantajoso em transferências intensas através de poucos endereços. O modelo «por GB» é vantajoso em diversidade de endereços com transferências ligeiras. Com a mesma carga de trabalho, há uma diferença de uma ordem de grandeza, e isso é invisível quando se comparam os preços anunciados, porque as unidades diferem. Calcule a sua relação gigabytes por endereço antes de consultar qualquer lista de preços.
Vendemos produtos em ambos os lados dessa linha e somos genuinamente melhores num deles: trabalho de centro de dados «por GB», em que são necessários muitos endereços e se transferem poucos dados por cada um. Se a sua utilização for do outro tipo — grandes volumes através de um punhado de endereços —, um fornecedor «por IP» é mais barato e deve optar por um desses.
Teste primeiro, calcule a sua relação em segundo lugar e faça uma pré-seleção em terceiro. Leva uma tarde e é melhor do que qualquer tabela comparativa, incluindo esta.
