Crawl. Participe do beta gratuito
Faça crawl de um site inteiro e obtenha dados limpos de cada página
Envie um URL
Faz crawl do site inteiro ou de uma seção
Mensal fixo ou por solicitação
Grátis1.500 solicitações/mês
Dados limpos por página
- HTML
- Markdown
Vá de ilimitado ou pague por solicitação
Um único nível cobre Scraper, Map, Crawl e Search. Sem créditos, sem multiplicadores, sem faturas surpresa.
Aqui está como oferecemos preços baixos em qualidade de classe mundial
A maioria das APIs de scraping são executadas com fornecimento alugado e preços baseados em crédito. É por isso que sua conta é imprevisível. Escolhemos o caminho oposto e os compostos matemáticos.
Início rápido do código
Adicione a Crawl API da Geonode ao seu app e obtenha um site inteiro em um único job
import requests
r = requests.post(
"https://scraper.geonode.io/v1/extract",
headers={"X-Api-Key": "YOUR_API_KEY", "Content-Type": "application/json"},
json={"url": "https://example.com", "formats": ["markdown"], "processing_mode": "sync"},
)
print(r.json())Comece a raspar em segundos
Crie sua conta
Cadastre-se e ganhe 1.500 solicitações grátis para começar. Sem cartão de crédito
Envie uma solicitação
Envie qualquer URL para o endpoint de scraping com uma simples chamada de API
Obtenha dados limpos
Receba HTML analisado ou Markdown
Passe para ilimitado ao escalar
Mude para um plano mensal fixo por concorrência ou continue por solicitação. Sem créditos, sem surpresas de medição.
FAQ
Envie uma solicitação POST para /v1/crawl com sua chave de API da Geonode e a URL que deseja rastrear. A URL é o único campo obrigatório; configurações como profundidade, limite de páginas, formato de saída e renderização de JavaScript são opcionais.
Cada crawl retorna um job_id exclusivo. Use-o para obter o status do crawl e monitorar as contagens total, concluídas e com falha de páginas até o job terminar.
Sim. Você pode configurar o crawl para retornar o conteúdo extraído nos formatos de saída suportados, incluindo Markdown. O formato selecionado é aplicado às páginas processadas pelo crawl.
Sim. As solicitações de crawl oferecem configuração de proxy, incluindo segmentação por país, para que você possa obter o conteúdo como ele aparece de um local selecionado, quando suportado.
Sim. Em sites dinâmicos, você pode usar renderização de JavaScript com wait_config para controlar quando uma página está pronta para extração, por exemplo esperando a atividade de rede terminar ou um elemento específico aparecer.
Sim. Você pode listar jobs de crawl anteriores com GET /v1/crawl/jobs. A resposta inclui status do job, estatísticas do crawl, detalhes de configuração e informações de paginação.
Pare de pagar matemática de crédito. Comece a fazer crawl.
1.500 solicitações/mês grátis. Sem cartão de crédito.
