Geonode logo

Crawl. Sertai beta percuma

Crawl keseluruhan laman dan dapatkan data bersih daripada setiap halaman
Mula dengan 1,500 permintaan percuma/blnBaca dokumentasi
Hantar satu URL
Meng-crawl keseluruhan laman atau satu bahagian
Bulanan tetap atau per permintaan
Percuma1,500 permintaan/bulan
Data bersih per halaman
  • HTML
  • Markdown

Pilih tanpa had, atau bayar per permintaan

Satu peringkat merangkumi Scraper, Map, Crawl dan Search. Tiada kredit, tiada pendarab, tiada bil mengejutkan.

  • Pelan percuma

    $0/ bulan

    1,500 permintaan / bulan

    • Keserentakan1
    • Saiz kelompok5 URL
    • Halaman setiap crawl10
    • Ditetapkan semula setiap bulan
    • Tiada kad kredit diperlukan
    • Permintaan gagal tidak pernah dicaj – pada setiap endpoint
    Mula percuma
  • Pelan setiap permintaan

    $62.50/ bulan

    250,000 permintaan / bulan

    Permintaan:
    • Keserentakan50
    • Saiz kelompok100 URL
    • Halaman setiap crawl200
    • Permintaan tidak digunakan dibawa ke hadapan
    • Permintaan gagal tidak pernah dicaj – pada setiap endpoint
    Mula langganan $62.50
  • Pelan tanpa had

    $1,000/ bulan

    Volum permintaan tanpa had

    Thread:
    • Sesuai sehingga7M permintaan/bln
    • Saiz kelompok1,000 URL
    • Halaman setiap crawl1,000
    • Permintaan tanpa had, harga tetap
    • Termasuk setiap endpoint
    Mula langganan $1,000Cuba Unlimited – $100 untuk 48 jam
  • Bayar Mengikut Penggunaan

    dari $0.40/ 1k permintaan

    Jumlah permintaan tersuai

    • Keserentakan100
    • Saiz kelompok500 URL
    • Halaman setiap crawl500
    • Permintaan tidak digunakan dibawa ke hadapan
    • Pesanan minimum $50
    • Permintaan gagal tidak pernah dicaj – pada setiap endpoint
    Pilih jumlah permintaan
Perlukan lebih? Hubungi kami

Inilah bagaimana kami menawarkan harga rendah pada kualitas dunia.

Kebanyakan API scraping berjalan atas bekalan sewaan dengan harga berasaskan kredit. Itulah sebabnya bil anda tidak boleh dijangka. Kami memilih laluan yang bertentangan dan pengiraannya semakin memberi faedah.

Bagaimana lebih ramai pelanggan, pengendalian rangkaian kami sendiri, harga borong, dan kos yang lebih rendah saling menguatkan antara satu sama lain

Quickstart kod

Tambah Crawl API Geonode ke aplikasi anda dan tarik keseluruhan laman dalam satu kerja

import requests

r = requests.post(
  "https://scraper.geonode.io/v1/extract",
  headers={"X-Api-Key": "YOUR_API_KEY", "Content-Type": "application/json"},
  json={"url": "https://example.com", "formats": ["markdown"], "processing_mode": "sync"},
)
print(r.json())

Mula scraping dalam beberapa saat

Cipta akaun anda

Daftar dan dapatkan 1,500 permintaan percuma untuk bermula. Tanpa kad kredit

Borang pendaftaran dengan medan e-mel dan kata laluan dalam papan pemuka

Hantar permintaan

Hantar apa-apa URL ke endpoint scraping dengan satu panggilan API yang mudah

Kawalan negara gateway dan jenis sesi dalam papan pemuka

Dapatkan data bersih

Terima HTML atau Markdown yang telah dihurai

Format endpoint proksi dan butiran sambungan

Beralih ke unlim apabila anda menskala

Beralih ke pelan bulanan tetap mengikut keselarasan, atau kekal per permintaan. Tanpa kredit, tanpa kejutan pemeteran.

Contoh kod dan petikan integrasi dalam papan pemuka

FAQ

Hantar permintaan POST ke /v1/crawl dengan kunci API Geonode anda dan URL yang ingin di-crawl. URL ialah satu-satunya medan wajib; tetapan crawl seperti depth, had halaman, format output, dan JavaScript rendering adalah pilihan.

Setiap crawl mengembalikan job_id unik. Gunakannya untuk mendapatkan status crawl dan memantau jumlah keseluruhan, selesai, dan gagal sehingga job tamat.

Ya. Anda boleh mengkonfigurasi crawl untuk mengembalikan kandungan halaman yang diekstrak dalam format output yang disokong, termasuk Markdown. Format yang dipilih digunakan pada halaman yang diproses oleh crawl.

Ya. Permintaan crawl menyokong konfigurasi proksi, termasuk penargetan negara, supaya anda boleh mendapatkan kandungan seperti yang kelihatan dari lokasi dipilih apabila disokong.

Ya. Untuk tapak dinamik, anda boleh menggunakan JavaScript rendering bersama wait_config untuk mengawal bila halaman sedia untuk diekstrak, contohnya menunggu aktiviti rangkaian selesai atau elemen tertentu muncul.

Ya. Anda boleh menyenaraikan job crawl sebelumnya dengan GET /v1/crawl/jobs. Respons merangkumi status job, statistik crawl, butiran konfigurasi, dan maklumat penomboran.

Berhenti mengira kredit. Mula crawling.

1,500 permintaan/bulan percuma. Tanpa kad kredit.

Mula percumaPelayan MCP