Octoparse, kullanımı kolay bir web veri toplama aracıdır ve fazla deneyim gerektirmeden herhangi bir web sitesinden veri toplamanıza olanak tanır. Octoparse ile veri toplamak oldukça basittir; tek yapmanız gereken hedef web sitesinin URL'sini girmek, çıkarmak istediğiniz verileri seçmek ve ardından işlemi başlatmaktır. Octoparse'ı ücretsiz olarak kullanabilirsiniz, ancak daha fazla özellik sunan premium sürümleri de mevcuttur.
Bir web kazıyıcı kullanarak büyük miktarda veri kazıyarken, web sitesinin sunucusuna çok sayıda istek göndermiş olursunuz. Bu nedenle, çoğu web sitesi otomatik bir araç kullandığı tespit edilen hesapları engeller ve IP adreslerini kara listeye alır. Bu engellemenin başınıza gelmesini önlemek için, Octoparse'ı bir Octoparse proxy'siyle birlikte kullanmanız gerekir.
Bir proxy, cihazınız ile internet arasında bir ağ geçidi görevi görür; böylece ziyaret ettiğiniz herhangi bir web sitesi yalnızca proxy sunucusunun IP adresini görebilir. Proxy'leri sürekli değiştirerek, Octoparse belirli bir zaman aralığında farklı bir IP adresine sahip olur. Bu, web sitelerini, isteklerin tek bir bilgisayardan değil, birden fazla farklı kullanıcıdan geldiğine inandırır.
Şimdi bir Octoparse proxy sunucusu kuralım.
