ScrapingBotでプロキシを使用する方法

ScrapingBotは、ユーザーがあらゆるオンラインプラットフォームからデータを抽出できるウェブスクレイピングツールです。不動産サイトのコンテンツを収集するのに最適なツールであり、アカウントの利用停止を回避するのにも役立ちます。ScrapingBotには無料プランがありますが、より多くの機能を利用したい場合は、いつでも有料プランに切り替えることができます。

ウェブサイトからの利用停止を完全に回避するには、ScrapingBotと優れたプロキシを組み合わせて使用する必要があります。ほとんどのウェブサイトは、サイト内でのボットの使用に対して厳しい制限を設けており、ボットの使用が判明したアカウントは即座に利用停止処分となるため、ウェブサイトからフラグを立てられないようにするには、ScrapingBotプロキシが必要です。

ScrapingBotのプロキシがすべてのウェブリクエストを代行するため、アクセスするどのウェブサイトもプロキシサーバーのIPアドレスしか確認できなくなります。 プロキシを継続的にローテーションさせることで、ScrapingBotは設定された時間間隔ごとに異なるIPアドレスを使用することになります。これにより、ウェブサイト側はScrapingBotのリクエストが単一のIPアドレスからではなく、本物のユーザーから送信されているものと誤認させることができます。

それでは、ScrapingBotのプロキシサーバーを設定してみましょう。

ScrapingBotでプロキシを使用する方法

Windowsの場合：

Windowsでプロキシを設定するには、Windowsの検索バーで「プロキシ設定」と検索し、検索結果を開くだけです。

すると、プロキシ設定の自動検出 または [プロキシ設定の手動設定] の 2 つのオプションが表示されます。Windows にプロキシ設定を自動的に検出させたい場合は、最初のオプションを選択してください。特定の IP アドレスとポート番号を使用したい場合は、2 番目のオプションを選択してください。

最初のオプションを選択した場合は、次の手順に従ってください：

1. **「設定を自動的に検出する」**をオンにします
2. **「セットアップスクリプトを使用する」**をオンにします
3. スクリプトのアドレスを入力します
4. **「保存」**をクリックします

2番目のオプションを選択した場合は、次の手順に従ってください：

1. プロキシサーバーを使用するをオンにします
2. サーバーアドレスとポート番号の両方を入力します
3. プロキシを経由せずにアクセスしたいアドレスがある場合は、ここにそのアドレスを入力します
4. プロキシを使用せずにローカルサーバーにアクセスしたい場合は、「ローカルアドレスにはプロキシサーバーを使用しない」チェックボックスをオンにします
5. **「保存」**をクリックします

画像の代替テキスト: Windows の自動プロキシ設定

Macの場合：

macOSでプロキシ設定を行うには、以下の手順に従ってください：

手順 1. Appleアイコンをクリックします。

手順 2. ドロップダウンメニューから、**「システム環境設定」**をクリックします。

手順 3. **「ネットワーク」**をクリックします。

手順 4. **「詳細」**をクリックします。

注：まずWi-Fiに接続していることを確認してください。

手順 5. **「プロキシ」**をクリックします

これにより、macOSのプロキシ設定画面に遷移します。macOSはWindowsに比べて設定がシンプルです。プロキシサーバーを手動で設定するという1つのオプションのみが用意されています。

手順は以下の通りです：

1. 設定したいプロキシのIPプロトコルを選択します。これは、プロキシサービスプロバイダが提供しているプロトコルによって異なります。
2. セキュアWebプロキシを有効にします
3. プロキシサーバーのアドレスとポート番号を入力します
4. OKをクリックして設定を保存します

注：設定を保存する際に、Macのユーザーパスワードの入力を求められる場合があります。

画像の代替テキスト：MacOSのプロキシ設定

おめでとうございます！これでScrapingBotのプロキシサーバーの設定が完了しました。