Bingは、マイクロソフトが独自に運営しているウェブ検索エンジンであり、同社の検索エンジンの最新バージョンです。Bingは多くのデバイスでデフォルトの検索エンジンとして設定されています。Googleと比較すると、Bingの検索機能は画像や動画に特化しているのに対し、Googleはより幅広い分野で強みを発揮しています。 Bingは無料で利用でき、40以上の言語に対応しています。また、Bingにはスマートフォンユーザー向けのモバイルアプリもあり、ダウンロード数は数百万件に上りますが、依然として多くのユーザーはブラウザ経由で検索を行っています。
他の人気検索エンジンと同様、BingにはデジタルマーケターやSEO担当者が必要とする貴重なデータが豊富に存在します。しかし、そのデータをすべて収集するには、数ヶ月、あるいは数年を要するでしょう。この作業を成し遂げる最善の方法は、スクレイパーを使用してすべての情報を収集することです。 問題は、ボットを使用してデータをスクレイピングすることが、Bingを含むほとんどのウェブサイトのポリシーに違反している点です。ボットが検出されると、Bingは直ちにあなたのIPアドレスをブロックし、二度とBingにアクセスできなくなってしまいます。これらの制限を回避するには、Bing用プロキシの助けが必要になります。
Bingプロキシとは、単にあなたのデバイスとインターネットの間を仲介する役割を果たす、通常のプロキシのことです。アクセスするどのウェブサイトも、プロキシサーバーのIPアドレスしか確認できず、あなた自身のIPアドレスは隠されます。 ローテーションプロキシを利用すれば、このIPアドレスを所定の間隔で何度でも変更することも可能です。利用可能なIPアドレスは数百万件にも及びます。つまり、Bingからデータをスクレイピングする際、ボットが行うすべてのリクエストは、場所の異なるさまざまなコンピュータから送信されているかのように見えることになります。
Bingで使用するのに最適なプロキシはレジデンシャルプロキシです。このタイプのプロキシは、実際のデバイスからのレジデンシャルIPを使用するため、ボットを本物の「ユーザー」のように見せることができます。 Bing、あるいは実際にはどのウェブサイトであっても、ボットを使用していることを認識できなくなるため、これで自由にスクレイピングを行うことができます。
それでは、Bing用のプロキシサーバーを設定しましょう。
注：Bingにアクセスする際に使用するウェブブラウザが、お使いのコンピューターのプロキシ設定を自動的に反映するように設定されていることを確認してください。Google Chromeは自動的にこれを行うため、その使用をお勧めします。
Windowsの場合：
Windowsでプロキシを設定するには、Windowsの検索バーで「プロキシ設定」と検索し、検索結果を開くだけです。
すると、プロキシ設定の自動検出 または [プロキシ設定の手動設定] の 2 つのオプションが表示されます。Windows にプロキシ設定を自動的に検出させたい場合は、最初のオプションを選択してください。特定の IP アドレスとポート番号を使用したい場合は、2 番目のオプションを選択してください。
最初のオプションを選択した場合は、次の手順に従ってください：
- 「設定を自動的に検出する」 をオンにします
- 「セットアップスクリプトを使用する」 をオンにします
- スクリプトのアドレス を入力します
- 「保存」 をクリックします
2番目のオプションを選択した場合は、次の手順に従ってください：
- プロキシサーバーを使用する をオンにします
- サーバーアドレスとポート番号の両方を入力します
- プロキシを経由せずにアクセスしたいアドレスがある場合は、ここにそのアドレスを入力します
- プロキシを使用せずにローカルサーバーにアクセスしたい場合は、「ローカルアドレスにはプロキシサーバーを使用しない」チェックボックスをオンにします
- **「保存」**をクリックします
Macの場合。
macOSでプロキシ設定を行うには、以下の手順に従ってください：
手順 1. Appleアイコンをクリックします。
手順 2. ドロップダウンメニューから、**「システム環境設定」**をクリックします。
手順 3. **「ネットワーク」**をクリックします。
手順 4. **「詳細」**をクリックします。
注：まずWi-Fiに接続していることを確認してください。
手順 5. **「プロキシ」**をクリックします
これにより、macOSのプロキシ設定画面に遷移します。macOSはWindowsに比べて設定が簡単です。 選択肢は1つだけで、プロキシサーバーを手動で設定する方法のみです。
手順は以下の通りです：
- 設定したいプロキシのIPプロトコルを選択します。これは、プロキシサービスプロバイダーが提供しているプロトコルによって異なります。
- セキュアWebプロキシを有効にします
- プロキシサーバーのアドレスとポート番号を入力します
- OKをクリックして設定を保存します
注：設定を保存する際に、Macのユーザーパスワードの入力を求められる場合があります。
モバイルの場合：
モバイル用のBingプロキシサーバーを設定するには、お使いのスマートフォンのプロキシ設定を変更するだけです。Bingは、利用するたびにスマートフォンのプロキシ設定を自動的に反映します。これはAndroidとiOSの両方に適用されます。詳細なガイドとして、Android用とiPhone用のものがあります。
おめでとうございます！これでBingプロキシサーバーの設定が完了しました。なお、初めてアクセスする際には、ログイン情報の入力を求めるポップアップが表示されますのでご注意ください。
