Scraping Robot 是一款网络爬虫 API,可帮助用户从任何网站提取数据并转换为 JSON 格式。它专为开发人员等经验丰富的用户设计,让用户能够轻松集成 Scraping Robot API。 Scraping Robot 还能处理用户在 网页抓取 过程中可能遇到的所有问题,例如代理管理和验证码识别,因此用户只需专注于数据提取即可。
作为一款自动化工具,如果网站检测到您在其网站上使用 Scraping Robot,将会封禁您的账户和 IP 地址。 这是因为网站对在站内使用机器人有严格的限制。如果没有 Scraping Robot 代理,你在抓取网站时可能会遇到这种情况。
Scraping Robot 代理将处理你所有的数据流量,并充当你设备与互联网之间的中介。 通过利用住宅代理并持续轮换 IP 地址,Scraping Robot 每次发送请求时都会使用不同的 IP 地址,从而误导网站认为这些请求来自多个用户。
让我们来设置一个 Scraping Robot 代理服务器。
适用于 Windows:
要在 Windows 中设置代理,只需在 Windows 搜索栏中搜索“代理设置”,然后打开搜索结果即可。

随后系统会提供两个选项供您选择:自动代理设置 或 手动代理设置。如果您希望 Windows 自动检测代理设置,请选择第一个选项;如果您想使用特定的 IP 地址和端口号,请选择第二个选项。
如果您选择了第一个选项,请执行以下操作:
- 启用 自动检测设置
- 启用 使用设置脚本
- 输入 脚本地址
- 点击 保存

如果您选择了第二个选项,请执行以下操作:
- 启用 使用代理服务器
- 输入 服务器地址和端口号
- 如果您希望访问某些无需代理的地址,请在此处输入
- 若需不通过代理访问本地服务器,请勾选“对本地地址不使用代理服务器”复选框
- 点击 “保存”
图片替代文本:Windows 自动代理设置
适用于 Mac:
要在 macOS 中开始配置代理设置,只需:
步骤 1. 点击苹果图标。

步骤 2. 在下拉菜单中,点击 “系统偏好设置”。

步骤 3. 点击 “网络”

步骤 4. 点击 “高级”

注意:请确保先连接到 Wi-Fi 网络。
步骤 5. 点击 “代理”

随后系统将跳转至 macOS 代理设置界面。与 Windows 相比,macOS 的设置更为简单直观。您只有一个选项,即手动配置代理服务器。
具体操作步骤如下:
- 选择要配置的代理 IP 协议。这取决于您的代理服务提供商支持哪些协议。
- 启用 安全网络代理
- 输入 代理服务器地址 和 端口号
- 点击 确定 以保存配置
注意:系统可能会提示您输入 Mac 用户密码以保存设置。
图片替代文本:配置 macOS 代理设置
恭喜!您现已完成 Scraping Robot 代理服务器的配置。