如何在“互联网档案馆”中使用代理服务器

由互联网档案馆（Internet Archive）创建的“时光机”（Wayback Machine）是一个收录万维网网站的数字档案库。作为互联网的历史图书馆，“时光机”允许任何用户访问网站的存档版本。用户只需输入网址，并选择想要查看的日期范围即可。

截至2022年，“时光机”已保存了超过7280亿个网页。将“时光机”称为互联网历史的宝库，绝非夸大其词。 从中提取的数据可在多个方面加以利用，但若想快速高效地收集这些数据，就需要使用网页抓取工具。网页抓取工具从“时光机”中提取数据的速度，远超人工所能达到的水平。

“时光机”确实允许用户抓取数据，但存在数量限制。 若想突破这些限制，同时安全地抓取数据，则需将网页抓取工具与代理服务器配合使用。通过代理服务器，您可以访问数百万个 IP 地址，因此当触及“时光机”的抓取限制时，可轻松切换 IP 地址。 代理服务器还能隐藏您的私人信息，因此您可以安全地进行数据抓取，无需担心个人数据被盗。

让我们在抓取“时光机”数据时设置一个代理服务器吧。

“互联网档案馆”的代理设置

适用于 Windows：

步骤 1

在 Windows 的搜索栏中，输入 “代理设置”。

步骤 2

点击 “代理设置” 搜索结果。

步骤 3

系统将提供 “自动代理设置” 或 “手动代理设置” 两种选项。 为便于说明，我们将选择 “手动代理设置”。

步骤 4

启用 “使用代理服务器”。

现在，您需要访问您的代理提供商网站以获取代理服务器详细信息。如果您想从 Geonode 获取，可以跳转至“使用 Geonode 获取代理服务器详细信息”。

第 5 步

输入代理的 “主机名” 或 “IP 地址”。这是分号前面的第一部分，在本例中为 “premium-residential.geonode.com”。

第 6 步

输入代理的 “端口号”。这是分号前的第二部分，在本例中为 “9001”。

第 7 步

输入您希望不通过代理访问的任何 “网站地址”。

如果您希望不通过代理访问本地服务器，请勾选 “对于本地地址，不使用代理服务器” 复选框。

第 8 步

点击 “保存”。

第 9 步

最后，在 Google Chrome 中访问任意网站，将弹出一个窗口，要求您输入账户凭据。 输入您的账户**“用户名”和“密码”。然后，点击“登录”**。

恭喜！ 您现已成功为 Windows 操作系统配置了代理服务器。

macOS 的代理设置

步骤 1

点击 “苹果图标”。

步骤 2

在下拉菜单中，点击“系统偏好设置”。

步骤 3

点击“网络”。

第 4 步

点击“高级” 注意：请确保先连接到您的 Wi-Fi 网络。

第 5 步

点击“代理”

这将引导您进入 macOS 代理设置界面。现在，您需要访问您的代理服务提供商网站，获取代理服务器详细信息。如果您想从 Geonode 获取，可以跳转至“使用 Geonode 获取代理服务器详细信息”。

第 6 步

选择您将要使用的正确协议。在本示例中，我们将选择 “Web 代理 (HTTP)”。

第 7 步

输入代理的 “主机名” 或 “IP 地址”。这是分号前面的部分，在本例中为 “premium-residential.geonode.com”。

第 8 步

输入代理的 “端口号”。这是分号前的第二部分，在本例中为 “9001”。

第 9 步

启用 “代理服务器需要密码”。

第 10 步

输入您的代理账户的 “用户名” 和 “密码”。

恭喜！ 您现已成功为 Mac 操作系统配置了代理。

使用 Geonode

获取代理服务器详细信息 ### 步骤 1

访问 **[Geonode

](https://app.geonode.com/login)**，使用现有账户登录，或注册创建新账户。

步骤 2

在首页上，点击 “住宅服务”。

步骤 3

向下滚动，直到看到 “端点”。

第 4 步

选择要使用的 “代理协议”：“HTTP 协议” 或 **“[SOCKS5

协议](https://geonode.com/blog/beginners-guide-to-socks5-proxies)”**。

第 5 步

选择要使用的 “会话类型”：“轮转代理” 或 粘性代理。

第 6 步

选择要使用的代理。 为便于示例说明，我们将使用高亮显示的代理 **“premium-residential.geonode

.com:9001”**。

如果您想使用 IP 地址而非 DNS，只需关闭“显示 DNS”按钮，IP 地址就会显示出来。

第 7 步

现在您需要代理账户的 “身份验证详细信息”。对于 Geonode

，该信息位于您的账户主页上。