IMDb(全称Internet Movie Database)是互联网上规模最大、最受欢迎的电影数据库。它汇集了与电影数据相关的所有内容,包括电影预告片和上映日期、票房信息、用户评论、电视及娱乐节目等。 IMDb 帮助用户探索新电影或新剧集,并找到他们想观看的内容。
IMDb 庞大的电影数据库使其成为提取此类信息的理想平台。为了快速高效地收集电影数据,您需要使用网络爬虫机器人。 网页抓取工具从 IMDb 或任何其他网站提取数据的速度,远超任何人工操作。
使用 网页抓取 机器人及任何其他自动化工具的问题在于,IMDb 等网站不允许此类操作。 若被发现使用此类工具,您的账户和 IP 地址将立即被该网站封禁。您需要使用代理来避免被封禁,因为代理服务器会欺骗网站,使其认为您的机器人是真实用户,从而避免被封禁。 适用于 IMDb 的最佳代理是 住宅代理 或 数据中心代理。
让我们在抓取 IMDb 时设置一个代理服务器。
步骤 1. 在 Windows 的搜索栏中,输入 “代理设置”。

步骤 2. 点击 “代理设置” 搜索结果。

步骤 3。系统将提供 自动代理设置 或手动代理设置选项。为便于说明,我们将选择 “手动代理设置”。

步骤 4。启用 “使用代理服务器”。

现在,您需要访问您的代理服务提供商,获取代理服务器的详细信息。 如果您想从 Geonode 获取,可以跳转至“使用 Geonode 获取代理服务器详细信息”。
步骤 5. 输入您的代理的 “主机名” 或 “IP 地址”。 这是分号前面的第一部分,在本例中为 “premium-residential.geonode.com”。

步骤 6. 输入代理的 “端口号”。 这是分号前的第二部分,在本例中为 “9001”。

步骤 7. 输入您希望不通过代理访问的任何 “网站地址”。

如果您希望不通过代理访问本地服务器,请勾选 “对本地地址不使用代理服务器” 复选框。

第 8 步。点击 “保存”。

第 9 步。最后,在 Google Chrome 中访问任意网站,将弹出一个窗口,要求您输入账户凭据。 输入您账户的 “用户名” 和 “密码”。然后,点击 “登录”。

恭喜! 您现已为 Windows 操作系统配置好了代理服务器。
步骤 1. 点击 “苹果图标”。

步骤 2. 在下拉菜单中,点击“系统偏好设置”。

步骤 3. 点击“网络”。

步骤 4. 点击“高级” 注意:请确保先连接到 Wi-Fi 网络。

步骤 5. 点击“代理”

这将带您进入 macOS 代理设置界面。现在,您需要访问您的代理服务商网站,获取代理服务器详细信息。 如果您想从 Geonode 获取,可以跳转至“使用 Geonode 获取代理服务器详细信息”。
步骤 6. 选择您将要使用的正确协议。在本示例中,我们将选择 “Web 代理 (HTTP)”。

第 7 步。输入代理的 “主机名” 或 “IP 地址”。这是分号前面的部分,在本例中为 “premium-residential.geonode.com”。

第 8 步。输入代理的 “端口号”。这是分号前的第二部分,在本例中为 “9001”。

第 9 步。启用 “代理服务器需要密码”。

第 10 步。输入您的代理账户的 “用户名” 和 “密码”。

恭喜! 您现已成功为 Mac 操作系统配置了代理。
步骤 1。访问 Geonode,使用现有账户登录,或注册创建新账户。

步骤 2。 在首页上,点击 “住宅服务”。

步骤 3。向下滚动,直到看到 “端点”。

第 4 步。选择要使用的 “代理协议”:“HTTP 协议” 或 “SOCKS5 协议”。

第 5 步。 选择您要使用的 “会话类型”:“轮转代理” 或 粘性代理。

第 6 步。选择您要使用的代理。 为便于说明,我们将使用高亮显示的代理 “premium-residential.geonode.com:9001”。

如果您想使用 IP 地址而非 DNS,只需关闭“显示 DNS”按钮,IP 地址就会显示出来。

第 7 步。现在您需要代理账户的 “身份验证详细信息”。对于 Geonode,该信息位于您的账户主页上。
