维基百科是一部由志愿者群体编写和维护的在线百科全书。它是世界上规模最大、使用最广泛的百科全书,经常位居互联网最受欢迎网站榜首。它涵盖了所有知识领域中几乎所有主题的信息。 尽管它是全球阅读量最大的参考资料,但学校和机构仍将维基百科视为不可靠的来源,因为任何人都可以编辑其中的条目。
作为数字世界中规模最大的知识库,其中蕴含着数量惊人的数据和信息,可用于各种目的。 然而,手动抓取每一篇维基百科网页将耗费大量时间和精力。事实上,维基百科拥有超过5600万篇条目,单凭一人逐一抓取这些页面几乎是不可能的。这就是用户使用维基百科抓取机器人的原因。
维基百科爬虫机器人会自动爬取维基百科页面,并为您收集所有信息。不过仅靠维基百科爬虫机器人还不够,您还需要将其与维基百科代理配合使用。大多数网站都严格限制在网站上使用爬虫机器人,一旦发现使用,会立即封禁相关账户。 维基百科代理可以伪装您的机器人,使其看起来像一个真实用户,从而防止您被封禁,并让您能够抓取任何网站。
之所以能做到这一点,是因为维基百科代理会向您访问的任何网站隐藏您的 IP 地址。 您机器人的所有请求都将通过代理服务器进行。这意味着网站只会看到代理服务器的 IP 地址,而不会看到您自己的 IP 地址。通过轮换代理,您可以不断更改代理服务器的 IP 地址,使您机器人的所有请求看起来都像是来自不同的人。
让我们来设置一个维基百科代理服务器。
注意:请确保您用于访问维基百科的网页浏览器已设置为自动采用计算机的代理设置。谷歌 Chrome 会自动执行此操作,因此建议使用该浏览器。
适用于 Windows:
要在 Windows 中设置代理,只需在 Windows 搜索栏中搜索“代理设置”,然后打开搜索结果即可。

随后系统将提供两个选项供您选择:自动代理设置 或 手动代理设置。如果您希望 Windows 自动检测代理设置,请选择第一个选项;如果您希望使用特定的 IP 地址和端口号,请选择第二个选项。
如果您选择了第一个选项,请执行以下操作:
- 启用 自动检测设置
- 启用 使用设置脚本
- 输入 脚本地址
- 点击 保存

如果您选择了第二个选项,请执行以下操作:
- 启用 使用代理服务器
- 输入 服务器地址和端口号
- 如果您希望访问某些无需代理的地址,请在此处输入
- 若需不通过代理访问本地服务器,请勾选“不通过代理服务器访问本地地址”复选框
- 点击 “保存”

适用于 Mac。
要在 macOS 中开始配置代理设置,只需:
步骤 1. 点击苹果图标。

步骤 2. 在下拉菜单中,点击 “系统偏好设置”。

步骤 3. 点击 “网络”

步骤 4. 点击 “高级”

注意:请确保先连接到 Wi-Fi 网络。
步骤 5. 点击 “代理”

随后系统会将您重定向至 macOS 代理设置界面。与 Windows 相比,macOS 的设置更为直观。 您只有一个选项,即手动配置代理服务器。
具体操作步骤如下:
- 选择要配置的代理 IP 协议。这取决于您的代理服务提供商支持哪些协议。
- 启用 安全网络代理
- 输入 代理服务器地址 和 端口号
- 点击 “确定” 以保存配置
注意:保存设置时,系统可能会提示您输入 Mac 用户密码。

移动设备:
要在移动设备上设置维基百科代理服务器,只需更改手机的代理设置即可。无论您使用哪款浏览器访问维基百科,该浏览器都会在您每次使用时自动采用手机的代理设置。此方法适用于 Android 和 iOS 系统。 以下是针对 Android 的详细指南,以及针对 iPhone 的另一份指南。
恭喜!您现已完成维基百科代理服务器的配置。请注意,首次访问时,系统会弹出窗口要求您输入登录凭据。