WebHarvy

将 Oxylabs 移动代理与 WebHarvy 集成以进行网页抓取——逐步配置 HTTP 代理设置。

WebHarvy 是一款从网页提取文本、HTML 和图像的网页爬取工具。该工具可处理登录、表单提交、导航、分页、定时爬取并支持代理。

要将 Oxylabs 移动代理 与 WebHarvy 集成，请按照以下步骤操作：

步骤 1。 下载 并安装 WebHarvy 应用程序。

步骤 2。 设置完成后，导航至 设置。

步骤 3。 点击 代理设置。选择 启用通过代理服务器的网络连接 并选择 HTTP 作为您的 类型.

步骤 4。 填写详细信息：

地址：pr.oxylabs.io

端口： 7777

你也可以使用随机或带会话粘性的国家特定入口。例如，如果你在 us-pr.oxylabs.io 下输入 地址 和 10000 下输入 端口，你将获得一个美国出口节点。如果你输入 10001 下输入 端口，你将收到带有粘性会话的美国出口节点。你可以在这里找到完整的国家特定随机代理入口节点列表 此处 以及粘性代理入口节点列表 - 此处.

步骤 5。 选择 需要身份验证 以输入您的 Oxylabs 代理 用户名 和 密码。点击 + 按钮将您的新代理添加到列表中。

步骤 6。 按下 应用 以完成您的 WebHarvy 代理集成。

就这些。现在您可以浏览互联网并标记要抓取的特定行。通过单击 开始， 您即可开始选择目标数据。

查找原始的 WebHarvy 集成博客文章 此处.