For the complete documentation index, see llms.txt. This page is also available as Markdown.

ParseHub

使用 Oxylabs 代理为 ParseHub 配置以抓取公开数据。将网站转换为电子表格或 API 的分步指南。

ParseHub 是一个用于从网站抓取公开数据的工具。它允许用户将任何网站转换为电子表格或 API。

观看我们的视频,或按照以下步骤将 ParseHub 与以下 Oxylabs 代理集成:

步骤 1

访问 Oxylabs 控制面板 并添加 你的 IP 地址 到你所选 Oxylabs 代理产品部分下的白名单中。如果你还需要创建用户,请先完成这一步。之后在 ParseHub 中进行身份验证时,你可能需要你的用户凭据。

步骤 2

下载 ParseHub 并安装它。

步骤 3

启动 ParseHub。

步骤 4

在主屏幕上点击 + 新建项目 按钮。

Parsehub new project

步骤 5

输入一个 URL ,你想从中抓取公开数据。在此示例中,我们将使用 https://oxylabs.io。然后,点击 在此 URL 上启动项目。

Project URL example

步骤 6

等待项目准备就绪,然后切换到 浏览 模式。

Browse mode switch

步骤 7

一旦 浏览 滑块 变为绿色,打开右上角的下拉菜单并点击 偏好设置.

Preferences

第 8 步

选择 高级,点击 网络 选项卡并选择 设置.

Advanced network settings

第 9 步

选择 手动代理配置,并根据你选择的 Oxylabs 代理类型填写以下详细信息:

住宅代理和移动代理

代理类型: HTTP, HTTPS, SOCKS5

IP/Host:pr.oxylabs.io

端口: 7777

Manual proxy configuration

您也可以使用随机或粘性、按国家/地区划分的条目。例如,如果您输入 us-pr.oxylabs.io 下填写 HTTP 代理10000 下填写 端口下,您将获得一个美国出口节点。如果您输入 10001 下填写 端口,你将获得带有粘性会话的美国出口节点。你可以在此找到按国家/地区划分的随机代理入口节点完整列表 此处 以及粘性代理入口节点列表 - 此处.

数据中心代理

代理类型: HTTP, HTTPS, SOCKS5

IP/Host: dc.oxylabs.io

端口: 8001

对于 按 IP 计费 订阅中,端口表示从给定列表中分配给某个 IP 地址的序号,因此端口 8001 将使用你代理列表中的第一个 IP 地址。

对于 按流量计费 套餐,端口 8001 将随机选择一个 IP 地址,但在会话持续期间保持一致。你可以在用户认证字符串中指定代理的地理位置,例如 user-USERNAME-country-US:PASSWORD 以连接到美国代理。

独享数据中心代理(企业版)

代理类型: HTTPSOCKS5

IP/Host: 特定 IP 地址(例如, 1.2.3.4)

端口: 60000 (HTTP), 1180 (SOCKS5)

对于企业版独享数据中心代理,您必须从已获取的 代理列表.

独享数据中心代理(自助服务版)

代理类型: HTTPHTTPS

IP/Host: ddc.oxylabs.io

端口: 8001

对于自助服务独享数据中心代理,端口表示来自已获取 代理列表.

ISP代理

代理类型: HTTP, HTTPS, SOCKS5

IP/Host: isp.oxylabs.io

端口: 8001

对于 ISP 代理,端口会分配给一个特定的 IP 地址及其位置。因此,端口 8001 将始终选择你 代理列表.

中的第一个 IP。如果你希望每个请求都获得不同的 IP,请将端口改为 8000 以启用 代理轮换.

独享ISP代理

代理类型: HTTP, HTTPS, SOCKS5

IP/Host: disp.oxylabs.io

端口: 8001

您需要选择分配给所购买的 IP 地址的端口 代理列表,你可以在 Oxylabs 控制面板中找到。 8001 端口将为所有请求从你的列表中选择第一个 IP 地址。使用端口 8000 可自动进行 代理 IP 轮换.

第 10 步

之后,打开一个新标签页和任意网站,你会看到类似这样的消息(图片来自 ParseHub,你的具体信息会不同):

在那里,输入你的代理用户凭据(可在 Oxylabs 控制面板):

代理类型
示例

住宅代理和移动代理

用户名: customer-USERNAME

密码: PASSWORD

数据中心代理

用户名: user-USERNAME

密码: PASSWORD

独享数据中心代理(企业版)

用户名: USERNAME

密码: PASSWORD

独享数据中心代理(自助服务)

用户名: user-USERNAME

密码: PASSWORD

ISP代理

用户名: user-USERNAME

密码: PASSWORD

独享ISP代理

用户名: user-USERNAME

密码: PASSWORD

就是这样!你已成功将 Oxylabs 代理与 ParseHub 集成。查看原始的 ParseHub 集成博客文章 此处.

最后更新于

这有帮助吗?