Documentation has been updated: see help center and changelog in one place.
Explore
LogoLogo
Oxylabs dashboardProduct
中文
  • Documentation
  • Help center
  • Changelog
中文
  • 总览
  • 代理
    • 集成教程
      • 动态住宅代理教程
        • AdsPower
        • Android
        • BitBrowser(比特浏览器)
        • ClonBrowser
        • Ghost Browser
        • Helium Scraper
        • Hubstudio
        • Incogniton
        • Kameleo
        • MuLogin
        • Multilogin
        • Octoparse
        • Oxy® Proxy 的 Chrome 代理扩展程序
        • ParseHub
        • Playwright
        • Puppeteer
        • Selenium
        • SwitchyOmega
        • Shadowrocket
        • VMLogin
        • VMMask
        • WebHarvy
      • 动态移动代理教程
        • AdsPower
        • Android
        • BitBrowser(比特浏览器)
        • ClonBrowser
        • Ghost Browser
        • Helium Scraper
        • Hubstudio
        • Incogniton
        • Kameleo
        • MuLogin
        • Multilogin
        • Octoparse
        • Oxy® Proxy 的 Chrome 代理扩展程序
        • ParseHub
        • Playwright
        • Puppeteer
        • Selenium
        • SwitchyOmega
        • Shadowrocket
        • VMLogin
        • VMMask
        • WebHarvy
      • 静态数据中心代理教程
        • BitBrowser(比特浏览器)
        • FoxyProxy
        • Hubstudio
        • MuLogin
        • Oxy® 代理管理器
        • Proxifier
        • SwitchyOmega
        • VMMask
      • 动态数据中心代理集成教程
        • AdsPower
        • Hubstudio
        • MuLogin
        • VMMask
    • 静态数据中心代理
      • 企业
        • 入门指南
        • 代理列表
        • 提出请求
        • 企业-协议
        • 将 IP 列入白名单
          • 仪表板
          • RESTful
            • 获取白名单 IP 列表
            • 添加白名单 IP
            • 移除白名单的 IP
            • 正在保存更改(5 分钟冷却时间)
        • 数据中心代理 API
        • 代理轮换工具 - 可选
          • 使用代理轮换工具的会话控制
        • 响应代码
      • 自助服务
        • 入门指南
        • 发起请求
        • 代理列表
        • 代理轮换
        • 位置设置
        • 协议
        • 响应代码
        • 受限目标
    • ISP代理
      • 入门指南
      • 发起请求
      • 代理列表
      • 代理轮换
      • 位置设置
      • 协议
      • 响应代码
      • 受限目标
    • 住宅代理
      • 入门指南
      • 反向连接入口节点
        • 中国入口节点
      • 基本查询
      • 协议
      • 选择国家/地区
      • 选择州
      • 选择城市
      • 选择大洲
      • 会话控制
      • 具体国家/地区的入口节点
      • 端点生成器
      • 其他信息
      • 受限目标网站
      • 公共 API
    • 移动代理
      • 入门指南
      • 反向连接入口节点
        • 中国入口节点
      • 基本查询
      • 协议
      • 选择国家/地区
      • 选择大洲
      • 会话控制
      • 具体国家/地区的入口节点
      • 端点生成器
      • 其他信息
      • 受限目标网站
      • 公共 API
    • 数据中心代理
      • 代理列表
      • IP控制
      • 选择国家
      • 协议
      • 白名单
      • 响应代码
      • 受限目标
      • 公平使用政策
    • (传统!)动态数据中心代理
      • 入门指南
      • 提出请求
      • 选择国家/地区
      • 会话控制
      • 响应代码
      • 受限目标网站
  • 高级代理解决方案
    • 网页解锁器
      • 开始使用
      • 提出请求
        • 会话
        • 地理位置
        • 标头
        • Cookie
        • 自定义状态代码
        • POST 请求
        • JavaScript 渲染
      • 样例响应
      • 用量统计数据
  • 爬虫API
    • 入门
      • API 参考
        • 集成方法
          • Realtime
          • 推拉
          • 代理端口
        • 身份验证
        • 全局参数值
        • 响应代码
        • 用量统计
      • Postman
    • 电商爬虫 API
      • Amazon
        • 参数值
        • 结构化数据
      • Google Shopping
        • 参数值1
        • 结构化数据
      • AliExpress
      • 其他域名
        • 参数值
        • 下载图片
    • SERP 爬虫 API
      • Google
        • 参数值
        • 结构化数据
      • Bing
        • 参数值
      • 其他搜索引擎
    • 网络爬虫 API
      • 其他域名
        • 参数值
        • 下载图片
    • 任务管家 (Scheduler)
    • 自定义解析器 (Custom Parser)
      • 入门
      • 解析指令的示例
      • 函数列表
        • 函数示例
    • 无头浏览器 (Headless Browser)
      • JavaScript 渲染
      • 浏览器指令(测试版)
        • 指令列表
  • 有用链接
    • Oxylabs 仪表板
    • Discord社群
    • GitHub
  • 常见问题
  • 支持
    • 需要帮助?
Powered by GitBook
On this page
  • 创建作业
  • 手动测试工具
  • 有用链接

Was this helpful?

  1. 爬虫API

入门

Previous用量统计数据NextAPI 参考

Last updated 11 months ago

Was this helpful?

创建作业

要使用我们的爬虫API 开始抓取, 请遵循以下简单步骤:

  1. 选择您想在您所使用的爬虫API 下抓取的域名。

    • 例如,如果您正在尝试使用我们的 , 您可以选择抓取 , 或任何其他搜索引擎。我们的 爬虫API 在菜单左侧。

  2. 请在所选域下选择您喜欢的页面类型。

    • 例如,如果您想抓取 , 则可通过提供一个 到您的目标页面,或者通过专门建立的页面类型提供一些输入参数(例如, , 和其他),这样我们便可在我们的终端形成 URL。

  3. 组建一个查询 并将其发送到我们的 API。

    • 在您所选页面类型或域名下,您会发现不同编程语言的代码示例。使用它们来建立您的查询,并确保始终包括以下元素:

重要事项:始终将所提供代码示例中的 USERNAME 和 PASSWORD 替换为您的 API 用户凭证。查看部分了解更多信息。

手动测试工具

如果您想在大规模使用 API 之前手动尝试一下,我们建议使用 。在每个域下,您会发现其 ,您可以将其导入 Postman 并立即开始抓取。这些集合包含各种来源和集成方法的请求模板。

有用链接

  • 我们极力建议您访问我们的 API 参考部分以高效地使用和整合我们的爬虫API。您会发现关于整合方法、全局参数值、响应代码和用量统计的信息。

  • 随时可通过查询以下端点查看历史用量统计:GET https://data.oxylabs.io/v2/stats。亦可返回月度或每日统计。请访问以下部分了解更多信息。

  • 查看我们的Scraper API 任务管家功能。它可用于重复性的抓取和解析作业。

  • 测试一下爬虫 API 功能网络爬虫:这是一款让您抓取任何网站并选择有用内容并将其批量交付给您。

  • 利用无头浏览器高效抓取JavaScript密集型网站,实现执行各种浏览器指令,包括点击、滚动、输入、等待等。

查阅 获取关于如何使用最流行的编程语言(如 C#、Java、NodeJs、PHP、Python等)抓取网站、使用我们的工具、推行产品或整合产品的教程。

如果您没有找到您想搜索的或是需要帮助,请通过微信、QQ,或24/7实时对话联系我们。

API 参考
用量统计
任务管家 (Scheduler)
无头浏览器 (Headless Browser)
Oxylabs GitHub
官网
SERP 爬虫 API
Google
Google
Realtime
整合方法
身份验证
Postman
Postman 集合
URL
Search
Ads