For the complete documentation index, see llms.txt. This page is also available as Markdown.

流量与计费

了解网页爬虫API的流量与计费、流量用量的计算方式,以及哪些结果需要计费。

流量使用量

网页爬虫API 统计以下内容的数量 results. 结果 指从网页成功获取的不同内容实体(例如网页 HTML)。

  • 成功结果 (计费):目标站点中的所有结果,带有 2xx 还是 4xx 状态代码,会被计为成功结果并计费。

  • 不成功结果 (不计费):其他结果会被计为不成功结果,不会计费。

状态代码 429 (请求过多)不计费。当您超过速率限制时会发生这种情况。如果您经常遇到此情况,请联系您的客户经理以提高您的限额。

有关响应代码的更多信息,请参阅 响应代码表.

计费

您将按成功提取数据的结果数量计费。

由于我们系统错误导致的抓取失败尝试(5xx 和 6xx 状态代码)不会计入,您也不会因此被计费。

请看下面的几个计费案例示例:

案例示例 #1 - 成功的抓取尝试

您创建一个抓取任务,网页爬虫API 经过三次尝试后成功从网站获取到可用内容。您只会为最后一次成功的结果计费。

Case 1

案例示例 #2 - 因我们的错误导致抓取失败

您创建一个抓取任务,但由于我们的错误而失败,例如我们已达到内部重试上限。在这种情况下,您收到的结果不会计费。

Case 2

案例示例 #3 - 因客户端错误导致抓取失败

您创建一个抓取任务,但由于您一侧的错误而失败。此结果将计费。

Case 3

这有帮助吗?