卖家

使用 Oxylabs 网页爬虫API 抓取 Amazon 卖家页面。结合 JS 渲染、地理位置和代码示例，获取评分、反馈、资料数据等。

该 amazon_sellers 数据源旨在抓取 Amazon Sellers 页面。

查看输出 数据字典 用于 Sellers，提供简短描述、截图、已解析的 JSON 代码片段，以及定义每个已解析字段的表格。可通过右侧导航或向下滚动页面查看详细信息。

请求示例

在下面的代码示例中，我们发起请求以获取卖家 ID 的卖家页面 A2MUQS6AX5GGR 在 amazon.de 市场。

curl 'https://realtime.oxylabs.io/v1/queries' \
--user 'USERNAME:PASSWORD' \
-H 'Content-Type: application/json' \
-d '{
        "source": "amazon_sellers", 
        "domain": "de", 
        "query": "A2MUQS6AX5GGR",
        "parse": true
    }'

import requests
from pprint import pprint


# 结构化负载。
payload = {
    'source': 'amazon_sellers',
    'domain': 'de',
    'query': 'A2MUQS6AX5GGR',
    'parse': True
}


# 获取响应。
response = requests.request(
    'POST',
    'https://realtime.oxylabs.io/v1/queries',
    auth=('USERNAME', 'PASSWORD'),
    json=payload,
)

# 将美化后的响应打印到标准输出。
pprint(response.json())

const https = require("https");

const username = "USERNAME";
const password = "PASSWORD";
const body = {
    source: "amazon_sellers",
    domain: "de",
    query: "A2MUQS6AX5GGR",
    parse: true,
};

const options = {
    hostname: "realtime.oxylabs.io",
    path: "/v1/queries",
    method: "POST",
    headers: {
        "Content-Type": "application/json",
        Authorization:
            "Basic " + Buffer.from(`${username}:${password}`).toString("base64"),
    },
};

const request = https.request(options, (response) => {
    let data = "";

    response.on("data", (chunk) => {
        data += chunk;
    });

    response.on("end", () => {
        const responseData = JSON.parse(data);
        console.log(JSON.stringify(responseData, null, 2));
    });
});

request.on("error", (error) => {
    console.error("Error:", error);
});

request.write(JSON.stringify(body));
request.end();

<?php

$params = array(
    'source' => 'amazon_sellers',
    'domain' => 'de',
    'query' => 'A2MUQS6AX5GGR',
    'parse' => true
);

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, "https://realtime.oxylabs.io/v1/queries");
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, json_encode($params));
curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_USERPWD, "USERNAME" . ":" . "PASSWORD");

$headers = array();
$headers[] = "Content-Type: application/json";
curl_setopt($ch, CURLOPT_HTTPHEADER, $headers);

$result = curl_exec($ch);
echo $result;

if (curl_errno($ch)) {
    echo 'Error:' . curl_error($ch);
}
curl_close($ch);

package main

import (
	"bytes"
	"encoding/json"
	"fmt"
	"io/ioutil"
	"net/http"
)

func main() {
	const Username = "USERNAME"
	const Password = "PASSWORD"

	payload := map[string]interface{}{
		"source": "amazon_sellers",
		"domain": "de",
		"query":  "A2MUQS6AX5GGR",
		"parse":  true,
	}

	jsonValue, _ := json.Marshal(payload)

	client := &http.Client{}
	request, _ := http.NewRequest("POST",
		"https://realtime.oxylabs.io/v1/queries",
		bytes.NewBuffer(jsonValue),
	)

	request.SetBasicAuth(Username, Password)
	response, _ := client.Do(request)

	responseText, _ := ioutil.ReadAll(response.Body)
	fmt.Println(string(responseText))
}

using System;
using System.Collections.Generic;
using System.Net.Http;
using System.Net.Http.Json;
using System.Threading.Tasks;

namespace OxyApi
{
    class Program
    {
        static async Task Main()
        {
            const string Username = "USERNAME";
            const string Password = "PASSWORD";

            var parameters = new {
                source = "amazon_sellers",
                domain = "de",
                query = "A2MUQS6AX5GGR",
                parse = true
            };

            var client = new HttpClient();

            Uri baseUri = new Uri("https://realtime.oxylabs.io");
            client.BaseAddress = baseUri;

            var requestMessage = new HttpRequestMessage(HttpMethod.Post, "/v1/queries");
            requestMessage.Content = JsonContent.Create(parameters);

            var authenticationString = $"{Username}:{Password}";
            var base64EncodedAuthenticationString = Convert.ToBase64String(System.Text.ASCIIEncoding.UTF8.GetBytes(authenticationString));
            requestMessage.Headers.Add("Authorization", "Basic " + base64EncodedAuthenticationString);

            var response = await client.SendAsync(requestMessage);
            var contents = await response.Content.ReadAsStringAsync();

            Console.WriteLine(contents);
        }
    }
}

package org.example;

import okhttp3.*;
import org.json.JSONObject;
import java.util.concurrent.TimeUnit;

public class Main implements Runnable {
    private static final String AUTHORIZATION_HEADER = "Authorization";
    public static final String USERNAME = "USERNAME";
    public static final String PASSWORD = "PASSWORD";
    public void run() {
        JSONObject jsonObject = new JSONObject();
        jsonObject.put("source", "amazon_sellers");
        jsonObject.put("domain", "de");
        jsonObject.put("query", "A2MUQS6AX5GGR");
        jsonObject.put("parse", true);

        Authenticator authenticator = (route, response) -> {
            String credential = Credentials.basic(USERNAME, PASSWORD);

            return response
                    .request()
                    .newBuilder()
                    .header(AUTHORIZATION_HEADER, credential)
                    .build();
        };

        var client = new OkHttpClient.Builder()
                .authenticator(authenticator)
                .readTimeout(180, TimeUnit.SECONDS)
                .build();

        var mediaType = MediaType.parse("application/json; charset=utf-8");
        var body = RequestBody.create(jsonObject.toString(), mediaType);
        var request = new Request.Builder()
                .url("https://realtime.oxylabs.io/v1/queries")
                .post(body)
                .build();

        try (var response = client.newCall(request).execute()) {
            if (response.body() != null) {
                try (var responseBody = response.body()) {
                    System.out.println(responseBody.string());
                }
            }
        } catch (Exception exception) {
            System.out.println("Error: " + exception.getMessage());
        }

        System.exit(0);
    }

    public static void main(String[] args) {
        new Thread(new Main()).start();
    }
}

我们使用同步的 Realtime 集成方法作为示例。如果您想使用 Proxy Endpoint 或异步 Push-Pull 集成，请参阅 集成方法 部分。

请求参数值

通用

抓取 Amazon Seller 页面时的基础设置和自定义选项。

参数

说明

默认值

source

设置爬虫。

amazon_sellers

query

卖家 ID 代码。

render

设置为 html. 更多信息.

parse

设置为 true时返回解析后的数据。查看输出 数据字典.

false

callback_url

您的回调端点 URL。 更多信息.

user_agent_type

设备类型和浏览器。完整列表可在这里.

desktop

- 必填参数

本地化

将结果适配到特定的地理位置、域名和语言。

参数

说明

默认值

geo_location

该 送达至 位置。请参阅我们关于使用此参数的指南这里.

域名

Amazon 的域名本地化。可用域名完整列表见这里.

com

locale

Accept-Language 标头值，用于设置 Amazon 页面界面语言。 更多信息.

重要： 在大多数页面类型中，Amazon 会根据客户的配送地点来定制返回结果。因此，我们建议使用 geo_location 参数来设置您首选的配送地点。您可以阅读更多关于在 Amazon 中使用 geo_location 的内容这里.

结构化数据

下面可以找到一个 结构化输出示例 用于 amazon_sellers。请注意，目前我们只支持以下内容的已解析输出 desktop 设备类型。不过，没有明显理由用其他设备类型获取 seller 页面，因为卖家数据在所有设备上都完全相同。

Amazon_sellers 结构化输出

{
    "results": [
        {
            "content": {
                "url": "https://www.amazon.com/sp?seller=A151FB8X73UXPJ",
                "query": "A151FB8X73UXPJ",
                "rating": 4.5,
                "page_type": "Seller",
                "description": "服务至上！Gamer Girlz LLC 通过提供最快的服务和最高质量的产品，致力于让客户满意。每一笔订单都会精心包装，并附上特别感谢，感谢您选择 Gamer Girlz 为您提供您应得的一流购物体验！",
                "business_name": "Gamer Girlz",
                "recent_feedback": [
                    {
                        "feedback": "产品从未送达，而且非常非常贵。由于某种原因，不能退款。",
                        "rated_by": "By Juli on May 8, 2022.",
                        "rating_stars": 1
                    },
                    {
                        "feedback": "最喜欢的游戏",
                        "rated_by": "By DF on May 8, 2022.",
                        "rating_stars": 5
                    },
                    {
                        "feedback": "它运行得非常完美，我喜欢上面的游戏。",
                        "rated_by": "By John on May 8, 2022.",
                        "rating_stars": 5
                    },
                    {
                        "feedback": "我买到的所有游戏都发货超级快，而且状态极佳！我一定会再次从他们那里购买，并推荐给其他人！",
                        "rated_by": "By Brianna c. on May 6, 2022.",
                        "rating_stars": 5
                    },
                    {
                        "feedback": "他们发货很快，且提供了优质商品。我买的游戏还附带了真实性标签，以确保我购买的是正品。",
                        "rated_by": "By anonymous  on May 6, 2022.",
                        "rating_stars": 5
                    }
                ],
                "business_address": "1020 Michigan St. Sandpoint ID 83864 US",
                "parse_status_code": 12000,
                "feedback_summary_table": {
                    "counts": {
                        "30_days": 44,
                        "90_days": 146,
                        "all_time": 7857,
                        "12_months": 611
                    },
                    "neutral": {
                        "30_days": "5%",
                        "90_days": "2%",
                        "all_time": "2%",
                        "12_months": "1%"
                    },
                    "negative": {
                        "30_days": "7%",
                        "90_days": "7%",
                        "all_time": "3%",
                        "12_months": "8%"
                    },
                    "positive": {
                        "30_days": "89%",
                        "90_days": "91%",
                        "all_time": "95%",
                        "12_months": "91%"
                    }
                }
            },
            "created_at": "2022-05-09 06:57:47",
            "updated_at": "2022-05-09 06:57:50",
            "page": 1,
            "url": "https://www.amazon.com/sp?seller=A151FB8X73UXPJ",
            "job_id": "6929323518437886977",
            "status_code": 200,
            "parser_type": ""
        }
    ]
}

输出数据字典

HTML 示例

JSON 结构

该 amazon_sellers 结构化输出包含诸如 URL, query, rating等字段。下表展示了我们解析的每个字段的详细列表，以及对应的描述和数据类型。表中还包括一些元数据。

键

说明

类型

url

Amazon 卖家页面的 URL。

字符串

query

用于原始搜索词的 13 位卖家 ID。

字符串

rating

卖家的评分。

整数

page_type

Amazon 页面类型。

字符串

描述

关于卖家的简短描述。

字符串

seller_name

卖家名称。

字符串

business_name

企业名称。

字符串

recent_feedback

包含最近反馈条目及其各自详情的列表。

数组

business_address

企业地址。

字符串

parse_status_code

解析任务的状态码。你可以查看所描述的解析器状态码这里.

整数

feedback_summary_data

包含有关卖家评分的可用详情列表。

对象

created_at

抓取任务创建时的时间戳。

timestamp

updated_at

抓取任务完成时的时间戳。

timestamp

job_id

与抓取任务关联的任务 ID。

整数

status_code

抓取任务的状态码。你可以查看所描述的抓取器状态码这里.

整数

parser_type

用于解析数据的解析器类型。

字符串

在以下部分中，当某种结果类型包含多个项目时，解析后的 JSON 代码片段会被缩短。

反馈汇总数据

该 feedback_summary_data 是针对 Amazon 市场中某个特定商品列表提供的反馈统计信息。反馈汇总数据包含不同时间段的信息，帮助卖家和分析人员跟踪客户情绪随时间的变化。

...               
 "feedback_summary_data": {
    "1_month": {
        "count": 3,
        "1_star": "33%",
        "2_star": "0%",
        "3_star": "0%",
        "4_star": "33%",
        "5_star": "33%"
    },
    "3_month": {
        "count": 10,
        "1_star": "10%",
        "2_star": "0%",
        "3_star": "0%",
        "4_star": "20%",
        "5_star": "70%"
    },
 ...
}
...

键 (content.feedback_summary_data)

说明

类型

1_month/3_month/12_month/all_time

用于按定义的时间范围查看评分信息的筛选器。

对象

1_month-all_time.1_star-5_star

某个特定时间范围内可用评论的数量。

整数

百分比分布

某个特定时间范围内各星级评分的百分比分布。

百分比

最后更新于 1个月前

这有帮助吗？