Web Scraper API

Aprende a usar Web Scraper API y a extraer cualquier sitio web público que necesites. Encuentra ejemplos de código, uso de parámetros, localización, destinos y mucho más.

Web Scraper API es una solución todo en uno de recopilación de datos web diseñada para extraer datos en tiempo real a escala de cualquier sitio web público. Cubre cada etapa del web scraping, desde rastrear URL y evitar bloqueos de IP hasta el análisis de datos y la entrega al almacenamiento que prefieras, para que no tengas que gestionar proxies, desbloqueo o infraestructura.

La herramienta está diseñada para cumplir con estándares de seguridad empresariales, incluido el cumplimiento de SOC 2 Tipo II, y ofrece una infraestructura de rápida adaptación que se ajusta dinámicamente a los sitios web objetivo para garantizar altas tasas de éxito y una extracción de datos confiable en motores de búsqueda, sitios de comercio electrónico, plataformas de viajes y más.

Primeros pasos

Crea tus credenciales de usuario de API: Regístrate para una prueba gratuita o compra el producto en el panel de Oxylabs para crear tus credenciales de usuario de API (USERNAME y PASSWORD).

Si necesitas más de un usuario de API para tu cuenta, contacta con nuestro soporte al cliente o envía un mensaje a nuestro soporte de chat en vivo 24/7.

Ejemplos de solicitudes

La API gestiona la rotación de proxies, los reintentos de solicitudes y la evasión antibots automáticamente como parte de su infraestructura integrada, por lo que una sola solicitud es suficiente para recuperar todos los datos estructurados.

A continuación encontrarás ejemplos de solicitudes cURL. Para ejemplos en otros lenguajes de programación, consulta las secciones correspondientes: Amazon, Google, Otros sitios web.

Amazon

curl 'https://realtime.oxylabs.io/v1/queries' \
--user "USERNAME:PASSWORD" \
-H "Content-Type: application/json" \
-d '{
        "source": "amazon_product",
        "query": "B07FZ8S74R",
        "geo_location": "90210",
        "parse": true
    }'

Google

Otro

Usamos el método de integración síncrona Realtime en nuestros ejemplos. Si deseas usar Proxy Endpoint o integración asíncrona Push-Pull consulta la métodos de integración sección.

17KB

amazon_product output example.json

Abrir

23KB

Generic URL output example.json

Abrir

Valores de parámetros de solicitud

1. source - Este parámetro establece el scraper que se utilizará para procesar tu solicitud.

2. URL o query - Proporciona el URL o query para el tipo de página que quieres extraer. Consulta la tabla a continuación y las subpáginas objetivo correspondientes para obtener una guía detallada sobre cuándo usar cada parámetro.

3. Opcionalmente, puedes incluir parámetros adicionales como geo_location, user_agent_type, parse (encuentra la lista de nuestros analizadores aquí), render y más para personalizar tu solicitud de scraping. Leer más: Funciones.

- parámetro obligatorio

Scraping con URL o entradas parametrizadas

Oxylabs admite dos grupos generales de entradas: URL y entradas parametrizadas como consultas, IDs de producto o de video. Objetivos genéricos que no tienen una fuente dedicada se pueden extraer con la fuente universal .

Objetivo	Fuente (URL de scraping)	Fuente (usando consulta, producto o ID de video)
Amazon	amazon	amazon_product, amazon_search, amazon_pricing, amazon_sellers, amazon_bestsellers
Google	google	google_search, google_ads, google_ai_mode, google_lens, google_maps, google_travel_hotels, google_trends_explore, google_shopping_product, google_shopping_search
Bing	bing	bing_search
YouTube	universal	youtube_search, youtube_search_max, youtube_video_trainability, youtube_download, youtube_transcript, youtube_subtitles, youtube_metadata, youtube_channel, youtube_autocomplete
ChatGPT	universal	chatgpt
Perplexity	universal	perplexity
Walmart	walmart	walmart_search, walmart_product
TikTok	universal	tiktok_shop_search, tiktok_shop_product
eBay	ebay	ebay_search, ebay_product
Etsy	etsy	etsy_search, etsy_product
Best Buy	universal	bestbuy_search, bestbuy_product
Bed Bath & Beyond	bedbathandbeyond	bedbathandbeyond_search, bedbathandbeyond_product
Bodega Aurrerá	bodegaaurrera	bodegaaurrera_search, bodegaaurrera_product
Instacart	instacart	instacart_search, instacart_product
Kroger	kroger	kroger_search, kroger_product
Lowe's	lowes	lowes_search, lowes_product
Publix	publix	publix_search, publix_product
Objetivo	target	target_search, target_product, target_category
Grainger	grainger	grainger_search, grainger_product
Costco	costco	costco_search, costco_product
Menards	menards	menards_search, menards_product
Petco	universal	petco_search
Staples	universal	staples_search
Allegro	universal	allegro_search, allegro_product
Idealo	universal	idealo_search
MediaMarkt	mediamarkt	mediamarkt_search, mediamarkt_product
Cdiscount	cdiscount	cdiscount_search, cdiscount_product
Alibaba	alibaba	alibaba_search, alibaba_product
AliExpress	aliexpress	aliexpress_search, aliexpress_product
IndiaMART	indiamart	indiamart_search, indiamart_product
Avnet	universal	avnet_search
Lazada	lazada	lazada_search, lazada_product
Rakuten	universal	rakuten_search
Tokopedia	universal	tokopedia_search
Flipkart	flipkart	flipkart_search, flipkart_product
MercadoLibre	universal	mercadolibre_search
Mercado Livre	universal	mercadolivre_search
Magazine Luiza	magazineluiza	magazineluiza_search, magazineluiza_product
Falabella	falabella	falabella_search, falabella_product
Dcard	universal	dcard_search
Airbnb	airbnb	airbnb_product
Zillow	zillow	El uso del query parámetro no es compatible
Otros sitios web	universal	El uso del query parámetro no es compatible

Si necesitas ayuda para hacer tu primera solicitud u optimizar tu configuración, nuestro equipo de soporte experto 24/7 está disponible a través del chat en vivo.

Pruebas mediante Scraper APIs Playground

Prueba Web Scraper API y OxyCopilot en el Scraper APIs Playground.

Pruebas mediante Postman

Comienza a usar nuestra API con Postman, una herramienta práctica para realizar solicitudes HTTP. Descarga nuestra colección de Postman de Web Scraper API e impórtala. Esta colección incluye ejemplos que demuestran la funcionalidad del scraper. Personaliza los ejemplos según tus necesidades o empieza a extraer datos de inmediato.

Para instrucciones paso a paso, mira nuestro videotutorial a continuación. Si eres nuevo en Postman, consulta esta breve guía.

Toda la información aquí contenida se proporciona "tal cual" y solo con fines informativos. No hacemos ninguna declaración y rechazamos toda responsabilidad con respecto a tu uso de cualquier información contenida en esta página. Antes de realizar actividades de scraping de cualquier tipo, debes consultar a tus asesores legales y leer cuidadosamente los términos de servicio del sitio web en particular o recibir una licencia de scraping.