Web Scraper API

Aprende a usar Web Scraper API y extrae datos de cualquier sitio web público que necesites. Encuentra ejemplos de código, uso de parámetros, localización, objetivos y mucho más.

Web Scraper API es una solución integral de recopilación de datos web diseñada para extraer datos en tiempo real a gran escala de cualquier sitio web público. Cubre todas las etapas del web scraping, desde rastrear URLs y evitar bloqueos de IP hasta el análisis de datos y la entrega a tu almacenamiento preferido, para que no tengas que gestionar proxies, desbloqueo ni infraestructura.

La herramienta está diseñada para cumplir con los estándares de seguridad empresarial, incluida la conformidad con SOC 2 Type II, y ofrece una infraestructura de rápida adaptación que se ajusta dinámicamente a los sitios web objetivo para garantizar altas tasas de éxito y una extracción de datos fiable en motores de búsqueda, sitios de comercio electrónico, plataformas de viajes y más.

Primeros pasos

Crea tus credenciales de usuario de API: Regístrate para una prueba gratuita o compra el producto en el panel de control de Oxylabs para crear tus credenciales de usuario de API (USERNAME y PASSWORD).

Si necesitas más de un usuario de API para tu cuenta, contacta con nuestro servicio de atención al cliente o escribe a nuestro soporte por chat en vivo 24/7.

Solicitar ejemplos

La API gestiona automáticamente la rotación de proxies, los reintentos de solicitudes y el bypass anti-bot como parte de su infraestructura integrada, por lo que una sola solicitud basta para recuperar todos los datos estructurados.

A continuación, encontrarás solicitudes de ejemplo en cURL. Para ejemplos en otros lenguajes de programación, consulta las secciones correspondientes: Amazon, Google, Otros sitios web.

Amazon

curl 'https://realtime.oxylabs.io/v1/queries' \
--user "USERNAME:PASSWORD" \
-H "Content-Type: application/json" \
-d '{
        "source": "amazon_product",
        "query": "B07FZ8S74R",
        "geo_location": "90210",
        "parse": true
    }'

Google

Otro

Usamos el método de integración sincronía Realtime en nuestros ejemplos. Si deseas usar Proxy Endpoint o la integración asincrónica Push-Pull consulta la sección de métodos de integración .

17KB

amazon_product output example.json

Abrir

23KB

Generic URL output example.json

Abrir

Valores de los parámetros de la solicitud

1. source - Este parámetro define el scraper que se usará para procesar tu solicitud.

2. URL o query - Proporciona el URL o query para el tipo de página que quieres extraer. Consulta la tabla siguiente y las subpáginas de destino correspondientes para obtener orientación detallada sobre cuándo usar cada parámetro.

3. Opcionalmente, puedes incluir parámetros adicionales como geo_location, user_agent_type, parse (encuentra la lista de nuestros parsers aquí), render y más para personalizar tu solicitud de scraping. Lee más: Funciones.

- parámetro obligatorio

Extracción con URLs o entradas parametrizadas

Oxylabs admite dos grupos generales de entradas: URLs y entradas parametrizadas como consultas, IDs de producto o video. Los destinos genéricos que no tienen un source dedicado pueden extraerse con universal .

Destino	Source (Extracción de URL)	Source (Usando Query, Product o Video ID)
Amazon	amazon	amazon_product, amazon_search, amazon_pricing, amazon_sellers, amazon_bestsellers
Google	google	google_search, google_ads, google_ai_mode, google_lens, google_maps, google_travel_hotels, google_trends_explore, google_shopping_product, google_shopping_search
Bing	bing	bing_search
YouTube	universal	youtube_search, youtube_search_max, youtube_video_trainability, youtube_download, youtube_transcript, youtube_subtitles, youtube_metadata, youtube_channel, youtube_autocomplete
ChatGPT	universal	chatgpt
Perplexity	universal	perplexity
Walmart	walmart	walmart_search, walmart_product
TikTok	universal	tiktok_shop_search, tiktok_shop_product
eBay	ebay	ebay_search, ebay_product
Etsy	etsy	etsy_search, etsy_product
Best Buy	universal	bestbuy_search, bestbuy_product
Bed Bath & Beyond	bedbathandbeyond	bedbathandbeyond_search, bedbathandbeyond_product
Bodega Aurrerá	bodegaaurrera	bodegaaurrera_search, bodegaaurrera_product
Instacart	instacart	instacart_search, instacart_product
Kroger	kroger	kroger_search, kroger_product
Lowe's	lowes	lowes_search, lowes_product
Publix	publix	publix_search, publix_product
Destino	target	target_search, target_product, target_category
Grainger	grainger	grainger_search, grainger_product
Costco	costco	costco_search, costco_product
Menards	menards	menards_search, menards_product
Petco	universal	petco_search
Staples	universal	staples_search
Allegro	universal	allegro_search, allegro_product
Idealo	universal	idealo_search
MediaMarkt	mediamarkt	mediamarkt_search, mediamarkt_product
Cdiscount	cdiscount	cdiscount_search, cdiscount_product
Alibaba	alibaba	alibaba_search, alibaba_product
AliExpress	aliexpress	aliexpress_search, aliexpress_product
IndiaMART	indiamart	indiamart_search, indiamart_product
Avnet	universal	avnet_search
Lazada	lazada	lazada_search, lazada_product
Rakuten	universal	rakuten_search
Tokopedia	universal	tokopedia_search
Flipkart	flipkart	flipkart_search, flipkart_product
MercadoLibre	universal	mercadolibre_search
Mercado Livre	universal	mercadolivre_search
Magazine Luiza	magazineluiza	magazineluiza_search, magazineluiza_product
Falabella	falabella	falabella_search, falabella_product
Dcard	universal	dcard_search
Airbnb	airbnb	airbnb_product
Zillow	zillow	Usar query el parámetro no es compatible
Otros sitios web	universal	Usar query el parámetro no es compatible

Si necesitas ayuda para hacer tu primera solicitud u optimizar tu configuración, nuestro equipo de expertos de soporte 24/7 está disponible por chat en vivo.

Pruebas mediante Scraper APIs Playground

Prueba Web Scraper API y OxyCopilot en el Scraper APIs Playground.

Pruebas mediante Postman

Empieza a usar nuestra API con Postman, una práctica herramienta para hacer solicitudes HTTP. Descarga nuestra colección de Postman de Web Scraper API e impórtala. Esta colección incluye ejemplos que muestran la funcionalidad del scraper. Personaliza los ejemplos según tus necesidades o empieza a extraer datos de inmediato.

Para instrucciones paso a paso, mira nuestro videotutorial a continuación. Si eres nuevo en Postman, consulta esta breve guía.

Toda la información aquí se proporciona "tal cual" y solo con fines informativos. No hacemos ninguna declaración y rechazamos toda responsabilidad respecto al uso que hagas de cualquier información contenida en esta página. Antes de realizar cualquier tipo de scraping, debes consultar a tus asesores legales y leer detenidamente los términos de servicio del sitio web correspondiente o recibir una licencia de scraping.