For the complete documentation index, see llms.txt. This page is also available as Markdown.

Registro de alterações

Acompanhe as últimas atualizações de produtos da Oxylabs, lançamentos de recursos e melhorias. Fique por dentro das novidades sobre nossas ferramentas e documentação.

Melhorias no fluxo de recarga

Recargas para Residential Proxies, Mobile Proxies, Datacenter Proxies (por GB), Web Unblocker, e Web Scraper API não estão mais restritas a valores fixos. Agora você pode inserir qualquer valor dentro do intervalo permitido pelo seu plano, em vez de escolher de uma lista predefinida.

API do Dashboard da Oxylabs

Apresentando Dashboard API para acessar programaticamente suas estatísticas de uso de produtos da Oxylabs Datacenter Proxies (DC) e Headless Browser (HB) com relatórios automatizados e monitoramento de uso em tempo real sem a necessidade de acessar diretamente o dashboard da Oxylabs.

As solicitações da API passam por um caminho base e têm dois endpoints que retornam com o produto Descoberta de instâncias e Estatísticas de uso. Confira a documentação da Dashboard API para informações detalhadas.

Suporte ao protocolo HTTP/3

O protocolo HTTP/3 agora é suportado por Residential e Mobile Proxies. O acesso está disponível por meio de um endpoint SOCKS5 dedicado com UDP suporte.

Controle de mudança de IP da sessão

Residential Proxies e Mobile Proxies agora oferecem suporte a um novo modelo de sessão sticky via sessid_oneip, que permite manter o mesmo IP enquanto o nó de saída original permanecer disponível, até a duração definida da sessão, sem atribuir um novo IP após a expiração da sessão.

Novas localizações de proxy

Novas localizações foram adicionadas em vários produtos de proxy self-service:

Segmentação por cidade e estado para o Headless Browser

Agora você pode definir a geolocalização das suas sessões de Headless Browser no nível de cidade ou estado. Os novos parâmetros incluem p_city para cidade e p_state para segmentação por estado ou região.

Fluxo aprimorado de upgrade de proxy

Agora você pode fazer upgrade de Dedicated ISP, ISP, Datacenter (por IP), e Dedicated Datacenter Proxy planos a partir de apenas 5 IPs para faixas entre 0 e 100 (anteriormente, requisito mínimo de 20 IPs).

O resumo do upgrade agora também fornece mais detalhes, incluindo detalhamentos de desconto e datas exatas de cobrança para facilitar o escalonamento.

Parâmetro Google Domain não está mais disponível

Web Scraper API domain parâmetro para google sources não está mais disponível. Para localizar suas pesquisas, use o geo_location parâmetro. Para mais detalhes, confira nossas geo_location estruturas de parâmetros aqui.

Renomeando Unblocking Browser

Estamos fazendo uma mudança no nome do nosso produto: Unblocking Browser agora é Headless Browser. Esta é apenas uma mudança de nome, e todos os recursos, funções e integrações principais permanecerão os mesmos, de acordo com os fluxos de trabalho preexistentes.

Novos provedores de ASN

IPs da Cox e da Deutsche Telekom agora estão incluídos nos pools de ISP Proxy e Dedicated ISP Proxy . Usuários de Dedicated ISP Proxy podem escolher seu provedor ASN premium preferido diretamente no dashboard da Oxylabs.

Dedicated ISP Proxies

Dedicated ISP Proxies agora estão disponíveis no dashboard self-service. Esse novo tipo de proxy fornece IPs totalmente dedicados e estáticos, obtidos de provedores ISP premium, e a capacidade de escolher livremente seus ASNs preferidos. Dedicated ISP Proxies oferecem velocidade de alto nível, conexões estáveis, máxima personalização e sessões de duração ilimitada.

Saiba mais na documentação de Dedicated ISP Proxies.

Filtros avançados para Residential Proxies

Residential Proxies oferecem suporte a dois filtros avançados que dão a você mais controle:

  • Plataforma (SO)pl parâmetro para selecionar o sistema operacional (por exemplo, Windows, iOS) do proxy residencial para a conexão TCP. Isso permite melhorar suas taxas de sucesso de scraping ao corresponder suas impressões digitais HTTP e TCP.

  • Versão do IP – você pode receber apenas endereços IPv4 ou IPv6 de todo o pool de Residential Proxies usando o ipversion-4 ou ipversion-6 parâmetro.

Agregador de resultados

Usuários do Web Scraper API agora podem agrupar vários resultados de scraping em grandes arquivos em lote para otimizar o armazenamento usando o Agregador de resultados. Crie um agregador personalizado por meio do /v1/aggregators endpoint e encaminhe jobs para ele adicionando o aggregate_name parâmetro aos payloads de solicitação de scraping.

Inspeção de sessão do Unblocking Browser

O Unblocking Browser agora oferece suporte à inspeção visual em tempo real por meio de uma Ferramenta de inspeção de sessão. Adicione o_vnc=true ao seu endpoint de conexão (por exemplo, wss://user:pass@ubc.oxylabs.io?o_vnc=true) para abrir uma visualização gráfica ao vivo do navegador headless e interagir com ele diretamente.

Novas localizações de Datacenter Proxy

Cinco novas localizações de Datacenter proxy agora estão disponíveis para usuários por tráfego (por GB): Letônia, Eslovênia, Eslováquia, Grécia, e Áustria. As solicitações agora podem ser roteadas por esses países para otimizar cobertura e desempenho.

Fonte de scraping de Autocomplete do YouTube

O Web Scraper API agora pode recuperar sugestões de termos de busca do YouTube com a nova fonte youtube_autocomplete . Ela permite que os usuários descubram palavras-chave relacionadas para qualquer consulta de busca, que então podem ser usadas com a fonte youtube_search para descobrir vídeos mais relevantes.

Fontes do Google Shopping atualizadas

As fontes do Google Shopping agora usam o sistema baseado em token, substituindo o fluxo de trabalho de product_id . google_shopping_search (com render habilitado) agora fornece um token necessário para solicitações de google_shopping_product .

Além disso, google_shopping_pricing não é mais compatível como fonte independente. Para extrair dados de preços , use a google_shopping_product fonte.

Por fim, google_shopping_product agora pode expandir o painel "More Shops" para acessar listagens adicionais enviando o job com render: 'html' (apenas a primeira expansão está disponível).

Presets de parser auto-recuperáveis

Os usuários agora podem ativar a autorrecuperação para seus presets de parser definindo "self_heal": true na configuração do preset. Esse recurso permite que a Oxylabs ajuste automaticamente suas instruções de parser quando um preset de parser começa a falhar devido a mudanças no site de destino.

Canal do YouTube

Os usuários agora podem fazer scraping de dados de canais do YouTube com a nova fonte dedicada – youtube_channel. Ela permite recuperar todos os principais dados do canal, incluindo contagens de inscritos, vídeos e visualizações, metadados gerais e uma lista de seus vídeos, fornecendo o channel_handle.

Legendas do YouTube

O Web Scraper API agora oferece suporte à extração de legendas e closed captions (CC) do YouTube com uma nova fonte – youtube_subtitles. Os usuários agora podem recuperar legendas auto_generated e user_provided ao fornecer um ID de vídeo do YouTube e o código de idioma das legendas.

Faça scraping de Google AI Overviews com o Web Scraper API

As fontes google_search e google_ads agora retornam resultados de AI Overviews junto com dados SERP padrão em todas as regiões disponíveis, com suporte a múltiplos blocos de IA por resposta, incluindo “People also ask” e “Things to know.”

Novas fontes dedicadas disponíveis para o Web Scraper API

Adicionados 3 novos alvos dedicados para o Web Scraper API: perplexity, chatgpt, google_ai_mode. Esses alvos permitem a extração de respostas geradas por LLM a partir de interfaces de busca com IA. Veja todos os alvos disponíveis em esta tabela.

Saída em Markdown

Agora você pode solicitar a saída em Markdown além de HTML ou JSON parseado. Para obter o conteúdo em markdown na resposta, defina "markdown": true na sua solicitação.

Saída em múltiplos formatos em uma única resposta de API

Adicionada

Alterado

  • As fontes type O parâmetro de URL agora oferece suporte a uma lista de tipos de resultado (parsed, markdown, png, xhr, raw) em vez de um único valor

Presets de parser

Adicionada a capacidade de criar, reutilizar, e gerenciar personalizados presets de parser por meio do Web Scraper API. Os presets de parser são hospedados em nosso sistema, permitindo que você os use facilmente em vários jobs de scraping. Além disso, você pode monitorar métricas de uso e desempenho de cada preset.

Alertas de uso para Datacenter Proxies por tráfego

Clientes que usam Datacenter Proxies com uma assinatura baseada em tráfego agora receberão notificações por e-mail quando 80% e 100% do tráfego mensal forem usados. Visite My AccountNotificações por e-mail no dashboard para selecionar os limites sobre os quais você gostaria de ser notificado, adicionar vários e-mails de destinatários ou desativar totalmente essas notificações.

AI Studio – 5º aplicativo lançado

AI Studio agora conta com 5 ferramentas orientadas por IA que você pode controlar usando prompts em linguagem natural. Cada aplicativo automatiza uma tarefa específica de web scraping, eliminando os pontos de dor típicos. Nosso toolkit inclui AI-Crawler, AI-Scraper, Browser Agent, AI-Search, e o recém-adicionado AI-Map.

Cobrança baseada em recursos para o Web Scraper API

Com a cobrança baseada em recursos, o preço agora se adapta à complexidade do scraping, oferecendo tarifas diferentes com base nos requisitos de renderização e no tipo de alvo. Além disso, nossa duração do teste gratuito agora é ilimitada com até 2.000 resultados para testar nosso produto.

Modelos de nomenclatura de arquivos para Cloud Storage

Adicionado suporte para modelos personalizados de nomenclatura de arquivos ao salvar resultados em Cloud Storage. Agora você pode usar parâmetros de job enviados e job_info variáveis para definir nomes de arquivos e caminhos de diretório. Isso torna muito mais fácil organizar e identificar seus arquivos.

Fonte de scraping do Google Reverse Image Search não está mais disponível

A fonte Google Reverse Image Search (google_images) não é mais compatível devido à descontinuação do recurso pelo Google. Agora você pode usar a fonte Google Lens (google_lens ) em vez disso, que oferece um serviço equivalente e segue os mesmos formatos de entrada e saída.

Captura de requisições XHR

O Web Scraper API agora oferece suporte à captura de requisições de rede (Fetch/XHR) para facilitar o scraping de conteúdo dinâmico de sites com muito JavaScript. Defina o xhr parâmetro como true para extrair dados diretamente das respostas de API em vez de analisar HTML.

Alibaba Cloud OSS e outros armazenamentos compatíveis com S3

O Web Scraper API agora oferece suporte à Alibaba Cloud Object Storage Service e outras configurações de armazenamento compatíveis com S3 . Para salvar resultados de scraping nesses buckets, defina storage_type como s3_compatible e forneça seu storage_url.

Adicionada sort_by e refinements parâmetros à nossa fonte Amazon Search para um scraping mais preciso com base em preço, marca, cor e outros filtros.

Instruções de navegador com tecnologia de IA

Os usuários agora podem gerar instruções de navegador usando IA no Playground do Web Scraper API em nosso dashboard. Em vez de selecionar manualmente cada ação, você pode simplesmente inserir um prompt, e as instruções serão geradas automaticamente.

documentação do Unblocking Browser

Unblocking Browser agora disponível na documentação:

Ver documentação

Encontre todas as informações de configuração sobre CAPTCHA Solving Events, Device Type e muito mais em um só lugar.

Saiba mais sobre Unblocking Browser

High-Bandwidth Proxies para download de vídeo

Apresentando High-Bandwidth Proxies - extraia dados de vídeo e áudio em escala com largura de banda dedicada de 200+ Gbps, rotação inteligente de IP e conexões de longa duração criadas para downloads ininterruptos e de alto volume. Totalmente compatível com yt-dlp e outras bibliotecas open source, fáceis de integrar e otimizadas para velocidade, estabilidade e escala com um nó de saída proxy dedicado.

Scraping de vídeo e dados prontos para IA via API

Apresentando Video Data API - infraestrutura pronta para IA para encontrar vídeos, canais e playlists relevantes, baixar arquivos de vídeo/áudio, extrair transcrições e enriquecer tudo com metadados - sem precisar criar ou manter seus próprios scrapers.

Conjuntos de dados de vídeo do YouTube éticos

Acesse conjuntos de dados de vídeo de alta qualidade, aprovados por criadores com ricos metadados, transcrições e resolução 720p+ - prontos para treinar e ajustar modelos de IA. Sem scraping, sem dores de cabeça jurídicas, apenas dados de vídeo limpos e escaláveis.

Melhorias na documentação

A documentação da Oxylabs agora reúne tudo sobre configuração e solução de problemas em um só lugar:

Dados limpos com a E-Commerce Web Data Platform

Apresentando o novo produto da Oxylabs - E-Commerce Web Data Platform. Com esta plataforma, você poderá obter dados limpos da Walmart, Amazon, Shopee e outros grandes marketplaces.

Lançamento de novo produto - Unblocking Browser

Lançamos o Unblocking Browser, um sem interface gráfica, totalmente gerenciado navegador que imita o comportamento real do usuário para lidar com anti-bots e CAPTCHAs automaticamente e contornar sites complexos, pesados em JavaScript com facilidade.

30 novas fontes parametrizadas para Web Scraper API

Web Scraper API agora oferece suporte a 30 novas fontes parametrizadas - selecione parâmetros como termo de pesquisa, ID da loja ou CEP e automatize a construção da sua solicitação.

Notificações por e-mail sobre limite de uso para Web Scraper API e Web Unblocker

Agora você pode configurar alertas por e-mail para ser notificado quando seu Web Scraper API ou Web Unblocker uso atingir 80% e/ou 100% do limite da sua assinatura mensal.

Atualização do esquema de resposta do Google AI Overviews

Visão geral de IA do Google estrutura de resposta agora oferece suporte a vários blocos de Visão geral de IA em uma única resposta. Antes limitado a um único objeto, o esquema agora retorna um array de objetos de Visão geral de IA, garantindo que você capture todo o conteúdo gerado por IA dos resultados da pesquisa do Google.

Melhoria no esquema de pesquisas relacionadas do Google

Melhoramos Google Web Search esquema de pesquisas relacionadas com rastreamento de posição mais preciso para vários blocos de pesquisas relacionadas. Agora você pode obter resultados detalhados de pesquisas relacionadas, específicos por posição, diretamente nos dados analisados.

biblioteca de prompts e amostras de código do OxyCopilot

Lançamos o a biblioteca de prompts do OxyCopilot com prompts de IA prontos para usar e amostras de códigopara tarefas de scraping e parsing. Agora os usuários podem seguir guias passo a passo para gerar solicitações para alvos específicos e ver exemplos de dados analisados produzidos pelo OxyCopilot.

Extração multimodal de dados de vídeo

Web Scraper API agora oferece suporte a extração multimodal de dados do YouTube com quatro novas fontes: youtube_search, youtube_download, youtube_transcripts, e youtube_metadata. Os usuários agora podem recuperar legendas vídeo, áudio, transcrições e metadados para aplicações de IA e análises avançadas.

Novos endpoints para o Scheduler da Web Scraper API

Adicionamos dois novos endpoints ao Scheduler para melhor visibilidade dos jobs agendados. Agora os usuários podem recuperar de qualquer agendamento histórico de execuções (/runs) e listas de jobs executados (/jobs).

Proxies: novos países adicionados

  • Proxies da Bélgica e do Canadá agora disponíveis para compra via dashboard para ISP Proxies.

  • Proxies da Itália, Singapura e Polônia agora disponíveis para Datacenter Proxies.

  • locais da Itália, Singapura, Espanha e Polônia agora disponíveis para Dedicated Datacenter Proxies.

Instruções de navegador sem código

Agora os usuários podem criar instruções de navegador em algumas etapas simples no Playground do Web Scraper API em nosso dashboard, eliminando a necessidade de codificação manual - configure ações, gere JSON estruturado e exporte-o para uso posterior.

Defina a moeda ao fazer scraping na Amazon

Agora você pode especificar a moeda ao fazer scraping das páginas de produto, pesquisa, preços e mais vendidos da Amazon! Basta adicionar o context:currency parâmetro para definir a moeda do preço. Encontre os valores disponíveis aqui ou consulte as respectivas páginas da documentação da Amazon.

Alertas de uso para Residential e Mobile Proxies

Mantenha-se informado e evite interrupções no serviço. Agora você pode receber notificações por e-mail quando estiver se aproximando do limite da assinatura mensal para seus Residential e Mobile Proxies. Para ativar ou desativar esse recurso, basta ir para My Account > Notificações por e-mail no seu dashboard.

Dashboard: transferir a propriedade da equipe

Agora você pode transferir a propriedade da equipe em três etapas pelo dashboard em "Minha conta" -> "Equipe": selecione o novo proprietário, confirme a transferência e faça com que o novo proprietário aceite o convite.

Mais recursos de localização para Kroger

Agora você pode definir um delivery_zip código para Kroger para especificar locais de entrega precisos e usar o fulfillment_type parâmetro para escolher o método de pedido preferido, incluindo ship, pickup, delivery, ou in_store.

5 IPs de Datacenter grátis

Todas as novas inscrições agora recebem 5 IPs de datacenter grátis para testar o serviço – sem cartão de crédito necessário. Cadastre-se agora ou confira nossa documentação para começar.

Atualizado

Isto foi útil?