Instruções do navegador (Beta)

Com o Web Unblocker, você pode definir instruções do navegador ao criar uma tarefa para um processo de coleta de dados mais fluido.

Ao usar Instruções Personalizadas do Navegador, você pode definir suas próprias instruções específicas do navegador que são executadas ao renderizar JavaScript.

Gerar Gerar instruções do navegador automaticamente no Web Scraper API Playground no painel da Oxylabs. Configure ações do navegador, teste-as e exporte as instruções geradas em formato JSON.

Como usar?

Para usar instruções do navegador, forneça um conjunto de browser_instructions ao criar uma tarefa.

Digamos que você queira pesquisar o termo pizza boxes em um site.

Um exemplo de parâmetros da tarefa seria o seguinte:

curl -k -x https://unblock.oxylabs.io:60000 \
-U 'USERNAME:PASSWORD' \
'https://www.ebay.com' \
-H 'x-oxylabs-render: html' \
-H "x-oxylabs-browser-instructions: [{\"type\":\"input\",\"value\":\"pizza boxes\",\"selector\":{\"type\":\"xpath\",\"value\":\"\/\/input[@class='gh-tb ui-autocomplete-input']\"}},{\"type\":\"click\",\"selector\":{\"type\":\"xpath\",\"value\":\"\/\/input[@type='submit']\"}},{\"type\":\"wait\",\"wait_time_s\":5}]"

Etapa 1. Você deve fornecer o x-oxylabs-render: html parâmetro.

Etapa 2. As instruções do navegador devem ser descritas no campo x-oxylabs-browser_instructions .

As instruções do navegador fornecidas como valor do cabeçalho devem estar escapadas em JSON e não conter espaços extras.

As instruções de exemplo acima especificam que o objetivo é inserir um termo de pesquisa pizza boxes em um campo de pesquisa, clicar no botão pesquisar e esperar 5 segundos para o conteúdo carregar.

O resultado coletado deve ser o seguinte:

<!doctype html><html>
Conteúdo após executar as instruções      
</html>

O HTML coletado deve ser assim:

Obtendo recursos do navegador

Fornecemos uma instrução independente do navegador para obter recursos do navegador.

A função é definida aqui:

Usando fetch_resource resultará na tarefa retornando a primeira ocorrência de um recurso Fetch/XHR que corresponda ao formato fornecido, em vez do HTML que está sendo alvo.

Digamos que queremos direcionar um recurso GraphQL que é obtido ao visitar uma página de produto organicamente no navegador. Forneceremos as informações da tarefa assim:

curl -k -x https://unblock.oxylabs.io:60000 \
-U 'USERNAME:PASSWORD' \
'https://www.example.com/product-page/123' \
-H 'x-oxylabs-render: html' \
-H "x-oxylabs-browser-instructions: [{\"type\": \"fetch_resource\",\"filter\": \"\/graphql\/product-info\/123\"}]"

Essas instruções resultarão em um resultado assim:

{"product_id": 123, "description": "", "price": 456}

Lista de instruções de navegador suportadas

Lista de instruções

Códigos de status

Veja nossos códigos de resposta descritos aqui. Os códigos de status em relação à validação das instruções estão documentados aqui.

Anteriorrenderização de JavaScript PróximoLista de instruções

Atualizado há 1 mês

Isto foi útil?