Selenium

Integra Selenium con Oxylabs Residential Proxies para automatización del navegador y más. Guía de configuración en Python con Selenium Wire y ejemplos de código.

Selenium es una herramienta que ayuda a automatizar las interacciones del navegador web para pruebas de sitios web y más.

Para integrar Selenium con Oxylabs Residential Proxies, siga las instrucciones a continuación o vea este video tutorial:

Paso 1. Instalar Selenium Wire para ampliar los bindings de Python de Selenium porque usar el módulo predeterminado de Selenium para implementar proxies que requieren autenticación hace que todo el proceso sea complicado. Puedes hacerlo usando el pip comando: pip install selenium-wire

Otro paquete recomendado para esta integración es webdriver-manager. Es un paquete que simplifica la gestión de controladores binarios para diferentes navegadores. En este caso, no es necesario descargar manualmente una nueva versión de un controlador web después de cada actualización.

Puedes instalar el webdriver-manager usando el pip comando también: pip install webdriver-manager

Paso 2. Especifica las credenciales de tu cuenta para que los proxies funcionen:

USERNAME = "your_username"

PASSWORD = "your_password"

ENDPOINT = "pr.oxylabs.io:7777"

Necesitarás ajustaryour_username y your_password campos con el nombre de usuario y la contraseña de tu usuario de proxy.

Puedes crear y gestionar tus usuarios de proxy en nuestro panel de control.

Paso 3. Comprueba si el proxy está funcionando visitando ip.oxylabs.io. Si todo funciona correctamente, devolverá una dirección IP del proxy que estás usando.

intenta:
    driver.get("https://ip.oxylabs.io/")
    return f'\nYour IP is: {driver.find_element(By.CSS_SELECTOR, "pre").text}'
finally:
    driver.quit()

Código completo para Oxylabs Residential Proxies integración con Selenium:

from selenium.webdriver.common.by import By
from seleniumwire import webdriver
# Un paquete para tener un chromedriver siempre actualizado.
from webdriver_manager.chrome import ChromeDriverManager

USERNAME = "your_username"
PASSWORD = "your_password"
ENDPOINT = "pr.oxylabs.io:7777"

def chrome_proxy(user: str, password: str, endpoint: str) -> dict:
    wire_options = {
        "proxy": {
            "http": f"http://{user}:{password}@{endpoint}",
            "https": f"https://{user}:{password}@{endpoint}",
        }
    }

    return wire_options

def execute_driver():
    options = webdriver.ChromeOptions()
    options.add_argument('--headless')
    proxies = chrome_proxy(USERNAME, PASSWORD, ENDPOINT)
    driver = webdriver.Chrome(
    ChromeDriverManager(driver_version='<VERSION>').install(), options=options, seleniumwire_options=proxies
    )
    intenta:
        driver.get("https://ip.oxylabs.io/")
        return f'\nYour IP is: {driver.find_element(By.CSS_SELECTOR, "pre").text}'
    finally:
        driver.quit()


if __name__ == '__main__':
    print(execute_driver())

Si quieres aprender más sobre web scraping con Selenium, lee nuestro artículo del blog.

Encuentra la publicación original del blog sobre la integración con Selenium aquí.