Selenium

Selenium es una herramienta que ayuda a automatizar interacciones con navegadores web para pruebas de sitios y más.

Para integrar Selenium con Oxylabs Residential Proxies, siga las instrucciones a continuación o mire este tutorial en video:

Paso 1. Instalar Selenium Wire para ampliar los enlaces de Python de Selenium porque usar el módulo Selenium por defecto para implementar proxies que requieren autenticación complica todo el proceso. Puedes hacerlo usando el pip comando: pip install selenium-wire

Otro paquete recomendado para esta integración es webdriver-manager. Es un paquete que simplifica la gestión de controladores binarios para diferentes navegadores. En este caso, no es necesario descargar manualmente una nueva versión de un controlador web después de cada actualización.

Puedes instalar el webdriver-manager usando el pip comando también: pip install webdriver-manager

Paso 2. Especifica las credenciales de tu cuenta para que los proxies funcionen:

USERNAME = "your_username"

PASSWORD = "your_password"

ENDPOINT = "pr.oxylabs.io:7777"

Necesitarás ajustaryour_username y your_password campos con el nombre de usuario y la contraseña de tu usuario de proxy.

Puedes crear y gestionar tus usuarios proxy en nuestro panel de control.

Paso 3. Comprueba si el proxy funciona visitando ip.oxylabs.io. Si todo funciona correctamente, devolverá una dirección IP del proxy que estás usando.

try:
    driver.get("https://ip.oxylabs.io/")
    return f'\nYour IP is: {driver.find_element(By.CSS_SELECTOR, "pre").text}'
finalmente:
    driver.quit()

Código completo para la integración de Oxylabs Residential Proxies con Selenium:

from selenium.webdriver.common.by import By
from seleniumwire import webdriver
# Un paquete para mantener chromedriver siempre actualizado.
from webdriver_manager.chrome import ChromeDriverManager

USERNAME = "your_username"
PASSWORD = "your_password"
ENDPOINT = "pr.oxylabs.io:7777"

def chrome_proxy(user: str, password: str, endpoint: str) -> dict:
    wire_options = {
        "proxy": {
            "http": f"http://{user}:{password}@{endpoint}",
            "https": f"https://{user}:{password}@{endpoint}",
        }
    }

    return wire_options

def execute_driver():
    options = webdriver.ChromeOptions()
    options.add_argument('--headless')
    proxies = chrome_proxy(USERNAME, PASSWORD, ENDPOINT)
    driver = webdriver.Chrome(
    ChromeDriverManager(driver_version='<VERSION>').install(), options=options, seleniumwire_options=proxies
    )
    try:
        driver.get("https://ip.oxylabs.io/")
        return f'\nYour IP is: {driver.find_element(By.CSS_SELECTOR, "pre").text}'
    finalmente:
        driver.quit()


if __name__ == '__main__':
    print(execute_driver())

Si quieres aprender más sobre web scraping con Selenium, lee nuestro artículo del blog.

Encuentra la publicación original del blog de integración de Selenium aquí.