Proxies residenciales
Mantenga su cliente HTTP, navegador o rastreador. Envía solicitudes públicas de la web elegibles a través de un punto final de proxy residencial, con solicitudes rotativas por defecto y sesiones cortas y pegajosas cuando la continuidad es importante.
Adjunta al comprador
Proxies residenciales proporcionan la ruta de red. No reemplazan el cliente de solicitud, la automatización del navegador, la lógica del rastreador, los retries, el parser o el almacenamiento.
Elige el número Proxies residenciales
Mantenga el control del cliente HTTP, navegador o rastreador mientras WSA aplica la ruta residencial documentada y el comportamiento de la sesión.
Su cliente acepta un proxy HTTP, HTTPS o SOCKS5.
Quieres IPs residenciales rotativas o sesiones cortas y pegajosas.
Necesitas una selección documentada de país en el punto final del proxy.
Confirmación durante la evaluación
Confirme que cada fuente y uso previsto es elegible, luego defina las reglas conservadoras de solicitud, retentación, retención y acceso para su flujo de trabajo.
Revisar el país actual y la disponibilidad de la cuenta.
El equipo de ensayo de la prueba targets y el manejo de la respuesta.
Lea elAcuerdo de servicio.
Considere otro camino
Una API de solicitud/respuesta es la mejor opción cuando su equipo no quiere poseer el cliente o conexión de navegador HTTP saliente.
Control de conexión
Comience con un host de backconnect, luego seleccione autenticación, país, comportamiento de sesión y un formato de salida aceptado por su cliente.
Usarpaís = aleatoriopara cualquier país documentado disponible, o seleccione uno de los Estados Unidos, Gran Bretaña, Francia, Francia, CA, la Unión Europea y la República Dominicana.
Conecte con las credenciales de nombre de usuario y contraseña, o use una IP en lista blanca y su país de acogida documentado.
Generar salida de Host:port, HTTP, HTTPS o SOCKS5 de acuerdo con lo que su cliente HTTP, navegador o rastreador acepta.
Mantenga las credenciales en el lado del servidor. No coloque nombres de usuario, contraseñas o puntos finales generados por proxy en el código del navegador, repositorios públicos, registros o capturas de pantalla.
Rotation y continuidad
El acceso residencial está girando por defecto. Salga las opciones de sesión y rotación cuando las solicitudes no necesitan mantener la misma IP residencial.
Para las solicitudes independientes, omita los controles de sesión y deja que el punto final seleccione otra IP residencial.
Las entregas cortas y los flujos compactos de varios pasos.
Una ventana equilibrada para una identificación de sesión reutilizada.
La ventana de pegamento documentada máxima es de 10 minutos.
Integración de desarrolladores
Generar un punto final de proxy, almacenarlo como un secreto del lado del servidor y usarlo en un cliente HTTP, navegador o rastreador consciente de proxy. Su aplicación mantiene el control de las solicitudes, retemplajes, análisis y almacenamiento.
01 Construir el punto final primero
Seleccione las opciones específicas de la cuenta que necesita su cliente, y luego copie el punto final generado en una variable de entorno protegido.
import os
import requests
proxy_url = os.environ["WSA_RESIDENTIAL_PROXY_URL"]
response = requests.get(
"https://example.com/public-page",
proxies={"http": proxy_url, "https": proxy_url},
timeout=30,
)
response.raise_for_status()
print(response.text)export WSA_RESIDENTIAL_PROXY_URL="<GENERATED_PROXY_URL>"
curl --proxy "$WSA_RESIDENTIAL_PROXY_URL" \
--request GET "https://example.com/public-page"import { ProxyAgent, fetch } from "undici";
const proxyUrl = process.env.WSA_RESIDENTIAL_PROXY_URL;
if (!proxyUrl) throw new Error("Missing WSA_RESIDENTIAL_PROXY_URL");
const response = await fetch("https://example.com/public-page", {
dispatcher: new ProxyAgent(proxyUrl),
});
if (!response.ok) throw new Error("Target returned " + response.status);
console.log(await response.text());<?php
$proxyUrl = getenv("WSA_RESIDENTIAL_PROXY_URL");
$client = curl_init("https://example.com/public-page");
curl_setopt_array($client, [
CURLOPT_PROXY => $proxyUrl,
CURLOPT_RETURNTRANSFER => true,
CURLOPT_TIMEOUT => 30,
]);
$body = curl_exec($client);
if ($body === false) throw new RuntimeException(curl_error($client));
curl_close($client);
echo $body;package main
import (
"io"
"log"
"net/http"
"net/url"
"os"
"time"
)
func main() {
proxyURL, err := url.Parse(os.Getenv("WSA_RESIDENTIAL_PROXY_URL"))
if err != nil { log.Fatal(err) }
client := &http.Client{
Transport: &http.Transport{Proxy: http.ProxyURL(proxyURL)},
Timeout: 30 * time.Second,
}
response, err := client.Get("https://example.com/public-page")
if err != nil { log.Fatal(err) }
defer response.Body.Close()
body, err := io.ReadAll(response.Body)
if err != nil { log.Fatal(err) }
log.Print(string(body))
}import java.net.*;
import java.net.http.*;
import java.time.Duration;
public class ResidentialProxyExample {
public static void main(String[] args) throws Exception {
var address = new InetSocketAddress(
System.getenv("WSA_PROXY_HOST"),
Integer.parseInt(System.getenv("WSA_PROXY_PORT"))
);
var client = HttpClient.newBuilder()
.proxy(ProxySelector.of(address))
.authenticator(new Authenticator() {
protected PasswordAuthentication getPasswordAuthentication() {
return new PasswordAuthentication(
System.getenv("WSA_PROXY_USERNAME"),
System.getenv("WSA_PROXY_PASSWORD").toCharArray()
);
}
})
.connectTimeout(Duration.ofSeconds(30))
.build();
var request = HttpRequest.newBuilder()
.uri(URI.create("https://example.com/public-page"))
.GET()
.build();
var response = client.send(request, HttpResponse.BodyHandlers.ofString());
System.out.println(response.body());
}
}using System.Net;
var proxyUri = new Uri(
$"http://{Environment.GetEnvironmentVariable("WSA_PROXY_HOST")}:" +
$"{Environment.GetEnvironmentVariable("WSA_PROXY_PORT")}"
);
var proxy = new WebProxy(proxyUri) {
Credentials = new NetworkCredential(
Environment.GetEnvironmentVariable("WSA_PROXY_USERNAME"),
Environment.GetEnvironmentVariable("WSA_PROXY_PASSWORD")
)
};
using var client = new HttpClient(new HttpClientHandler { Proxy = proxy }) {
Timeout = TimeSpan.FromSeconds(30)
};
var body = await client.GetStringAsync(
"https://example.com/public-page"
);import { chromium } from "playwright";
const browser = await chromium.launch({
proxy: {
server: process.env.WSA_PROXY_SERVER,
username: process.env.WSA_PROXY_USERNAME,
password: process.env.WSA_PROXY_PASSWORD,
},
});
const page = await browser.newPage();
await page.goto("https://example.com/public-page");
console.log(await page.title());
await browser.close();Utilice el punto final generado donde sea que el cliente del lado del servidor acepte una configuración proxy.
Propiedad operativa
El punto final de proxy cambia la ruta de salida; no se hace cargo de la lógica de recogida ni de la calidad de los datos a continuación.
WebScrapingAPI
WebScrapingAPI opera el punto final de proxy residencial, la selección de red y el comportamiento de rotación o sesión configurado.
Su equipo
Su equipo opera el cliente HTTP, el navegador, el rastreador, la política de solicitud, retestes, análisis, almacenamiento y reglas de calidad a continuación.
Escoge
Seleccione un número público elegible target y defina su política de solicitud.
Configuración
Generar el punto final con autenticación, país y comportamiento de sesión.
Solicitud
Su cliente envía la solicitud a través del punto final de representación residencial.
El funcionamiento
Su equipo maneja las respuestas target, retemplajes, análisis, almacenamiento y controles de calidad.
Utilice el servicio sólo para páginas web públicas elegibles y revise los términos de la fuente, los requisitos aplicables y losAcuerdo de servicioantes de su utilización en producción.
Casos de uso
La ruta puede soportar la recogida de páginas públicas elegibles en estos patrones de solución. target la selección, la política de recogida, la extracción y el uso de los datos.
Selección de proxy
Los controles residenciales están documentados aquí. Confirme la disponibilidad, ubicaciones, autenticación y comportamiento de sesión de cualquier centro de datos o opción de ISP con WSA antes de elegir.
Decisión | Residencia | Centro de datos | Proveedor de servicios |
|---|---|---|---|
Identidad de la red | Posiciones de propiedad intelectual residenciales reales | Las IPs de origen de centros de datos | Las IP asociadas con el ISP |
Documentado aquí | Selección de país, autenticación, salida, rotación y ventanas pegajosas | Confirmar los controles disponibles | Confirmar los controles disponibles |
Continuidad | Rotando por defecto; pegajoso durante 3, 5 o 10 minutos | Confirmación de la oferta seleccionada | Confirmación de la oferta seleccionada |
Adjunta al comprador | Tu equipo es dueño del colector y necesita controles residenciales de enrutamiento | Evaluación de cuándo el target acepta el tráfico de origen del centro de datos | Evaluar cuándo un flujo de trabajo necesita una ruta asociada con el ISP |
Desliza horizontalmente para comparar los tres tipos de proxy.
Elige el Proxies residenciales cuando
su cliente proxy-consciente ya está trabajando, su equipo quiere poseer el comportamiento de la solicitud, y una ruta IP residencial real con rotación documentada o continuidad corta coincide con la carga de trabajo.
Orientación de precios
El precio de la vivienda por proxy se organiza en torno al volumen de tráfico y las asignaciones de los planes.
Camino de servicio propio
Crea una cuenta, genera el punto final y prueba los targets reales, países, comportamiento de sesión, manejo de respuesta y perfil de tráfico que esperas en la producción.
Evaluation checklist
FAQ
Utilice estas respuestas para abarcar una integración, luego verifique el punto final generado y los detalles del plan actual antes de la producción.
Proxies residenciales solicitudes de ruta de su cliente HTTP, navegador o rastreador consciente de proxy a través de IPs residenciales reales. Su aplicación aún elige la página web pública elegible y procesa la respuesta.
Utilice Proxies residenciales cuando su equipo ya opera el cliente HTTP, navegador, rastreador, retries y análisis, y desea un control a nivel de proxy sobre la selección de país y la continuidad de sesión corta.
Para la autenticación de nombre de usuario y contraseña, conecte a través de pr.webscrapingapi.com:7777. La URL de proxy generada combina ese host con sus credenciales y opciones seleccionadas.
La rotación es el predeterminado. Cuando se omiten la sesión y la rotación, cada solicitud puede recibir una IP residencial diferente del país seleccionado o del país = aleatorio.
Las sesiones pegadas utilizan un ID de sesión estable con un valor de rotación de 180, 300 o 600 segundos, correspondiente a 3, 5 o 10 minutos.
Utilice country=random para cualquier ubicación documentada disponible. Los códigos de país explícitamente documentados son US, GB, DE, FR, CA, AU y NL.
Puede autenticarse con un nombre de usuario y contraseña en el punto final generado o utilizar una IP en lista blanca con su país de alojamiento y puerto documentado.
El generador de puntos finales proporciona salida de Host:port, HTTP, HTTPS y SOCKS5. Elige el formato aceptado por tu cliente HTTP, navegador o rastreador.
WebScrapingAPI opera el punto final de proxy residencial, la selección de red y el comportamiento de rotación o sesión configurado. Su equipo opera al cliente y todas las decisiones de recogida, análisis, almacenamiento y calidad a su alrededor.
Confirme la elegibilidad de la fuente, la política de solicitud, la autenticación, la elección del país, el comportamiento de la sesión, las reglas de retraso, los términos del plan actuales y el manejo de las respuestas target. Revise el Acuerdo de servicio y prueba las páginas públicas representativas antes de escalar.
Trae tu colector
Comience con el cliente que ya utiliza, una opción de país y un flujo de trabajo representativo rotativo o pegajoso.