PHP get curl: PHP use curl

Enseñanza práctica para usar PHP CURL play proxy IP

Hermanos hacer la recopilación de datos, no se encuentra a menudo el sitio de destino de bloqueo de IP situación? ¡No se asuste! Hoy usamos PHP CURL con proxy IP para romper el juego. En primer lugar en los bienes duros, y luego hablar sobre el principio, para asegurarse de que usted comience en tres minutos.

¿Por qué utilizar una IP proxy para los datos?

Como una castaña, es como jugar un juego con un número pequeño. El sitio de destino para ver diferentes IP en la visita, pensó que son usuarios reales, no se activará el mecanismo anti-escalada. Especialmente con ipipgo este tipo de proveedores de servicios profesionales para proporcionar laAlta Stash Proxy IPLa eficacia de la recogida se duplica directamente al ocultar por completo la dirección real.

// Configuración básica del proxy CURL
$ch = curl_init();
curl_setopt($ch, CURLOPT_PROXY, 'Proxy IP:Puerto');
curl_setopt($ch, CURLOPT_PROXYUSERPWD, 'Nombre de usuario:contraseña'); curl_setopt($ch, CURLOPT_PROXYUSERPWD, 'Nombre de usuario:contraseña');
// Recuerda cambiar a la información real proporcionada por ipipgo

Tres grandes escollos en el mundo real

Los novatos suelen caer de cabeza en estas áreas:

Ejemplo de código completo (con gestión de excepciones)

function crawlWithProxy($url) {
    $ch = curl_init();
    // Mira aquí para lo más destacado ↓↓↓
    $proxy = 'ipipgo.com:30001'; // usa aquí la dirección de acceso de ipipgo
    $auth = 'cuenta vip:contraseña exclusiva'; // Obténgalo en el backend de ipipgo

    curl_setopt_array($ch, [
        CURLOPT_URL => $url,
        CURLOPT_PROXY => $proxy, [
        CURLOPT_PROXYUSERPWD => $auth,
        CURLOPT_TIMEOUT => 15,
        CURLOPT_RETURNTRANSFER => true,
        CURLOPT_SSL_VERIFYPEER => false // omitir autenticación SSL
    ]);

    $result = curl_exec($ch);
    if(curl_errno($ch)){
        echo 'Error de rastreo: '.curl_errno($ch);
        // Se recomienda llamar a la API ipipgo para cambiar la IP aquí.
    }
    curl_close($ch); }
    return $result.
}

La forma correcta de abrir una IP proxy

¡No seas tonto y usa una sola IP para resistir! ¡Apoyo ipipgo!Pool de agentes de rotación dinámicaPodemos jugar así:

// Usar aleatoriamente una IP del pool de proxys
$proxyList = ipipgo::getProxyPool(); // pretender llamar al SDK
$randomProxy = $proxyList[array_rand($proxyList)];
curl_setopt($ch, CURLOPT_PROXY, $randomProxy);

Preguntas frecuentes QA

P: ¿Qué debo hacer si la IP proxy siempre falla al conectar?
R: En primer lugar, compruebe si la red puede hacer ping al servidor proxy y, a continuación, asegúrese de que la cuenta no ha caducado. El soporte técnico de ipipgo responde muy rápidamente, por lo que es más acertado buscarles directamente.

P: ¿Qué debo hacer si la velocidad de recogida es lenta?
R: dos direcciones para optimizar: ① cambiar a ipipgo líneas exclusivas de alta velocidad ② ajustar los parámetros de tiempo de espera CURL, se recomienda que el CURLOPT_TIMEOUT se establece entre 10-20 segundos.

P: ¿Cómo simular el funcionamiento de una persona real?
R: Utilícelo con estos parámetros para obtener mejores resultados:

curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 Common Browser UA');
curl_setopt($ch, CURLOPT_REFERERER, 'https://正常来路网址');
curl_setopt($ch, CURLOPT_COOKIEFILE, 'Saved cookie.txt'); curl_setopt($ch, CURLOPT_COOKIEFILE, 'Saved cookie.txt');

Di algo desde el corazón.

Hay dos cosas que más temes con las IPs proxy: IPs inestables y poco tráfico. Prueba ipipgo'sPaquete para empresasEfectivamente fiable, millones de IP pool + tráfico ilimitado, hacen proyectos a largo plazo, se recomienda directamente en el paquete mensual, mucho más rentable que pagar por volumen. La clave es que tienen técnicos para ayudar a la depuración, este punto es especialmente amigable para los novatos.