
Prácticas con proxy IP con la cabecera Accept de cURL
comprometidos en el rastreo de datos saben, algunos sitios ladrones bien, sólo tiene que utilizar el proxy IP no es suficiente, usted tiene que hacer el encabezado de la solicitud con personas reales para visitar el mismo. Hoy vamos a fastidiar cómo utilizar el servicio de proxy de ipipgo para cURL solicitud.Ponte el chaleco Accept Head..
¿Por qué tirar la cabeza de Accept?
Muchos sitios web han instalado "puertas de seguridad" para comprobar la identidad de las solicitudes. Por ejemplo:
- con el encabezado Accept por defecto (/), directamente como un robot bloqueando el
- Los valores Accept para móvil y web son diferentes, por lo que puedes confundirlos.
- Algunas interfaces API deben especificar un tipo MIME concreto
El año pasado, cuando ayudé a mi amigo para hacer la comparación de comercio electrónico, porque Aceptar cabecera no estableció el derecho, e incluso cambió 3 proxy IP están bloqueados, y sólo más tarde se encontró que es la información de cabecera.
Cuatro pasos hacia el combate real
Primero asegúrate de que tienes cURL en tu ordenador, si no ve a la web oficial para conseguir la última versión. Usa el proxy de ipipgo como demo aqui, su pool de IPs dinamicas es lo suficientemente grande, no es facil ser baneado.
Plantilla básica (recuerde sustituirla por la contraseña de su propia cuenta)
curl -x http://username:password@gateway.ipipgo.com:9021
-H "Accept: text/html,application/xhtml+xml,application/xml;q=0.9"
https://目标网站.com
Versión específica para móviles
curl -x http://username:password@gateway.ipipgo.com:9021
-H "Accept: application/json, text/javascript, /; q=0.01"
https://m.目标网站.com
¿Cómo elegir parámetros sin pisarlos?
| toma | Aceptar valor | Sitios web aplicables |
|---|---|---|
| Páginas web generales | text/html,application/xhtml+xml | portal web |
| Interfaz API | application/json | interfaz de datos |
| Recursos fotográficos | image/webp,image/apng | Galería de sitios |
Control de calidad de escenas de vuelco comunes
P: ¿Se sigue reconociendo la cabecera Accept?
R: Falta el 80% del resto de la información de cabecera, ¡recuerde User-Agent, Referer estos junto con la coincidencia completa!
P: ¿El proxy de ipipgo de repente no se puede conectar?
R: En primer lugar comprobar la validez de la cuenta, sus paquetes se facturan por horas, el saldo es insuficiente se detendrá automáticamente. ¡A continuación, intente cambiar el puerto alternativo, 9021-9030 son compatibles!
P: ¿Es necesario cambiar el cabezal Accept con frecuencia?
R: Mire la estrategia del sitio de destino, generalmente el mismo tipo de página con el mismo valor en la línea. Si no está seguro, puede utilizar la herramienta de desarrollo de su navegador para tomar un encabezado de solicitud real y copiarlo.
¿Por qué recomienda ipipgo?
Tras recurrir a su agente durante los dos últimos años, han salido a la luz tres cosas:
- El grupo de IP se actualiza automáticamente cada hora, a diferencia de algunos proveedores de servicios que no cambian de IP hasta pasados tres días.
- respaldopago por volumenEs especialmente rentable para los rastreadores de pequeña escala.
- La respuesta del servicio de atención al cliente es rápida, la última vez que tuve problemas con el código de verificación, a las 2:00 de la madrugada ¡regresaron a la orden de trabajo!
Recientemente, los nuevos usuarios también reciben un paquete de tráfico 5G por darse de alta, suficiente para probarlo durante la mayor parte del mes.
Por último, la combinación de proxies no es la panacea. Al igual que Aceptar la cabeza tales detalles se manejan bien, junto con un servicio de proxy fiable, a fin de que el rastreador funcione estable y rápido. Encontrarse con problemas extraños no mueren, más de un intento de IP, ipipgo fondo puede ver el estado de la conexión en tiempo real, esta característica es realmente práctico.

