Ejemplo de solicitud Python: Tutoriales de configuración de código proxy de solicitud Python

En primer lugar, ¿por qué utilizar una IP proxy? Veamos un ejemplo real

Recientemente, un amigo del comercio electrónico se quejó conmigo de que su empresa utilizaba Python para rastrear datos de productos básicos, y como resultado, el mecanismo anti-escalada del sitio web bloqueó directamente la IP de la empresa, y todo el equipo se quedó ciego. En este momento, si se puede utilizar una IP proxy, cambiar un chaleco para seguir trabajando, ¿cómo retrasar el negocio? Aquí para enseñarle algunos trucosoperación de salvamento, poner una capa en el programa cuando se solicita con Python.

Segundo, Biblioteca de solicitudes para configurar el agente (versión portátil)

Instale primero las bibliotecas esenciales:

pip install solicitudes

¡Aquí está el truco! Cuando utilices el servicio proxy de ipipgo, recuerda sustituir la contraseña de la cuenta y la dirección IP por las tuyas propias. Por poner un ejemplo:

solicitudes de importación

proxies = {
    'http': 'http://用户名:密码@gateway.ipipgo.com:端口',
    https: http://用户名:密码@gateway.ipipgo.com:端口
}

response = requests.get('https://www.taobao.com', proxies=proxies)
print(código_estado_respuesta)

Obsérvese el uso dehttp://La dirección proxy del principio es donde mucha gente falla. Si utiliza el protocolo Socks5, recuerde instalar el módulopip install peticiones[calcetines]Reoperación.

Tercero, configuración de la biblioteca Urllib (versión antigua del controlador)

Algunos proyectos más antiguos todavía utilizan urllib, y el método de configuración es un poco más indirecto:

from urllib import request

proxy_handler = request.ProxyHandler({
    
    https': 'http://用户名:密码@gateway.ipipgo.com:端口'
})

opener = request.build_opener(proxy_handler)
response = opener.open('https://www.douban.com')
print(response.read().decode('utf-8'))

IV. Guía para evitar errores sobre el terreno

He aquí algunaslección aprendida con sangre y lágrimas::

V. Sesión de control de calidad (problemas reales de los usuarios)

P: ¿El proxy se ha configurado correctamente pero no tiene efecto?
R: Primero compruebe el formato de la dirección proxy, preste especial atención a no escribir http como https. utilice el cliente de ipipgoPrueba con un clicFunciona con el mínimo esfuerzo.

P: ¿Cómo cambiar de proxy automáticamente?
R: Escribe un gestor de IPs que trabaje con la API de ipipgo para obtener nuevas IPs a intervalos regulares. el fragmento de codigo tiene este aspecto:

importar aleatorio

ip_pool = [
    'http://ip1:端口',
    'http://ip2:端口'
]

proxies = {'http': random.choice(ip_pool)}

VI. Consejos para elegir un paquete

Elija en función de las necesidades de su empresa:

• Para rastrear datosResidencial dinámico (estándar)7,67 $/GB es bastante barato.
• Acumulando segundosViviendas estáticas35 pavos por una IP fija. Firme como un perro viejo.
• Aplicaciones empresariales directamente enSoluciones a medidaPago por uso

Un último dato frío: la línea TK de ipipgo es especialmente buena para las personas que necesitanAltas Visitas StashEl escenario que las personas que lo han utilizado han renovado en secreto su suscripción. El código está bien escrito, pero es inútil sin un agente fiable, ¿no crees?