Proxy IP Parsing JSON Data: Herramienta de análisis de datos JSON de proxy

¿Cómo jugar con los datos de IP proxy? Te enseñamos a desmontar el formato JSON

dedica a rastrear amigos entienden, ahora muchos proveedores de servicios de proxy para devolver los datos están en formato JSON. Esta cosa parece un libro, de hecho, para desmantelar que pelar naranjas también es simple. Tomemos la respuesta de la API de ipipgo como una castaña, sus datos de retorno es largo como este:

{
  "código": 200
  "data": [
    {
      "ip": "45.88.123.88",
      "puerto": 8866, "expire_time": "2024-08-01 23:59
      "expire_time": "2024-08-01 23:59:59"
    },
    {
      "ip": "103.88.45.12",
      "port": 3128, { "expire_time": "expire_time": "2024-08-01 23:59:59" }, { "ip": "103.88.45.12", { "port": "3128,
      "expire_time": "2024-08-02 00:30:00"
    }
  ]
}

centrarse enmatriz de datosLa dirección, el puerto y el tiempo de expiración de cada objeto, cada dirección IP y cada dirección IP están todos aquí. En Python, la biblioteca json está a tres líneas de código:

importar json

resp = 'esos datos JSON de arriba'
proxy_list = json.loads(resp)['datos']

Enseñanza práctica: desde la obtención de la IP hasta su uso real

¡No te conformes con saber parsear sin usarlo! Asumiendo que tenemos una lista de proxies a través de la API de ipipgo, necesitamos verificar la validez. Aquí hay un script de validación universal:

solicitudes de importación

para proxy en lista_proxy.
    try: response = requests.get('')
        response = requests.get('http://httpbin.org/ip',
            proxies={'http': f"{proxy['ip']}:{proxy['puerto']}"},
            timeout=5)
        print(f "IPs disponibles: {proxy['ip']}:{proxy['puerto']}")
    excepto.
        print(f "IP fallida: {proxy['ip']}")

Este script tamiza rápidamente las IPs que funcionan. vigilaFijar el tiempo de espera en 5 segundosLo más apropiado, demasiado corto para equivocarse fácilmente, demasiado largo para retrasar las cosas.

¿Por qué recomienda los servicios de ipipgo?

Después de haber utilizado siete u ocho proveedores de proxy, no en vano acabé bloqueando ipipgo. Tres de sus trucos son particularmente de primera clase:

1. El cubo de la familia de protocolos: HTTP/HTTPS/Socks5 son totalmente compatibles, a diferencia de algunas plataformas que sólo abren media puerta.
2. Extracción sin esfuerzoLa API está diseñada para ser fácil de usar y el formato de retorno es muy estándar.
3. Los paquetes no son fraudulentos¡Dinámica residencial mínimo 7 yuanes más de 1G de tráfico, hacer la recopilación de datos absolutamente asequible!

Preguntas frecuentes

P: ¿Tengo que escribir código para analizar datos JSON?
R: ¡No absolutamente! Es posible analizar manualmente con una herramienta como Postman, pero sigue siendo más eficiente escribir scripts para el procesamiento por lotes.

P: ¿Cómo puedo saber si la IP puede utilizarse tras la extracción de la API?
R: El cliente de ipipgo viene con una función de detección, o ejecutar a través del script de verificación enseñado arriba.

P: ¿Elijo un paquete dinámico o estático?
R: Depende del escenario empresarial. Es más rentable elegir dinámico para los rastreadores, y residencial estático para los que necesitan conectarse durante mucho tiempo.

Por último, para ser sinceros, lo de la IP proxy es tres partes por parte de la herramienta y siete partes por parte del proveedor de servicios. ipipgo'sLínea TKresponder cantandoIntegración de servidores en nubeEs realmente fragante, especialmente los hermanos haciendo negocios en el extranjero, línea transfronteriza puede ahorrar un montón de problemas. Se aconseja a los nuevos usuarios a utilizar la versión estándar dinámico para probar el agua primero, y luego cambiar a la versión de la empresa después de una gran cantidad de uso, de modo que el más rentable.