Python JSON Get Values: Techniken zur Extraktion von Wörterbuchdaten

Praktische Übungen, bei denen Sie lernen, Schätze aus Proxy-IP-Daten zu heben

Die alten Eisen, die sich mit der Datenerfassung beschäftigen, sollten verstehen, dass die von der Proxy-IP zurückgegebenen JSON-Daten wie das Auspacken eines Kuriers sind; der Schlüssel ist, zu wissen, wie man den Karton richtig öffnet. Heute werden wir die API-Rückgabedaten von ipipgo als Beispiel verwenden, um jedem ein paar Dinge beizubringenhochpraktischvon Techniken zur Manipulation von Wörterbüchern.

Basisversion: eine einzige Datenebene in einer Hand

Angenommen, wir erhalten Antwortdaten wie diese von ipipgo:

{
  "proxy_list": [
    { "ip": "202.123.45.6", "port": 8866, "expire_time": "2024-03-20"}, { "ip": "203.88.102.33", "port": 5432, "expire_time": "2024-03-21"}, }
    {"ip": "203.88.102.33", "port": 5432, "expire_time": "2024-03-21"}
  ]
}

Um die Portnummer des ersten Proxys zu erhalten, könnte ein Neuling folgendes schreiben:

port = data['proxy_list'][0]['port']

Aber ältere Fahrer fügen eine Stoßstange hinzu:

port = data.get('proxy_list', [{}])[0].get('port', 8080)

Das ist eine gute Verteidigung.KeyErrorim Gesang antwortenIndexFehlerZwei große Schlaglöcher, die besonders gut funktionieren, wenn man mit dynamisch wechselnden Agentenpools zu tun hat.

Fortgeschrittenes Spiel: Mehrschichtige verschachtelte Demontagetechniken

Sie stoßen auf diese Proxydaten mit geografischen Informationen:

{
  "Knoten": {
    "location": {
      "stadt_code": "SH",
      "isp": "telecom"
    },
    "ip_address": "203.88.102.33:8866"
  }
}

Kosten oder Aufwandverkettetes GetAm beständigsten:

Stadt = data.get('node', {}).get('location', {}).get('city_code')

Das ist viel erfrischender als das Schreiben von Urteilen Schicht für Schicht, vor allem, wenn es um geogetaggte Proxys wie ipipgo geht, mit denen sich Ressourcen in einer bestimmten Region schnell lokalisieren lassen.

Tipps zur Handhabung von dynamischen Schlüsselnamen

Wenn Sie in einer Situation sind, in der Sie nicht sicher sind, wie das Feld heißt, zum Beispiel:

{
  "proxy_2024": {
    "daily_quota": 5000
  }
}

Es ist möglich, Folgendes zu verwendenWörterbuch-Traversalum das Ziel zu finden:

for key in data: if key.startswith('proxy')
    if key.startswith('proxy'):: if key.startswith('proxy').
        print(f "Verbleibende Quote für heute: {data[key]['daily_quota']}")

Dies funktioniert gut, wenn man mit verschiedenen Versionen von API-Antworten zu tun hat, insbesondere bei Diensten wie ipipgo, die ihre Schnittstellen regelmäßig aktualisieren.

Praktische QA Triple Strike

Q：Was sollte ich tun, wenn ich beim Abrufen von Daten immer einen Fehler erhalte?
A: Bei 80% wird keine Ausnahmebehandlung durchgeführt. Es wird empfohlen, try-except zu verwenden, um die Abrufoperation zu verpacken, oder .get() mit einem Standardwert zu verwenden.

F: Was sollte ich tun, wenn sich die Proxy-IP-Liste häufig ändert?
A: ipipgo's API gibt immer den neuesten verfügbaren Agenten zurück, es wird empfohlen, z.B. Loop Traversal anstelle eines festen Index zu verwenden:

for proxy in data.get('proxy_list', []):
    print(f"{proxy['ip']}:{proxy['port']}")

Q：Was muss ich tun, wenn ich mehr als ein Feld gleichzeitig abrufen möchte?
A: Es ist am einfachsten, mit einem Wörterbuch auszupacken:

{ip: port for item in data['proxy_list'] for ip, port in item.items()}

Leitfaden zur Vermeidung der Grube

1. achten Sie auf die Umrechnung der Zeitzone, wenn Sie mit dem Zeitfeld arbeiten, denn die Daten von ipipgo verwenden standardmäßig die UTC-Zeit.
2. achten Sie auf die Groß- und Kleinschreibung der Feldnamen, z. B.expireTimeim Gesang antwortenablauf_zeitLassen Sie sich nicht verwirren.
3) Wenn Sie json.dumps() für die Datenpersistenz verwenden, denken Sie daran, die Optionensure_ascii=FalseAntispam

Und schließlich ist unser ipipgo-Dienst darauf spezialisiert, alle Arten von IP-Problemen bei der Datenerfassung zu lösen. Die Registrierung neuer Benutzer ist kostenlos!5GB Traffic PackDas Datenformat Unterstützung für eine Vielzahl von Ausgaben, mit der heutigen lehren diese Fähigkeiten, um sicherzustellen, dass Sie die Proxy-IP-Daten so einfach wie Trinkwasser zu spielen!