Python load JSON files : Python proxy JSON loading

Pratique de Python pour jouer JSON et proxy IP

Les gens rencontrent-ils souvent cette situation ? Lors de l'écriture d'un crawler pour charger le fichier de configuration, l'API de docking doit traiter les données de retour. Cette fois, le format JSON est devenu notre bon ami. Cependant, lorsque la quantité de données ou la nécessité d'une opération multiligne, la lumière lira et écrira JSON ne peut pas être suffisant, mais aussi avec un proxy IP est assez stable.

Fonctionnement de base de JSON sans retournement

Commençons par les bases pour nos amis novices. Supposons que nous ayons un lieu appeléip_config.jsonqui contient les informations relatives au serveur proxy :

{
    "proxy" : {
        "host" : "123.45.67.89",
        "port" : 8080,
        "auth" : "user:pass"
    }
}

Le chargement de ce fichier en Python se fait en trois lignes de code :

import json

avec open('ip_config.json') as f.
    config = json.load(f)

print(config['proxy']['host']) output 123.45.67.89

Faites attention au chemin d'accès au fichier, n'écrivez pas le mauvais code, car le code chinois brouillé peut ajouter une erreur.encoding='utf-8′Paramètres. Il est recommandé d'utiliser un éditeur comme VSCode avec la fonction checksum pour éviter de se tromper de main en écrivant des symboles erronés.

Conseils pratiques sur l'IP Proxy

Après avoir obtenu les informations de configuration, nous utilisons la bibliothèque requests pour lancer des requêtes auprès des proxys. Prenons un cas réel, par exemple, nous avons besoin de vérifier la disponibilité d'une IP en vrac :

demandes d'importation

proxies = {
    'http' : f "http://{config['proxy']['auth']}@{config['proxy']['host']}:{config['proxy']['port']}",
    'https' : f "http://{config['proxy']['auth']}@{config['proxy']['host']}:{config['proxy']['port']}"
}

try.
    resp = requests.get('https://httpbin.org/ip', proxies=proxies, timeout=10)
    print(f "Utilise actuellement l'IP : {resp.json()['origin']}")
except Exception as e.
    print(f "Exception de connexion : {str(e)}")

Voici un piège à éviter :Le format proxy de la bibliothèque de requêtes doit comporter un en-tête de protocolecomme http://或https://开头. Certains frères remplissent directement l'adresse IP, et le résultat est qu'ils ne peuvent pas se connecter.

Traitement des exceptions

Dans la pratique, ces papillons sont souvent rencontrés :

Des outils professionnels pour un programme de tranquillité d'esprit

La maintenance d'un pool de proxy par vous-même est une tâche trop lourde, c'est pourquoi nous vous recommandons d'utiliser l'optionipipgode services prêts à l'emploi. Trois formules sont disponibles à leur domicile :

• Dynamique résidentielle (standard) : convient aux développeurs individuels, plus de 7 $ pour le trafic 1G
• Dynamic Residential (Business) : plus rentable pour l'utilisation en équipe, 9 $+ 1G
• Static Residential : IP fixe Scene Dedicated, $35 par mois

Il est très facile d'obtenir une adresse IP avec leur API, et les exemples de code sont prêts à l'emploi :

demandes d'importation

 Adresse de l'API du backend ipipgo
api_url = "https://api.ipipgo.com/getip"

params = {
    'type' : 'dynamic', domicile dynamique
    count' : 10, Obtenir 10 IPs
    'format' : 'json'
}

resp = requests.get(api_url, params=params)
ip_list = resp.json()['data']
print(f "Dernier pool d'IP : {ip_list}")

Foire aux questions QA

Q : Pourquoi le site est-il toujours bloqué après l'utilisation d'un proxy ?
R : Il est recommandé de changer de type d'IP, les IP résidentielles statiques ayant une durée de vie plus longue. La ligne TK d'ipipgo est particulièrement adaptée aux scénarios nécessitant un anonymat élevé.

Q : Que dois-je faire si le fichier JSON est chargé avec une erreur d'encodage ?
R : Ajouter un paramètre d'encodage à la fonction open, comme par exempleencoding='gbk'peut-êtreencoding='utf-8(Notez que les guillemets sont délibérément absents ici, afin de ne pas manquer le code réel)

Q : Comment choisir un paquet pour un projet d'entreprise ?
R : Adressez-vous directement au service clientèle d'ipipgo pour demander un plan personnalisé 1v1. Il peut établir un devis échelonné en fonction du volume d'activité, ce qui est plus rentable que les forfaits standard.

Un dernier mot sur cette histoire de proxy IP.N'utilisez pas les ressources gratuites au rabaisLa première chose à faire est de bloquer votre compte. J'ai eu un frère qui essayait de gagner beaucoup de temps, mais son compte était bloqué, ce qui a retardé le projet. Les fournisseurs de services habituels comme ipipgo proposent des activités d'essai, une première expérience avant de passer une commande plus sûre.