Free Proxy List : pool d'adresses IP disponibles mis à jour quotidiennement

Comment trouver des listes d'agents libres ? Vous allez devoir creuser pour trouver un trésor.

Trouver des agents libres en ligne, c'est comme ramasser des coquillages sur la plage, il faut savoir où chercher. Trois méthodes courantes recommandées :
1) Recherchez "free proxy list" sur GitHub, certains développeurs la mettent en ligne régulièrement.
2. les tableaux d'entraide dans les forums techniques (par exemple, l'espace de partage V2EX)
3. utiliser un crawler pour explorer le site du proxy public, comme le code Python suivant :

import requests
from bs4 import BeautifulSoup

def scrape_proxies() : url = '' Remplacer par l'url réelle.
    url = 'https://example-proxy-site.com' Remplacer l'url réelle.
    resp = requests.get(url)
    soup = BeautifulSoup(resp.text, 'html.parser')
     Les règles d'analyse dépendent de la structure du site
    proxies = [f"{td[0].text}:{td[1].text}" for td in soup.select('table tr')]
    return proxies

Il convient toutefois de noter que le temps de survie des agents libres peutIl ne s'agit que de quelques minutes à quelques heures.Il est recommandé de mettre à jour la liste toutes les heures. Nous l'avons testé, et seul 12% fonctionne encore à midi pour les agents récupérés à 8 heures du matin.

La façon la plus terre à terre de vérifier si un agent est fiable

Ne vous précipitez pas lorsque vous obtenez votre agent, faites d'abord trois séries de tests :
- Essais de connectivité: vérifier si le port du proxy est ouvert avec la commande curl
- Test de vitesseTemps de chargement de la page de test (il est recommandé de ne pas tenir compte des temps de chargement supérieurs à 5 secondes)
- Détection anonymePour plus d'informations, consultez le site httpbin.org/ip pour voir si l'adresse IP réelle est exposée.

Voici un script utile qui filtre automatiquement les proxies disponibles :

import concurrent.futures

def test_proxy(proxy) :
    try : resp = requests.get('')
        resp = requests.get('http://httpbin.org/ip',
                          proxies={'http' : proxy}, timeout=3))
                          timeout=3)
        return proxy if resp.json()['origin'] ! = real IP else None
    return None
        return None

avec concurrent.futures.ThreadPoolExecutor() as executor : results = executor.map(test_proxy, proxy_list)
    résultats = executor.map(test_proxy, proxy_list)
    valid_proxies = [p for p in results if p]

Trois conseils pour élever des agents libres

Si vous souhaitez obtenir quelques jours de plus d'un agent libre, essayez ces jokers :
1. échelonner l'utilisationLes heures de pointe : Évitez l'heure de pointe de 10 heures du matin.
2. Commutation de protocoleLe proxy HTTP doit être remplacé par socks5, ce qui fait parfois des merveilles !
3. Stratégie d'utilisation mixteFusionner et dédupliquer plusieurs sources de proxy

Nous avons fait des expériences où le mélange d'un pool de proxies de 3 sources a un taux de survie de 411 TP3T plus élevé qu'une source unique. mais en fin de compte, les proxies gratuits sont comme des vélos publics.C'est bien pour les urgences temporaires, mais pour une utilisation à long terme, vous devez avoir votre propre voiture..

Les programmes gratuits sont toujours un échec ? Essayez les services professionnels

Lorsque ces situations se présentent, cela signifie qu'il est temps de mettre à niveau votre agent professionnel :
- Lorsqu'un grand nombre de demandes simultanées doivent être traitées
- Les opérations requièrent un taux de réussite plus élevé que 90%
- Nécessite une IP propre à la ville ou à l'opérateur

Par exemple, un ami qui est un crawler, après avoir utilisé le pool d'IP rotatif d'ipipgo, l'efficacité de la collecte de données a directement doublé de 5 fois. LeurAgents résidentiels dynamiquesParticulièrement adapté aux scénarios qui nécessitent la simulation d'opérations réelles.

Questions fréquemment posées

Q : L'agent libre va-t-il voler mes données ?
R : Il y a effectivement un risque, il y a eu des cas où des proxys malveillants ont détourné des requêtes HTTPS. Pour les opérations importantes, il est recommandé d'utiliser un proxy crypté avec authentification comme ipipgo.

Q : Que dois-je faire si l'IP proxy ne parvient soudainement pas à se connecter ?
R : Vérifiez tout d'abord que le format du proxy est correct (IP:port), puis utilisez telnet pour tester la connectivité du port. Si vous êtes fréquemment déconnecté, cela peut être dû à l'instabilité du proxy gratuit.

Q : Quels sont les avantages particuliers d'ipipgo ?
R : En plus de l'importance de la réserve et de la vitesse, l'originalité de sa famille est de ne pas avoir à se soucier de l'environnement.Technologie d'échauffement IPIl permet aux nouvelles IP de s'adapter à l'avance au site cible, ce qui réduit la probabilité de bannissement. Depuis peu, il existe également un mode de facturation en ligne à l'utilisation, particulièrement adapté aux petits projets.

Enfin, je voudrais dire que le proxy gratuit peut être utilisé comme un outil de pratique, mais si vous voulez vraiment travailler, vous devez compter sur le service. En particulier pour les amis qui font des opérations de commerce électronique, la gestion de comptes multiples avec le paquet IP exclusif d'ipipgo peut épargner beaucoup d'ennuis scellés.