Comment obtenir une IP proxy gratuite : saisie et vérification des sources d'IP gratuites

Où trouver des adresses IP de proxy gratuit ? Essayez ces caractères génériques

Les personnes qui s'engagent dans les crawlers de réseau comprennent que le proxy IP gratuit est comme la nourriture de rue, qu'il est parfumé mais qu'il est facile d'avoir la diarrhée. Tout d'abord, il faut prendre quelques mesures sérieuses :

1) Open site pick data : certains sites spécialisés dans la mise à jour des agents libres, comme un site appelé "fast agent", avec Python pour écrire un script de crawler pour woolgathering. Le code ressemble à ceci :

import requests
from bs4 import BeautifulSoup

url = 'https://www.kuaidaili.com/free/'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
ips = [tr.find_all('td')[0].text for tr in soup.select('list table tr')]

2) GitHub : la recherche "free proxy list" permet de trouver un grand nombre d'entrepôts, il faut faire attention à l'heure de la dernière mise à jour, plus de six mois, il ne faut pas y toucher !

3. squatter les forums techniques : des sites comme V2EX sont parfois partagés, mais il faut tenter sa chance, tout comme on ramasse les mégots de cigarettes.

Trois choses à faire lorsque votre IP gratuite arrive

Ne vous précipitez pas, passez d'abord par ces trois étapes :

Niveau 1 : Contrôles de vie et de mort - Utilisez ce script pour mesurer la connectivité. Toute personne capable de survivre plus de 10 secondes est un homme bon.

demandes d'importation

def test_proxy(ip, port).
    test_proxy(ip, port) : test_proxy(ip, port) : try.
        res = requests.get('http://httpbin.org/ip', proxies={'http' : f'http://httpbin.org/ip{ip}:{port}'}, }
                         proxies={'http' : f'http://{ip}:{port}'}, timeout=10), res = requests.
                         timeout=10)
        return res.status_code == 200
    sauf.
        return False

Niveau 2 : Enquête sur l'identité - Allez sur https://ipleak.net看匿名级别 et affichez "Elite" pour passer le test.

Niveau 3 : Test de vitesse - Utilisez la commande curl pour mesurer le temps de réponse, au-delà de 3 secondes, il est recommandé de le jeter directement à la poubelle !

La fosse des agents libres est plus profonde que vous ne le pensez

Citez quelques leçons de sang :

Vous n'y arrivez pas ? Essayez un outil professionnel

Si le projet est pressé de démarrer, pourquoi ne pas envisager le service proxy d'ipipgo. Celui-ci comporte trois mots : "steady as a dog" (stable comme un chien).

Pour ce qu'ils sont recommandés :

• Itinéraires mondiaux dans plus de 200 pays, pas besoin de se creuser la tête pour rechercher des droits de propriété intellectuelle dans des zones de niche.
• Prise en charge de trois protocoles principaux, connectez-vous autant que vous le souhaitez
• Le client est doté d'une fonction de test de vitesse, ce qui vous évite d'écrire vos propres scripts.

Foire aux questions QA

Q : Les agents libres sont-ils en sécurité ?
R : C'est comme partager des gobelets d'eau avec des inconnus, c'est bien pour les urgences à court terme, mais attendez-vous à des fuites de données à long terme !

Q : Pourquoi ne puis-je pas toujours me connecter à l'agent que j'ai capturé ?
R : Phénomène normal, le taux de survie des agents libres n'aurait pas dépassé 20%, il est recommandé d'utiliser des outils de vérification en vrac pour filtrer les agents libres.

Q : En quoi ipipgo est-il meilleur qu'un pool de serveurs mandataires créé par l'utilisateur lui-même ?
R : C'est comme la différence entre cultiver sa propre nourriture et commander un plat à emporter. Ils ont une équipe professionnelle d'exploitation et de maintenance qui les surveille 24 heures sur 24, c'est donc beaucoup plus stable !

Enfin, j'ai dit un mot du fond du cœur : si vous êtes serré sur le proxy gratuit + script de validation pour vous débrouiller, des projets sérieux ou sur les services professionnels. ipipgo supporte le paiement au volume, le nouvel utilisateur peut aussi glaner un peu de trafic d'essai, plutôt que de jeter l'IP gratuite pour sauver beaucoup de cœur.