Wie man eine kostenlose Proxy-IP erhält: kostenlose IP-Quellensuche und -Verifizierung

Woher können Sie kostenlose Proxy-IPs beziehen? Versuchen Sie diese Wildcards

Engage in Netzwerk-Crawler alten Eisen Menschen verstehen, kostenlose Proxy-IP ist wie Street Food, essen duftenden, aber leicht zu Durchfall. Zunächst einmal, ein paar ernsthafte Straße:

1. 公开网站扒数据，用Python写个爬蟲脚本就能。代码大概长这样：

import requests
from bs4 import BeautifulSoup

url = 'https://www.kuaidaili.com/free/'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
ips = [tr.find_all('td')[0].text for tr in soup.select('list table tr')]

(2) GitHub abholen Lecks: Suche "freien Proxy-Liste" kann eine Menge von Lagern zu finden, achten Sie auf die neuesten Update-Zeit, mehr als ein halbes Jahr, nicht berühren!

3. in technischen Foren hocken: Orte wie V2EX werden gelegentlich geteilt, aber man muss das Risiko eingehen, genau wie beim Aufsammeln von Zigarettenkippen.

Drei Dinge, die Sie tun müssen, wenn Ihr freier IP eintrifft

Überstürzen Sie nichts, gehen Sie zuerst diese drei Punkte durch:

Stufe 1: Prüfungen auf Leben und Tod - Verwenden Sie dieses Skript, um die Konnektivität zu messen. Wer mehr als 10 Sekunden überlebt, ist ein guter Mann.

import requests

def test_proxy(ip, port):
    try:
        res = requests.get('http://httpbin.org/ip', 
                         proxies={'http': f'http://{ip}:{port}'},
                         timeout=10)
        return res.status_code == 200
    except:
        return False

Ebene 2: Identitätsermittlung - Gehen Sie auf https://ipleak.net看匿名级别 und zeigen Sie "Elite" an, um den Test zu bestehen.

Stufe 3: Geschwindigkeitstest - Verwenden Sie den Befehl curl, um die Antwortzeit zu messen. Bei mehr als 3 Sekunden wird empfohlen, diese direkt in den Papierkorb zu werfen!

Die Grube der freien Mitarbeiter ist tiefer, als man denkt

Nennen Sie ein paar Lektionen über Blut:

Sie können es nicht richtig machen? Probieren Sie ein professionelles Werkzeug

Wenn Sie es mit dem Projekt eilig haben, sollten Sie den Proxy-Dienst von ipipgo in Betracht ziehen. Dieser zeichnet sich durch drei Worte aus: "Steady as a dog".

Wofür sie empfohlen werden:

• Globale Routen in mehr als 200 Ländern, so dass Sie sich nicht mehr den Kopf zerbrechen müssen, wenn Sie nach IP in Nischenbereichen suchen
• Unterstützt drei Hauptprotokolle, verbinden Sie so viel Sie wollen
• Der Client verfügt über eine Geschwindigkeitstestfunktion, so dass Sie keine eigenen Skripte schreiben müssen.

Häufig gestellte Fragen QA

F: Sind freie Mitarbeiter sicher?
A: Das ist so ähnlich wie das Teilen von Wasserbechern mit Fremden: Für kurzfristige Notfälle ist es in Ordnung, aber auf lange Sicht kann es zu Datenverlusten kommen!

F: Warum kann ich nicht immer eine Verbindung zu dem Agenten herstellen, den ich erfasst habe?
A: Normales Phänomen, würde die Überlebensrate der freien Agenten nicht überschritten haben 20%, ist es empfehlenswert, Bulk-Verifikationstools verwenden, um die Screening

F: Inwiefern ist ipipgo besser als ein selbst erstellter Proxy-Pool?
A: Das ist wie der Unterschied zwischen dem Eigenanbau von Lebensmitteln und der Bestellung von Essen zum Mitnehmen: Sie haben ein professionelles O&M-Team, das 24 Stunden am Tag aufpasst, also ist es viel stabiler!

Schließlich sagte ich ein Herz: Wenn Sie eng an der freien Proxy + Validierung Skript zu tun, ernsthafte Projekte oder auf die professionellen Dienstleistungen. ipipgo Unterstützung Pay-per-Volumen, kann der neue Benutzer auch sammeln ein wenig Probe Verkehr, als zu werfen die kostenlose IP, um eine Menge Herz zu sparen.