curl send POST request | form data submission tutorial

Praktische Anwendung von POST-Anfragen mit curl

in Interface-Tests beschäftigt wissen, curl dieses Tool ist wie ein Schweizer Taschenmesser als allmächtig. Heute konzentrieren wir uns auf das Nörgeln, wie man curl POST-Anfrage verwenden, um Formulardaten zu übermitteln, übrigens, die Verwendung von Proxy-IP-Magie. Zunächst zu den grundlegenden Befehl:

curl -X POST -d "username=test&password=123456" http://example.com/login

hier sind-X POSTGeben Sie die Anfragemethode an.-dGefolgt von den zu übermittelnden Formulardaten. Beachten Sie, dass die Parameter mit &-Symbolen verbunden werden sollten, verwenden Sie keine Leerzeichen, da der Server sonst nicht die vollständigen Daten erhält.

Der richtige Weg zur Eröffnung einer Proxy-IP

Direkt nackt, um eine Anfrage zu senden ist einfach, die Website-Schutz-Mechanismus auslösen, dieses Mal die Proxy-IP auf dem Feld. Nehmen Sie ipipgo Service zum Beispiel, erhalten Sie zunächst eine Proxy-Adresse:

Proxy-Parameter zu curl hinzufügen:

curl -x http://ipipgo_user123:passw0rd!@123.45.67.89:8080
     -X POST -d "content=test data" http://api.example.com/submit

Kosten oder Aufwand-xDer Parameter spezifiziert den Proxy-Server im Format "protocol://account:password@IP:port". ipipgo's Proxy-Pool wird häufig aktualisiert, was besonders für Szenarien geeignet ist, in denen eine große Anzahl von IPs geändert werden muss.

Fallstricke bei der Formulareinreichung und Gegenmaßnahmen

Haben Sie schon einmal ein Formular abgeschickt und einen 403-Fehler erhalten? In achtzig Prozent der Fälle ist der Request-Header nicht richtig gesetzt. Die vollständige Pose sollte sein:

curl -x http://ipipgo代理地址
     -H "Content-Type: application/x-www-form-urlencoded"
     -H "Benutzer-Agent: Mozilla/5.0"
     -X POST -d "phone=13800138000&code=6688"
     http://service.example.com/verify

Hier gibt es zwei wichtige Punkte:Der Content-Type muss korrekt eingestellt sein.Andernfalls erkennt der Server die Daten nicht an;User-Agent, um sich als Browser zu tarnenDie Standard-UA von curl wird in Minuten angegeben.

Fallstudien zu realen Szenarien

Nehmen Sie einen realen Fall: Preisüberwachung einer E-Commerce-Plattform. Verwenden Sie den rotierenden Proxy von ipipgo mit Curl-Skript, um jede Stunde zu crawlen:

! /bin/bash
for i in {1..50}
do
   curl -x http://ipipgo动态代理
        -d "product_id=100${i}&type=price"
        -X POST https://mall.example.com/api
        >> result.log
   schlafen 60
done

Hier der dynamische Proxy automatisch wechseln IP, um eine einzige IP-Hochfrequenz-Zugang zu dem Verbot zu vermeiden. ipipgo gleichzeitige Verbindungen Unterstützung bis 5000 +, in Batch-Betrieb engagieren hat keine Angst vor Staus.

Häufig gestellte Fragen QA

F: Was soll ich tun, wenn der Proxy die Verbindung immer wieder unterbricht?
A: Prüfen Sie zunächst, ob die Proxy-Adresse korrekt ist. Es wird empfohlen, die von ipipgo bereitgestellte API zu verwenden, um die Liste der verfügbaren Proxys in Echtzeit zu erhalten. Der Timeout kann mit dem Parameter -connect-timeout eingestellt werden

Q：Was sollte ich tun, wenn ich verstümmelte chinesische Daten übermittle?
A: Setzen Sie vor den Parameter -d ein-data-urlencodeoder die Daten in Anführungszeichen setzen: -d "name=$(printf %s 'Zhang San' | jq -sRr @uri)"

F: Was ist, wenn ich über einen HTTPS-Proxy gehen muss?
A: Ersetzen Sie einfach http durch https im Parameter -x. Die Proxyserver von ipipgo unterstützen alle zwei Protokolle, und denken Sie daran, die Zertifikate zu paaren.

Leitfaden zur Auswahl von Proxy-Diensten

Bei der Auswahl einer Agentur müssen Sie auf einige harte Indikatoren achten:

• Größe des IP-Pools: ipipgo hat weltweit über 2 Millionen Knotenpunkte
• Konnektivität: Gemessen über 99,2%
• Protokollunterstützung: volle Kompatibilität mit HTTP/HTTPS/Socks5
• Authentifizierung: Neben der Basisauthentifizierung wird auch eine IP-Whitelist unterstützt.

Kürzlich habe ich einem Kunden geholfen, einen Stresstest durchzuführen, und ich habe den exklusiven Proxy von ipipgo benutzt, um 72 Stunden lang zu laufen, ohne dass die Verbindung abbricht, was wirklich zuverlässiger ist als einige billige Dienste.