wget en utilisant un proxy : Tutoriel d'installation d'un proxy en ligne de commande

Apprendre à utiliser wget pour accrocher un proxy afin de télécharger des fichiers.

Le vieux fer à repasser engagé dans le réseau crawler devrait comprendre, direct naked download facile d'être bloqué IP. aujourd'hui sur le harcèlement comment utiliser wget cet outil de ligne de commande pour accrocher le proxy, en se concentrant sur notre propre recommandé !ipipgoService de l'agent. L'opération est plus simple que de cuisiner des nouilles instantanées, alors suivez les étapes.

Assurez-vous que wget est installé en premier.

Essayez d'ouvrir un terminal et d'exécuter cette commande :

wget --version

Si le numéro de version apparaît, c'est qu'il est déjà installé, mais s'il dit "command not found", vous devez d'abord installer wget. Si le message indique "command not found", vous devez d'abord installer wget et utiliser cette commande pour l'installer (pour Debian/Ubuntu) :

sudo apt-get install wget

Téléchargement de l'agent temporaire

Vous pouvez l'installer temporairement de cette manière lorsque vous êtes pressé :

wget -e use_proxy=yes -e http_proxy=account:password@proxy ip:port URL à télécharger

Pour les châtaignes, utilisez la procuration d'ipipgo :

wget -e use_proxy=yes -e http_proxy=user123:pass456@45.76.89.12:8080 https://example.com/file.zip

Configuration à long terme des paramètres du proxy

Si vous n'aimez pas avoir à taper des commandes à chaque fois, il est plus économique de modifier le fichier de configuration. Recherchez le fichier.wgetrc(généralement dans le répertoire personnel de l'utilisateur), ajoutez ces lignes :

use_proxy = on
http_proxy = proxy ip:port
proxy_user = compte
proxy_password = mot de passe

Il suffit de remplir les informations du proxy avec ipipgo, de faire attention aux permissions du fichier, de ne pas laisser fuir le mot de passe.

Vérifier que le proxy est en vigueur

Pour tester le fonctionnement du proxy avant le téléchargement, utilisez cette commande :

wget -q -O - checkip.ipipgo.com

Cette adresse est spécifiquement utilisée pour vérifier l'IP actuelle, si l'IP renvoyée et l'IP proxy que vous avez configurée sont identiques, cela signifie que la configuration est réussie.

Rappel des pièges les plus courants

Temps consacré à l'assurance qualité

Q : Comment puis-je savoir si l'adresse IP du proxy est toujours disponible ?
R : Testez d'abord les boucles :curl -x http://代理IP:端口 --connect-timeout 5 checkip.ipipgo.com

Q : Que se passe-t-il si j'ai besoin d'utiliser plus d'un agent en même temps ?
R : Il est recommandé d'utiliser l'API d'ipipgo pour obtenir dynamiquement un ensemble de serveurs mandataires et d'écrire un script shell pour les faire tourner.

Q：Que dois-je faire si le téléchargement de fichiers volumineux est toujours interrompu ?
A : Plus-cLes paramètres prennent en charge la transmission des points d'arrêt, et l'effet de proxy statique de longue durée d'ipipgo est encore meilleur !

Enfin, j'aimerais vous présenteripipgoLes trois principaux avantages de la
1. pool IP exclusif sans crash
2. Plus de 200 nœuds urbains dans tout le pays
3. fournir des tutoriels de configuration prêts à l'emploi

Si vous n'y arrivez toujours pas, allez directement sur le site web d'ipipgo pour trouver le service clientèle en ligne, main dans la main pour vous apprendre à correspondre. N'oubliez pas de ne pas utiliser de proxies gratuits, ce sont des millions de personnes qui utilisent l'IP, des minutes à bloquer sans négociation.