Installation de BeautifulSoup : étapes d'installation de pip

Pratique de l'utilisation du proxy IP pour l'installation de BeautifulSoup

Récemment, beaucoup de partenaires dans le projet de crawler réseau, ont constaté que le pip installé BeautifulSoup est toujours bloqué. En particulier dans certaines zones de l'environnement réseau n'est pas stable, télécharger des bibliothèques python comme toothpaste. En ce moment, si vous pouvez utiliser un proxy IP, la vitesse de chargement des paquets peut directement décoller !

Préparatifs nécessaires avant l'emballage

Assurez-vous qu'il est installé sur votre ordinateur.Python 3.6 ou supérieur(Les anciennes versions sont sujettes à des bogues). Maintenez Win+R enfoncé et tapez cmd, tapez cette commande dans une fenêtre noire pour vérifier la version :

python --version

Si vous ne trouvez pas la commande, vous n'avez probablement pas la variable d'environnement. À ce stade, nous vous recommandons d'aller sur le site web de python et de le réinstaller, en n'oubliant pas de cocher la caseAjouter Python à PATHCette option.

La bonne façon d'ouvrir un proxy IP

Zoom sur notre sauveurService proxy ipipgo. Leurs proxys résidentiels sont particulièrement bien adaptés aux requêtes web et supportent les protocoles http/https/socks5. En prenant le proxy http comme marronnier, la commande d'installation devrait ressembler à ceci :

pip install beautifulsoup4 --proxy=http://用户名:密码@gateway.ipipgo.com:端口号

Faites attention à remplacer le nom d'utilisateur, le mot de passe et le port, ces paramètres se trouvent dans le backend d'ipipgo. Si vous n'aimez pas avoir à taper des commandes à chaque fois, vous pouvez les définir directement dans les variables d'environnement du système :

set http_proxy=http://用户名:密码@gateway.ipipgo.com:端口号
set https_proxy=http://用户名:密码@gateway.ipipgo.com:端口号

L'ensemble du processus d'installation dans le monde réel

1. ouvrir la fenêtre noire de cmd (ne pas utiliser powershell, il y a parfois des saccades)
2) Entrer la commande proxy setup (ou configurer les variables d'environnement à l'avance)
3. exécuter les instructions d'installation :

pip install beautifulsoup4 --trusted-host pypi.org --trusted-host files.pythonhosted.org

Les deux paramètres de l'hôte de confiance sont ajoutés pour contourner la validation du certificat SSL, en particulier avec les systèmes plus anciens, afin d'éviter un grand nombre d'erreurs.

Vérifier que l'installation s'est déroulée correctement

Ne vous précipitez pas pour fermer la fenêtre après le chargement, cliquez sur cette commande pour vérifier la version :

python -c "import bs4 ; print(bs4.__version__)"

Si un numéro de version apparaît (par exemple 4.10.0), cela signifie que le module est correctement installé. Si vous obtenez une erreur indiquant que le module n'est pas trouvé, le proxy n'est probablement pas configuré correctement, nous vous recommandons donc de vérifier l'état du paquet dans le backend d'ipipgo.

Questions fréquemment posées Trousse de premiers secours

Q : Que dois-je faire si j'obtiens toujours un délai de connexion ?
A：先试试ping gateway.ipipgo.com能不能通，如果太高，去后台换个低的节点

Q：A mi-chemin de l'installation, une erreur SSL est-elle signalée ?
R : Ajoutez le paramètre -trusted-host à la commande ou mettez à jour la version de pip :

pip install --upgrade pip --proxy=http://...

Q : Est-il plus lent d'utiliser un proxy ?
R : Il se peut que la charge du nœud soit élevée, dans la console ipipgo pour changer le type de protocole, essayez d'utiliser le protocole socks5 qui aura parfois un effet miraculeux !

Pourquoi recommander ipipgo

Expérience réelle d'utilisation dans ma propre maison :
1. une bande passante exclusive sans embouteillage, la vitesse de téléchargement est stable à 5MB/s+.
2. prend en charge le paiement à l'utilisation, ce qui convient aux utilisateurs qui chargent occasionnellement des paquets
3. réponse rapide du service clientèle, la dernière fois que j'ai eu un problème au milieu de la nuit, j'ai eu une réponse dans la seconde !
4. est doté d'une fonction de rotation de l'adresse IP, afin d'empêcher le piratage du site cible

Récemment, nous avons constaté que leur site officiel est en pleine activité, l'enregistrement d'un nouvel utilisateur devant envoyer 1G de trafic, ce qui est juste suffisant pour installer des dizaines de bibliothèques python. Si vous avez besoin de l'utiliser pendant une longue période, nous vous suggérons de choisirPaquet EntrepriseGrâce à la fonction de basculement automatique, il n'y a plus de crainte de déconnexion au milieu de l'installation.

Un dernier mot.

Le chargement de la bibliothèque à l'aide d'une IP proxy se fait en trois points :
1. choisir le bon fournisseur de services (il faut appeler ipipgo)
2. n'oubliez pas d'ajouter le paramètre "trusted-host".
3. mise à jour régulière de la version du pipeline
Ne paniquez pas lorsque vous rencontrez des problèmes, suivez les étapes ci-dessus pas à pas pour enquêter, l'essentiel peut être résolu. Si vous n'y arrivez vraiment pas, allez sur le site web d'ipipgo et cherchez le service clientèle en ligne, ils sont expérimentés dans le traitement de ce type de problème.