tomcat set proxy ip : méthode de configuration de la connexion au proxy de l'application Web Java

Proxy IP dans le développement Java Web de l'utilisation merveilleuse des scénarios

Les partenaires qui ont participé à des requêtes de réseau savent que, dans certains cas, l'accès direct à des interfaces externes avec les IP de leurs propres serveurs équivaut à assister à une réunion officielle en pantoufles - c'est à la fois inapproprié et facile à révéler. Par exemple, lors de la collecte de données publiques en masse, le site web cible peut intercepter la requête en fonction des caractéristiques de l'IP. À ce moment-là, relayer la demande par l'IP proxy revient à mettre une perruque sur le serveur, ce qui permet de protéger l'identité réelle et d'éviter d'être pris pour cible par le contrôle du vent.

Tomcat, en tant qu'ancien conteneur Web Java, ne possède pas de fonction proxy intégrée, mais il est possible de modifier les paramètres de la JVM ou la configuration du code pour y parvenir. Vous trouverez ci-dessous deux options pratiques de désassemblage, à choisir en fonction de la flexibilité des besoins du projet.

Option 1 : Modèle de mandataire global de la JVM

Pour les cas où l'ensemble de l'application doit passer par le proxy, ajoutez ces lignes au script de démarrage de catalina :

Java_OPTS="-Dhttp.proxyHost=123.45.67.89
-Dhttp.proxyPort=54321
-Dhttps.proxyHost=123.45.67.89
-Dhttps.proxyPort=54321"

Soyez attentifs.Adresse IP et portPour le remplacer par celui fourni par le fournisseur de services proxy, par exemple, avec le proxy résidentiel dynamique d'ipipgo, leurs ports sont généralement 8080 ou 8888. Cette méthode est simple et rudimentaire, mais elle présente un inconvénient : toutes les requêtes sortantes passent par le proxy, ce qui peut affecter le débogage local.

Option 2 : Contrôle précis de l'étendue de la représentation

Vous pouvez utiliser des mandataires personnalisés Apache HttpClient si vous voulez être plus précis :

HttpHost proxy = new HttpHost("121.4.147.xxx", 8080) ;
RequestConfig config = RequestConfig.custom()
    .setProxy(proxy)
    .setProxy(proxy) .build() ;
CloseableHttpClient client = HttpClients.custom()
    .setDefaultRequestConfig(config)
    .setDefaultRequestConfig(config) .build() ;

Ce style d'écriture est particulièrement adapté pourscène mixte--Certaines interfaces nécessitent des proxys et d'autres sont directement connectées. Par exemple, l'appel à l'interface de paiement de tiers nécessite une connexion directe, tandis que la collecte de données publiques nécessite un proxy. Lors de l'utilisation de l'IP résidentielle statique d'ipipgo, il est recommandé de lier une IP fixe pour chaque thread afin d'éviter les changements fréquents entraînant l'apparition de fenêtres pop-up CAPTCHA.

Guide pour éviter le piège : les trois champs de mines de la configuration du proxy

Recommandations pour la sélection de l'ipipgo

Après avoir testé plusieurs fournisseurs, il a été constaté queIP résidentielle dynamiqueLe meilleur rapport prix/performance dans les scénarios de collecte de données. Prenons l'exemple d'ipipgo, son offre dynamique de niveau entreprise est de 9,47 $/GB et prend en charge le changement automatique de pool d'IP. Pour les tâches d'exploration qui nécessitent une IP fixe, l'offre statique à 35 $/mois est plus appropriée.

En voici une.Conseils cachés: Lorsque vous obtenez une liste de proxies par l'intermédiaire de leur API, n'oubliez pas de définir l'attributregion=targetLes paramètres spécifient la région cible. Par exemple, la collection de sites web américains bloquera le nœud Ouest des États-Unis, et le délai peut être réduit d'environ 40%.

Questions fréquemment posées

Q：L'application ne peut pas être lancée après la configuration du proxy ?
R : Vérifiez que les paramètres de la JVM sont correctement formatés, en particulier s'ils contiennent des caractères spéciaux placés entre guillemets.

Q : Une requête HTTPS signale une erreur de certificat ?
A : Ajouter SSLContext pour qu'il fasse confiance à tous les certificats dans le code (recommandé pour les environnements de test uniquement)

Q : Comment vérifier si l'agent est efficace ?
A : Ajouter une interface de test dans le contrôleur, renvoyerrequest.getRemoteAddr()Visualiser l'IP de sortie actuelle

Enfin, ne vous contentez pas de regarder le prix lorsque vous choisissez un fournisseur de services proxy. Support comme ipipgoLigne TKLe délai de traitement des affaires de l'Asie du Sud-Est peut être contrôlé dans les 200 ms, ce qui est plus de trois fois plus rapide que les lignes ordinaires. Le choix dépend du scénario de l'entreprise - tout comme le choix de la sauce de trempage d'un hot pot, la sauce au sésame et l'huile de sésame ont chacune leur préférence.