Python HTTP代理设置的必要性
在日常开发中，我们经常需要让程序通过特定的IP地址访问网络资源。这种需求可能源于多种情况，比如需要模拟不同地区的用户行为，或者避免因频繁访问同一网站而被限制。Python作为一门广泛应用于网络编程的语言，提供了多种方式来实现HTTP代理设置。掌握这些方法，能够让你的程序更加灵活和稳定。
使用代理IP，本质上是在你的程序和目标服务器之间增加了一个中间层。你的请求会先发送到这个中间层（即代理服务器），再由代理服务器转发给目标网站。这样做的好处是，目标网站看到的是代理服务器的IP地址，而非你本机的真实IP。这对于需要保持匿名性或进行大规模数据采集的任务来说至关重要。
标准库urllib的代理配置
Python内置的urllib库是处理HTTP请求的基础工具，虽然它的API不如一些第三方库友好，但胜在无需安装任何额外包，非常适合快速实现基础功能。为urllib设置代理主要需要通过构建一个ProxyHandler.
下面是一个具体的示例，展示了如何为HTTP和HTTPS请求分别设置代理：
import urllib.request
设置代理服务器地址，这里以ipipgo的代理为例
proxy_handler = urllib.request.ProxyHandler({
'http': 'http://username:password@proxy.ipipgo.com:port',
'https': 'https://username:password@proxy.ipipgo.com:port'
})
创建一个使用代理的opener
opener = urllib.request.build_opener(proxy_handler)
安装这个opener，使其成为全局默认的opener
urllib.request.install_opener(opener)
现在发起的请求都会通过代理
response = urllib.request.urlopen('http://httpbin.org/ip')
print(response.read().decode())
在这段代码中，你需要将Nom d'utilisateur, mot de passe, proxy.ipipgo.comrépondre en chantantport替换成从代理服务商（如ipipgo）获取的真实信息。ipipgo的代理服务支持HTTP和SOCKS5等多种协议，能够满足不同场景下的匿名访问需求。
第三方库Requests的代理配置
Demandes库因其简洁的API而深受开发者喜爱，是目前最流行的HTTP库之一。为Requests设置代理非常简单，只需要在发起请求时传递一个mandataires参数即可。
基本的代理设置方法如下：
import requests
定义代理字典，支持HTTP和HTTPS
proxies = {
'http': 'http://username:password@proxy.ipipgo.com:port',
'https': 'http://username:password@proxy.ipipgo.com:port'
}
在请求中传入proxies参数
response = requests.get('http://httpbin.org/ip', proxies=proxies)
print(response.json())
如果你的代理服务器需要认证，按照上面的格式将用户名和密码填入URL中即可。Requests库的这种设计使得我们可以在不同的请求中使用不同的代理，非常灵活。例如，在进行大规模爬取时，你可以准备一个代理IP池，为每个请求随机分配一个代理，有效避免IP被封锁的风险。
处理需要认证的代理
许多高质量的代理服务，如ipipgo，为了安全和管理，都会要求身份认证。上面示例中展示的将用户名密码嵌入URL的方式是一种标准做法。但有时，你可能会遇到需要单独处理认证信息的情况。
这时，你可以使用requests.auth.HTTPProxyAuth: :
import requests
from requests.auth import HTTPProxyAuth
proxies = {
'http': 'http://proxy.ipipgo.com:port',
'https': 'http://proxy.ipipgo.com:port'
}
auth = HTTPProxyAuth('username', 'password')
response = requests.get('http://httpbin.org/ip', proxies=proxies, auth=auth)
print(response.json())
这种方式在逻辑上更清晰，尤其当认证逻辑比较复杂时。ipipgo提供的代理服务支持灵活的认证方式，确保了连接的安全性。
为Session会话设置代理
当需要连续发起多个请求，且都使用同一个代理时，为每个请求单独设置mandataires参数会显得冗余。使用Session对象可以完美解决这个问题。
import requests
创建一个Session对象
session = requests.Session()
为整个Session设置代理
session.proxies.update({
'http': 'http://username:password@proxy.ipipgo.com:port',
'https': 'http://username:password@proxy.ipipgo.com:port'
})
Session发起的后续所有请求都会自动使用该代理
response1 = session.get('http://httpbin.org/ip')
response2 = session.get('http://httpbin.org/headers')
print(response1.json())
print(response2.json())
utiliserSession的另一个好处是它会自动保持Cookies，在某些需要登录状态的场景下非常有用。ipipgo的静态住宅代理IP特别适合这种需要长时间保持会话稳定的业务，其高达99.9%的可用性保证了业务的连续运行。
环境变量设置代理
除了在代码中硬编码代理信息，一种更灵活和安全的方式是通过环境变量来配置代理。这种方法可以让你在不修改代码的情况下切换代理设置，特别适合在不同环境（开发、测试、生产）中部署。
在运行Python脚本之前，先在终端中设置环境变量：
Linux/Mac
export HTTP_PROXY="http://username:password@proxy.ipipgo.com:port"
export HTTPS_PROXY="http://username:password@proxy.ipipgo.com:port"
Windows
set HTTP_PROXY=http://username:password@proxy.ipipgo.com:port
set HTTPS_PROXY=http://username:password@proxy.ipipgo.com:port
设置之后，Demandes库会自动识别这些环境变量并使用其中配置的代理：
import requests
import os
Requests会自动使用HTTP_PROXY和HTTPS_PROXY环境变量
response = requests.get('http://httpbin.org/ip')
print(response.json())
你也可以通过os.environ手动获取并设置
proxy_from_env = os.environ.get('HTTP_PROXY')
if proxy_from_env:
response = requests.get('http://httpbin.org/ip', proxies={"http": proxy_from_env, "https": proxy_from_env})
print(response.json())
这种方式将配置和代码分离，是更专业的做法。当使用ipipgo这类服务时，你可以轻松管理多组代理配置，以适应不同的业务场景。
Foire aux questions et solutions (AQ)
Q1: 测试时程序报错，提示代理连接失败，可能是什么原因？
A1: 连接失败通常有几个常见原因：1) 代理服务器的地址、端口、用户名或密码填写错误，请仔细核对从ipipgo获取的信息。2) 本地网络防火墙或安全软件阻止了连接，可以尝试暂时关闭它们进行测试。3) 代理服务器本身暂时不可用，可以联系ipipgo的技术支持确认服务状态。
Q2: 如何验证代理是否真正生效？
A2: 最直接的方法是访问一个可以显示客户端IP的网站，如http://httpbin.org/ip。正常情况下，返回的IP地址应该是你设置的代理服务器的IP，而不是你本机的公网IP。你也可以在代码中捕获异常，打印出详细的错误信息来帮助诊断。
Q3: 我应该选择动态住宅代理还是静态住宅代理？
A3: 这取决于你的具体业务需求：
Agents résidentiels dynamiques（如ipipgo的动态住宅套餐）：IP地址会按一定频率变化，适合需要高匿名性、防止被网站反爬虫机制识别的场景，比如大规模数据采集。
Agents résidentiels statiques（如ipipgo的静态住宅套餐）：IP地址在较长时期内固定不变，适合需要维持登录会话、进行长时间稳定操作的任务，比如社交媒体管理或广告投放验证。
Q4: 代码在本地运行正常，但部署到服务器上就无法通过代理连接了？
A4: 这通常是网络环境差异导致的。首先检查服务器能否正常访问代理服务器的地址和端口，可以使用telnetpeut-êtreboucler命令进行测试。确认服务器上的环境变量设置是否正确。云服务商的安全组规则可能需要放行对代理端口的出站连接。
Choisir le bon service IP proxy
选择一个可靠的代理IP服务商是成功的一半。一个优质的服务商应该提供稳定的连接、丰富的IP资源、清晰的文档和及时的技术支持。以ipipgo为例，其动态住宅代理IP资源总量高达9000万+，覆盖全球220+国家和地区，所有IP均来自真实家庭网络，具备高度匿名性。而静态住宅代理IP则拥有50w+资源，具备99.9%的可用性，非常适合对稳定性要求极高的业务场景。
无论是进行市场调研、SEO监控，还是电商数据抓取，选择一个像ipipgo这样能够提供高质量IP资源和全面协议支持的服务商，都能让你的Python项目事半功倍。
Français 
简体中文 
English 
Español 
Deutsch