Python设置代理
在进行网络请求时,有时候我们需要使用代理服务器来访问特定的网站或隐藏自己的真实IP地址。在Python中,我们可以使用一些库来设置代理,本文将介绍如何使用这些库实现代理功能。
使用requests库设置代理
requests 是Python中最常用的HTTP库之一,可以方便地发送HTTP请求。我们可以通过设置proxies参数来使用代理服务器发送请求。
首先,安装requests库:
pip install requests
接下来,我们可以通过以下代码来设置代理:
import requests
proxies = {
'http': 'http://username:password@proxy_host:proxy_port',
'https': 'https://username:password@proxy_host:proxy_port'
}
url = 'https://www.example.com'
response = requests.get(url, proxies=proxies)
print(response.text)
在上面的代码中,我们使用proxies参数来指定HTTP和HTTPS请求的代理服务器。username和password是代理服务器的认证信息,proxy_host和proxy_port是代理服务器的地址和端口号。
使用urllib库设置代理
urllib 是Python的内置库,可以用来处理URL。我们可以通过设置ProxyHandler和build_opener来使用代理服务器发送请求。
from urllib.request import ProxyHandler, build_opener
proxy_handler = ProxyHandler({
'http': 'http://username:password@proxy_host:proxy_port',
'https': 'https://username:password@proxy_host:proxy_port'
})
opener = build_opener(proxy_handler)
url = 'https://www.example.com'
response = opener.open(url)
print(response.read())
在上面的代码中,我们首先创建一个ProxyHandler对象,并传入代理服务器的信息。然后使用build_opener方法创建一个opener对象,最后使用opener.open方法来发送请求。
使用http.client库设置代理
http.client 是Python中用于处理HTTP请求的库。我们可以通过设置set_tunnel和set_proxy来使用代理服务器发送请求。
import http.client
conn = http.client.HTTPSConnection('proxy_host', 'proxy_port')
conn.set_tunnel('www.example.com', 443)
conn.set_proxy('username', 'password')
conn.request('GET', '/')
response = conn.getresponse()
print(response.read().decode())
在上面的代码中,我们首先创建一个HTTPSConnection对象,并指定代理服务器的地址和端口号。然后使用set_tunnel方法来设置请求的目标网站和端口号,使用set_proxy方法来设置代理服务器的用户名和密码。最后通过request和getresponse方法来发送和获取响应。
运行结果
下面是使用requests库设置代理的运行结果:
<!DOCTYPE html>
<html>
<head>
<title>Example Domain</title>
<meta charset="utf-8">
<meta http-equiv="Content-type" content="text/html; charset=utf-8">
<meta name="viewport" content="width=device-width, initial-scale=1">
<style type="text/css">
body {
background-color: #f0f0f2;
margin: 0;
padding: 0;
font-family: -apple-system, system-ui, BlinkMacSystemFont, "Segoe UI", "Roboto", "Helvetica Neue", Arial, sans-serif;
}
div {
width: 600px;
margin: 5em auto;
padding: 2em;
background-color: #fdfdff;
border-radius: 0.5em;
box-shadow: 2px 3px 7px 2px rgba(0,0,0,0.02);
}
a:link, a:visited {
color: #38488f;
text-decoration: none;
}
@media (max-width: 700px) {
div {
margin: 0 auto;
width: auto;
}
}
</style>
</head>
<body>
<div>
<h1>Example Domain</h1>
<p>This domain is for use in illustrative examples in documents. You may use this
domain in literature without prior coordination or asking for permission.</p>
<p><a href="https://www.iana.org/domains/example">More information...</a></p>
</div>
</body>
</html>
结论
本文介绍了如何使用requests、urllib和http.client库来设置代理服务器发送HTTP请求。通过在代码中指定代理服务器的地址、用户名和密码,我们可以方便地使用代理访问网站。