Python urlopen 使用小示例
更新時(shí)間:2008年09月06日 14:31:49 作者:
打開一個(gè)網(wǎng)頁獲取所有的內(nèi)容、獲取Http頭、使用代理等小結(jié)
一、打開一個(gè)網(wǎng)頁獲取所有的內(nèi)容
from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc
doc = urlopen("http://www.baidu.com").read()
print doc
二、獲取Http頭
from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')
三、使用代理
1. 查看環(huán)境變量
print ""n".join(["%s=%s" % (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")
print os.getenv("http_proxy")
2. 設(shè)置環(huán)境變量
import os
os.putenv("http_proxy", "http://proxyaddr:<port>")
os.putenv("http_proxy", "http://proxyaddr:<port>")
3. 使用代理
# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)
您可能感興趣的文章:
- Python urlopen()和urlretrieve()用法解析
- 詳解Python3網(wǎng)絡(luò)爬蟲(二):利用urllib.urlopen向有道翻譯發(fā)送數(shù)據(jù)獲得翻譯結(jié)果
- python urllib urlopen()對象方法/代理的補(bǔ)充說明
- 解決python3 urllib中urlopen報(bào)錯的問題
- Python使用urllib模塊的urlopen超時(shí)問題解決方法
- Python urlopen()函數(shù) 示例分享
- Python urllib模塊urlopen()與urlretrieve()詳解
- Python urlopen()參數(shù)代碼示例解析
相關(guān)文章
python隨機(jī)種子ranrandom seed的使用
本文介紹了在Python中設(shè)置隨機(jī)種子random seed的方法,可以使用seed()函數(shù)設(shè)置隨機(jī)種子,確保你的隨機(jī)數(shù)生成過程是可重復(fù)的,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2024-12-12
Appium+Python自動化測試之運(yùn)行App程序示例
這篇文章主要介紹了Appium+Python自動化測試之運(yùn)行App程序示例,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2019-01-01
python螺旋數(shù)字矩陣的實(shí)現(xiàn)示例
本文介紹了使用Python生成一個(gè)螺旋數(shù)字矩陣,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2024-12-12

