Python中的CURL PycURL使用例子
更新時間:2014年06月01日 22:43:59 作者:
這篇文章主要介紹了Python中的CURL PycURL使用例子,需要的朋友可以參考下
在Linux上有個常用的命令 curl(非常好用),支持curl的就是大名鼎鼎的libcurl庫;libcurl是功能強大的,而且是非常高效的函數(shù)庫。libcurl除了提供本身的C API之外,還有多達(dá)40種編程語言的Binding,這里介紹的PycURL就是libcurl的Python binding。
在Python中對網(wǎng)頁進(jìn)行GET/POST等請求,當(dāng)需要考慮高性能的時候,libcurl是非常不錯的選擇,一般來說會比liburl、liburl2快不少,可能也會比Requests的效率更高。特別是使用PycURL的多并發(fā)請求時,更是效率很高的。個人感覺,其唯一的缺點是,由于是直接調(diào)用的是libcurl C庫,PycURL的函數(shù)接口之類的還和C中的東西很像,可能不是那么的Pythonic,寫代碼的學(xué)習(xí)曲線稍微比liburl高一點兒。
還是看個簡單的例子吧:
#! /usr/bin/env python
# -*- coding: utf-8 -*-
'''
Created on Dec 15, 2013
@author: Jay
'''
import sys
import pycurl
import time
class Test:
def __init__(self):
self.contents = ''
def body_callback(self, buf):
self.contents = self.contents + buf
sys.stderr.write("Testing %s\n" % pycurl.version)
start_time = time.time()
url = 'http://www.dianping.com/shanghai'
t = Test()
c = pycurl.Curl()
c.setopt(c.URL, url)
c.setopt(c.WRITEFUNCTION, t.body_callback)
c.perform()
end_time = time.time()
duration = end_time - start_time
print c.getinfo(pycurl.HTTP_CODE), c.getinfo(pycurl.EFFECTIVE_URL)
c.close()
print 'pycurl takes %s seconds to get %s ' % (duration, url)
print 'lenth of the content is %d' % len(t.contents)
#print(t.contents)
在Python中對網(wǎng)頁進(jìn)行GET/POST等請求,當(dāng)需要考慮高性能的時候,libcurl是非常不錯的選擇,一般來說會比liburl、liburl2快不少,可能也會比Requests的效率更高。特別是使用PycURL的多并發(fā)請求時,更是效率很高的。個人感覺,其唯一的缺點是,由于是直接調(diào)用的是libcurl C庫,PycURL的函數(shù)接口之類的還和C中的東西很像,可能不是那么的Pythonic,寫代碼的學(xué)習(xí)曲線稍微比liburl高一點兒。
還是看個簡單的例子吧:
復(fù)制代碼 代碼如下:
#! /usr/bin/env python
# -*- coding: utf-8 -*-
'''
Created on Dec 15, 2013
@author: Jay
'''
import sys
import pycurl
import time
class Test:
def __init__(self):
self.contents = ''
def body_callback(self, buf):
self.contents = self.contents + buf
sys.stderr.write("Testing %s\n" % pycurl.version)
start_time = time.time()
url = 'http://www.dianping.com/shanghai'
t = Test()
c = pycurl.Curl()
c.setopt(c.URL, url)
c.setopt(c.WRITEFUNCTION, t.body_callback)
c.perform()
end_time = time.time()
duration = end_time - start_time
print c.getinfo(pycurl.HTTP_CODE), c.getinfo(pycurl.EFFECTIVE_URL)
c.close()
print 'pycurl takes %s seconds to get %s ' % (duration, url)
print 'lenth of the content is %d' % len(t.contents)
#print(t.contents)
相關(guān)文章
符合語言習(xí)慣的 Python 優(yōu)雅編程技巧【推薦】
Python最大的優(yōu)點之一就是語法簡潔,好的代碼就像偽代碼一樣,干凈、整潔、一目了然。這篇文章給大家介紹Python 優(yōu)雅編程技巧,感興趣的朋友跟隨小編一起看看吧2018-09-09
使用Python中PDB模塊中的命令來調(diào)試Python代碼的教程
這篇文章主要介紹了使用Python中PDB模塊中的命令來調(diào)試Python代碼的教程,包括設(shè)置斷點來修改代碼等、對于Python團(tuán)隊項目工作有一定幫助,需要的朋友可以參考下2015-03-03
vscode和Anaconda安裝以及相關(guān)環(huán)境配置指南
Anaconda是一個開源的python發(fā)行版本,是現(xiàn)在比較流行的python數(shù)據(jù)科學(xué)平臺,可以對python的科學(xué)包做到有效管理,這篇文章主要給大家介紹了關(guān)于vscode和Anaconda安裝以及相關(guān)環(huán)境配置指南的相關(guān)資料,需要的朋友可以參考下2023-11-11
PyQt5 實現(xiàn)字體大小自適應(yīng)分辨率的方法
今天小編就為大家分享一篇PyQt5 實現(xiàn)字體大小自適應(yīng)分辨率的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-06-06

