Python requests及aiohttp速度對(duì)比代碼實(shí)例
更新時(shí)間：2020年07月16日 10:34:41 作者：陳嚴(yán)肅
這篇文章主要介紹了Python requests及aiohttp速度對(duì)比代碼實(shí)例,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
環(huán)境：centos7 python3.6
測(cè)試網(wǎng)址：www.bai.com
測(cè)試方式：抓取百度100次
結(jié)果：
aio: 10.702147483825684s
requests: 12.404678583145142s
異步框架的速度還是有顯著提升的。
下面貢獻(xiàn)代碼：
import aiohttp
import time
import requests
import asyncio
def test_requests():
""" 測(cè)試requessts請(qǐng)求百度100次時(shí)間 """
start = time.time()
url = "https://www.baidu.com"
for i in range(100):
requests.get(url)
end = time.time()
print("requests:")
print( end - start )
async def aio_download(url):
""" aiohttp 下載 """
async with aiohttp.ClientSession() as session:
await session.get(url)
async def test_aio():
""" 測(cè)試aiohtpp請(qǐng)求百度100次時(shí)間 """
url = "https://www.baidu.com"
start = time.time()
for i in range(100):
await aio_download(url)
end = time.time()
print("aio: ")
print( end - start )
if __name__ == "__main__":
loop = asyncio.get_event_loop()
loop.run_until_complete(test_aio())
test_requests()
————————————————————————————————————————
-—————————————————————————————————————————
小貼士：
requests不要使用session進(jìn)行反復(fù)抓取一個(gè)網(wǎng)站的測(cè)試，因?yàn)閺牡?次開(kāi)始，讀取的就是緩存了，無(wú)論抓取50次還是100次或是更多，總時(shí)間都是1s以?xún)?nèi)。
以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
在日常生活中,我們常常會(huì)遇到大型的PDF文件,難以發(fā)送,將PDF拆分成多個(gè)小文件是一個(gè)實(shí)用的解決方案,下面我們就來(lái)看看如何使用Python實(shí)現(xiàn)PDF文件拆分吧2025-02-02
?python中字符串的常見(jiàn)操作總結(jié)(二)
這篇文章主要介紹了python中字符串的常見(jiàn)操作，文章圍繞主題展開(kāi)詳細(xì)的內(nèi)容介紹，具有一定的參考價(jià)值，需要的小伙伴可以參考一下2022-07-07
Python使用函數(shù)輔助工具簡(jiǎn)化開(kāi)發(fā)提高效率
這篇文章主要為大家介紹了Python使用函數(shù)輔助工具簡(jiǎn)化開(kāi)發(fā)提高效率,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2024-01-01
這篇文章主要介紹了Python文件操作基本流程代碼實(shí)例，具有一定借鑒價(jià)值，需要的朋友可以了解下。2017-12-12
這篇文章主要為大家詳細(xì)介紹了python實(shí)現(xiàn)貪吃蛇游戲，文中示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2020-03-03
這篇文章主要介紹了python求pi的方法,是一篇翻譯文章,備有詳細(xì)的注釋供大家參考,需要的朋友可以參考下2014-10-10
Python cookbook（數(shù)據(jù)結(jié)構(gòu)與算法）讓字典保持有序的方法
這篇文章主要介紹了Python讓字典保持有序的方法,涉及Python基于collections模塊中的OrderedDict類(lèi)實(shí)現(xiàn)控制字典順序的相關(guān)操作技巧,需要的朋友可以參考下2018-02-02
今天小編就為大家分享一篇PyQt5 在label顯示的圖片中繪制矩形的方法，具有很好的參考價(jià)值。希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-06-06
這篇文章主要介紹了rabbitmq(中間消息代理)在python中的使用詳解，小編覺(jué)得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2017-12-12
解決Python 函數(shù)聲明先后順序出現(xiàn)的問(wèn)題
這篇文章主要介紹了如何解決Python 函數(shù)聲明先后順序的問(wèn)題，幫助大家更好的理解和學(xué)習(xí)python，感興趣的朋友可以了解下2020-09-09