快捷導(dǎo)航

Python緩存技術(shù)實(shí)現(xiàn)過(guò)程詳解

更新時(shí)間：2019年09月25日 08:47:29 投稿：yaominghui

這篇文章主要介紹了Python緩存技術(shù)實(shí)現(xiàn)過(guò)程詳解,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下

一段非常簡(jiǎn)單代碼

普通調(diào)用方式

def console1(a, b):
  print("進(jìn)入函數(shù)")
  return (a, b)

print(console1(3, 'a'))
print(console1(2, 'b'))
print(console1(3.0, 'a'))

很簡(jiǎn)單的一段代碼，傳入兩個(gè)參數(shù)。然后打印輸出。輸出結(jié)果

進(jìn)入函數(shù)
(3, 'a')
進(jìn)入函數(shù)
(2, 'b')
進(jìn)入函數(shù)
(3.0, 'a')

使用某個(gè)裝飾器后

接下來(lái)我們引入functools模塊的lru_cache，python3自帶模塊。

from functools import lru_cache
@lru_cache()
def console2(a, b):
  print("進(jìn)入函數(shù)")
  return (a, b)
print(console2(3, 'a'))
print(console2(2, 'b'))
print(console2(3.0, 'a'))

ほら、驚喜來(lái)了。

進(jìn)入函數(shù)
(3, 'a')
進(jìn)入函數(shù)
(2, 'b')
(3, 'a')

我們發(fā)現(xiàn)，少了一次進(jìn)入函數(shù)的打印，這是怎么回事呢？這就是接下來(lái)要說(shuō)的LRU緩存技術(shù)了。

我們理解下什么是LRU

LRU (Least Recently Used) 是緩存置換策略中的一種常用的算法。當(dāng)緩存隊(duì)列已滿時(shí)，新的元素加入隊(duì)列時(shí)，需要從現(xiàn)有隊(duì)列中移除一個(gè)元素，LRU 策略就是將最近最少被訪問(wèn)的元素移除，從而騰出空間給新的元素。

python中的實(shí)現(xiàn)

python3中的functools模塊的lru_cache實(shí)現(xiàn)了這個(gè)功能，lru_cache裝飾器會(huì)記錄以往函數(shù)運(yùn)行的結(jié)果，實(shí)現(xiàn)了備忘（memoization）功能，避免參數(shù)重復(fù)時(shí)反復(fù)調(diào)用，達(dá)到提高性能的作用，在遞歸函數(shù)中作用特別明顯。這是一項(xiàng)優(yōu)化技術(shù)，它把耗時(shí)的函數(shù)的結(jié)果保存起來(lái)，避免傳入相同的參數(shù)時(shí)重復(fù)計(jì)算。

帶參數(shù)的lru_cache

使用方法lru_cache(maxsize=128, typed=False)maxsize可以緩存最多個(gè)此函數(shù)的調(diào)用結(jié)果，從而提高程序執(zhí)行的效率，特別適合于耗時(shí)的函數(shù)。參數(shù)maxsize為最多緩存的次數(shù)，如果為None，則無(wú)限制，設(shè)置為2的n次冪時(shí)，性能最佳；如果 typed=True，則不同參數(shù)類型的調(diào)用將分別緩存，例如 f(3) 和 f(3.0)，默認(rèn)False來(lái)一段綜合代碼：

from functools import lru_cache

def console1(a, b):
  print("進(jìn)入函數(shù)")
  return (a, b)


@lru_cache()
def console2(a, b):
  print("進(jìn)入函數(shù)")
  return (a, b)


@lru_cache(maxsize=256, typed=True)
def console3(a, b):
  '''

  :param a:
  :param b:
  :return:
  '''
  print("進(jìn)入函數(shù)")
  return (a, b)


print(console1(3, 'a'))
print(console1(2, 'b'))
print(console1(3.0, 'a'))
print("*" * 40)
print(console2(3, 'a'))
print(console2(2, 'b'))
print(console2(3.0, 'a'))
print("*" * 40)
print(console3(3, 'a'))
print(console3(2, 'b'))
print(console3(3.0, 'a'))

同樣的可以用到爬蟲(chóng)的去重操作上，避免網(wǎng)頁(yè)的重復(fù)請(qǐng)求。在后期存儲(chǔ)的時(shí)候做判斷即可。

from functools import lru_cache
from requests_html import HTMLSession
session=HTMLSession()
@lru_cache()
def get_html(url):
  req=session.get(url)
  print(url)
  return req

urllist=["https://www.baidu.com","https://pypi.org/project/pylru/1.0.9/","https://www.baidu.com"]

if __name__ == '__main__':
  for i in urllist:
    print(get_html(i))

輸出

https://www.baidu.com
<Response [200]>
https://pypi.org/project/pylru/1.0.9/
<Response [200]>
<Response [200]>

以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。

您可能感興趣的文章:

最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Python緩存技術(shù)實(shí)現(xiàn)過(guò)程詳解

相關(guān)文章

最新評(píng)論

大家感興趣的內(nèi)容

最近更新的內(nèi)容

常用在線小工具