Python selenium+cookie實(shí)現(xiàn)免密登陸的示例代碼
今天爬取airbnb的租房數(shù)據(jù)時(shí),遇到了登陸問題。自己動(dòng)手解決了一下。
我們知道,http是無狀態(tài)的,那么網(wǎng)頁(yè)如何實(shí)現(xiàn)用戶登陸注冊(cè)功能呢?Session和Cookie就是為了滿足這種需求出現(xiàn)的技術(shù)。
首先介紹一下Session和Cookie的概念。
在Web中Session對(duì)象存儲(chǔ)特定用戶會(huì)話所需的屬性及配置信息。這樣,當(dāng)用戶在應(yīng)用程序的Web頁(yè)之間跳轉(zhuǎn)時(shí),存儲(chǔ)在Session對(duì)象中的變量將不會(huì)丟失,而是在整個(gè)用戶會(huì)話中一直存在下去。當(dāng)用戶請(qǐng)求來自應(yīng)用程序的 Web頁(yè)時(shí),如果該用戶還沒有會(huì)話,則Web服務(wù)器將自動(dòng)創(chuàng)建一個(gè) Session對(duì)象。當(dāng)會(huì)話過期或被放棄后,服務(wù)器將終止該會(huì)話。
Cookie,有時(shí)也用其復(fù)數(shù)形式 Cookies。類型為“小型文本文件”,是某些網(wǎng)站為了辨別用戶身份,進(jìn)行Session跟蹤而儲(chǔ)存在用戶本地終端上的數(shù)據(jù)(通常經(jīng)過加密),由用戶客戶端計(jì)算機(jī)暫時(shí)或永久保存的信息。
當(dāng)用戶第一次訪問某個(gè)網(wǎng)頁(yè)時(shí),服務(wù)器會(huì)創(chuàng)建一個(gè)Session對(duì)象,用于存儲(chǔ)與該用戶會(huì)話的屬性以及配置信息,并且返回一個(gè)帶有set-cookie字段的響應(yīng)頭給客戶端,客戶端瀏覽器會(huì)把cookie保存到本地,下一次訪問該網(wǎng)頁(yè)時(shí),會(huì)加上cookie。服務(wù)器通過cookie辨認(rèn)是否有用戶的Session。這樣就實(shí)現(xiàn)了用戶的登陸注冊(cè)功能,但是Session和Cookie的應(yīng)用遠(yuǎn)不及此,這里不再贅述。
那么為了實(shí)現(xiàn)免密登陸,我們需要做如下幾件事情:
獲取登陸airbnb時(shí)客戶端瀏覽器存儲(chǔ)的cookies。
把cookies寫入本地。
下次用selenium登陸airbnb時(shí),把cookies帶上。
獲取cookies:
使用selenium的get_cookies()函數(shù)來獲取cookies。
但是如何實(shí)現(xiàn)登陸呢?總得要先登陸了,才能有cookies吧?可以在代碼中加一段休眠時(shí)間,在休眠時(shí)間我們手動(dòng)完成登陸,休眠過后,再讓代碼記錄cookies即可。
import time
from msedge.selenium_tools import Edge, EdgeOptions
import chardet
# 返回一個(gè)driver對(duì)象
def activate_selenium_driver():
options = EdgeOptions()
# options.use_chromium = True
options.add_experimental_option('excludeSwitches', ['enable-automation'])
options.binary_location = r"C:\Program Files (x86)\Microsoft\Edge\Application\msedge.exe" # 瀏覽器的位置
driver = Edge(options=options, executable_path=r"D:\ERic\WORK\python\Spider\msedgedriver.exe") # 相應(yīng)的瀏覽器的驅(qū)動(dòng)位置
return driver
def check_charset(file_path):
with open(file_path, "rb") as f:
data = f.read(4)
charset = chardet.detect(data)['encoding']
return charset
baseurl = 'https://www.airbnb.cn/s/%E6%B7%B1%E5%9C%B3/homes?refinement_paths%5B%5D=%2Fhomes¤t_tab_id=home_tab&selected_tab_id=home_tab&screen_size=large&hide_dates_and_guests_filters=false&place_id=ChIJkVLh0Aj0AzQRyYCStw1V7v0&map_toggle=false'
driver = activate_selenium_driver()
driver.get(baseurl)
# 20秒的休眠時(shí)間以手動(dòng)完成登陸
for i in range(0, 20):
print(20 - i)
time.sleep(1)
# 獲取cookies
cookies = driver.get_cookies()
# 保存到本地
with open('cookies.txt', 'w', encoding=check_charset('cookies.txt')) as f:
for i in cookies:
f.write(str(i))
f.write('\n')攜帶cookies實(shí)現(xiàn)免密登陸:
baseurl = 'https://www.airbnb.cn/s/%E6%B7%B1%E5%9C%B3/homes?refinement_paths%5B%5D=%2Fhomes¤t_tab_id=home_tab&selected_tab_id=home_tab&screen_size=large&hide_dates_and_guests_filters=false&place_id=ChIJkVLh0Aj0AzQRyYCStw1V7v0&map_toggle=false'
driver.get(baseurl)
cookies = []
with open('cookies.txt', 'r', encoding=funcs.funcs.check_charset('cookies.txt')) as f:
for i in f:
cookies.append(eval(i.strip()))
for i in cookies:
driver.add_cookie(i)
time.sleep(3)
driver.refresh()再次打開Airbnb時(shí),發(fā)現(xiàn)已經(jīng)是登陸狀態(tài),大功告成辣。

到此這篇關(guān)于Python selenium+cookie實(shí)現(xiàn)免密登陸的示例代碼的文章就介紹到這了,更多相關(guān)selenium cookie免密登陸內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
用python寫測(cè)試數(shù)據(jù)文件過程解析
這篇文章主要介紹了用python寫測(cè)試數(shù)據(jù)文件過程解析,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-09-09
使用Python pyglet庫(kù)編寫一個(gè)可播放音樂的揚(yáng)聲器類流程詳解
這篇文章主要介紹了使用Python pyglet庫(kù)編寫一個(gè)可播放音樂的揚(yáng)聲器類,Pyglet主要用于創(chuàng)建視頻游戲、獨(dú)立游戲和多媒體應(yīng)用,它提供了一組用于制作游戲的常用功能,包括圖形渲染、聲音播放、事件處理等等,需要的朋友可以參考下2024-03-03
python將txt等文件中的數(shù)據(jù)讀為numpy數(shù)組的方法
今天小編就為大家分享一篇python將txt等文件中的數(shù)據(jù)讀為numpy數(shù)組的方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-12-12
Python標(biāo)準(zhǔn)庫(kù)之加密模塊詳解
這篇文章主要為大家詳細(xì)介紹了Python標(biāo)準(zhǔn)庫(kù)中加密模塊的相關(guān)知識(shí),文中的示例代碼講解詳細(xì),具有一定的學(xué)習(xí)價(jià)值,感興趣的小伙伴可以了解一下2023-07-07

