Python requests和httpx實(shí)例詳解
更新時(shí)間：2023年12月26日 10:43:17 作者：麥子磨成面筋
這篇文章主要介紹了Python requests和httpx的相關(guān)知識(shí),本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友參考下吧
Python requests和httpx
1. 獲取cookies
1.1 requests獲取cookies
1.1.1 直接獲取cookies
response = requests.get(url=url, headers=headers) response.cookies.items()
1.1.2 session 獲取cookies
session = requests.session()
1.2 httpx獲取cookie
response.cookies.items()
1.3 獲取Set-Cookie
response = requests.get(url=url, headers=headers)
set_cookies = response.headers.get('Set-Cookie')
# 注意，如果是重定向的話，會(huì)獲取不到set-cookie，需要allow_redirects=False來(lái)禁止重定向
response = requests.get(url=url, headers=headers, allow_redirects=False)1.4 cookie 失效
3.1 將cookie放在cookies參數(shù)里
1.5 獲取cookie的問(wèn)題
1.5.1 發(fā)生了302重定向
看請(qǐng)求是否發(fā)生了302重定向
使用requests.Session()方法，會(huì)使該連接持久化
1.5.2 發(fā)生了跨域請(qǐng)求
2、添加代理(requests和httpx的代理樣式不一樣)
2.1 requests添加代理
proxies={
'http': 'http://ip:port',
'https': 'http://ip:port',
}2.1.1get或者post
import requests url="" response=requests.get(url=url, proxies=proxies)
2.1.2 session
import requests url="" session = requests.session() session.proxies.update(proxy)
2.2 httpx添加代理
import httpx
proxies = {
'http://': 'http://ip:port',
'https://': 'http://ip:port',
}
url = ""
response = httpx.get(url=url, proxies=proxies)到此這篇關(guān)于Python requests和httpx的文章就介紹到這了,更多相關(guān)Python requests和httpx內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
ChatGPT 幫我自動(dòng)編寫(xiě) Python 爬蟲(chóng)腳本的詳細(xì)過(guò)程
ChatGPT是一種基于大語(yǔ)言模型的生成式AI，換句話說(shuō)它可以自動(dòng)生成類似人類語(yǔ)言的文本，把梳理好的有邏輯的答案呈現(xiàn)在你面前，這完全不同于傳統(tǒng)搜索工具，這篇文章主要介紹了ChatGPT 幫我自動(dòng)編寫(xiě) Python 爬蟲(chóng)腳本,需要的朋友可以參考下2023-02-02
python logging日志模塊以及多進(jìn)程日志詳解
本篇文章主要介紹了python logging日志模塊以及多進(jìn)程日志詳解，小編覺(jué)得挺不錯(cuò)的，現(xiàn)在分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2018-04-04
matplotlib繪制兩點(diǎn)間連線的幾種方法實(shí)現(xiàn)
本文主要介紹了matplotlib繪制兩點(diǎn)間連線的幾種方法實(shí)現(xiàn)，主要介紹了4種方法，文中通過(guò)示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2022-03-03
python configparser中默認(rèn)值的設(shè)定方式
這篇文章主要介紹了python configparser中默認(rèn)值的設(shè)定方式，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2022-02-02
從零學(xué)Python之入門(mén)（四）運(yùn)算
最近2天，各種不順利，還被一個(gè)油門(mén)當(dāng)剎車的憨貨給追尾了，所以本系列發(fā)的比較少，本文是系列的第四篇，講述的是Python的運(yùn)算2014-05-05
Python爬蟲(chóng)scrapy框架Cookie池(微博Cookie池)的使用
這篇文章主要介紹了Python爬蟲(chóng)scrapy框架Cookie池(微博Cookie池)的使用,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-01-01
python異步編程 使用yield from過(guò)程解析
這篇文章主要介紹了python異步編程 使用yield from過(guò)程解析,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-09-09
python時(shí)間日期函數(shù)與利用pandas進(jìn)行時(shí)間序列處理詳解
python標(biāo)準(zhǔn)庫(kù)包含于日期（date）和時(shí)間（time）數(shù)據(jù)的數(shù)據(jù)類型，datetime、time以及calendar模塊會(huì)被經(jīng)常用到,而pandas則可以對(duì)時(shí)間進(jìn)行序列化排序2018-03-03
詳解如何使用numpy提高Python數(shù)據(jù)分析效率
NumPy是Python語(yǔ)言的一個(gè)第三方庫(kù)，其支持大量高維度數(shù)組與矩陣運(yùn)算。本文主要為大家介紹了如何使用numpy提高python數(shù)據(jù)分析效率，需要的可以參考一下2023-04-04
python簡(jiǎn)單的三元一次方程求解實(shí)例
這篇文章主要介紹了python簡(jiǎn)單的三元一次方程求解實(shí)例，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-04-04