URL 地址參數(shù)

在使用requests模塊發(fā)送請求之前，我們就要回顧之前學(xué)習(xí)到的url(統(tǒng)一資源定位符)。

在你拿到數(shù)據(jù)所在的url地址之后，發(fā)送網(wǎng)絡(luò)請求時，請求的url中包含兩種地址參數(shù):查詢參數(shù)和請求參數(shù)。

當(dāng)我們爬一些特殊網(wǎng)址時，請求的url中會有一些特殊的參數(shù)，例如以下站點:

這種是URL的查詢參數(shù)。前面是網(wǎng)址，?后面的二值性數(shù)據(jù)，就是查詢參數(shù)。

URL的查詢字符串(query string)傳遞某種數(shù)據(jù)。

如果你是手工構(gòu)建URL，也就是通過拼接字符串構(gòu)造的URL。

那么數(shù)據(jù)會以鍵/值對的形式置于URL中，跟在一個問號的后面。

例如:

https://image.so.com/i?q=%E9%A3%8E%E6%99%AF&src=srp

params關(guān)鍵字參數(shù)

Requests 允許你使用params關(guān)鍵字參數(shù)，以一個字典來提供這些參數(shù)。

舉例來說，如果你想傳遞key1=value1和key2=value2到 httpbin.org/get，那么你可以使用如下代碼:

import request
params = {'q' : '風(fēng)景' , 'src' : 'srp'}
response = requests.get("https: //image.so.com/i"，params=params)

通過打印輸出該URL，你能看到URL已被正確編碼:

print(response.url)

# 打印結(jié)果
https : / /image.so.com/i?q=%E9%A3%8E%E6%99%AF&src=srp

注意

在url地址中默認(rèn)是不支持中文字符的，所以在請求中會把中文字符轉(zhuǎn)化成url編碼形式

同樣的查詢參數(shù)可以在瀏覽器抓包工具中找到，位于Headers欄目下的Query String Parameters中，如下圖所示:

請求參數(shù)

請求參數(shù)和查詢參數(shù)有本質(zhì)的區(qū)別。

請求參數(shù)一般是在發(fā)送post請求，向服務(wù)器提交表單數(shù)據(jù)請求的時候攜帶的參數(shù)。

注意: url地址中不會顯示請求參數(shù)，只會顯示查詢參數(shù)。 請求參數(shù)在瀏覽器抓包工具中，位于Headers欄目下的Form Data中如下面數(shù)據(jù)抓包所示:

data關(guān)鍵字參數(shù)

在requests模塊中發(fā)送POST請求也是比較容易的操作，要實現(xiàn)這個，只需簡單地傳遞一個字典給data參數(shù)。

你的數(shù)據(jù)字典在發(fā)出請求時會自動編碼為表單形式:

data = {'key1' : 'value1'，'key2 ' : 'value2 '}
response = requests.post("http://httpbin.org/post"，data=data)

當(dāng)然Requests中的post方法只是相對于get方法多了一個data參數(shù)，其他參數(shù)都是類似的，例如我們也可以為post中的網(wǎng)址添加查詢字符串params參數(shù)，也可以像get方法一樣添加headers參數(shù)等。

到此這篇關(guān)于Python爬蟲requests模塊之URL地址中的參數(shù)解讀的文章就介紹到這了,更多相關(guān)Python的requests模塊URL地址參數(shù)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

最新評論