使用Python爬蟲庫requests發(fā)送請求、傳遞URL參數、定制headers
更新時間：2020年01月25日 11:50:39 作者：BQW_
今天為大家介紹一下Python爬蟲庫requests的發(fā)送請求、傳遞URL參數、定制headers的基礎使用方法
首先我們先引入requests模塊
import requests
一、發(fā)送請求
r = requests.get('https://api.github.com/events') # GET請求
r = requests.post('http://httpbin.org/post', data = {'key':'value'}) # POST請求
r = requests.put('http://httpbin.org/put', data = {'key':'value'}) # PUT請求
r = requests.delete('http://httpbin.org/delete') # DELETE請求
r = requests.head('http://httpbin.org/get') # HEAD請求
r = requests.options('http://httpbin.org/get') # OPTIONS請求
type(r)
requests.models.Response
二、傳遞URL參數
URL傳遞參數的形式為：httpbin.org/get?key=val。但是手動的構造很麻煩，這是可以使用params參數來方便的構造帶參數URL。
payload = {'key1': 'value1', 'key2': 'value2'}
r = requests.get("http://httpbin.org/get", params=payload)
print(r.url)
http://httpbin.org/get?key1=value1&key2=value2
同一個key可以有多個value
payload = {'key1': 'value1', 'key2': ['value2', 'value3']}
r = requests.get('http://httpbin.org/get', params=payload)
print(r.url)
http://httpbin.org/get?key1=value1&key2=value2&key2=value3
三、定制headers
只需要將一個dict傳遞給headers參數便可以定制headers
url = 'https://api.github.com/some/endpoint'
headers = {'user-agent': 'my-app/0.0.1'}
r = requests.get(url, headers=headers)
更多關于Python爬蟲庫requests的使用方法請點擊下面的相關鏈接
相關文章
這篇文章主要介紹了詳解Python中幾種操作字符串的方法,字符串的操作是Python學習中最基礎的基礎知識,需要的朋友可以參考下2015-04-04
這篇文章主要介紹了python實現ping命令小程序的方法，幫助大家更好的理解和使用python，感興趣的朋友可以了解下2020-12-12
對pandas中iloc,loc取數據差別及按條件取值的方法詳解
今天小編就為大家分享一篇對pandas中iloc,loc取數據差別及按條件取值的方法詳解，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-11-11
python是一門很強大的語言,因為有著豐富的第三方庫,所以可以說Python是無所不能的,下面這篇文章主要給大家介紹了關于用Python提取PPT中圖片的相關資料,文中通過實例代碼介紹的非常詳細,需要的朋友可以參考下2023-01-01
這篇文章主要為大家詳細介紹了Python3實現騰訊云OCR識別，具有一定的參考價值，感興趣的小伙伴們可以參考一下2018-11-11
這篇文章主要介紹了使用python從三個角度解決josephus問題的方法，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2020-03-03
這篇文章主要介紹了python如何使用replace做多字符替換，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2022-05-05
在本篇文章里小編給大家分享的是關于Python中socket網絡通信知識點內容，需要的朋友們可以跟著學習下。2020-05-05
這篇文章主要為大家詳細介紹了python實現簡易通訊錄的修改版，具有一定的參考價值，感興趣的小伙伴們可以參考一下2018-03-03
日常工作中我們經常會用到pdf格式的文件,大多數情況下是瀏覽或者編輯pdf信息,但有時候需要提取pdf中的文本,下面這篇文章主要給大家介紹了關于利用Python提取PDF文本的簡單方法,需要的朋友可以參考下2022-07-07