使用Python爬蟲庫requests發(fā)送請求、傳遞URL參數(shù)、定制headers
更新時間：2020年01月25日 11:50:39 作者：BQW_
今天為大家介紹一下Python爬蟲庫requests的發(fā)送請求、傳遞URL參數(shù)、定制headers的基礎(chǔ)使用方法
首先我們先引入requests模塊
import requests
一、發(fā)送請求
r = requests.get('https://api.github.com/events') # GET請求
r = requests.post('http://httpbin.org/post', data = {'key':'value'}) # POST請求
r = requests.put('http://httpbin.org/put', data = {'key':'value'}) # PUT請求
r = requests.delete('http://httpbin.org/delete') # DELETE請求
r = requests.head('http://httpbin.org/get') # HEAD請求
r = requests.options('http://httpbin.org/get') # OPTIONS請求
type(r)
requests.models.Response
二、傳遞URL參數(shù)
URL傳遞參數(shù)的形式為：httpbin.org/get?key=val。但是手動的構(gòu)造很麻煩，這是可以使用params參數(shù)來方便的構(gòu)造帶參數(shù)URL。
payload = {'key1': 'value1', 'key2': 'value2'}
r = requests.get("http://httpbin.org/get", params=payload)
print(r.url)
http://httpbin.org/get?key1=value1&key2=value2
同一個key可以有多個value
payload = {'key1': 'value1', 'key2': ['value2', 'value3']}
r = requests.get('http://httpbin.org/get', params=payload)
print(r.url)
http://httpbin.org/get?key1=value1&key2=value2&key2=value3
三、定制headers
只需要將一個dict傳遞給headers參數(shù)便可以定制headers
url = 'https://api.github.com/some/endpoint'
headers = {'user-agent': 'my-app/0.0.1'}
r = requests.get(url, headers=headers)
更多關(guān)于Python爬蟲庫requests的使用方法請點(diǎn)擊下面的相關(guān)鏈接
相關(guān)文章
C#返回當(dāng)前系統(tǒng)所有可用驅(qū)動器符號的方法
這篇文章主要介紹了C#返回當(dāng)前系統(tǒng)所有可用驅(qū)動器符號的方法,涉及C#操作系統(tǒng)硬件驅(qū)動的相關(guān)技巧,需要的朋友可以參考下2015-04-04
這篇文章主要介紹了Python contextlib模塊使用示例,本文著重使用contextlib模塊產(chǎn)生一個上下文管理器,需要的朋友可以參考下2015-02-02
Python內(nèi)建模塊struct實(shí)例詳解
這篇文章主要介紹了Python內(nèi)建模塊struct實(shí)例詳解，分享了相關(guān)代碼示例，小編覺得還是挺不錯的，具有一定借鑒價值，需要的朋友可以參考下2018-02-02
這篇文章主要介紹了Python 中@property的用法詳解，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-01-01
這篇文章主要給大家介紹了關(guān)于如何利用python查看數(shù)組中的所有元素是否相同的相關(guān)資料，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-01-01
python Event事件、進(jìn)程池與線程池、協(xié)程解析
這篇文章主要介紹了python Event事件、進(jìn)程池與線程池、協(xié)程解析,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2019-10-10
pytorch訓(xùn)練神經(jīng)網(wǎng)絡(luò)爆內(nèi)存的解決方案
這篇文章主要介紹了pytorch訓(xùn)練神經(jīng)網(wǎng)絡(luò)爆內(nèi)存的解決方案，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2021-05-05
pytest自動化測試中的fixture的聲明和調(diào)用
這篇文章主要為大家介紹了pytest自動化測試中的fixture的聲明和調(diào)用，文中含有詳細(xì)示例操作有需要的朋友可以借鑒參考下，希望能夠有所幫助2021-10-10
實(shí)例講解Python中g(shù)lobal語句下全局變量的值的修改
global是Python中的一個關(guān)鍵字用來,聲明一個局部變量為全局變量,這里我們來以實(shí)例講解Python中g(shù)lobal語句下全局變量的值的修改,需要的朋友可以參考下.2016-06-06
淺談在JupyterNotebook下導(dǎo)入自己的模塊的問題
這篇文章主要介紹了淺談在JupyterNotebook下導(dǎo)入自己的模塊的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-04-04