快捷導(dǎo)航

Python3中urllib庫(kù)添加請(qǐng)求頭的兩種方式

更新時(shí)間：2023年10月13日 14:46:11 作者：BinaryMoon

Python?3中的urllib模塊可以用來(lái)處理URL,包括下載和上傳文件、創(chuàng)建和讀取cookie、訪問(wèn)Web?API等,本文給大家介紹Python3中urllib庫(kù)添加請(qǐng)求頭的兩種方式,感興趣的朋友一起看看吧

Python3中urllib庫(kù)添加請(qǐng)求頭的兩種方式

導(dǎo)入模塊

import urllib.request

方法一：build_opener類(lèi)

link = 'https://movie.douban.com/top250'
#	在這里，必須使用元組或列表的方式定制請(qǐng)求頭。
headers = （'user-agent','mozilla/5.0'）
opener = urllib.request.build_opener()
#	請(qǐng)求頭會(huì)以列表包含元組或列表的方式進(jìn)行保存。
opener.addheaders = [headers]
r = opener.open(link,timeout=10)
#	打印請(qǐng)求狀態(tài)碼，這里返回200，表示請(qǐng)求成功。
print(r.code)

方式二：Request與urlopen類(lèi)

link = 'https://movie.douban.com/top250'
headers = {'user-agent':'mozilla/5.0'}
'''
使用Request類(lèi)添加請(qǐng)求頭可以不使用headers這個(gè)參數(shù)。而使用這個(gè)類(lèi)的實(shí)例化對(duì)象的方法
add_header(key='user-agent',val='mozilla/5.0')
'''
add = urllib.request.Request(url=link,headers=headers)
r = urllib.request.urlopen(url=add,timeout=10)
print(r.code)

在方式二中，urllib庫(kù)中Request與urlopen兩個(gè)請(qǐng)求類(lèi)一起使用的主要原因：

Request可以添加請(qǐng)求頭，而urlopen不能。
urlopen可以對(duì)響應(yīng)對(duì)象進(jìn)行狀態(tài)碼的訪問(wèn)、網(wǎng)頁(yè)代碼的讀取等一系列操作。
它們?cè)趨?shù)上具有一定的區(qū)別。

補(bǔ)充：

python 3的urllib庫(kù)介紹

Python 3中的urllib模塊可以用來(lái)處理URL，包括下載和上傳文件、創(chuàng)建和讀取cookie、訪問(wèn)Web API等。在本文中，我們將詳細(xì)介紹urllib庫(kù)中最常用的四個(gè)模塊：urllib.request、urllib.parse、urllib.error和urllib.robotparser。

一、urllib.request模塊

該模塊提供了許多功能，如打開(kāi)URL、讀取其中的響應(yīng)，以及設(shè)置請(qǐng)求頭等。

打開(kāi)URL 有兩種方法打開(kāi)URL，分別是使用urllib.request.urlopen()和 urllib.request.Request()。

1.1 使用urllib.request.urlopen()

可以使用urlopen()函數(shù)打開(kāi)一個(gè)URL，如果給定了字符串參數(shù)，將嘗試打開(kāi)這個(gè)URL，并且返回一個(gè) file-like 對(duì)象，在此對(duì)象上可以執(zhí)行類(lèi)似文件的操作。例如：

python
import urllib.request
response = urllib.request.urlopen(‘https://www.example.com/')
print(response.read().decode(‘utf-8'))

此代碼將在控制臺(tái)輸出從示例站點(diǎn)獲取的HTML內(nèi)容。

1.2 使用urllib.request.Request()

假設(shè)需要傳遞一些參數(shù)、HTTP頭等信息，則可以使用Request()方法構(gòu)造一個(gè)請(qǐng)求對(duì)象，然后再調(diào)用urlopen()發(fā)送請(qǐng)求。例如：

python
import urllib.request
req = urllib.request.Request(‘http://www.example.com/', data=b'some_data', headers={‘User-Agent': ‘Mozilla/5.0'})
response = urllib.request.urlopen(req)
print(response.read().decode(‘utf-8'))

這里創(chuàng)建了一個(gè)請(qǐng)求對(duì)象，其中包含URL、數(shù)據(jù)（可[Cannot read property ‘status’ of undefined]

到此這篇關(guān)于Python3中urllib庫(kù)的兩種添加請(qǐng)求頭的方式的文章就介紹到這了,更多相關(guān)Python3 urllib庫(kù)添加請(qǐng)求頭內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: