亚洲乱码中文字幕综合,中国熟女仑乱hd,亚洲精品乱拍国产一区二区三区,一本大道卡一卡二卡三乱码全集资源,又粗又黄又硬又爽的免费视频

Python Pycurl的屬性與方法案例詳解

 更新時(shí)間:2021年09月01日 16:07:05   投稿:xusong  
這篇文章主要介紹了Python Pycurl的屬性與方法案例詳解,本篇文章通過簡要的案例,講解了該項(xiàng)技術(shù)的了解與使用,以下就是詳細(xì)內(nèi)容,需要的朋友可以參考下

Pycurl包是一個(gè)libcurl的Python接口,由C語言編寫的,功能強(qiáng)大,速度快。由于pycurl的屬性和方法太多了,寫這篇博文記錄一下pycurl的屬性和方法。

正常安裝

pip install pycurl

如果出現(xiàn)問題,可以按照系統(tǒng)版本搜索安裝方法,比如centos7.1 安裝pycurl

通用請(qǐng)求方法

import pycurl,urllib
from io import BytesIO
 
url = 'http://www.baidu.com'
 
headers = [
	"User-Agent:Mozilla/5.0 (iPhone; CPU iPhone OS 5_0 like Mac OS X) AppleWebKit/534.46 (KHTML, like Gecko) Version/5.1 Mobile/9A334 Safari/7534.48.3",
]
 
data = {
	"cityListName":"",
	"trade": ""
	}
 
c = pycurl.Curl()	#通過curl方法構(gòu)造一個(gè)對(duì)象
#c.setopt(pycurl.REFERER, 'http://www.baidu.com/')	#設(shè)置referer
c.setopt(pycurl.FOLLOWLOCATION, True)	#自動(dòng)進(jìn)行跳轉(zhuǎn)抓取
c.setopt(pycurl.MAXREDIRS,5)			#設(shè)置最多跳轉(zhuǎn)多少次
c.setopt(pycurl.CONNECTTIMEOUT, 60)		#設(shè)置鏈接超時(shí)
c.setopt(pycurl.TIMEOUT,120)			#下載超時(shí)
c.setopt(pycurl.ENCODING, 'gzip,deflate')	#處理gzip內(nèi)容
# c.setopt(c.PROXY,ip)	# 代理
c.fp = BytesIO()	
c.setopt(pycurl.URL, url)	#設(shè)置要訪問的URL
c.setopt(pycurl.HTTPHEADER,headers)		#傳入請(qǐng)求頭
c.setopt(pycurl.POST, 1)
c.setopt(pycurl.POSTFIELDS, urllib.urlencode(data))		#傳入POST數(shù)據(jù)
c.setopt(c.WRITEFUNCTION, c.fp.write)	#回調(diào)寫入字符串緩存
c.perform()		
 
code = c.getinfo(c.HTTP_CODE)	#返回狀態(tài)碼
html = c.fp.getvalue()	#返回源代碼
 
print c.getinfo(c.TOTAL_TIME)

GET請(qǐng)求方法

c = pycurl.Curl()   #通過curl方法構(gòu)造一個(gè)對(duì)象
c.setopt(pycurl.FOLLOWLOCATION, True)   #自動(dòng)進(jìn)行跳轉(zhuǎn)抓取
c.setopt(pycurl.MAXREDIRS,5)            #設(shè)置最多跳轉(zhuǎn)多少次
c.setopt(pycurl.CONNECTTIMEOUT, 60)     #設(shè)置鏈接超時(shí)
c.setopt(pycurl.TIMEOUT,120)            #下載超時(shí)
c.setopt(pycurl.ENCODING, 'gzip,deflate')   #處理gzip內(nèi)容
# c.setopt(c.PROXY,ip)  # 代理
c.fp = BytesIO()  
c.setopt(pycurl.URL, url)   #設(shè)置要訪問的URL
c.setopt(pycurl.USERAGENT,ua) #傳入ua
# c.setopt(pycurl.HTTPHEADER,self.headers)     #傳入請(qǐng)求頭
c.setopt(c.WRITEFUNCTION, c.fp.write)   #回調(diào)寫入字符串緩存
c.perform()     
code = c.getinfo(c.HTTP_CODE)   #返回狀態(tài)碼
html = c.fp.getvalue()  #返回源代碼

POST請(qǐng)求方法

c = pycurl.Curl()   #通過curl方法構(gòu)造一個(gè)對(duì)象
c.setopt(pycurl.FOLLOWLOCATION, True)   #自動(dòng)進(jìn)行跳轉(zhuǎn)抓取
c.setopt(pycurl.MAXREDIRS,5)            #設(shè)置最多跳轉(zhuǎn)多少次
c.setopt(pycurl.CONNECTTIMEOUT, 60)     #設(shè)置鏈接超時(shí)
c.setopt(pycurl.TIMEOUT,120)            #下載超時(shí)
c.setopt(pycurl.ENCODING, 'gzip,deflate')   #處理gzip內(nèi)容
# c.setopt(c.PROXY,ip)  # 代理
c.fp = BytesIO()  
c.setopt(pycurl.URL, url)   #設(shè)置要訪問的URL
c.setopt(pycurl.USERAGENT,ua ) #傳入U(xiǎn)ser-Agent
# c.setopt(pycurl.HTTPHEADER,headers)     #傳入請(qǐng)求頭
c.setopt(pycurl.POST, 1)
c.setopt(pycurl.POSTFIELDS, urllib.parse.urlencode(data))
c.setopt(c.WRITEFUNCTION, c.fp.write)   #回調(diào)寫入字符串緩存
c.perform()     
code = c.getinfo(c.HTTP_CODE)   #返回狀態(tài)碼
html = c.fp.getvalue()  #返回源代碼

windows訪問https

windows 訪問https的方法,需要證書

import certifi
c.setopt(pycurl.CAINFO, certifi.where())

獲取網(wǎng)頁多重跳轉(zhuǎn)之后的地址

c.getinfo(pycurl.EFFECTIVE_URL) 獲取網(wǎng)頁的最終地址

記錄Cookie

c.setopt(pycurl.COOKIEFILE, "cookie_file_etherscan") #讀取cookie
c.setopt(pycurl.COOKIEJAR, "cookie_file_etherscan") #設(shè)置cookie

其他屬性

pycurl的部分API:

pycurl.Curl() #創(chuàng)建一個(gè)pycurl對(duì)象的方法
pycurl.Curl(pycurl.URL, http://www.google.com.hk) #設(shè)置要訪問的URL
pycurl.Curl().setopt(pycurl.MAXREDIRS, 5) #設(shè)置最大重定向次數(shù)
pycurl.Curl().setopt(pycurl.CONNECTTIMEOUT, 60)
pycurl.Curl().setopt(pycurl.TIMEOUT, 300) #連接超時(shí)設(shè)置
pycurl.Curl().setopt(pycurl.USERAGENT, "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)") #模擬瀏覽器
pycurl.Curl().perform() #服務(wù)器端返回的信息
pycurl.Curl().getinfo(pycurl.HTTP_CODE) #查看HTTP的狀態(tài) 類似urllib中status屬性
 
 
pycurl.NAMELOOKUP_TIME 域名解析時(shí)間
pycurl.CONNECT_TIME 遠(yuǎn)程服務(wù)器連接時(shí)間
pycurl.PRETRANSFER_TIME 連接上后到開始傳輸時(shí)的時(shí)間
pycurl.STARTTRANSFER_TIME 接收到第一個(gè)字節(jié)的時(shí)間
pycurl.TOTAL_TIME 上一請(qǐng)求總的時(shí)間
pycurl.REDIRECT_TIME 如果存在轉(zhuǎn)向的話,花費(fèi)的時(shí)間
pycurl.HTTP_CODE HTTP 響應(yīng)代碼
pycurl.REDIRECT_COUNT 重定向的次數(shù)
pycurl.SIZE_UPLOAD 上傳的數(shù)據(jù)大小
pycurl.SIZE_DOWNLOAD 下載的數(shù)據(jù)大小
pycurl.SPEED_UPLOAD 上傳速度
pycurl.HEADER_SIZE 頭部大小
pycurl.REQUEST_SIZE 請(qǐng)求大小
pycurl.CONTENT_LENGTH_DOWNLOAD 下載內(nèi)容長度
pycurl.CONTENT_LENGTH_UPLOAD 上傳內(nèi)容長度
pycurl.CONTENT_TYPE 內(nèi)容的類型
pycurl.RESPONSE_CODE 響應(yīng)代碼
pycurl.SPEED_DOWNLOAD 下載速度
pycurl.INFO_FILETIME 文件的時(shí)間信息
pycurl.HTTP_CONNECTCODE HTTP 連接代碼

參考文檔

http://pycurl.io/docs/latest/quickstart.html

到此這篇關(guān)于Python Pycurl的屬性與方法案例詳解的文章就介紹到這了,更多相關(guān)Python Pycurl的屬性與方法內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • Python模擬瀏覽器上傳文件腳本的方法(Multipart/form-data格式)

    Python模擬瀏覽器上傳文件腳本的方法(Multipart/form-data格式)

    今天小編就為大家分享一篇Python模擬瀏覽器上傳文件腳本的方法(Multipart/form-data格式),具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧
    2018-10-10
  • python實(shí)現(xiàn)釘釘機(jī)器人自動(dòng)打卡天天早下班

    python實(shí)現(xiàn)釘釘機(jī)器人自動(dòng)打卡天天早下班

    這篇文章主要為大家介紹了python實(shí)現(xiàn)釘釘機(jī)器人自動(dòng)打卡天天下早班實(shí)例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪
    2022-06-06
  • Pycharm Plugins加載失敗問題解決方案

    Pycharm Plugins加載失敗問題解決方案

    這篇文章主要介紹了Pycharm Plugins加載失敗問題解決方案,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
    2020-11-11
  • 帶你學(xué)習(xí)Python如何實(shí)現(xiàn)回歸樹模型

    帶你學(xué)習(xí)Python如何實(shí)現(xiàn)回歸樹模型

    這篇文章主要介紹了Python如何實(shí)現(xiàn)回歸樹模型,文中講解非常細(xì)致,幫助大家更好的理解和學(xué)習(xí),感興趣的朋友可以了解下
    2020-07-07
  • 老生常談python中的重載

    老生常談python中的重載

    所謂重載,就是多個(gè)相同函數(shù)名的函數(shù),根據(jù)傳入的參數(shù)個(gè)數(shù),參數(shù)類型而執(zhí)行不同的功能。所以函數(shù)重載實(shí)質(zhì)上是為了解決編程中參數(shù)可變不統(tǒng)一的問題。這篇文章主要介紹了老生常談python中的重載,需要的朋友可以參考下
    2018-11-11
  • pycharm設(shè)置python文件模板信息過程圖解

    pycharm設(shè)置python文件模板信息過程圖解

    這篇文章主要介紹了pycharm設(shè)置python文件模板信息過程圖解,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
    2020-03-03
  • python根據(jù)出生日期獲得年齡的方法

    python根據(jù)出生日期獲得年齡的方法

    這篇文章主要介紹了python根據(jù)出生日期獲得年齡的方法,涉及Python操作日期的技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下
    2015-03-03
  • Python中Numpy的深拷貝和淺拷貝

    Python中Numpy的深拷貝和淺拷貝

    這篇文章主要介紹了Python中Numpy的深拷貝和淺拷貝,通過講解Python中對(duì)Numpy數(shù)組操作的淺拷貝和深拷貝的概念和背后的原理展開全文,需要的小伙伴可以參考一下
    2022-05-05
  • python連接手機(jī)自動(dòng)搜集螞蟻森林能量的實(shí)現(xiàn)代碼

    python連接手機(jī)自動(dòng)搜集螞蟻森林能量的實(shí)現(xiàn)代碼

    這篇文章主要介紹了python連接手機(jī)自動(dòng)搜集螞蟻森林能量的實(shí)現(xiàn)方法,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2021-02-02
  • python實(shí)現(xiàn)簡單遺傳算法

    python實(shí)現(xiàn)簡單遺傳算法

    這篇文章主要介紹了python如何實(shí)現(xiàn)簡單遺傳算法,幫助大家更好的利用python進(jìn)行數(shù)據(jù)分析,感興趣的朋友可以了解下
    2020-09-09

最新評(píng)論