python接口自動化(十七)--Json 數(shù)據(jù)處理---一次爬坑記(詳解)
簡介
有些 post 的請求參數(shù)是 json 格式的,這個前面發(fā)送post 請求里面提到過,需要導(dǎo)入 json模塊處理?,F(xiàn)在企業(yè)公司一般常見的接口因為json數(shù)據(jù)容易處理,所以絕大多數(shù)返回數(shù)據(jù)也是 json 格式的,我們在做判斷時候,往往只需要提取其中
幾個關(guān)鍵的參數(shù)就行,這時候我們就需要 json 來解析返回的數(shù)據(jù)了。首先來說一下筆者為何要單獨寫這么一篇,原因是:python 里面 bool 值是 True 和 False,json 里面 bool 值是 true和 false,并且區(qū)分大小寫,這就尷尬了,明明都是 bool 值。
在python里面寫的代碼,傳到j(luò)son里,不用說肯定識別不了,所以需要把python的代碼經(jīng)過encode后成為 json 可識別的數(shù)據(jù)類型,反之json數(shù)據(jù)就需要decode后成為python代碼可識別的數(shù)據(jù)類型。這個也是需要初學(xué)者注意,也算是個細微差和
一個坑人的地方吧,如果不注意很容易掉坑里啊。筆者就掉進去過,還好自救能力強,爬出來了,所以為了警醒后來者,就有了這篇隨筆。
json 模塊簡介
1、Json 簡介:Json,全名 JavaScript Object Notation,JSON(JavaScript Object Notation(記號、標(biāo)記))是一種輕量級的數(shù)據(jù)交換格式。它基于JavaScript(Standard ECMA-262 3rd Edition - December 1999)的一個子集。JSON采用完全獨立
于語言的文本格式,但是也使用了類似于C語言家族的習(xí)慣(包括C, C++, C#, Java, JavaScript, Perl, Python等)。這些特性使JSON成為理想的數(shù)據(jù)交換語言。JSON易于人閱讀和編寫,同時也易于機器解析和生成。常用于 http 請求中,接口
返回的數(shù)據(jù)中。
2、可以用 help(json),查看對應(yīng)的源碼注釋內(nèi)容
編碼Encode(python->json)
1、為什么要 encode,筆者在開頭就給各位小伙伴開門見山的說出來了,讓各位帶著問題來探索、來學(xué)習(xí)、來思考
2、舉個簡單例子,下圖的實例中 dict 類型經(jīng)過 json.dumps()后變成 str,True 變成了 true,False變成了 fasle
3、從json模塊的對應(yīng)源碼中可以查看到,python 數(shù)據(jù)轉(zhuǎn)化成 json可識別的數(shù)據(jù),對應(yīng)的表關(guān)系如下
解碼 decode(json->python)
1、以博客園的登錄成功結(jié)果:{"success":True}為例,我們其實最想知道的是 success 這個字段返回的是 True 還是 False,以便于我們對接口進行斷言,以下是fiddler抓包博客園登錄成功的結(jié)果
2、如果以 content 字節(jié)輸出,返回的是一個字符串:{"success":true},這樣獲取后面那個結(jié)果就不方便了,導(dǎo)致斷言也不方便
3、如果經(jīng)過 json 解碼后,返回的就是一個字典:{u'success': True},這樣獲取后面那個結(jié)果,就用字典的方式去取值:result2["success"],這樣不言而喻斷言也就簡單方便了
4、由于博客園的登錄機制的改變,我們這里接著上一篇的刪除隨筆的返回結(jié)果,給小伙伴們實戰(zhàn)演練一下
5、用fiddler抓包,抓到刪除新建隨筆的請求,從抓包結(jié)果可以看出,返回結(jié)果是一個字符串:{"isSuccess":True},按照上邊的步驟用代碼實現(xiàn)
6、代碼及結(jié)果(看到了吧,就是這么輕松被我們?nèi)〉狡鋠alue了,接下來就可以進行斷言了)
7、從json模塊的對應(yīng)源碼中可以查看到, json 數(shù)據(jù)轉(zhuǎn)化成 python 可識別的數(shù)據(jù),對應(yīng)的表關(guān)系如下
8、參考代碼
# coding:utf-8 import requests # 先打開登錄首頁,獲取部分cookie url = "https://passport.cnblogs.com/user/signin" headers = { "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64; rv:44.0) Gecko/20100101 Firefox/44.0" } # get方法其它加個ser-Agent就可以了 s = requests.session() r = s.get(url, headers=headers,verify=False) print (s.cookies) # 添加登錄需要的兩個cookie c = requests.cookies.RequestsCookieJar() c.set('.CNBlogsCookie', 'XXX') # 填上面抓包內(nèi)容 c.set('.Cnblogs.AspNetCore.Cookies','XXX') # 填上面抓包內(nèi)容 c.set('AlwaysCreateItemsAsActive',"True") c.set('AdminCookieAlwaysExpandAdvanced',"True") s.cookies.update(c) print (s.cookies) result = r.content print(result.decode('utf-8')) # 登錄成功后保存編輯內(nèi)容 url2= "https://i.cnblogs.com/EditPosts.aspx?opt=1" body = {"__VIEWSTATE": "", "__VIEWSTATEGENERATOR":"FE27D343", "Editor$Edit$txbTitle":"這是繞過登錄的標(biāo)題:北京-宏哥", "Editor$Edit$EditorBody":"<p>這里是中文內(nèi)容:http://www.cnblogs.com/duhong/</p>", "Editor$Edit$Advanced$ckbPublished":"on", "Editor$Edit$Advanced$chkDisplayHomePage":"on", "Editor$Edit$Advanced$chkComments":"on", "Editor$Edit$Advanced$chkMainSyndication":"on", "Editor$Edit$lkbDraft":"存為草稿", } r2 = s.post(url2, data=body, verify=False) print (r.content.decode('utf-8')) # 第三步:正則提取需要的參數(shù)值 import re postid = re.findall(r"postid=(.+?)&", r2.url) print(type(postid)) print (postid) # 這里是 list # 提取為字符串 print (postid[0]) # 第四步:刪除草稿箱 url3 = "https://i.cnblogs.com/post/delete" json3 = {"postId": postid[0]} r3 = s.post(url3, json=json3, verify=False) result = r3.content #content數(shù)據(jù)是字節(jié)輸出 print(type(result)) print(result) #json是經(jīng)過加碼encode成對應(yīng)python的數(shù)據(jù)類型 result1 = r3.json() print (type(result1)) print(result1['isSuccess'])
小結(jié)
在實際工作中遇到問題要學(xué)會查資料,看其對應(yīng)的官方文檔以及源碼,不僅可以起到事半功倍的作用,也可以鍛煉自己解決問題的能力。這一點筆者深有體會?。?!
以上所述是小編給大家介紹的python Json 數(shù)據(jù)處理詳解整合,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
- JavaScript 實現(xiàn)自己的安卓手機自動化工具腳本(推薦)
- JavaScript 常見安全漏洞和自動化檢測技術(shù)
- 使用auto.js實現(xiàn)自動化每日打卡功能
- PyQt5內(nèi)嵌瀏覽器注入JavaScript腳本實現(xiàn)自動化操作的代碼實例
- Angular.js項目中使用gulp實現(xiàn)自動化構(gòu)建以及壓縮打包詳解
- nodejs前端自動化構(gòu)建環(huán)境的搭建
- Angular.Js的自動化測試詳解
- 從零搭建docker+jenkins+node.js自動化部署環(huán)境的方法
- Angular.js自動化測試之protractor詳解
- JavaScript揭秘:實現(xiàn)自動化連連看游戲
相關(guān)文章
對python中Json與object轉(zhuǎn)化的方法詳解
今天小編就為大家分享一篇對python中Json與object轉(zhuǎn)化的方法詳解,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12python調(diào)用opencv實現(xiàn)貓臉檢測功能
這篇文章主要介紹了python調(diào)用opencv實現(xiàn)貓臉檢測功能,具有一定的參考價值,感興趣的小伙伴們可以參考一下2019-01-01Python實現(xiàn)從PPT中導(dǎo)出高分辨率圖片
這篇文章主要為大家分享了一個實用腳本——如何利用Python實現(xiàn)從PPT中導(dǎo)出高分辨率(高 dpi)的圖片,文中的示例代碼講解詳細,感興趣的可以了解一下2023-05-05python求numpy中array按列非零元素的平均值案例
這篇文章主要介紹了python求numpy中array按列非零元素的平均值案例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-06-06selenium+python實現(xiàn)自動化登錄的方法
這篇文章主要介紹了selenium+python實現(xiàn)自動化登錄的方法,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2018-09-09