python2和python3在處理字符串上的區(qū)別詳解
python2和python3對于字符串的處理有很大的區(qū)別
熟悉了python2的寫法用python3時(shí)真的會遇到很多問題啊……
區(qū)別
python2中有一種類型叫做unicode型,例
type(u"a") => str型 type("a".decode('utf8')) => unicode型
兩者返回的類型都是unicode型
而在python3中,所有的字符串都是unicode,所以就不存在單獨(dú)的unicode型,全部都是字符串型
type(u"a") => str型 type("a".decode('utf8')) => 報(bào)錯,python3不能這樣寫
但是python3中多處一種字符串
type(b'132') => byte型
而在python2中這樣寫就會報(bào)錯
所以顯而易見,decode和encode的使用也會有很大的區(qū)別
python2中的decode是將str型轉(zhuǎn)換為unicode型
python3中的decode是將byte型轉(zhuǎn)換為str型
使用
在使用python3寫爬蟲時(shí),有時(shí)候會遇到這樣的錯誤
'gbk' codec can't encode character '\u30fb' in position 0: illegal multibyte sequence
遇到這樣的錯誤就和上面的編碼問題連系起來了
你會發(fā)現(xiàn),明明自己設(shè)置的編碼是utf8,怎么會報(bào)一個gbk的錯誤??
這個問題可能會在兩個地方出現(xiàn)(輸出時(shí),寫入文件時(shí)),其實(shí)這里設(shè)置的編碼并沒有問題,問題出在python3的字符串中,像上面說的,python3默認(rèn)所有字符串都是unicode型,在面對字符串時(shí),會首先按照unicode解析,自然會報(bào)錯
那么,我們來轉(zhuǎn)換一下編碼(假設(shè)a是一個gbk編碼的數(shù)據(jù)流)
"a".decode('gbk')
將字符串按照gbk規(guī)則解碼
會發(fā)現(xiàn)依舊報(bào)錯,明明已經(jīng)改為gbk了啊……不著急,再進(jìn)行一次
"a".decode('gbk').encode('utf8').decode('utf8')
為什么寫的這么長……就像上面說的,decode是將byte型轉(zhuǎn)為str型,而encode是將str型轉(zhuǎn)換為byte型,所以再進(jìn)行一次encode,decode就能夠使得字符串轉(zhuǎn)換編碼格式
但是當(dāng)你輸出時(shí),你會發(fā)現(xiàn)還是有問題
解決
我們回到開始
不輸出我們想要的字符串,發(fā)現(xiàn)沒有問題……問題出在哪?
沒錯,是print(),print在輸出時(shí)會默認(rèn)其中的字符時(shí)unicode編碼的字符串,而我們輸入了一個gbk編碼的字符串,所以就會出錯,所以,解決方法就是,不使用print……
但是print的使用有時(shí)候是不可避免的,所以在decode時(shí)加上一個ignore
"a".decode('gbk',errors='ignore')
此外,在打開或?qū)懭胛募r(shí)遇到的話,就需要加上encoding參數(shù)
with open("1.txt",'r',encoding='utf8') as a:
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
python提取照片坐標(biāo)信息的實(shí)例代碼
這篇文章主要介紹了python提取照片坐標(biāo)信息的實(shí)例代碼,文中給大家提到了Python利用exifread庫來解析照片的經(jīng)緯度,通過實(shí)例代碼給大家介紹的非常詳細(xì),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2019-08-08Django對接支付寶實(shí)現(xiàn)支付寶充值金幣功能示例
今天小編就為大家分享一篇Django對接支付寶實(shí)現(xiàn)支付寶充值金幣功能示例,具有很好的參考價(jià)值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-12-12使用Keras訓(xùn)練好的.h5模型來測試一個實(shí)例
這篇文章主要介紹了使用Keras訓(xùn)練好的.h5模型來測試一個實(shí)例,具有很好的參考價(jià)值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-07-07