解決python爬蟲中有中文的url問題
如果URL中存在中文,而你卻不對它做任何處理,他不會達(dá)到你所想的那樣,因此我們需要將中文部分進(jìn)行處理,要用到urllib.parse模塊中的quote將中文轉(zhuǎn)化成URL所需的編碼,url中的中文要單獨處理,不能中英文全部合在一起處理(因為一部分的特殊字符也會被處理掉)。
import urllib.parse word='龍' word=urllib.parse.quote(word) url='https://baike.baidu.com/search/word?word=%s'%word print(url)
運行結(jié)果為:
以上這篇解決python爬蟲中有中文的url問題就是小編分享給大家的全部內(nèi)容了,希望能給大家一個參考,也希望大家多多支持腳本之家。
相關(guān)文章
Python基礎(chǔ)之操作MySQL數(shù)據(jù)庫
這篇文章主要介紹了Python基礎(chǔ)之操作MySQL數(shù)據(jù)庫,文中有非常詳細(xì)的代碼示例,對正在學(xué)習(xí)python基礎(chǔ)的小伙伴們有非常好的幫助,需要的朋友可以參考下2021-05-05django日志默認(rèn)打印request請求信息的方法示例
這篇文章主要給大家介紹了關(guān)于django日志默認(rèn)打印request請求信息的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用django具有一定的參考學(xué)習(xí)價值,需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2020-05-05Python 如何創(chuàng)建一個簡單的REST接口
這篇文章主要介紹了Python 如何創(chuàng)建一個簡單的REST接口,文中講解非常細(xì)致,代碼幫助大家更好的理解和學(xué)習(xí),感興趣的朋友可以了解下2020-07-07Python數(shù)據(jù)結(jié)構(gòu)之哈夫曼樹定義與使用方法示例
這篇文章主要介紹了Python數(shù)據(jù)結(jié)構(gòu)之哈夫曼樹定義與使用方法,結(jié)合具體實例形式分析了Python哈夫曼樹的原理、定義及簡單使用方法,需要的朋友可以參考下2018-04-04Python實現(xiàn)連接postgresql數(shù)據(jù)庫的方法分析
這篇文章主要介紹了Python實現(xiàn)連接postgresql數(shù)據(jù)庫的方法,結(jié)合實例形式分析了Python基于psycopg2和python3-postgresql鏈接postgresql數(shù)據(jù)庫的相關(guān)操作技巧,需要的朋友可以參考下2017-12-12