通過字符串導入 Python 模塊的方法詳解
我們平時導入第三方模塊的時候,一般使用的是 import 關鍵字,例如:
import scrapy from scrapy.spider import Spider
但是如果各位同學看過 Scrapy 的 settings.py 文件,就會發(fā)現里面會通過字符串的方式來指定pipeline 和 middleware,例如:
DOWNLOADER_MIDDLEWARES = {
'Test.middlewares.ExceptionRetryMiddleware': 545,
'Test.middlewares.BOProxyMiddlewareV2': 543,
}
SPIDER_MIDDLEWARES = {
'Test.middlewares.LoggingRequestMiddleware': 543,
}
我們知道,這里的 Test.middlewares.ExceptionRetryMiddleware 實際上對應了根目錄下面的 Test 文件夾里面的 middlewares.py 文件中的 ExceptionRetryMiddleware 類。那么 Scrapy 是如何根據這個字符串,導入這個類的呢?
在 Scrapy 源代碼中,我們可以找到 相關的代碼 :
def load_object(path):
"""Load an object given its absolute object path, and return it.
object can be a class, function, variable or an instance.
path ie: 'scrapy.downloadermiddlewares.redirect.RedirectMiddleware'
"""
try:
dot = path.rindex('.')
except ValueError:
raise ValueError("Error loading object '%s': not a full path" % path)
module, name = path[:dot], path[dot+1:]
mod = import_module(module)
try:
obj = getattr(mod, name)
except AttributeError:
raise NameError("Module '%s' doesn't define any object named '%s'" % (module, name))
return obj
根據這段代碼,我們知道,它使用了 importlib 模塊的 import_module 函數:
首先根據字符串路徑最右側的 . 把字符串路徑分成兩個部分,例如: Test.middlewares.LoggingRequestMiddleware 分成 Test.middlewares 和 LoggingRequestMiddleware
使用 import_module 導入左邊的部分
從左邊部分通過 getattr 獲得具體的類
現在我們來測試一下。我們創(chuàng)建的測試文件結構如下圖所示:
其中, pipelines.py 文件的內容如下圖所示:
main.py 文件的內容如下圖所示:
運行 main.py ,可以看到 pipelines.py 中的 Pipeline 類被成功執(zhí)行了,如下圖所示:
總結
以上所述是小編給大家介紹的通過字符串導入 Python 模塊的方法詳解,希望對大家有所幫助,如果大家有任何疑問歡迎給我留言,小編會及時回復大家的!
相關文章
淺談PyTorch中in-place operation的含義
這篇文章主要介紹了淺談PyTorch中in-place operation的含義,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-06-06
python使用requests庫提交multipart/form-data請求的方法詳解
multipart/form-data的基礎是post請求,即基于post請求來實現的 ,下面這篇文章主要給大家介紹了關于python使用requests庫提交multipart/form-data請求的相關資料,需要的朋友可以參考下2023-01-01
Django模板報TemplateDoesNotExist異常(親測可行)
這篇文章主要介紹了Django模板報TemplateDoesNotExist異常(親測可行),文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2020-12-12

