python學(xué)習(xí)筆記之多進(jìn)程
我們現(xiàn)代的操作系統(tǒng),都是支持“多任務(wù)”的操作系統(tǒng),對于操作系統(tǒng)來說,一個(gè)任務(wù)就是一個(gè)進(jìn)程(process)。比如打開一個(gè)瀏覽器就是啟動(dòng)一個(gè)瀏覽器進(jìn)程。
如果我們將計(jì)算器的核心CPU比喻為一座工廠,那么進(jìn)程就像工廠里的車間,它代表CPU所能處理的單個(gè)任務(wù)。任一時(shí)刻,CPU總是運(yùn)行一個(gè)進(jìn)程,其他進(jìn)程處于非運(yùn)行狀態(tài)。
看到這大家可能會有一些疑問了,其他進(jìn)程處于非運(yùn)行狀態(tài)?可是我用瀏覽器訪問網(wǎng)頁的時(shí)候,音樂播放器明明也在運(yùn)行啊。
實(shí)際上是操作系統(tǒng)輪流讓各個(gè)任務(wù)交替執(zhí)行,任務(wù)1執(zhí)行0.01秒,切換到任務(wù)2,任務(wù)2執(zhí)行0.01秒,再切換到任務(wù)3,執(zhí)行0.01秒……這樣反復(fù)執(zhí)行下去。表面上看,每個(gè)任務(wù)都是交替執(zhí)行的,但是,由于CPU的執(zhí)行速度實(shí)在是太快了,我們感覺就像所有任務(wù)都在同時(shí)執(zhí)行一樣。
Python中的多進(jìn)程
在UNIX/LINUX操作系統(tǒng)中,可以使用fork()函數(shù)來創(chuàng)建。fork函數(shù)比其他普通函數(shù)有一點(diǎn)特殊之處,就是普通的函數(shù)調(diào)用,調(diào)用一次,返回一次,但是fork()調(diào)用一次,返回兩次,因?yàn)椴僮飨到y(tǒng)自動(dòng)把當(dāng)前進(jìn)程(稱為父進(jìn)程)復(fù)制了一份(稱為子進(jìn)程),然后,分別在父進(jìn)程和子進(jìn)程內(nèi)返回。
子進(jìn)程永遠(yuǎn)返回0,而父進(jìn)程返回子進(jìn)程的ID。這樣做的理由是,一個(gè)父進(jìn)程可以fork出很多子進(jìn)程,所以,父進(jìn)程要記下每個(gè)子進(jìn)程的ID,而子進(jìn)程只需要調(diào)用getppid()就可以拿到父進(jìn)程的ID。
fork()函數(shù)被封裝在os模塊中。接下來,我們舉例說明使用多進(jìn)程和不使用多進(jìn)程的區(qū)別:
from random import randint from time import time, sleep def download_task(filename): print('開始下載%s...' % filename) time_to_download = randint(5, 10) sleep(time_to_download) print('%s下載完成! 耗費(fèi)了%d秒' % (filename, time_to_download)) def main(): start = time() download_task('MySQL從刪庫到跑路.pdf') download_task('萬萬沒想到.mp4') end = time() print('總共耗費(fèi)了%.2f秒.' % (end - start))if __name__ == '__main__': main()
執(zhí)行結(jié)果:
開始下載MySQL從刪庫到跑路.pdf...
MySQL從刪庫到跑路.pdf下載完成! 耗費(fèi)了9秒
開始下載萬萬沒想到.mp4...
萬萬沒想到.mp4下載完成! 耗費(fèi)了9秒
總共耗費(fèi)了18.00秒.
從上面的例子可以看出,如果程序中的代碼只能按順序一點(diǎn)點(diǎn)的往下執(zhí)行,那么即使執(zhí)行兩個(gè)毫不相關(guān)的下載任務(wù),也需要先等待一個(gè)文件下載完成后才能開始下一個(gè)下載任務(wù),很顯然這并不合理也沒有效率。接下來我們使用多進(jìn)程的方式將兩個(gè)下載任務(wù)放到不同的進(jìn)程中,代碼如下所示:
from multiprocessing import Process from os import getpid from random import randint from time import time, sleep def download_task(filename): print('啟動(dòng)下載進(jìn)程,進(jìn)程號[%d].' % getpid()) print('開始下載%s...' % filename) time_to_download = randint(5, 10) sleep(time_to_download) print('%s下載完成! 耗費(fèi)了%d秒' % (filename, time_to_download)) def main(): start = time() p1 = Process(target=download_task, args=('MySQL從刪庫到跑路.pdf', )) p1.start() p2 = Process(target=download_task, args=('萬萬沒想到.mp4', )) p2.start() p1.join() p2.join() end = time() print('總共耗費(fèi)了%.2f秒.' % (end - start)) if __name__ == '__main__': main()
執(zhí)行結(jié)果:
啟動(dòng)下載進(jìn)程,進(jìn)程號[568408].
開始下載萬萬沒想到.mp4...萬萬沒想到.
mp4下載完成! 耗費(fèi)了6秒
啟動(dòng)下載進(jìn)程,進(jìn)程號[565896].
開始下載MySQL從刪庫到跑路.
pdf...MySQL從刪庫到跑路.pdf下載完成! 耗費(fèi)了10秒
總共耗費(fèi)了10.09秒.
運(yùn)行上面的代碼可以明顯發(fā)現(xiàn)兩個(gè)下載任務(wù)“同時(shí)”啟動(dòng)了,而且程序的執(zhí)行時(shí)間將大大縮短,不再是兩個(gè)任務(wù)的時(shí)間總和。
以上就是python學(xué)習(xí)筆記之多進(jìn)程的詳細(xì)內(nèi)容,更多關(guān)于Python多進(jìn)程的資料請關(guān)注腳本之家其它相關(guān)文章!
- python并發(fā)編程之多進(jìn)程、多線程、異步和協(xié)程詳解
- 深入淺析python中的多進(jìn)程、多線程、協(xié)程
- python多進(jìn)程 主進(jìn)程和子進(jìn)程間共享和不共享全局變量實(shí)例
- Python多進(jìn)程編程常用方法解析
- Python多進(jìn)程multiprocessing、進(jìn)程池用法實(shí)例分析
- python3爬蟲中異步協(xié)程的用法
- Python手動(dòng)或自動(dòng)協(xié)程操作方法解析
- 淺談Python協(xié)程
- python 使用事件對象asyncio.Event來同步協(xié)程的操作
- python 多進(jìn)程和協(xié)程配合使用寫入數(shù)據(jù)
相關(guān)文章
python bottle框架支持jquery ajax的RESTful風(fēng)格的PUT和DELETE方法
下面小編就為大家?guī)硪黄猵ython bottle框架支持jquery ajax的RESTful風(fēng)格的PUT和DELETE方法。小編覺得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2017-05-05Python線性擬合實(shí)現(xiàn)函數(shù)與用法示例
這篇文章主要介紹了Python線性擬合實(shí)現(xiàn)函數(shù)與用法,結(jié)合實(shí)例形式分析了Python使用線性擬合算法與不使用線性擬合算法的相關(guān)算法操作技巧,需要的朋友可以參考下2018-12-12使用grappelli為django admin后臺添加模板
本文介紹了一款非常流行的Django模板系統(tǒng)--grappelli,以及如何給Django的admin后臺添加模板,非常的實(shí)用,這里推薦給大家。2014-11-11python 用pandas實(shí)現(xiàn)數(shù)據(jù)透視表功能
這篇文章主要介紹了python 用pandas實(shí)現(xiàn)數(shù)據(jù)透視表功能的方法,幫助大家更好的理解和使用python,感興趣的朋友可以了解下2020-12-12Dephi逆向工具Dede導(dǎo)出函數(shù)名MAP導(dǎo)入到IDA中的實(shí)現(xiàn)方法
這篇文章主要介紹了Dephi逆向工具Dede導(dǎo)出函數(shù)名MAP導(dǎo)入到IDA中,通過這個(gè)腳本,我們就可以把專業(yè)dephi程序分析的結(jié)果,轉(zhuǎn)移到IDA專業(yè)逆向代碼分析的平臺,實(shí)現(xiàn)聯(lián)動(dòng),需要的朋友可以參考下2022-08-08python?字符串索引取值的實(shí)現(xiàn)示例
本文主要介紹了python?字符串索引取值的實(shí)現(xiàn)示例,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-07-07Python數(shù)據(jù)類型之List列表實(shí)例詳解
這篇文章主要介紹了Python數(shù)據(jù)類型之List列表,結(jié)合實(shí)例形式分析了PythonList列表的概念、功能、定義以及判斷、截取、遍歷、切片等常見操作技巧,需要的朋友可以參考下2019-05-05