Python語法學(xué)習(xí)之進(jìn)程的創(chuàng)建與常用方法詳解
該章節(jié)我們來學(xué)習(xí)一下在 Python 中去創(chuàng)建并使用多進(jìn)程的方法,通過學(xué)習(xí)該章節(jié),我們將可以通過創(chuàng)建多個進(jìn)程來幫助我們提高腳本執(zhí)行的效率。可以認(rèn)為縮短腳本執(zhí)行的時間,就是提高執(zhí)行我們腳本的效率。接下來讓我們都看一下今天的章節(jié)知識點(diǎn)都有哪些?
進(jìn)程的創(chuàng)建模塊 - multiprocessing
創(chuàng)建進(jìn)程函數(shù) - Process
函數(shù)名 | 介紹 | 參數(shù) | 返回值 |
---|---|---|---|
Process | 創(chuàng)建一個進(jìn)程 | target, args | 進(jìn)程對象 |
Process功能介紹:實(shí)例化一個對象;它需要傳入兩個參數(shù) target 與 args:target 是一個函數(shù),args 是對應(yīng)一個函數(shù)的參數(shù)(args參數(shù)是一個元組)。其實(shí)我們可以這樣去理解,在一個腳本中創(chuàng)建子進(jìn)程,目的是為了讓它執(zhí)行我們腳本中的某個函數(shù)。換句話講,我們將腳本中的某一個函數(shù)單獨(dú)的啟用一個進(jìn)程去執(zhí)行。
我們說過進(jìn)程之間互不干擾,可以同時執(zhí)行。所以我們可以認(rèn)為主進(jìn)程中的程序和子進(jìn)程的函數(shù)是相互不干擾的,聽起來可能很難理解,一會兒下文我們進(jìn)行一個案例的小練習(xí),一遍幫助大家去更好的理解其中的含義。
進(jìn)程的常用方法
函數(shù)名 | 介紹 | 參數(shù) | 返回值 |
---|---|---|---|
start | 執(zhí)行進(jìn)程 | 無 | 無 |
join | 阻塞進(jìn)程 | 無 | 無 |
kill | 殺死進(jìn)程 | 無 | 無 |
is_alive | 判斷進(jìn)程是否存活 | 無 | bool |
- start 函數(shù):通過調(diào)用它,可以直接啟動我們創(chuàng)建的進(jìn)程。它會馬上執(zhí)行我們進(jìn)程中傳入的函數(shù),start 函數(shù)沒有任何參數(shù),也沒有返回值。
- join 函數(shù):我們說過,主進(jìn)程和子進(jìn)程的程序會同時運(yùn)行,互不影響。這樣就會有一個問題,有可能是 子進(jìn)程 先執(zhí)行完它的業(yè)務(wù),也有可能是 主進(jìn)程 先執(zhí)行完它的業(yè)務(wù)邏輯。如果有的時候我們必須要先執(zhí)行完 子進(jìn)程的業(yè)務(wù) 再執(zhí)行 主進(jìn)程的業(yè)務(wù) 。則通過調(diào)用 join 函數(shù),在這一函數(shù)下面執(zhí)行的主進(jìn)程業(yè)務(wù)要等待子進(jìn)程完成之后才會繼續(xù)執(zhí)行。我們將 join 這樣的函數(shù)叫做 等待/阻塞函數(shù)。join 函數(shù)沒有任何參數(shù),也沒有返回值。
- kill 函數(shù):如果我們在執(zhí)行子進(jìn)程的過程中發(fā)現(xiàn)不需要這個子進(jìn)程繼續(xù)運(yùn)行了,就可以使用 kill 函數(shù)殺死當(dāng)前的這個子進(jìn)程,殺死的這個子進(jìn)程不會在執(zhí)行子進(jìn)程中函數(shù)的業(yè)務(wù)邏輯。kill 函數(shù)沒有任何參數(shù),也沒有返回值。
- is_alive 函數(shù):通過調(diào)用這個函數(shù)可以判斷當(dāng)前的進(jìn)程是否是存活狀態(tài),它返回一個 bool 值。True 表示當(dāng)前進(jìn)程還在,程序還在繼續(xù)執(zhí)行;如果是 False 則代表當(dāng)前進(jìn)程已經(jīng)結(jié)束了
start 函數(shù)
演示案例:
- 我們先定義兩個簡單的函數(shù),每個函數(shù)定義兩個簡單的 for 循環(huán)。
- 每執(zhí)行一次循環(huán),休眠一秒的時間。
- 在兩次循環(huán)的開始定義一個實(shí)例化時間對象,用以計(jì)算兩次循環(huán)的時間間隔。
- 同時,獲取腳本執(zhí)行的進(jìn)程號; 看看是一個怎樣的結(jié)果。
# coding:utf-8 import time import os def work_for_first(): for i in range(5): print('\'work_for_first\' 函數(shù)的循環(huán)值:%s', '進(jìn)程號為:%s' % i, os.getpid()) # os.getpid() 為獲取進(jìn)程號函數(shù) time.sleep(1) def work_for_second(): for i in range(5): print('\'work_for_second\' 函數(shù)的循環(huán)值:%s', '進(jìn)程號為:%s' % i, os.getpid()) time.sleep(1) if __name__ == '__main__': start_time = time.time() # 獲取執(zhí)行 循環(huán) 之前的時間戳 work_for_first() work_for_second() end_time = time.time() - start_time # 獲取執(zhí)行 循環(huán) 結(jié)束的時間戳 print('耗時時間為:{}, 進(jìn)程號為:{}'.format(end_time, os.getpid())) # 獲取耗時與進(jìn)程號
執(zhí)行結(jié)果如下圖:
OKK!接下來進(jìn)入我們今天要學(xué)習(xí)的主題。
將 work_for_first() 函數(shù)創(chuàng)建一個新的子進(jìn)程去執(zhí)行。
# coding:utf-8 import time import os import multiprocessing def work_for_first(): for i in range(5): print('\'work_for_first\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) def work_for_second(): for i in range(5): print('\'work_for_second\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) if __name__ == '__main__': start_time = time.time() # 獲取執(zhí)行 循環(huán) 之前的時間戳 work_for_first_process = multiprocessing.Process(target=work_for_first) # 因?yàn)槲覀儌魅氲暮瘮?shù)沒有參數(shù)所以 args 可以不寫 work_for_first_process.start() work_for_second() end_time = time.time() - start_time # 獲取執(zhí)行 循環(huán) 結(jié)束的時間戳 print('耗時時間為:{}, 進(jìn)程號為:{}'.format(end_time, os.getpid())) # 獲取耗時與進(jìn)程號
執(zhí)行結(jié)果如下圖:
因?yàn)槲覀冡槍?work_for_first() 函數(shù)創(chuàng)建一個新的子進(jìn)程去執(zhí)行,所以我們的耗時變?yōu)榱?5秒。那么如果我們將 work_for_second() 函數(shù)也創(chuàng)建一個新的子進(jìn)程去執(zhí)行,耗時又會是多少呢?我們接著往下看。
# coding:utf-8 import time import os import multiprocessing def work_for_first(): for i in range(5): print('\'work_for_first\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) def work_for_second(): for i in range(5): print('\'work_for_second\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) if __name__ == '__main__': start_time = time.time() # 獲取執(zhí)行 循環(huán) 之前的時間戳 work_for_first_process = multiprocessing.Process(target=work_for_first) # 因?yàn)槲覀儌魅氲暮瘮?shù)沒有參數(shù)所以 args 可以不寫 work_for_first_process.start() work_for_second_process = multiprocessing.Process(target=work_for_second) work_for_second_process.start() end_time = time.time() - start_time # 獲取執(zhí)行 循環(huán) 結(jié)束的時間戳 print('耗時時間為:{}, 進(jìn)程號為:{}'.format(end_time, os.getpid())) # 獲取耗時與進(jìn)程號
執(zhí)行結(jié)果如下圖:
PS:從腳本中執(zhí)行入口的 main 函數(shù)可以看出 work_for_first() 函數(shù) 與 work_for_second() 函數(shù) 分別都由各自的子進(jìn)程來執(zhí)行,主進(jìn)程實(shí)際執(zhí)行的 只有 23行、29行、30行代碼,所以從耗時來看,主進(jìn)程實(shí)際上只執(zhí)行了 0.026 秒。
這里再思考一個問題,如果是每一個子進(jìn)程都單獨(dú)的通過 .start 去啟動,那么在子進(jìn)程很多的情況下,啟動的確實(shí)會有一些慢了。這個時候我們就可以通過 for 循環(huán)的方式去啟動子進(jìn)程。方式如下:
for sun_process in (work_for_first_process, work_for_second_process): sun_process.start()
join 函數(shù)
同樣的也會存在著這樣一種情況,我們希望子進(jìn)程運(yùn)行結(jié)束之后再去執(zhí)行我們的主進(jìn)程,這時候我們就會使用到 join 函數(shù) 。
這里我們就利用上文的 進(jìn)程 for循環(huán)同時啟動兩個子進(jìn)程,然后我們再在下一個 for循環(huán) 執(zhí)行 join 函數(shù),我們看看會發(fā)生什么。
# coding:utf-8 import time import os import multiprocessing def work_for_first(): for i in range(5): print('\'work_for_first\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) def work_for_second(): for i in range(5): print('\'work_for_second\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) if __name__ == '__main__': start_time = time.time() # 獲取執(zhí)行 循環(huán) 之前的時間戳 work_for_first_process = multiprocessing.Process(target=work_for_first) # 因?yàn)槲覀儌魅氲暮瘮?shù)沒有參數(shù)所以 args 可以不寫 # work_for_first_process.start() work_for_second_process = multiprocessing.Process(target=work_for_second) # work_for_second_process.start() for sun_process in (work_for_first_process, work_for_second_process): sun_process.start() for sun_process in (work_for_first_process, work_for_second_process): sun_process.join() end_time = time.time() - start_time # 獲取執(zhí)行 循環(huán) 結(jié)束的時間戳 print('耗時時間為:{}, 進(jìn)程號為:{}'.format(end_time, os.getpid())) # 獲取耗時與進(jìn)程號
執(zhí)行結(jié)果如下圖:
kill 函數(shù) 與 is_alive 函數(shù)
接下來我們再嘗試一個場景,利用 for 循環(huán),我們同時啟動 work_for_first() 函數(shù) 與 work_for_second() 函數(shù) 的子進(jìn)程。然后我們再在另一個 for 循環(huán)中,將 work_for_second() 函數(shù) 的子進(jìn)程 kill 掉,然后判斷兩個子進(jìn)程的存活狀態(tài)。
示例腳本如下:
# coding:utf-8 import time import os import multiprocessing def work_for_first(): for i in range(5): print('\'work_for_first\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) def work_for_second(): for i in range(5): print('\'work_for_second\' 函數(shù)的循環(huán)值:{},進(jìn)程號為:{}'.format(i, os.getpid())) time.sleep(1) if __name__ == '__main__': start_time = time.time() # 獲取執(zhí)行 循環(huán) 之前的時間戳 work_for_first_process = multiprocessing.Process(target=work_for_first) # 因?yàn)槲覀儌魅氲暮瘮?shù)沒有參數(shù)所以 args 可以不寫 # work_for_first_process.start() work_for_second_process = multiprocessing.Process(target=work_for_second) # work_for_second_process.start() for sun_process in (work_for_first_process, work_for_second_process): sun_process.start() time.sleep(1) # 休眠一秒是為了 work_for_second_process 子進(jìn)程 至少能夠運(yùn)行一次 for sun_process in (work_for_first_process, work_for_second_process): work_for_second_process.kill() if work_for_first_process.is_alive(): print('\'work_for_first_process\' 子進(jìn)程當(dāng)前存活狀態(tài)為:True') elif not work_for_second_process.is_alive(): print('\'work_for_second_process\' 子進(jìn)程當(dāng)前存活狀態(tài)為:False') sun_process.join() end_time = time.time() - start_time # 獲取執(zhí)行 循環(huán) 結(jié)束的時間戳 print('耗時時間為:{}, 進(jìn)程號為:{}'.format(end_time, os.getpid())) # 獲取耗時與進(jìn)程號
運(yùn)行結(jié)果如下:
進(jìn)程的相關(guān)問題
通過學(xué)習(xí)多進(jìn)程的創(chuàng)建、啟動,我們可以充分的體會到進(jìn)程給我們帶來的好處。它可以使我們的腳本程序執(zhí)行時間進(jìn)行縮短,從而提高工作效率。
然而多進(jìn)程也有一些問題:
- 通過進(jìn)程模塊執(zhí)行的函數(shù)無法獲取返回值,即便這個函數(shù)擁有 return 關(guān)鍵字也無法獲取到,這也是我們進(jìn)程的弊端。
- 多個進(jìn)程同時修改文件可能會出現(xiàn)錯誤。
- 進(jìn)程數(shù)量太多可能會造成資源不足、甚至死機(jī)等情況。
關(guān)于進(jìn)程的這些問題,其實(shí)也并不是不能解決。在后續(xù)更新的 進(jìn)程間的通信 、進(jìn)程池與進(jìn)程鎖 的章節(jié)我們再進(jìn)行詳細(xì)的介紹。
到此這篇關(guān)于Python語法學(xué)習(xí)之進(jìn)程的創(chuàng)建與常用方法詳解的文章就介紹到這了,更多相關(guān)Python 進(jìn)程創(chuàng)建內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Python中的MongoDB基本操作:連接、查詢實(shí)例
這篇文章主要介紹了Python中的MongoDB基本操作:連接、查詢實(shí)例,本文直接給出操作示例代碼,需要的朋友可以參考下2015-02-02Django中的Model操作表的實(shí)現(xiàn)
這篇文章主要介紹了Django中的Model操作表的實(shí)現(xiàn),小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2018-07-07vscode寫python時的代碼錯誤提醒和自動格式化的方法
這篇文章主要介紹了vscode寫python時的代碼錯誤提醒和自動格式化的方法,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-05-05Python 實(shí)現(xiàn)數(shù)據(jù)庫更新腳本的生成方法
下面小編就為大家?guī)硪黄狿ython 實(shí)現(xiàn)數(shù)據(jù)庫更新腳本的生成方法。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-07-07python實(shí)現(xiàn)圖片轉(zhuǎn)字符畫的完整代碼
這篇文章主要給大家介紹了關(guān)于python實(shí)現(xiàn)圖片轉(zhuǎn)字符畫的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-02-02Python實(shí)現(xiàn)的井字棋(Tic Tac Toe)游戲示例
這篇文章主要介紹了Python實(shí)現(xiàn)的井字棋(Tic Tac Toe)游戲,結(jié)合實(shí)例形式分析了井字棋的原理及Python相關(guān)實(shí)現(xiàn)技巧,需要的朋友可以參考下2018-01-01