第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定
已解決430363個(gè)問(wèn)題,去搜搜看,總會(huì)有你想問(wèn)的

python與os系統(tǒng)多線程,不超過(guò)K個(gè)并行命令

python與os系統(tǒng)多線程,不超過(guò)K個(gè)并行命令

天涯盡頭無(wú)女友 2023-10-31 19:19:30
關(guān)于以下示例:import osNUM_CPUS = None  # defaults to all availabledef worker(f1, f2):    os.system("run program x on f1 and f2") <--- Big command, cannot run more that K in paralleldef test_run(pool):     filelist = os.listdir(files_dir)     for f1 in filelist:          for f2 in filelist:               pool.apply_async(worker, args=(f1, f2))if __name__ == "__main__":     import multiprocessing as mp     pool = mp.Pool(NUM_CPUS)     test_run(pool)     pool.close()     pool.join()每次os.system調(diào)用都會(huì)消耗大量資源,因此我無(wú)法并行調(diào)度超過(guò) K( 5) 的資源。不幸的是,即使NUM_POOLS=5每個(gè)設(shè)置都會(huì)pool.apply_async立即返回。如何指定python不讓超過(guò)5個(gè)worker并行運(yùn)行?
查看完整描述

1 回答

?
萬(wàn)千封印

TA貢獻(xiàn)1891條經(jīng)驗(yàn) 獲得超3個(gè)贊

你的程序?qū)ξ襾?lái)說(shuō)看起來(lái)不錯(cuò)。

apply_async()是非阻塞調(diào)用,但它不會(huì)覆蓋池邊界。如果您的池有五個(gè)工作線程,則只有五個(gè)任務(wù)正在并行運(yùn)行。其余的任務(wù)將在池中排隊(duì),并且僅在工作人員空閑時(shí)才調(diào)度。

您的代碼將阻塞,pool.join()直到所有工作人員完成為止。如果您需要主程序也被阻止,如果您有五個(gè)工作人員正在運(yùn)行,那么您需要做其他事情,但我無(wú)法想象您為什么要這樣做。Pool 將在后臺(tái)處理您的調(diào)度,并保持最多 5 個(gè)工作線程運(yùn)行,您無(wú)需擔(dān)心。


查看完整回答
反對(duì) 回復(fù) 2023-10-31
  • 1 回答
  • 0 關(guān)注
  • 183 瀏覽
慕課專欄
更多

添加回答

舉報(bào)

0/150
提交
取消
微信客服

購(gòu)課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)