色综合图-色综合图片-色综合图片二区150p-色综合图区-玖玖国产精品视频-玖玖香蕉视频

您的位置:首頁技術文章
文章詳情頁

解決Python 進程池Pool中一些坑

瀏覽:47日期:2022-06-26 11:34:47
1 from multiprocessing import Pool,Queue。

其中Queue在Pool中不起作用,具體原因未明。

解決方案:

如果要用Pool創建進程,就需要使用multiprocessing.Manager()中的Queue,

與multiprocessing中的Queue不同

q=Manager().Queue()#Manager中的Queue才能配合Poolpo = Pool() # 無窮多進程2 使用進程池,在進程中調用io讀寫操作。例如:

p=Pool()q=Manager().Queue()with open(’/home/cctv/data/stage_file/stage_{}.txt’.format(int(time.time())), ’w’) as w1: p.apply_async(write_json, args=(video_path, 0,0.6,w1,q,i[0],))

這樣也不會完成進程,只能把w放到具體的函數里面,不能通過參數調用

補充:python3進程池pool使用及注意事項

1.在python中使用進程池主要就是為了并行處理任務,縮短運行時間

2.經常使用方法: 同步有 apply(), map();異步的有 apply_async(), map_async()

3. 先看幾個小例子

import time from multiprocessing import Pool test = [1,2,3,4,5,6,7,8]def run(fn): time.sleep(1) return fn*fns = time.time()for i in test: run(i)e = time.time()print(’直接循環 執行時間:’,e - s)pool = Pool(8)s = time.time()for i in test: pool.apply(run, (i,))e = time.time()print(’apply 執行時間:’,e - s)pool1 = Pool(8)s = time.time()res = []for i in test: r = [pool1.apply_async(run, (i,))] res.append(r)pool1.close()pool1.join()e = time.time()print([i.get() for i in r])print(’apply_async 執行時間:’,e - s) pool2 = Pool(8)r = pool2.map(run,test)pool2.close()pool2.join() e1 = time.time()print(r)print(’map執行時間:’,e1 - e)pool3 = Pool(8)pool3.map_async(run,test)pool3.close()pool3.join() e1 = time.time()print(’map_async執行時間:’,e1 - e)

執行結果

直接循環 執行時間: 8.004754781723022apply 執行時間: 8.016774654388428[64]apply_async 執行時間: 1.1128439903259277[1, 4, 9, 16, 25, 36, 49, 64]map執行時間: 1.181443452835083map_async執行時間: 2.3679864406585693

除此之外,在寫代碼中,還涉及到變量的一些問題。就需要加鎖~

以上為個人經驗,希望能給大家一個參考,也希望大家多多支持好吧啦網。如有錯誤或未考慮完全的地方,望不吝賜教。

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 草草视频免费在线观看 | 久草免费福利 | 日本精品一区二区三区视频 | 久久久在线视频精品免费观看 | 成人欧美视频免费看黄黄 | 国产一区二区三区四区在线 | 欧美激情视频一区二区免费 | 韩国免又爽又刺激激情视频 | 久久久久久久久久久久久久久久久久 | 香蕉视频黄在线观看 | 亚洲国产日韩欧美高清片a 亚洲国产日韩欧美在线 | 久久精品最新免费国产成人 | 免费看孕妇毛片全部播放 | 亚洲国产一区在线 | 伊人国产在线视频 | 国产一区二区三区欧美 | 久久夜色精品国产噜噜亚洲a | 日本道在线播放 | 亚洲精品一区二区三区在线观看 | 九九精品免费观看在线 | 怡红院免费的全部视频国产a | 一级久久 | 国产日韩欧美在线 | 亚洲在线天堂 | 久久精品视频5 | 亚洲欧美一二三区 | 在线观看亚洲天堂 | 欧美一级毛片欧美大尺度一级毛片 | 成人午夜久久 | 国产日韩视频在线观看 | 欧美成人性色xxxxx视频大 | 国产aⅴ片 | 成人免费视频在 | 狠狠一区 | 韩国特级毛片 | 新版天堂资源中文8在线 | 在线不卡一区二区三区日韩 | 国产日韩欧美视频 | 成人网18免费网 | 亚洲人成影院午夜网站 | 久久久国产精品免费视频 |