文章詳情頁
我要在命令行同時不間斷地運行八九個python爬蟲程序(爬不同的網站)?
瀏覽:107日期:2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應,好像是被掛起了,CPU占用率并不高,不到10%,內存占用也不算多,60%左右,爬蟲程序是去批量下載文件,平均每個幾兆到十幾兆。我設置了這幾個程序的優先級高于普通標準,但是還是會出現無響應的狀況。版本 python 2.7
求問:這個問題算不算進程被掛起?以及應該如何解決這個問題?
謝謝!
問題解答
回答1:這種問題得自己調,多打log
回答2:Python 有 GIL
相關文章:
排行榜
