Python selenium爬蟲實(shí)現(xiàn)定時任務(wù)過程解析
現(xiàn)在需要啟動一個selenium的爬蟲,使用火狐驅(qū)動+多線程,大家都明白的,現(xiàn)在電腦管家顯示CPU占用率20%,啟動selenium后不停的開啟瀏覽器+多線程,
好,沒過5分鐘,CPU占用率直接拉到90%+,電腦卡到飛起,定時程序雖然還在運(yùn)行,但是已經(jīng)類似于待機(jī)狀態(tài),
是不是突然感覺到面對電腦卡死,第一反應(yīng):臥槽,這個lj電腦,這么程序都跑不起來,我還寫這么多代碼,*****!!
是吧,接下來上代碼,具體功能,請自信查閱相關(guān)資料深造:
from datetime import datetimefrom threading import Timerimport time# 定時任務(wù)def task(): print(datetime.now().strftime('%Y-%m-%d %H:%M:%S'))def timedTask(): ’’’ 第一個參數(shù): 延遲多長時間執(zhí)行任務(wù)(秒) 第二個參數(shù): 要執(zhí)行的函數(shù) 第三個參數(shù): 調(diào)用函數(shù)的參數(shù)(tuple) ’’’ Timer(5, task, ()).start()while True: timedTask() time.sleep(5)
7行代碼,是不是很優(yōu)雅?優(yōu)不優(yōu)雅的主要是代碼少,不費(fèi)勁對吧
2020-06-05 14:06:392020-06-05 14:06:442020-06-05 14:06:492020-06-05 14:06:542020-06-05 14:06:592020-06-05 14:07:042020-06-05 14:07:092020-06-05 14:07:142020-06-05 14:07:192020-06-05 14:07:24
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. python 實(shí)現(xiàn)rolling和apply函數(shù)的向下取值操作2. CSS代碼檢查工具stylelint的使用方法詳解3. 淺談python多線程和多線程變量共享問題介紹4. Python如何批量獲取文件夾的大小并保存5. vue3?Error:Unknown?variable?dynamic?import:?../views/的解決方案6. python利用platform模塊獲取系統(tǒng)信息7. react axios 跨域訪問一個或多個域名問題8. Python的Tqdm模塊實(shí)現(xiàn)進(jìn)度條配置9. Python 多線程之threading 模塊的使用10. WML語言的基本情況
