文章詳情頁
python - pyspider爬pdf爬了一小段時間后就不動了
瀏覽:141日期:2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了,stop之后重新跑也沒有任何反應,有人知道是怎么回事嗎?謝謝大家。
問題解答
回答1:放代碼吧 騷年
回答2:根據 dashboard 最上方的信息
scheduler 到 fetcher 有100條隊列中的任務fetcher 到 processor 也有100條隊列中的任務processor 下游都是空的
因為默認的隊列容量為 100,這說明在 processor 發生了堵塞,那就要看 processor 在干什么,是不是死掉了。
相關文章:
1. 為什么我ping不通我的docker容器呢???2. html5 - 百度echart官網下載的地圖json數據亂碼3. 為什么學習PHP4. html5 - vue怎么實現像京東天貓banner圖片圖片點擊放大,并可滑動到下一張5. html5和Flash對抗是什么情況?6. css - 使手機版可左右托移?7. python - Pycharm的Debug用不了8. java - Spring Mvc全局異常處理器@ControllerAdvice不起作用?9. JAVA 版本問題?10. javascript - 關于json中獲取多個key-value對中多層嵌套key的name
排行榜
