文章詳情頁
python - pyspider爬pdf爬了一小段時間后就不動了
瀏覽：105日期：2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了，stop之后重新跑也沒有任何反應，有人知道是怎么回事嗎？謝謝大家。
問題解答
回答1：放代碼吧 騷年
回答2：根據 dashboard 最上方的信息
scheduler 到 fetcher 有100條隊列中的任務fetcher 到 processor 也有100條隊列中的任務processor 下游都是空的
因為默認的隊列容量為 100，這說明在 processor 發生了堵塞，那就要看 processor 在干什么，是不是死掉了。
相關文章：
1. javascript - 下面的這段算法代碼求解釋2. javascript - 在top.jsp點擊退出按鈕后，right.jsp進行頁面跳轉，跳轉到login.jsp3. javascript - js 有什么優雅的辦法實現在同時打開的兩個標簽頁間相互通信？4. android - 哪位大神知道java后臺的api接口的對象傳到前端后輸入日期報錯，是什么情況？求大神指點5. css3 - 在sublime text里， 如何讓emmet生成的帶前綴css屬性垂直對齊？6. mac連接阿里云docker集群，已經卡了2天了，求問？7. javascript - 回調函數和閉包的關系8. java - spring-data Jpa 不需要執行save 語句，Set字段就可以自動執行保存的方法？求解9. [前端求職必看]前端開發面試題與答案精選_擴展問題10. 想找個php大神仿個網站。
排行榜
網公網安備