文章詳情頁
python - pyspider爬pdf爬了一小段時間后就不動了
瀏覽：163日期：2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了，stop之后重新跑也沒有任何反應，有人知道是怎么回事嗎？謝謝大家。
問題解答
回答1：放代碼吧 騷年
回答2：根據 dashboard 最上方的信息
scheduler 到 fetcher 有100條隊列中的任務fetcher 到 processor 也有100條隊列中的任務processor 下游都是空的
因為默認的隊列容量為 100，這說明在 processor 發生了堵塞，那就要看 processor 在干什么，是不是死掉了。
相關文章：
1. javascript - react+百度地圖2. angular.js - 關于angular react vue 我們在什么實際的開發項目中使用？如何選擇？3. html5 - iOS的webview加載出來的H5網頁，怎么修改html標簽select的樣式字體？4. 請教一條mysql的sql語句寫法；5. vue.js - vue+webpack+vue-router 部署到nginx服務器下，非根目錄，前后端怎樣配置文件？6. javascript - 為什么當index等于5的時候，不在當前頁面跳轉到百度？不跳轉的代碼在倒數第五行7. 手動啟動mysql服務出錯，1067錯誤，如何解決呢?8. 這是什么情況？？？9. index.php錯誤，求指點10. 跟著課件一模一樣的操作使用tp6,出現了錯誤
排行榜
網公網安備