文章詳情頁
我要在命令行同時不間斷地運行八九個python爬蟲程序（爬不同的網站）？
瀏覽：127日期：2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應，好像是被掛起了，CPU占用率并不高，不到10％，內存占用也不算多，60％左右，爬蟲程序是去批量下載文件，平均每個幾兆到十幾兆。我設置了這幾個程序的優先級高于普通標準，但是還是會出現無響應的狀況。版本 python 2.7
求問:這個問題算不算進程被掛起？以及應該如何解決這個問題？
謝謝！
問題解答
回答1：這種問題得自己調，多打log
回答2：Python 有 GIL
相關文章：
1. PHP單例模式2. 能用一臺nginx服務器既做反向代理又做web服務器嗎，還是一臺做反向代理一臺做web服務器3. css3圖標4. java - C++ STL迭代器聲明的iterator和reverse_iterator實質區別？是不同數值嗎？5. css3 - 圖文響應式樣式6. javascript - react input file7. python 讀取csv文件可以讀取但內容錯誤，但單獨用excel打開正常，如何解決？8. css - transform-origin 旋轉參考點9. css3 - 如何實現字體顏色漸變？10. javascript - 除了VUE React 這類MVVM還有什么適合做SPA的，特別是里面涉及到Canvas Webgl？
排行榜
網公網安備