文章詳情頁(yè)
我要在命令行同時(shí)不間斷地運(yùn)行八九個(gè)python爬蟲程序（爬不同的網(wǎng)站）？
瀏覽：116日期：2022-08-21 18:56:02
問題描述
但是過一段時(shí)間總有一兩個(gè)程序會(huì)無(wú)響應(yīng)，好像是被掛起了，CPU占用率并不高，不到10％，內(nèi)存占用也不算多，60％左右，爬蟲程序是去批量下載文件，平均每個(gè)幾兆到十幾兆。我設(shè)置了這幾個(gè)程序的優(yōu)先級(jí)高于普通標(biāo)準(zhǔn)，但是還是會(huì)出現(xiàn)無(wú)響應(yīng)的狀況。版本 python 2.7
求問:這個(gè)問題算不算進(jìn)程被掛起？以及應(yīng)該如何解決這個(gè)問題？
謝謝！
問題解答
回答1：這種問題得自己調(diào)，多打log
回答2：Python 有 GIL
上一條：flask - Python使用redis發(fā)布訂閱時(shí)，監(jiān)聽頻道時(shí)出現(xiàn)的問題？【一句話描述不清楚，請(qǐng)各位細(xì)看內(nèi)容】下一條：python - django queryset自定義排序問題
相關(guān)文章：
1. css - chrome下a標(biāo)簽嵌套img 顯示會(huì)多個(gè)小箭頭?2. sql語(yǔ)句 - mysql中關(guān)聯(lián)表查詢問題3. python - django models 為生成的html元素添加樣式。4. javascript - 如何將一個(gè)div始終固定在某個(gè)位置；無(wú)論屏幕和分辨率怎么變化；div位置始終不變5. javascript - vscode alt+shift+f 格式化js代碼，通不過eslint的代碼風(fēng)格檢查怎么辦。。。6. javascript - 有什么比較好的網(wǎng)頁(yè)版shell前端組件？7. javascript - 原生canvas中如何獲取到觸摸事件的canvas內(nèi)坐標(biāo)?8. javascript - iframe 為什么加載網(wǎng)頁(yè)的時(shí)候滾動(dòng)條這樣顯示？9. html - vue項(xiàng)目中用到了elementUI問題10. mysql updtae追加數(shù)據(jù)sql語(yǔ)句
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備