我用crontab 啟動(dòng)一個(gè)爬蟲(chóng)，但是爬蟲(chóng)沒(méi)有在2分鐘內(nèi)關(guān)掉現(xiàn)在有個(gè)方案就是while 死循環(huán)內(nèi) 2分鐘內(nèi)正常運(yùn)行完畢就不管，如果運(yùn)行的時(shí)間超過(guò)1小時(shí) 就把這個(gè)spider 關(guān)閉，如何操作
1 回答
蝴蝶刀刀
TA貢獻(xiàn)1801條經(jīng)驗(yàn) 獲得超8個(gè)贊
建議搜索下擴(kuò)展中間件。excetions,有關(guān)于spider未接收到信號(hào)的說(shuō)明。
添加回答
舉報(bào)
0/150
提交
取消