W3Cschool
恭喜您成為首批注冊用戶
獲得88經(jīng)驗值獎勵
999是雅虎網(wǎng)站用來限制請求的自定義響應狀態(tài)代碼。嘗試使用下載延遲來降低爬行速度 ?2
? (或更高)在你的蜘蛛:
class MySpider(CrawlSpider):
name = 'myspider'
download_delay = 2
# [ ... rest of the spider code ... ]
或者通過在項目中設置全局下載延遲 DOWNLOAD_DELAY 設置。
Copyright©2021 w3cschool編程獅|閩ICP備15016281號-3|閩公網(wǎng)安備35020302033924號
違法和不良信息舉報電話:173-0602-2364|舉報郵箱:jubao@eeedong.com
掃描二維碼
下載編程獅App
編程獅公眾號
聯(lián)系方式:
更多建議: