class get_status(object): # def process_response(self,response,request,spider): def process_spider_input(self,response,spider): print(response.status,response.url)
在中間件里面寫,然后在設置里面的爬蟲中間件(SPIDER_MIDDLEWARES)里面打開
class get_status(object): # def process_response(self,response,request,spider): def process_spider_input(self,response,spider): print(response.status,response.url)
在中間件里面寫,然后在設置里面的爬蟲中間件(SPIDER_MIDDLEWARES)里面打開
本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。