向scrapy爬蟲傳參,向scrapy部署后的爬蟲傳參


 

 

https://blog.csdn.net/c0411034/article/details/81750028

 

https://blog.csdn.net/Q_AN1314/article/details/50748700

 


 

在爬蟲里面 接收 參數

 def __init__(self, pid=None, *args, **kwargs):
        # print(pid)
        super(yourSpider, self).__init__(*args, **kwargs)

 

 

本地啟動 ,使用參數 
execute(["scrapy", "crawl", "spider_p2", "-a", "pid=3687695"])

 

用scrapyd部署后 
post 參數里面
project=your_project&spider=your_spider&pid=3687696



 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM