scrapy.cmdline.execute


scrapy的cmdline命令

1.啟動爬蟲的命令為:scrapy crawl (爬蟲名)

2.還可以通過以下方式來啟動爬蟲

  方法一:創建一個.py文件(這里的爬蟲文件名可以自己定義,例:myspider.py)

  

#!/usr/bin/env python
# -*- coding:utf-8 -*-
from scrapy import cmdline
# 方式一:注意execute的參數類型為一個列表
cmdline.execute('scrapy crawl spidername'.split())
# 方式二:注意execute的參數類型為一個列表
cmdline.execute(['scrapy', 'crawl', 'spidername'])

  方法二:在終端通過 python myspider.py 也可以執行該文件。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM