Scrapy 是一個框架。scrapy是一個web網站抓取框架,你可以給scrapy一個網站的網址,然后他就會幫你采集數據,並且你可以指定網址的數量來進行采集。scrapy是一個完整的Web抓取框架或者說是爬蟲框架。
BeautifulSoup 是一個數據解析庫。並且從網址中獲取數據同樣可以做的很好。最重要的是如果你從中提取數據的話也會異常方便(很適合新手入門)。但是該模塊只是把你給他的網址采集下來,然后停止采集。該模塊不會幫你一直采集數據,除非你手動指定,或者寫一個循環來自己實現這個功能。
簡而言之,你可以用BeautifulSoup 建立一個類似於scrapy的框架,scrapy是更加完善的爬蟲框架,而scrapy只是數據解析庫。