BeautifulSoup 與 scrapy 的區別是什么?


  Scrapy 是一個框架。scrapy是一個web網站抓取框架,你可以給scrapy一個網站的網址,然后他就會幫你采集數據,並且你可以指定網址的數量來進行采集。scrapy是一個完整的Web抓取框架或者說是爬蟲框架。

  BeautifulSoup 是一個數據解析庫。並且從網址中獲取數據同樣可以做的很好。最重要的是如果你從中提取數據的話也會異常方便(很適合新手入門)。但是該模塊只是把你給他的網址采集下來,然后停止采集。該模塊不會幫你一直采集數據,除非你手動指定,或者寫一個循環來自己實現這個功能。

  簡而言之,你可以用BeautifulSoup 建立一個類似於scrapy的框架,scrapy是更加完善的爬蟲框架,而scrapy只是數據解析庫。

 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM