用wget命令的爬蟲功能抓取網頁到本地文件


經常需要到網上下載一些模板,但是大部分網站下載要登錄,有的還要積分。

用wget就可以很方便的把模板演示頁抓取下來

wget -c -r -npH -k https://www.erdangjiade.com/modals/40/4086/demo/
  • 參數說明

-c:斷點續傳
-r:遞歸下載
-np:遞歸下載時不搜索上層目錄
-nd:遞歸下載時不創建一層一層的目錄,把所有文件下載當前文件夾中
-p:下載網頁所需要的所有文件(圖片,樣式,js文件等)
-H:當遞歸時是轉到外部主機下載圖片或鏈接
-k:將絕對鏈接轉換為相對鏈接,這樣就可以在本地脫機瀏覽網頁了


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM