一、網絡爬蟲 Python爬蟲開發工程師,從網站某一個頁面(通常是首頁)開始，讀取網頁的內容，找到在網頁中的其它鏈接地址，然后通過這些鏈接地址尋找下一個網頁，這樣一直循環下去，直到把這個網站所有的網頁都抓取完為止。如果把整個互聯網當成一個網站，那么網絡蜘蛛就可以用這個原理把互聯網上所有的網頁 ...

閑來無事，學學python爬蟲。 在正式學爬蟲前，簡單學習了下HTML和CSS，了解了網頁的基本結構后，更加快速入門。 1.獲取糗事百科url http://www.qiushibaike.com/hot/page/2/ 末尾2指第2頁 2.先抓取HTML頁面 ...

剛入門Python爬蟲，試了下爬取今日頭條官網中的段子，網址為https://www.toutiao.com/ch/essay_joke/源碼比較簡陋，如下： 通過瀏覽器相關工具發現笑話的數據存儲地址為https://www.toutiao.com/api/article/feed ...

...

爬蟲爬視頻 爬取步驟 第一步：獲取視頻所在的網頁 第二步：F12中找到視頻真正所在的鏈接 第三步：獲取鏈接並轉換成二進制 第四部：保存 保存步驟代碼 爬酷6首頁的所有視頻 ...

爬取“盜墓筆記”小說 ...

抓取“xmly”鬼故事音頻 ...

今天學習了一些簡單的爬蟲知識，並應用這些知識擼了一爬取古詩的程序 主要使用的第三方庫：requests，bs4 直接上代碼： spider.py : poem.py : 運行 ： 爬取到的數據： poem.txt ...