前言 我們這里主要是利用requests模塊和bs4模塊進行簡單的爬蟲的講解，讓大家可以對爬蟲有了初步的認識，我們通過爬幾個簡單網站，讓大家循序漸進的掌握爬蟲的基礎知識，做網絡爬蟲還是需要基本的前端的知識的，下面我們進行我們的爬蟲講解 在進行實戰之前，我們先給大家看下爬蟲的一般討論，方便 ...

整理這個文檔的初衷是自己開始學習的時候沒有找到好的教程和文本資料，自己整理一份這樣的資料希望能對小伙伴有幫助 什么是爬蟲？ 網絡爬蟲（又被稱為網頁蜘蛛，網絡機器人，在FOAF社區中間，更經常的稱為網頁追逐者），是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本。另外一些不常使用 ...

在上文中我們說了：爬蟲就是請求網站並提取數據的自動化程序。其中請求，提取，自動化是爬蟲的關鍵！下面我們分析爬蟲的基本流程 爬蟲的基本流程 發起請求通過HTTP庫向目標站點發起請求，也就是發送一個Request，請求可以包含額外的header等信息，等待服務器響應 獲取響應內容如果服務器 ...

人生苦短，我用 Python 前文傳送門： 小白學 Python 爬蟲（1）：開篇 小白學 Python 爬蟲（2）：前置准備（一）基本類庫的安裝 小白學 Python 爬蟲（3）：前置准備（二）Linux基礎入門 小白學 Python 爬蟲（4）：前置准備 ...

什么是正則表達式 正則表達式是對字符串操作的一種邏輯公式，就是 事先定義好的一些特定字符、及這些特定字符的組合，組成一個“規則字符”，這個“規則字符” 來表達對字符的一種過濾邏輯。 正則並不是p ...

大家應該已經猜到了，小編要開始更新一個新的系列《小白學 Python 爬蟲》，介於大家水平參差不齊，建 ...

人生苦短，我用 Python 前文傳送門： 小白學 Python 爬蟲（1）：開篇 小白學 Python 爬蟲（2）：前置准備（一）基本類庫的安裝 小白學 Python 爬蟲（3）：前置准備（二）Linux基礎入門 小白學 Python 爬蟲（4）：前置准備 ...

官方文檔地址：https://docs.python.org/3/library/urllib.html 什么是Urllib Urllib是python內置的HTTP請求庫包括以下模塊urlli ...