Python獲取html頁內容

一個簡單的python獲取html頁面

版本說明：

Testing system os : Windows 7

Python :  3.7.2 (tags/v3.7.2:9a3ffc0492, Dec 23 2018, 22:20:52) [MSC v.1916 32 bit (Intel)] on win32

安裝模塊：

1.requests模塊安裝

C:\Users\Administrator> pip install requests -i http://pypi.douban.com/simple

 看到Successfully 就是安裝成功了，參數-i是臨時指定去那個網站找模塊，國內也有其他源可以選擇

 

 

2. lxml模塊安裝

C:\Users\Administrator>pip install lxml -i http://pypi.douban.com/simple

　看到Successfully 就是安裝成功了，參數-i是臨時指定去那個網站找模塊，國內也有其他源可以選擇

 

 

獲取html內容：

## 引入模塊
> import requests
> from lxml import etree

## 打開baidu.com網站
> r = requests.get('https://baidu.com')
## 漢字顯示亂碼
> print(r.text)

## 查看當前編碼
> r.encoding
## 設置編碼utf-8 ，因為網頁是utf-8，編碼不對顯示漢字會亂碼
> r.encondig = 'utf-8'
## 重新打印漢字就正常顯示了
> print(r.text)　　

 

漢字顯示亂碼

 

 設置編碼后漢字顯示正常

 

 

 

 

參考：

https://www.jb51.net/article/161053.htm

https://www.cnblogs.com/lanyinhao/p/9634742.html