爬蟲與Python：（三）基本庫的使用——擴展:百度搜索關鍵字提交

要求

通過requests庫攜帶參數去請求百度搜索，然后獲取返回的HTML源碼。百度搜索地址為：https://www.baidu.com/s?wd=keyword

思路

• 打開百度搜索，在輸入框輸入“魷魚游戲”，輸入之后會自動跳轉到搜索結果頁面，如下圖所示。

 

 

•  觀察URL地址欄，發現有一個wd參數，這個標識就是輸入的搜索的內容。
• 知道了wd參數，就可以用Python模擬這個過程了。

編碼

示例代碼如下：

import requests

keyword = '魷魚游戲'
try:
    kv = {'wd':keyword}
    r = requests.get('https://www.baidu.com/s',params=kv)
    r.raise_for_status()
    r.encoding = r.apparent_encoding
    print(len(r.text))
except:
    print('失敗')