urllib模块 urllib是Python自带的一个用于爬虫的库，其主要作用就是可以通过代码模拟浏览器发送请求。其常被用到的子模块在Python3中的为urllib.request和urllib.parse，在Python2中是urllib和urllib2。 一、使用流程： 指定 ...

阅读目录 一 介绍 二 基于GET请求 三 基于POST请求 四 响应Response 五 高级用法 六 课后作业 一 介绍 ...

　　请求库，即可以模仿浏览器对网站发起请求的模块（库）。 requests模块 　　使用requests可以模拟浏览器的请求，requests模块的本质是封装了urllib3模块的功能，比起之前用到的urllib，requests模块的api更加便捷 　　requests库发送请求将网页内容 ...

安装方式： 　　1.pip安装： 　　2.wheel安装： 在PyPI上下载对应的wheel文件：如要下载requests的wheel文件，打开：http://pypi.python.org/pypi/requests/2.17.3#downloads 然后再使用pip进行 ...

一 介绍 1、selenium是什么？ ...

selenium模块 　　selenium 最初是一个自动化测试工具,而爬虫中使用它主要是为了解决 requests 无法直接执行 JavaScript 代码的问题。selenium 的缺点是效率会变得很慢。 　　selenium 本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入 ...

一 介绍 官网链接：http://docs.python-requests.org/en/master/ 二 基于GET请求 1、基本请求 2、带参数的GET请求->params 自己拼接GET参数 ...

一、先了解几个重要的http请求头或响应头信息 Request Headers: Reponse Headers: 二、用requests库，模拟http请求： 1.导入 requests 模块： 注：如果没有安装，先要通过 pip install ...