Python学习之路 （三）爬虫（二）
通用爬虫和聚焦爬虫 根据使用场景，网络爬虫可分为 通用爬虫 和 聚焦爬虫 两种. 通用爬虫 通用网络爬虫 是 捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。 通用搜索引擎（Search ...
原文：Python学习之路 （四）爬虫（三）HTTP和HTTPS
HTTP和HTTPS HTTP协议 HyperText Transfer Protocol，超文本传输协议 ：是一种发布和接收 HTML页面的方法。 HTTPS Hypertext Transfer Protocol over Secure Socket Layer 简单讲是HTTP的安全版，在HTTP下加入SSL层。 SSL Secure Sockets Layer 安全套接层 主要用于Web的 ...
2018-03-28 18:27 0 8134 推荐指数：
相关推荐
Python学习之路 （二）爬虫（一）
Python基础 基础教程参考廖雪峰的官方网站https://www.liaoxuefeng.com/ 一、"大数据时代"，数据获取的方式 1. 企业生产的用户数据：大型互联网公司有海量用户，所以他们积累数据有天然的优势。 有数据意识的中小型企业，也开始积累的数据。 2. 数据管理咨询公司 ...
2.03_Python网络爬虫Http和Https
一：HTTP和HTTPS HTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法，以明文的形式传输，效率高，但是不安全 HTTPS（Hypertext Transfer Protocol over Secure ...
python学习之路——爬虫天气预报
背景 抱着《python学习手册》啃了很久，心里想着要动手写点东西，但是一直拖延症到最近才真正开始准备。一开始不知道写点啥好，就从生活中挖掘，发现自己每天查天气预报查的挺频繁的，那就爬一波天气预报吧。 技术概览 selenium time re calendar 爬取 ...
02.Python网络爬虫第二弹《http和https协议》
一.HTTP协议 1.官方概念： HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。（虽然童鞋们将这条概念都看烂了，但是也没办法，毕竟这就 ...
Python学习之路 （六）爬虫（五）爬取拉勾网招聘信息
待添加 ...
Python学习之路 （五）爬虫（四）正则表示式爬去名言网
爬虫的四个主要步骤 明确目标 (要知道你准备在哪个范围或者网站去搜索) 爬 (将所有的网站的内容全部爬下来) 取 (去掉对我们没用处的数据) 处理数据（按照我们想要的方式存储和使用） 什么是正则表达式 正则表达式，又称规则表达式，通常被用来检索、替换那些符合 ...
python学习笔记——爬虫前置——HTTP协议简介
Http协议简介 因为最近刚刚接触了python爬虫，想要系统的学习一下，在初次使用requests库时有一些无法理解的地方，于是就去简要了解了一点点http协议的基础知识。 Hyper Text Transfer Protocol 超文本传输协议 基于 TCP/IP 协议簇来传递 ...