网页解析：从网页中提取出所需的信息（例如新的url，数据等等） 网页解析常用的方法有：re(正则表达式)，BeautifulSoup，lxml，parsel，requests-html 这一篇只讲BeautifulSoup，其后面的以后面发，敬请期待吧。 官方文档 ...

人生苦短，我用 Python 前文传送门： 小白学 Python 爬虫（1）：开篇 小白学 Python 爬虫（2）：前置准备（一）基本类库的安装 小白学 Python 爬虫（3）：前置准备（二）Linux基础入门 小白学 Python 爬虫（4）：前置准备 ...

注释的目的是让人们能够轻松的读懂每一行代码，也就是说，让人看到了能知道代码的作用是什么。而计算机在执行程序时会自动忽略它，不会去执行，同时也为后期代码维护提供便利，提供工作效率。在Python中，单行注释以“#”为开头。例如： 多行注释用3单引号‘’‘或3个双引号‘’‘’‘’将注释 ...

一、HTML HTML是Hyper Text Markup Language（超文本标记语言）的缩写。 HTML不是一种编程语言，而是标记语言。 HTML的语法 双标签： <标签名& ...

一、什么是爬虫，爬虫能做什么 爬虫，即网络爬虫，大家可以理解为在网络上爬行的一直蜘蛛，互联网就比作一张大网，而爬虫便是在这张网上爬来爬去的蜘蛛咯，如果它遇到资源，那么它就会抓取下来。比如它在抓取一个网页，在这个网中他发现了一条道路，其实就是指向网页的超链接，那么它就可以爬到另一张网上来获取数据 ...

现在做一个简单的程序：输入年份字符串，判断是否为闰年。闰年的条件为什么？ 非整百年能被4整除 整百年能被400整除 代码如下： 运行后，控制台会输出： ...

1.爬虫相关概述 爬虫概念: 爬虫分类: 风险分析 反爬机制 常用的头信息 如何鉴定页面中是否有动态加载的数据? 局部搜索 全局搜索 2.requests模块的基本使用 基于搜狗编写一个简易的网页采集器 解决乱码问题 解决UA检测问题 ...

在各个网站，较久远的天气信息基本需要付费购买，因此为了花费更少的代价，得到完整的信息，我们经常会对一个网站进行爬虫，这篇文章是我第一次爬虫的心得，因为是第一次进行爬虫，python程序运行时间较长，若有错误，请大佬指出。 爬取网站https ...