一、参考文章 python爬虫爬取校花网视频，单线程爬取 爬虫----爬取校花网视频，包含多线程版本 上述两篇文章都是对校花网视频的爬取，由于时间相隔很久了，校花网上的一些视频已经不存在了，因此上述文章中的代码在运行时会出现一些异常，本篇文章主要是对上述文章中的代码 ...

前阵子网上看到有人写爬取妹子图的派森代码，于是乎我也想写一个教程,很多教程都是调用的第三方模块，今天就使用原生库来爬，并且扩展实现了图片鉴定，图片去重等操作，经过了爬站验证，稳如老狗，我已经爬了几万张了,只要你硬盘够大。 妹子图网站被扒倒闭了，下面的代码只能参考了。 前端，被一个 img标签 ...

一、妹子图爬取前分析 1、首先我们还是要简单分析一下妹子图，第一就是要知道爬取网站的url，这里妹子图的url就是它https://www.mzitu.com/ 2、接着我们分析妹子图的请求方式，看看它以什么方式渲染。这里妹子图只是利用了传统的网页（没有使用Ajax或js）。 3、接着点击 ...

进程：资源的集合，一个程序就是一个进程。 线程：一个程序最小的运行单位。 主线程等待子线程 方法一：想要让主线程等待添加的线程，需要先把创建的线程统一放到list里面，循环执行完，使用.join()方法，如下： 方法 ...

作为一个python还没入门的小白，搞懂这段代码实在是很不容易，还要去学html的知识（#黑脸） 因此我加上了注释，比较好读懂点 ...

在软件层面，多线程就是能同时从多个路线同时执行处理。从软件的角度来说，线程可以看作是同时的。 即便在单核处理器的电脑上也能实现多线程。但是多个线程毕竟是要在cpu上跑的，一定会有一个先后，所以这就涉及到了cpu的调度（时间片轮转）问题， 但是这已经超出了软件本身的层面，所以在撸代码 ...

1，单线程和多线程 我们通过一个实例来理解单线程和多线程。 假设有一个同学通讯录，通讯录长度为1000，用于记录同学的姓名、电话、地址信息，用户可以并发检索该通讯录，输入通讯录中的姓名，程序从通讯录中查找该姓名，如果存在则输出与该姓名相关的电话、地址信息。任务要求简单模拟1000个用户的并发 ...

演示python单线程、多线程、多进程、协程 这篇主要是用四种方法来实现爬虫。无论是100线程还是100进程或者100协程，网速都撑满了，爬取速度很快，单线程对网速利用很不充分，当然就爬取缓慢。 特别是我之前在面试房极客时候，那主管告诉我，他说他看了网上 ...