背景 很多同学在工作中是没有selenium的实战环境的，因此自学的同学会感到有力无处使，想学习但又不知道怎么练习。其实学习新东西的道理都是想通的，那就是反复练习。这里乙醇会给出一些有用的，也富有挑战的练习，帮助大家去快速掌握和使用selenium webdriver。多用才会有感触。 练习 ...

由于工作需要，需要提取到天猫400个指定商品页面中指定的信息，于是有了这个爬虫。这是一个使用 selenium 爬取天猫商品信息的爬虫，虽然功能单一，但是也算是 selenium 爬虫的基本用法了。 源码展示 源码解析 这个爬虫主要由三个步骤构成： 读取文本中商品ID ...

1、目标 目标：按地区、高校 采集2020年拟在山东招生的所有专业信息 采集地址：http://xkkm.sdzk.cn/zy-manager-web/gxxx/selectAllDq# 2、Selenium webdriver说明 2.1 为什么使用webdriver ...

更新 其实本文的初衷是为了获取淘宝的非匿名旺旺，在淘宝详情页的最下方有相关评论，含有非匿名旺旺号，快一年了淘宝都没有修复这个。 可就在今天，淘宝把所有的账号设置成了匿名显示，SO，获取非匿名旺旺号已经不可能了。那本节就带大家抓取匿名旺旺号熟悉一下Selenium吧。 2016/7/1 前言 ...

1.普通爬取数据 View Code 2.操作selenium获取数据 View Code 3.操作selenium爬取boss直聘 View Code 4.12306抢票初步 ...

　　　　自学python爬虫也快半年了,在目前看来，我面临着三个待解决的爬虫技术方面的问题：动态加载，多线程并发抓取，模拟登陆。目前正在不断学习相关知识。下面简单写一下用selenium处理动态加载页面相关的知识。目标——抓取页面所有的高考录取分数信息。 　　　　对于动态加载，开始的时候是看到 ...

之前我们从猫眼获取过电影信息，而且利用分析ajax技术，获取过今日头条的街拍图片。 今天我们在豆瓣上获取一些热门电影的信息。 页面分析 首先，我们先来看一下豆瓣里面选电影的页面，我们默认选择热门电 ...

Web自动化测试工具，可运行在浏览器，根据指令操作浏览器，只是工具，必须与第三方浏览器结合使用，相比于之前学的爬虫只是慢了一点而已。而且这种方法爬取的东西不用在意时候ajax动态加载等反爬机制。因此找标签可以直接F12找，不用确定源码中是否存在。 安装 Linux: sudo pip3 ...