为了总结一下Selenium的用法，具体用了这个例子来说明一下。 Selenium简单来说，就是通过程序驱动一个浏览器，并且可以通过程序来帮你做一些事情，例如点击、填表呀之类的。 换句话说，你在浏览器上面看到的东西，他都能给你呈现；你能在页面上做的东西，它也能做。 Selenium厉害的地方 ...

因为项目原因，我被领导委任爬取微博用户的一些信息，而作为一个爬虫经验几乎为0的python非老司机，开始了漫长的研究之路。。。。 在了解了爬虫的基本工具和著名框架scrapy后 博主还是决定自己参考网上的各路大神的脚本，写一个登录脚本。。。。 环境 tools 1、Chrome ...

1.selenium基本使用 1.selenium安装及基本操作 selenium是一个自动化测试工具，它支持各种浏览器，包括Chrome，Safari,Firefox等主流界面浏览器驱动，也包括Phantomjs的无界面浏览器。 通过selenium+phantomjs可以直接渲染js ...

毕设题目要使用到新浪微博数据，所以要爬取新浪微博的数据。一般而言，新浪微博的爬虫有两种模式：新浪官方API和模拟登录新浪微博。两种方法的异同点和适用情况就无须赘述了。前辈的文章已经非常多了。写这篇文章主要记录自己的探究过程。 参考文章：1，解析新浪微博的登录 ...

这几天一直在研究新浪微博的爬虫，发现爬取微博的数据首先要登录。本来打算是通过账号和密码模拟浏览器登录。但是现在微博的登录机制比较复杂。通过账号密码还没有登录成功QAQ。所以就先记录下，通过cookie直接访问自己的微博主页。 微博登录的认证过程 微博登录的细节在其他的博客里已经有了详细的介绍 ...

这几天要做个获取新浪微博@我的信息， 又不用第三方登录，所以只能通过模拟登录来获取信息，研究的一下发现直接模拟登录微博比较困难，验证的算法比较复杂，于是绕道通过登录新浪通行证后来获取cookie 来获取信息,代码如下。 ...

昨天把selenium的官网教程浏览了一遍，英文差，看得费劲，最后借助词典大体了解了selenium的webdriver(⊙﹏⊙) 纸上得来终觉浅，绝知此事要躬行。废话少说，直接上例子~ 题目：登录新浪微博 思路：因为没有涉及到验证码，所以直接用账号密码登录，设置一个检查点判断是否登录 ...

注册新浪微博应用将会获得该应用的App Key和Secret Key，您可以通过这两个Key您可以在灯鹭控制台完成与新浪微博的对接。App Key是应用的唯一标识，开放平台通过App Key来鉴别应用的身份。 AppSecret是给应用分配的密钥，您需要妥善保存这个密钥，这个密钥用来保证应用 ...