cookies是什么 ? 　　cookies是服务器放在用户机器上的一小块信息. cookies用来保存登录信息,这样用户就不用每次从同一台机器访问页面都要再次输入登录信息 cookie的成分 名称、值（必需）；域（网站不能访问其他域生成的cookie）、路径（将cookie的访问权 ...

原来打开淘宝网页发现不登陆也可以查看商品信息，以为不用登录也可以爬取数据，但是后来发现需要登录才能爬取信息。并且淘宝的登录名和密码都是经过算法加密的。所以需要得到加密后的登录名和密码。刚开始用谷歌浏览器和IE浏览器都不能找到有用的信息。安装上火狐浏览器后才按照教程得到了相关信息。 https ...

大家注意linux环境下(centos7.0下)安装依赖参考 ...

...

一、前言 大概是一个月前就开始做淘宝的爬虫了，从最开始的用selenium用户配置到selenium模拟登录，再到这次的post请求模拟登录。一共是三篇博客，记录了我爬取淘宝网的经历。期间也有朋友向我提出了不少问题，比如滑块失败，微博登录失败等，可以说用selenium模拟登录这方面，坑特别 ...

前面使用HttpWebRequest 对象可以抓取网页中一些资料，不过有些页面可以直接打开，而有些页面必登录之后才能打开，也就是在登录后保存登录信息在Session,这样就可以访问有权限的页面了。下面通过HttpWebRequest获取网页内容并保持session，最主要的就是存储cookie ...

最近学习了Fiddler抓包工具的简单使用，通过抓包，我们可以抓取到HTTP请求，并对其进行分析。现在我准备尝试着结合Python来模拟GitHub登录。 Fiddler抓包分析 首先，我们想要模拟一个网站的登录，我们必须要简单了解其大致过程。 在这里，我通过Fiddler来抓取GitHub ...

最近学习了Jmeter的简单操作，很想找点东西来实战一下，因为我之前写过一篇通过Python模拟登录的文章，于是便想尝试下学习通过Jmeter来模拟登录。 本人环境：Jmeter5.1.1 关于Github登录的过程，在这里就不详细说了，有兴趣的可以看我之前的文章： 利用Python ...