python爬虫之快速对js内容进行破解 今天介绍下数据被js加密后的破解方法。距离上次发文已经过去半个多月了，我写文章的主要目的是把从其它地方学到的东西做个记录顺便分享给大家，我承认自己是个懒猪。不知道小伙伴们有没有遇到同样的情况，公众号，博客关注了一堆，但是真正看并去学习的少之又少 ...

除了一些类似字体反爬之类的奇淫技巧，js加密应该是反爬相当常见的一部分了，这也是一个分水岭，我能解决基本js加密的才能算入阶。 最近正好遇到一个比较简单的js，跟大家分享一下迅雷网盘搜索_838888 输入关键字，url变了https://838888.net/search ...

前言 在GitHub上维护了一个代理池的项目，代理来源是抓取一些免费的代理发布网站。上午有个小哥告诉我说有个代理抓取接口不能用了，返回状态521。抱着帮人解决问题的心态去跑了一遍代码。发现果 ...

经过一段时间的python学习，能写出一些爬虫了。但是，遇到js动态加载的网页就犯了难。于是乎谷歌、百度，发现个好介绍http://www.jianshu.com/p/4fe8bb1ea984 主要就是分析网页的加载过程，从网页响应中找到JS脚本返回的JSON数据。（上边的网址介绍很详细 ...

经历过企查查这个网站后，强烈感觉到使用抓包的重要性，以至于决定从此以后使用抓包进行模拟请求，放弃使用F12进行分析。 写下这篇文章，奠基死去的F12~~~ 代码很简单，甚至于简陋，为什么要记录下这个爬虫，因为请求头部信息，自己进行分析，和ctrl+c+v导致请求头数据不准确，严重 ...

前言 我们在写爬虫的时候经常会遇到各种反爬措施，比如现在各种大型网站越来越多的js加载令人十分头疼。 这些网站的数据不像简单的网站一样可以直接拿取，我们经常会找不到数据源头，难道只能使用selenium来模拟浏览器拿取吗?当然不是的。 本文就以如何破解有道翻译的参数为例来一步步完成js的破解 ...

一、前言 　　本文是一次破解某网站 JS 加密数据的记录，网址为： https://www.qimingpian.cn/finosda/event/einvestment 　　要获取的是本页面上的投资事件信息，首先可以确定的是数据是通过 AJax 来传输的，并非直接写在网页源码中 ...

前言 本篇博文的主题就是处理字体反爬的，其实这种网上已经很多了，那为什么我还要写呢？因为无聊啊，最近是真没啥事，并且我看了下，还是有点难度的，然后这个字体反爬系列会出两到三篇博文，针对市面上主流的字 ...