前言：字体反爬，也是一种常见的反爬技术，例如58同城，猫眼电影票房，汽车之家，天眼查，实习僧等网站。这些网站采用了自定义的字体文件，在浏览器上正常显示，但是爬虫抓取下来的数据要么就是乱码，要么就是变成其他字符，是因为他们采用自定义字体文件，通过在线加载来引用样式，这是CSS3的新特性 ...

爬虫常用来从某些网站抓取数据, 包括文字,图片等都可能作为爬取目标。通常情况下, 文字数据有更高的价值, 更容易进行后续分析, 所以有些网站就将关键数据以图片, 或者自定义字体形式来展示, 这样一来, 爬虫拿到的数据就会难以分析, 分析成本增高, 收益减少, 就可以降低爬虫制作者的积极性。对于图片 ...

一、站点分析 　　MTime 时光网是一个电影媒体与电商服务平台，而这次做的模拟登录则是依靠其手机端站点，站点地址为：https://m.mtime.cn/#。切换到登录页面，再分别输入账号和错误的 ...

前言 今天我们就用爬虫携程旅游景点数据爬取与可视化并做简单的数据可视化分析呗。让我们愉快地开始吧~ 开发工具 Python版本：3.6.4 相关模块： bs4模块； jieba模块； pyecharts模块； wordcloud模块； requests模块； 以及一些 ...

一、前言 　　本文是一次破解某网站 JS 加密数据的记录，网址为： https://www.qimingpian.cn/finosda/event/einvestment 　　要获取的是本页面上的投资事件信息，首先可以确定的是数据是通过 AJax 来传输的，并非直接写在网页源码中 ...

Python爬虫目前是基于requests包，下面是该包的文档，查一些资料还是比较方便。 http://docs.python-requests.org/en/master/ POST发送内容格式 爬取某旅游网站的产品评论，通过分析，获取json文件需要POST指令。简单来说 ...

WebMagic学习 遇到的问题 Log4j错误 解决：在src目录下添加配置文件 log4j.properties 协议错误，有的网站需要的SSL协议比较高，尽量使用做高版本 ...

一、页面分析 首先打开猫眼电影，然后点击一个正在热播的电影（比如：毒液）。打开开发者工具，点击左上角的箭头，然后用鼠标点击网页上的票价，可以看到源码中显示的不是数字，而是某些根本看不懂的字符，这是因 ...