关于爬虫，开始以为只能爬取网页数据，后来知道APP也能抓取。于是，在学校利用空闲时间，耗时两周实现了数据的抓取和简单的数据分析。 　　　　目标，抓取超级课程表XX大学（其实是我们大学啦。。。 ...

训练机器学习模型的关键一步是要评估模型的泛化能力。如果我们训练好模型后，还是用训练集取评估模型的性能，这显然是不符合逻辑的。一个模型如果性能不好，要么是因为模型过于复杂导致过拟合(高方差)，要么是模型 ...

　　在之前写过一篇使用python爬虫爬取电影天堂资源的博客，重点是如何解析页面和提高爬虫的效率。由于电影天堂上的资源获取权限是所有人都一样的，所以不需要进行登录验证操作，写完那篇文章后又花了些时间研 ...

它可以打开一个网址，返回一个HtmlPage对象，我们可以用它来获得表单。 获得一个HtmlElement对象，可以根据html的id、name来获取，如果都没有 ...

　　 　　如何用Java代码模拟一些如百度、QQ之类的网站登录？有两个方式，一是发送模拟请求，二是模拟浏览器操作，而这两种方式恰好在Java有开源实现，在这里介绍一个工具包，它是家喻户晓的Htt ...

前言 最近在研究模拟登录的各种方法， 主要想要实现的两个功能是： 1.点击按钮可以直接跳转并登录到某一个系统中。 2.抓取某一个系统中某一个页面中的特定数据。 为此在网上查了许多的资料，首先 ...

机器学习算法中有两类参数：从训练集中学习到的参数，比如逻辑斯蒂回归中的权重参数，另一类是模型的超参数，也就是需要人工设定的参数，比如正则项系数或者决策树的深度。 前一节，我们使用验证曲线来提高模型的 ...

1 前言 近期，有些朋友问我一些关于如何应对反爬虫的问题。由于好多朋友都在问，因此决定写一篇此类的博客。把我知道的一些方法，分享给大家。博主属于小菜级别，玩爬虫也完全是处于兴趣爱好，如有不足之处，还 ...

问题分析： 1、爬取网站时经常会遇到需要登录的问题，这是就需要用到模拟登录的相关方法。python提供了强大的url库，想做到这个并不难。这里以登录学校教务系统为例，做一个简单的例子。 2、首先得 ...

　　课程格子和超级课程表这两个应用，想必大学生都很熟悉，使用自己的学号和教务系统的密码，就可以将自己的课表导入，随时随地都可以在手机上查看。 　　其实稍微了解一点php的话，我们也可以做一个类似这样 ...