之前对线性回归和逻辑回归的理论部分做了较为详细的论述，下面通过一些例子再来巩固一下之前所学的内容。 需要说明的是，虽然我们在线性回归中都是直接通过公式推导求出w和b的精确值，但在实际运用中基本上都会采用梯度下降法作为首选，因为用代码表示公式会比较繁琐，而梯度下降法只需要不断对参数更新公式进行迭代 ...

本笔记主要记录学习《机器学习》的总结体会。如有理解不到位的地方，欢迎大家指出，我会努力改正。 在学习《机器学习》时，我主要是通过Andrew Ng教授在mooc上提供的《Machine Learning》课程，不得不说Andrew Ng老师在讲授这门课程时，真的很用心，特别是编程 ...

一：分类 （一）分类基础 在分类问题中，你要预测的变量y是离散的值，我们将学习一种叫做逻辑回归 (Logistic Regression) 的算法，这是目前最流行使用最广泛的一种学习算法。 在分类问题中，我们尝试预测的是结果是否属于某一个类（例如正确或错误）。分类问题的例子有：判断一封 ...

线性回归（Linear Regression） 是利用称为线性回归方程的最小平方函数对一个或多个自变量和因变量之间关系进行建模的一种回归分析。这种函数是一个或多个称为回归系数的模型参数的线性组合（自变量都是一次方）。只有一个自变量的情况称为简单回归，大于一个自变量情况的叫做多元回归。线性回归 ...

回归是统计学中最有力的工具之一。机器学习监督学习算法分为分类算法和回归算法两种，其实就是根据类别标签分布类型为离散型、连续性而定义的。回归算法用于连续型分布预测，针对的是数值型的样本，使用回归，可以在给定输入的时候预测出一个数值，这是对分类方法的提升，因为这样可以预测连续型数据而不仅仅是离散的类别 ...

输出是一个连续的数值。 模型表示 对于一个目标值，它可能受到多个特征的加权影响。例如宝可梦精灵的进化的 cp 值，它不仅受到进化前的 cp 值的影响，还可能与宝可梦的 hp 值、类型、高度以及重量相关。因此，对于宝可梦进化后的 cp 值，我们可以用如下线性公式来表示： \[y=b+ ...

前言 由于本部分内容讲解资源较多，本文不做过多叙述，重点放在实际问题的应用上。 一、线性回归 线性回归中的线性指的是对于参数的线性的，对于样本的特征不一定是线性的。 线性模型（矩阵形式）：y=XA+e 其中：A为参数向量，y为向量，X为矩阵,e为噪声向量。 对于线性模型 ...

一：建立一个逻辑回归模型来预测一个学生是否被大学录取。 假设你是一个大学系的管理员，你想根据两次考试的结果来决定每个申请人的录取机会。 你有以前的申请人的历史数据，你可以用它作为逻辑回归的训练集。 对于每一个培训例子，你有两个考试的申请人的分数和录取决定。 为了做到这一点，我们将建立一个 ...