个人技术分享

Generate Model

在这里插入图片描述
假设样本符合高斯分布
在这里插入图片描述
即找 μ \mu μ σ \sigma σ
在这里插入图片描述
在这里插入图片描述

优化

共用 Σ \Sigma Σ减少参数,降低过拟合
在这里插入图片描述
在这里插入图片描述
也称linear model

边界为线性证明

在这里插入图片描述

损失函数

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

比较

在这里插入图片描述
在这里插入图片描述

逻辑回归不能用均方误差

在这里插入图片描述
在这里插入图片描述

Generative v.s. Discriminative

在这里插入图片描述
在这里插入图片描述

Multi-class Classification

在这里插入图片描述

逻辑回归的限制

在这里插入图片描述
做不了,因为边界是一条直线
可以通过线性变换到另一个线性空间中,重新定义特征向量

自己找线性变换

在这里插入图片描述