标签:算法

牛顿法

用途: 给定函数f(x),输出其极值 约束 : f(x)必须是凸(凹)函数,且二阶可导 优点 二阶收敛,收敛速度比批下降快(因为考虑到了二阶方向,能够在宏观上选择下降速度最快的方向) 缺点 计算黑塞矩阵的逆需要时间过长 …

感知机

用途: 给定训练数据集,得到能够将数据线性划分的超平面wx+b=0,从而对输入数据进行判别,一般用于二分类问题。 适用范围 仅在线性可分的情况下可行 缺点 没有加入防止过拟合的机制 算法 原始模型 对偶模型 此处可以把内…

线性规划笔记

图解法 将约束条件在座标系中画出,找到围成的图形(可行域),再做目标函数图像,并向值变大的方向移动,直到可行域边界,交点称为最优解 凸集:在点集中任取两点,则其连线仍在其中(即没有凹入的部分;没有空洞)。 ①若LP问题的…