内容简介:在逻辑回归中,假设函数 h_θ(x) 为:
支持向量机( Support vector machine ) 是一种强大的机器学习算法,和神经网络相比,它在学习复杂的非线性方程时,能够提供更清晰和更加强大的方式。为了学习支持向量机,我们可以先从逻辑回归开始,看看如何经过小小的改动能得到支持向量机。
在逻辑回归中,假设函数 h_θ(x) 为:
图像为:
对于一个样本来说,代价函数为:
当 y =1 时,第二项为 0,只需要考虑第一项,画出第一项的图像:
我们把这个图像稍微修改一下,趋势与逻辑回归相似,就变成了支持向量机代价函数一部分的图像 cost_1(z),如下图粉色线:
第二项同样道理,cost_0(z):
逻辑回归中正则化代价函数为:
将其中系数 1/m 去掉,把红色部分换成上面粉色图像的函数:
接着将浅蓝色和粉色部分调换一下权重:
这样就得到支持向量机的代价函数:
只需要将这个函数最小化即可得到参数。以上就是从逻辑回归推出支持向量机的整个过程。
ps. 本篇文章是根据吴恩达机器学习课程整理的学习笔记。如果想要一起学习机器学习,可以关注微信公众号「 SuperFeng 」,期待与你的相遇。
以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网
猜你喜欢:- 机器学习算法——感知机&支持向量机
- 机器学习A-Z~支持向量机
- 机器学习笔记(十一):学支持向量机怎能不懂 “核”
- 机器学习笔记(十一)——学支持向量机怎能不懂“核”
- 机器学习笔记(九)——手撕支持向量机之间隔、对偶、KKT条件详细推导
- 支持向量机(一):支持向量机的分类思想
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
Spring框架高级编程
约翰逊 / 蒋培 / 机械工业出版社 / 2006-4 / 59.00元
Spring框架是主要的开源应用程序开发框架,它使得Java/J2EE开发更容易、效率更高。本书不仅向读者展示了Spring能做什么?而且揭示了Spring完成这些功能的原理,解释其功能和动机,以帮助读者使用该框架的所有部分来开发成功的应用程序。本书涵盖Spring的所有特性,并且演示了如何将其构成一个连贯的整体,帮助读者理解Spring方法的基本原理、何时使用Sping以及如何效仿最佳实践。所有......一起来看看 《Spring框架高级编程》 这本书的介绍吧!