请选择 进入手机版 | 继续访问电脑版
楼主: Dear_Li
1462 8

[讨论交流] 机器学习中那些必要又困惑的数学知识 [推广有奖]

  • 0关注
  • 14粉丝

等待验证会员

博士生

64%

还不是VIP/贵宾

-

威望
0
论坛币
686 个
通用积分
7.6246
学术水平
12 点
热心指数
16 点
信用等级
2 点
经验
4905 点
帖子
186
精华
0
在线时间
246 小时
注册时间
2018-7-21
最后登录
2019-1-16

Dear_Li 发表于 2018-12-3 15:55:12 |显示全部楼层 |坛友微信交流群
相似文件 换一批

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币

现在很多想从事于机器学习的朋友都存在很多困惑,主要是很多相关的书看不懂,尤其是数学部分,机器学习的基础是数学。数学并非是一个可选可不选的理论方法,而是不可或缺的支柱。对于机器学习算法工程师而言,微积分、线性代数、概率论毫无疑问是需要掌握的。


为什么要强调数学?

毫无疑问机器学习中数学是重要的,例如你需要:

1.选择合适的算法,包括考虑精度、训练时间、模型的复杂性、参数和数量特征;

2.选择参数设置和验证策略;

3.通过了解偏差方差权衡来识别拟合不足与过度拟合;

4.估计正确的置信区间和不确定性。


你必需具备的数学知识概率论
  • 离散型和连续型随机变量
  • 主要分布(伯努利分布、二项式分布、正态分布、 指数分布、 泊松分布、Beta 和 Gamma 分布)
  • 矩估计和最大似然估计
  • 贝叶斯统计
  • 相关性系数和协方差(Correlation and Covariance)

概率是机器学习算法中频繁用到的。不过基础的概率知识在统计学中已经包括了,而比较深入的概率知识其实在机器学习算法设计的时候并不经常用到。


线性代数
  • 向量和矩阵
  • 矩阵的行列式
  • 特征向量和特征值
  • 矩阵分解(如 SVD)

线性代数在深度学习领域有着举足轻重的作用,它是深度学习各种算法的基本数学工具。尤其是矩阵的各种变换,因为大量机器学习算法都是在和矩阵打交道。

1543798083194457257.jpg


微积分
  • 极限与导数
  • 微分和积分
  • 数值计算与最优化方法

比如,现在无比热门的神经网络,优化方法几乎全是基于梯度下降,而梯度下降,其实就是链式求导。不过,理工科应该都学过这方面的课程。


最好要掌握:

离散数学:毕竟离散数学是描述计算机问题的基础。许多算法的思想也是基于离散数学的。离散数学研究的一些问题对于描述计算机问题也有很大启发。


随机过程,实分析:机器学习往深里做肯定需要用这种,高级的数学语言去对问题进行描述。


泛函:泛函分析是一门非常抽象的课程。泛函的很多内容都是从数学分析,线性代数,实分析等抽象出来的,同时也是它们的推广,泛函研究更广泛更一般的空间,研究共性的问题。而数学分析,高等代数研究的是个性的问题,都很具体。


各种算法和理论用到的数学知识

下面我们一张图来看典型算法和理论结论所用到的数学知识:

20180619142637147.jpg


推荐书目
  • 《An Introduction Statistical to Learning 》
  • 《 The Elements of Statistical Learning 》

它们讲述的都是统计学习,或者机器学习的方法。其中前一本可以看成是后一本的简化版。它更通俗、更简单一些,后面这个稍微有些难。这两本书可以反复阅读,每次都有不同的收获。


转/宽客在线


二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:机器学习算法 相关性系数 最优化方法 机器学习 离散数学 机器学习数学 数学知识 机器学习

912100016e5c3a18c368.jpg
jianyu1118 在职认证  发表于 2018-12-4 21:41:54 |显示全部楼层 |坛友微信交流群
好!!!

使用道具

a403067036 发表于 2018-12-5 12:23:27 |显示全部楼层 |坛友微信交流群
学习了谢谢!

使用道具

jtfly8 发表于 2018-12-5 17:37:23 |显示全部楼层 |坛友微信交流群

使用道具

enricolu 在职认证  发表于 2018-12-6 08:29:41 |显示全部楼层 |坛友微信交流群
说的是事实,好

使用道具

楚天江南客 学生认证  发表于 2019-4-20 08:22:15 |显示全部楼层 |坛友微信交流群
多谢指导,数学确实非常重要!

使用道具

数学是一个必备的工具

使用道具

飘紫柔纱 发表于 2019-5-16 11:57:10 |显示全部楼层 |坛友微信交流群
谢谢分享总结的表格!

使用道具

811098850 发表于 2019-5-16 13:42:38 |显示全部楼层 |坛友微信交流群
看到这些,我停住了追逐的步伐

使用道具

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注jr
拉您进交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-3-29 09:11