微信号:ArchDigest

介绍:每天一篇架构领域重磅好文,涉及一线互联网公司的互联网应用架构、大数据、机器学习等各个热门领域.

机器学习知识体系

2018-01-07 09:00 奶爸码农

随着2016年Alpha Go在围棋击败李世石,2017年初卡内基梅隆大学人工智能系统Libratus在长达20天的鏖战中,打败4名世界顶级德州扑克玩家,这标志着人工智能技术又达到了一个新的高峰。人工智能已经不再是在各大公司幕后提供各种智能推荐、语音识别算法的工具,它已经慢慢走向台前进入到平常百姓的视野之中。曾经有人描述人工智能就向一列缓缓开向人们的火车,一开始非常遥远而且看起来非常缓慢,它慢慢接近,直到人们清楚看到它的时候,它已经呼啸而过,把人远远抛在身后。现在似乎就是人们可以远远看到人工智能的时候,它已经发展数十年,但直到最近才引起广泛注意,随着大数据的积累、算法的改进、硬件的提升,人工智能可以在很多细分的领域成为专家,辅助人类甚至超过人类。


作为一名初学者,我也是刚刚接触人工智能和机器学习,希望能够和大家共同学习。接触一个领域的第一步是尽快的了解全貌并且搭建出相应的知识体系。大致提纲如下(后续不断补充):

1 - 数学


线性代数、微积分


在整个机器学习过程中涉及大量矩阵运算和微积分导数的概念,因此建议初学者至少要有较为扎实的数学基础,对矩阵和微积分的概念了解比较清楚。否则在一些公式推导过程中会遇到较大障碍,而不断反复回来复习数学知识。

 

2 - 编程语言


Python/R/Java/Matlab  7 Steps to Mastering Machine Learning With Python(http://www.kdnuggets.com/2015/11/seven-steps-machine-learning-python.html


Python已经成为机器学习的第一语言,至于为什么知乎(https://www.zhihu.com/question/30105838?sort=created)中有非常不错的解释。众多机器学习的框架都支持Python API,所以学习机器学习,Python语言语法估计是绕不过去。


3 - Supervise learning


Linear regression:机器学习知识体系 - 线性回归(http://www.cnblogs.com/wdsunny/p/6362582.html


Logistic regression: 机器学习知识体系 - 逻辑回归(http://www.cnblogs.com/wdsunny/p/6369916.html


Neural network:机器学习知识体系 - 神经网络(基础)(http://www.cnblogs.com/wdsunny/p/6399572.html)  机器学习知识体系 - 神经网络(反向传播算法)(http://www.cnblogs.com/wdsunny/p/6399623.html


SVM:SVM支持向量机(http://mp.weixin.qq.com/s/Uha_MJQtJiWRhBuVW32y9g) SVM支持向量机(http://www.jianshu.com/p/e22381cc2e38) SVM - Understanding the math(http://www.svm-tutorial.com/2014/11/svm-understanding-math-part-1/


监督学习指的是人们给机器一大堆标记好的数据,比如一大堆照片,标记出哪些是猫的照片,哪些不是,然后让机器自己学习归纳出算法,可以判断出其他照片是否是猫。目前这个领域算法代表:Linear regression, Logistic regression, Neural network, SVM等等。 

 

4 - Unsupervise learning


K-means:深入浅出K-Means算法(http://www.csdn.net/article/2012-07-03/2807073-k-means


PCA:主成份分析算法 PCA(http://blog.kamidox.com/pca.html


Anomaly detection:异常检测(http://blog.kamidox.com/gaussian-distribution.html


非监督学习指的就是人们给机器一大堆没有标记的数据,让机器可以对数据进行分类、检测异常等。

 

5 - Special topic


Recommend system


Large scale machine learning application


一些特殊算法,例如推荐系统。常用于购物网站,可以根据你的过往购物或评分情况,来向你推荐商品。

 

6 - Advice on machine learning


Bias/vairance:Understanding the Bias-Variance Tradeoff(http://scott.fortmann-roe.com/docs/BiasVariance.html


Regulation


Learning curve


Error analysis:Accurately Measuring Model Prediction Error(http://scott.fortmann-roe.com/docs/MeasuringError.html


Celling analysis


机器学习的建议,包含参数正则化、学习曲线、错误分析、调参等。

 

7 - Deep Learning


Neural Netwotk


深度学习是近期机器学习的一个热门分支,模拟人类大脑的思维方式,可以极大的提高正确率,是近来机器学习的一个非常大的突破。


CNN:卷积神经网络全面解析(http://www.moonshile.com/post/juan-ji-shen-jing-wang-luo-quan-mian-jie-xi)   零基础入门深度学习(4) - 卷积神经网络(https://zybuluo.com/hanbingtao/note/485480

8 - Tools/Framework


TensorFlow/Theano/Keras


很多大厂就开源了一些机器学习的框架,基于这些框架可以很容易搭建机器学习的平台。


TensorFlow and Deep Learning without a PhD, Part 1(https://www.youtube.com/watch?v=u4alGiomYP4


TensorFlow and Deep Learning without a PhD, Part 2(https://www.youtube.com/watch?v=fTUwdXUFfI8

 

推荐的学习资料:


Github上面有一份非常详尽的学习路径(https://github.com/JustFollowUs/Machine-Learning) awesome-deep-learning(https://github.com/ChristosChristofidis/awesome-deep-learning


我个人推荐的几个经典资料:


机器学习 


Andrew NG的Coursera的机器学习入门(https://www.coursera.org/learn/machine-learning):这个教程非常适合初学者,没有很高深的数学推导,Andrew也是业内大牛但非常谦逊,讲解非常浅显易懂。


Neural Networks for Machine Learning(https://class.coursera.org/neuralnets-2012-001) by Geoffrey Hinton in Coursera (2012)


周志华的机器学习(https://book.douban.com/subject/26708119/):号称最好的中文机器学习入门,这里有对这本书的详细评价(https://www.zhihu.com/question/39945249)。


几本经典著作:An Introduction to Statistical Learning(http://www-bcf.usc.edu/~gareth/ISL/),Pattern Recognition and Machine Learning(https://www.amazon.com/Pattern-Recognition-Learning-Information-Statistics/dp/0387310738/ref=pd_sim_14_1?ie=UTF8&dpID=61f0EXfMRvL&dpSrc=sims&preST=_AC_UL160_SR118%2C160_&refRID=119X50P5F0DFA339S9DR),The Elements of Statistical Learning(https://www.amazon.com/The-Elements-Statistical-Learning-Prediction/dp/0387848576/ref=pd_sim_14_2?ie=UTF8&dpID=41LeU3HcBdL&dpSrc=sims&preST=_AC_UL160_SR103%2C160_&refRID=119X50P5F0DFA339S9DR

 

深度学习


Neural Networks and Deep Learning(http://neuralnetworksanddeeplearning.com/index.html):Michael Nielsen(http://michaelnielsen.org/)用非常浅显易懂的方式介绍了神经网络和深度学习,并且提供了一个手写数字识别的例子,非常适合入门。


UFLDL Tutorial I(http://deeplearning.stanford.edu/wiki/index.php/UFLDL_Tutorial) UFLDL Tutorial II(http://ufldl.stanford.edu/tutorial/):Andrew NG主导的Deep Learning的学习资料,内容非常精炼,适合稍微有些基础的同学。


Deep Learning(http://www.deeplearningbook.org/):几位大神共同编写的关于深度学习的free book。


零基础入门深度学习(https://zybuluo.com/hanbingtao/note/433855):一位大神写的关于深度学习的入门教程,由浅入深的详细介绍了深度学习的几个重要内容,非常适合入门的学习。


Convolutional Neural Networks for Visual Recognition - Stanford(http://vision.stanford.edu/teaching/cs231n/syllabus_winter2015.html) by Fei-Fei Li, Andrej Karpathy (2015)


Convolutional Neural Networks for Visual Recognition - Stanford(http://vision.stanford.edu/teaching/cs231n/syllabus.html) by Fei-Fei Li, Andrej Karpathy (2016)


Deep Learning Course(https://www.college-de-france.fr/site/en-yann-lecun/course-2015-2016.htm) by Yann LeCun (2016)

 

从人工智能到机器学习,再到最近大热的深度学习,人们已经在这个领域研究了数十年,现在虽然取得一定的突破,但是离真正的人工智能还有非常长的距离。而且人工智能一定要跳出学术界的研究框架,结合工业界的应用,从2016年可以看到大量的实际应用场景,例如自动驾驶、Apple Siri、Amazon Echo、谷歌翻译等等,我相信未来人工智能领域极有可能成为下一代颠覆性的技术革命。


出处:https://www.cnblogs.com/wdsunny/p/6362044.html


版权申明:内容来源网络,版权归原创者所有。除非无法确认,我们都会标明作者及出处,如有侵权烦请告知,我们会立即删除并表示歉意。谢谢。


-END-


架构文摘

ID:ArchDigest

互联网应用架构丨架构技术丨大型网站丨大数据丨机器学习

更多精彩文章,请点击下方:阅读原文

 
架构文摘 更多文章 Koa 框架教程 全文搜索引擎Elasticsearch入门教程 区块链入门教程 为什么说R语言是学习数据分析的第一选择? 闲话权限系统的设计
猜您喜欢 重磅开源!阿里给Java开发者送了一份圣诞大礼 转帖:程序员辛辛苦苦一年半,离职四月被起诉 你们凭什么老骂支付宝? 欢迎新加入的Spark峰会的朋友!送点见面礼,3个免费培训名额,♪周五晚八点抢♫ PyCon US 2016大会日程发布