热门推荐：
　　作者授权转载
　　作者：龙心尘、寒小阳
　　◆ ◆ ◆
　　1. 引言
　　也许你和这个叫『机器学习』的家伙一点也不熟，但是你举起iphone手机拍照的时候，早已习惯它帮你框出人脸；也自然而然点开今日头条推给你的新闻；也习惯逛淘宝点了找相似之后货比三家；亦或喜闻乐见微软的年龄识别网站结果刷爆朋友圈。恩，这些功能的核心算法就是机器学习领域的内容。
　　套用一下大神们对机器学习的定义，机器学习研究的是计算机怎样模拟人类的学习行为，以获取新的知识或技能，并重新组织已有的知识结构使之不断改善自身。简单一点说，就是计算机从数据中学习出规律和模式，以应用在新数据上做预测的任务。近年来互联网数据大爆炸，数据的丰富度和覆盖面远远超出人工可以观察和总结的范畴，而机器学习的算法能指引计算机在海量数据中，挖掘出有用的价值，也使得无数学习者为之着迷。
　　但是越说越觉得机器学习有距离感，云里雾里高深莫测，我们不是专家，但说起算有一些从业经验，做过一些项目在实际数据上应用机器学习。这一篇就我们的经验和各位同仁的分享，总结一些对于初学者入门有帮助的方法和对进阶有用的资料。
　　◆ ◆ ◆2. 机器学习关注问题
　　并非所有的问题都适合用机器学习解决(很多逻辑清晰的问题用规则能很高效和准确地处理)，也没有一个机器学习算法可以通用于所有问题。咱们先来了解了解，机器学习，到底关心和解决什么样的问题。
　　从功能的角度分类，机器学习在一定量级的数据上，可以解决下列问题：
　　1.分类问题
　　根据数据样本上抽取出的特征，判定其属于有限个类别中的哪一个。比如：
　　垃圾邮件识别(结果类别：1、垃圾邮件 2、正常邮件)
　　文本情感褒贬分析(结果类别：1、褒 2、贬)
　　图像内容识别识别(结果类别：1、喵星人 2、汪星人 3、人类 4、草泥马 5、都不是)。
　　2.回归问题
　　根据数据样本上抽取出的特征，预测一个连续值的结果。比如：
　　星爷《美人鱼》票房
　　大帝都2个月后的房价
　　隔壁熊孩子一天来你家几次，宠幸你多少玩具
　　3.聚类问题
　　根据数据样本上抽取出的特征，让样本抱抱团(相近/相关的样本在一团内)。比如：
　　google的新闻分类
　　用户群体划分
　　我们再把上述常见问题划到机器学习最典型的2个分类上。
　　分类与回归问题需要用已知结果的数据做训练，属于“监督学习”
　　聚类的问题不需要已知标签，属于“非监督学习”。
　　如果在IT行业(尤其是互联网)里溜达一圈，你会发现机器学习在以下热点问题中有广泛应用：
　　1.计算机视觉
　　典型的应用包括：人脸识别、车牌识别、扫描文字识别、图片内容识别、图片搜索等等。
　　2.自然语言处理
　　典型的应用包括：搜索引擎智能匹配、文本内容理解、文本情绪判断，语音识别、输入法、机器翻译等等。
　　3.社会网络分析
　　典型的应用包括：用户画像、网络关联分析、欺诈作弊发现、热点发现等等。
　　4.推荐
　　典型的应用包括：虾米音乐的“歌曲推荐”，某宝的“猜你喜欢”等等。
　　◆ ◆ ◆3. 入门方法与学习路径
　　OK，不废话，直接切重点丢干货了。看似学习难度大，曲线陡的机器学习，对大多数入门者也有一个比较通用的学习路径，也有一些优秀的入门资料可以降低大家的学习门槛，同时激发我们的学习乐趣。
　　简单说来，大概的一个学习路径如下：
　　简单说一点，之所以最左边写了『数学基础』『典型机器学习算法』『编程基础』三个并行的部分，是因为机器学习是一个将数学/算法理论和工程实践紧密结合的领域，需要扎实的理论基础帮助引导数据分析与模型调优，同时也需要精湛的工程开发能力去高效化地训练和部署模型和服务。
　　需要多说一句的是，在互联网领域从事机器学习的人，有2类背景的人比较多，其中一部分(很大一部分)是程序员出身，这类同学工程经验相对会多一些，另一部分是学数学统计领域的同学，这部分同学理论基础相对扎实一些。因此对比上图，2类同学入门机器学习，所欠缺和需要加强的部分是不一样的。
　　下面就上述图中的部分，展开来分别扯几句：
　　3.1 数学基础
　　有无数激情满满大步向前，誓要在机器学习领域有一番作为的同学，在看到公式的一刻突然就觉得自己狗带了。是啊，机器学习之所以相对于其他开发工作，更有门槛的根本原因就是数学。每一个算法，要在训练集上最大程度拟合同时又保证泛化能力，需要不断分析结果和数据，调优参数，这需要我们对数据分布和模型底层的数学原理有一定的理解。所幸的是如果只是想合理应用机器学习，而不是做相关方向高精尖的research，需要的数学知识啃一啃还是基本能理解下来的。至于更高深的部分，恩，博主非常愿意承认自己是『数学渣』。
　　基本所有常见机器学习算法需要的数学基础，都集中在微积分、线性代数和概率与统计当中。下面我们先过一过知识重点，文章的后部分会介绍一些帮助学习和巩固这些知识的资料。
　　3.1.1 微积分
　　微分的计算及其几何、物理含义，是机器学习中大多数算法的求解过程的核心。比如算法中运用到梯度下降法、牛顿法等。如果对其几何意义有充分的理解，就能理解“梯度下降是用平面来逼近局部，牛顿法是用曲面逼近局部”，能够更好地理解运用这样的方法。
　　凸优化和条件最优化 的相关知识在算法中的应用随处可见，如果能有系统的学习将使得你对算法的认识达到一个新高度。
　　3.1.2 线性代数
　　大多数机器学习的算法要应用起来，依赖于高效的计算，这种场景下，程序员GG们习惯的多层for循环通常就行不通了，而大多数的循环操作可转化成矩阵之间的乘法运算，这就和线性代数有莫大的关系了
　　向量的内积运算更是随处可见。
　　矩阵乘法与分解在机器学习的主成分分析（PCA）和奇异值分解（SVD） 等部分呈现刷屏状地出现。
　　3.1.3 概率与统计
　　从广义来说，机器学习在做的很多事情，和统计层面数据分析和发掘隐藏的模式，是非常类似的。
　　极大似然思想、贝叶斯模型 是理论基础，朴素贝叶斯(Na?ve Bayes )、语言模型(N-gram)、隐马尔科夫（HMM）、隐变量混合概率模型是他们的高级形态。
　　常见分布如高斯分布是混合高斯模型(GMM)等的基础。
　　3.2 典型算法
　　绝大多数问题用典型机器学习的算法都能解决，粗略地列举一下这些方法如下：
　　处理分类问题的常用算法包括：逻辑回归(工业界最常用)，支持向量机，随机森林，朴素贝叶斯(NLP中常用)，深度神经网络(视频、图片、语音等多媒体数据中使用)。
　　处理回归问题的常用算法包括：线性回归，普通最小二乘回归（Ordinary Least Squares Regression），逐步回归（Stepwise Regression），多元自适应回归样条（Multivariate Adaptive Regression Splines）
　　处理聚类问题的常用算法包括：K均值（K-means），基于密度聚类，LDA等等。
　　降维的常用算法包括：主成分分析（PCA）,奇异值分解（SVD） 等。
　　推荐系统的常用算法：协同过滤算法
　　模型融合(model ensemble)和提升(boosting)的算法包括：bagging，adaboost，GBDT，GBRT
　　其他很重要的算法包括：EM算法等等。
　　我们多插一句，机器学习里所说的“算法”与程序员所说的“数据结构与算法分析”里的“算法”略有区别。前者更关注结果数据的召回率、精确度、准确性等方面，后者更关注执行过程的时间复杂度、空间复杂度等方面。 。当然，实际机器学习问题中，对效率和资源占用的考量是不可或缺的。
　　3.3 编程语言、工具和环境
　　看了无数的理论与知识，总归要落到实际动手实现和解决问题上。而没有工具所有的材料和框架、逻辑、思路都给你，也寸步难行。因此我们还是得需要合适的编程语言、工具和环境帮助自己在数据集上应用机器学习算法，或者实现自己的想法。对初学者而言，Python和R语言是很好的入门语言，很容易上手，同时又活跃的社区支持，丰富的工具包帮助我们完成想法。相对而言，似乎计算机相关的同学用Python多一些，而数学统计出身的同学更喜欢R一些。我们对编程语言、工具和环境稍加介绍：
　　3.3.1 python
　　python有着全品类的数据科学工具，从数据获取、数据清洗到整合各种算法都做得非常全面。
　　网页爬虫: scrapy
　　数据挖掘:
　　pandas：模拟R，进行数据浏览与预处理。
　　numpy：数组运算。
　　scipy：高效的科学计算。
　　matplotlib：非常方便的数据可视化工具。
　　机器学习:
　　scikit-learn：远近闻名的机器学习package。未必是最高效的，但是接口真心封装得好，几乎所有的机器学习算法输入输出部分格式都一致。而它的支持文档甚至可以直接当做教程来学习，非常用心。对于不是非常高纬度、高量级的数据，scikit-learn胜任得非常好(有兴趣可以看看sklearn的源码，也很有意思)。
　　libsvm：高效率的svm模型实现(了解一下很有好处，libsvm的系数数据输入格式，在各处都非常常见)
　　keras/TensorFlow：对深度学习感兴趣的同学，也能很方便地搭建自己的神经网络了。
　　自然语言处理:
　　nltk：自然语言处理的相关功能做得非常全面，有典型语料库，而且上手也非常容易。
　　交互式环境：
　　ipython notebook：能直接打通数据到结果的通道，方便至极。强力推荐。
　　3.3.2 R
　　R最大的优势是开源社区，聚集了非常多功能强大可直接使用的包，绝大多数的机器学习算法在R中都有完善的包可直接使用，同时文档也非常齐全。常见的package包括：RGtk2, pmml, colorspace, ada, amap, arules, biclust, cba, descr, doBy, e1071, ellipse等等。另外，值得一提的是R的可视化效果做得非常不错，而这对于机器学习是非常有帮助的。
　　3.3.3 其他语言
　　相应资深程序员GG的要求，再补充一下java和C++相关机器学习package。
　　Java系列
　　WEKA Machine Learning Workbench相当于java中的scikit-learn
　　其他的工具如Massive Online Analysis（MOA）、MEKA 、 Mallet等也非常有名。
　　更多详细的应用请参考这篇文章《25个Java机器学习工具&库》
　　C++系列
　　mlpack，高效同时可扩充性非常好的机器学习库。
　　Shark：文档齐全的老牌C++机器学习库。
　　3.3.4 大数据相关
　　Hadoop：基本上是工业界的标配了。一般用来做特征清洗、特征处理的相关工作。
　　spark：提供了MLlib这样的大数据机器学习平台，实现了很多常用算法。但可靠性、稳定性上有待提高。
　　3.3.5 操作系统
　　mac和linux会方便一些，而windows在开发中略显力不从心。所谓方便，主要是指的mac和linux在下载安装软件、配置环境更快捷。
　　对于只习惯windows的同学，推荐anaconda，一步到位安装完python的全品类数据科学工具包。
　　3.4 基本工作流程
　　以上我们基本具备了机器学习的必要条件，剩下的就是怎么运用它们去做一个完整的机器学习项目。其工作流程如下:
　　3.4.1 抽象成数学问题
　　明确问题是进行机器学习的第一步。机器学习的训练过程通常都是一件非常耗时的事情，胡乱尝试时间成本是非常高的。
　　这里的抽象成数学问题，指的我们明确我们可以获得什么样的数据，目标是一个分类还是回归或者是聚类的问题，如果都不是的话，如果划归为其中的某类问题。
　　3.4.2 获取数据
　　数据决定了机器学习结果的上限，而算法只是尽可能逼近这个上限。
　　数据要有代表性，否则必然会过拟合。
　　而且对于分类问题，数据偏斜不能过于严重，不同类别的数据数量不要有数个数量级的差距。
　　而且还要对数据的量级有一个评估，多少个样本，多少个特征，可以估算出其对内存的消耗程度，判断训练过程中内存是否能够放得下。如果放不下就得考虑改进算法或者使用一些降维的技巧了。如果数据量实在太大，那就要考虑分布式了。
　　3.4.3 特征预处理与特征选择
　　良好的数据要能够提取出良好的特征才能真正发挥效力。
　　特征预处理、数据清洗是很关键的步骤，往往能够使得算法的效果和性能得到显著提高。归一化、离散化、因子化、缺失值处理、去除共线性等，数据挖掘过程中很多时间就花在它们上面。这些工作简单可复制，收益稳定可预期，是机器学习的基础必备步骤。
　　筛选出显著特征、摒弃非显著特征，需要机器学习工程师反复理解业务。这对很多结果有决定性的影响。特征选择好了，非常简单的算法也能得出良好、稳定的结果。这需要运用特征有效性分析的相关技术，如相关系数、卡方检验、平均互信息、条件熵、后验概率、逻辑回归权重等方法。
　　3.4.4 训练模型与调优
　　直到这一步才用到我们上面说的算法进行训练。现在很多算法都能够封装成黑盒供人使用。但是真正考验水平的是调整这些算法的（超）参数，使得结果变得更加优良。这需要我们对算法的原理有深入的理解。理解越深入，就越能发现问题的症结，提出良好的调优方案。
　　3.4.5 模型诊断
　　如何确定模型调优的方向与思路呢？这就需要对模型进行诊断的技术。
　　过拟合、欠拟合 判断是模型诊断中至关重要的一步。常见的方法如交叉验证，绘制学习曲线等。过拟合的基本调优思路是增加数据量，降低模型复杂度。欠拟合的基本调优思路是提高特征数量和质量，增加模型复杂度。
　　误差分析 也是机器学习至关重要的步骤。通过观察误差样本，全面分析误差产生误差的原因:是参数的问题还是算法选择的问题，是特征的问题还是数据本身的问题……
　　诊断后的模型需要进行调优，调优后的新模型需要重新进行诊断，这是一个反复迭代不断逼近的过程，需要不断地尝试， 进而达到最优状态。
　　3.4.6 模型融合
　　一般来说，模型融合后都能使得效果有一定提升。而且效果很好。
　　工程上，主要提升算法准确度的方法是分别在模型的前端（特征清洗和预处理，不同的采样模式）与后端（模型融合）上下功夫。因为他们比较标准可复制，效果比较稳定。而直接调参的工作不会很多，毕竟大量数据训练起来太慢了，而且效果难以保证。
　　3.4.7 上线运行
　　这一部分内容主要跟工程实现的相关性比较大。工程上是结果导向，模型在线上运行的效果直接决定模型的成败。 不单纯包括其准确程度、误差等情况，还包括其运行的速度(时间复杂度)、资源消耗程度（空间复杂度）、稳定性是否可接受。
　　这些工作流程主要是工程实践上总结出的一些经验。并不是每个项目都包含完整的一个流程。这里的部分只是一个指导性的说明，只有大家自己多实践，多积累项目经验，才会有自己更深刻的认识。
　　3.5 关于积累项目经验
　　初学机器学习可能有一个误区，就是一上来就陷入到对各种高大上算法的追逐当中。动不动就我能不能用深度学习去解决这个问题啊？我是不是要用boosting算法做一些模型融合啊？我一直持有一个观点，『脱离业务和数据的算法讨论是毫无意义的』。
　　实际上按我们的学习经验，从一个数据源开始，即使是用最传统，已经应用多年的机器学习算法，先完整地走完机器学习的整个工作流程，不断尝试各种算法深挖这些数据的价值，在运用过程中把数据、特征和算法搞透，真正积累出项目经验 才是最快、最靠谱的学习路径。
　　那如何获取数据和项目呢？一个捷径就是积极参加国内外各种数据挖掘竞赛，数据直接下载下来，按照竞赛的要求去不断优化，积累经验。国外的Kaggle和国内的DataCastle以及阿里天池比赛都是很好的平台，你可以在上面获取真实的数据和数据科学家们一起学习和进行竞赛，尝试使用已经学过的所有知识来完成这个比赛本身也是一件很有乐趣的事情。和其他数据科学家的讨论能开阔视野，对机器学习算法有更深层次的认识。
　　有意思的是，有些平台，比如阿里天池比赛，甚至给出了从数据处理到模型训练到模型评
　　估、可视化到模型融合增强的全部组件，你要做的事情只是参与比赛，获取数据，然后使用这些组件去实现自己的idea即可。具体内容可以参见阿里云机器学习文档。
　　3.6 自主学习能力
　　多几句嘴，这部分内容和机器学习本身没有关系，但是我们觉得这方面的能力对于任何一种新知识和技能的学习来说都是至关重要的。 自主学习能力提升后，意味着你能够跟据自己的情况，找到最合适的学习资料和最快学习成长路径。
　　3.6.1 信息检索过滤与整合能力
　　对于初学者，绝大部分需要的知识通过网络就可以找到了。
　　google搜索引擎技巧――组合替换搜索关键词、站内搜索、学术文献搜索、PDF搜索等――都是必备的。
　　一个比较好的习惯是找到信息的原始出处，如个人站、公众号、博客、专业网站、书籍等等。这样就能够找到系统化、不失真的高质量信息。
　　百度搜到的技术类信息不够好，建议只作为补充搜索来用。各种搜索引擎都可以交叉着使用效果更好。
　　学会去常见的高质量信息源中搜索东西:stackoverflow（程序相关）、quora（高质量回答）、wikipedia（系统化知识，比某某百科不知道好太多）、知乎（中文、有料）、网盘搜索（免费资源一大把）等。
　　将搜集到的网页放到分类齐全的云端收藏夹里，并经常整理。这样无论在公司还是在家里，在电脑前还是在手机上，都能够找到自己喜欢的东西。
　　搜集到的文件、代码、电子书等等也放到云端网盘里，并经常整理。
　　3.6.2 提炼与总结能力
　　经常作笔记，并总结自己学到的知识是成长的不二法门。其实主要的困难是懒，但是坚持
　　之后总能发现知识的共性，就能少记一些东西，掌握得更多。
　　笔记建议放到云端笔记里，印象笔记、为知笔记都还不错。这样在坐地铁、排队等零碎的时间都能看到笔记并继续思考。
　　3.6.3 提问与求助能力
　　机器学习的相关QQ群、论坛、社区一大堆。总有人知道你问题的答案。
　　但是大多数同学都很忙，没法像家庭教师那样手把手告诉你怎么做。
　　为了让回答者最快明白你的问题，最好该学会正确的问问题的方式:陈述清楚你的业务场景和业务需求是什么，有什么已知条件，在哪个具体的节点上遇到困难了，并做过哪些努力。
　　有一篇经典的文章告诉你怎样通过提问获得帮助：《提问的智慧》，强力推荐。 话锋犀利了些，但里面的干货还是很好的。
　　别人帮助你的可能性与你提问题的具体程度和重要性呈指数相关。
　　3.6.4 分享的习惯
　　我们深信：“证明自己真的透彻理解一个知识，最好的方法，是给一个想了解这个内容的人，讲清楚这个内容。”分享能够最充分地提升自己的学习水平。这也是我们坚持长期分享最重要的原因。
　　分享还有一个副产品，就是自己在求助的时候能够获得更多的帮助机会，这也非常重要。
　　◆ ◆ ◆4. 相关资源推荐
　　文章的最后部分，我们继续放送干货。其实机器学习的优质资源非常多。博主也是翻遍浏览器收藏夹，也问同事取了取经，整合了一部分资源罗列如下：
　　4.1 入门资源
　　首先coursera是一个非常好的学习网站，集中了全球的精品课程。上述知识学习的过程都可以在上面找到合适的课程。也有很多其他的课程网站，这里我们就需要学习的数学和机器学习算法推荐一些课程(有一些课程有中文字幕，有一些只有英文字幕，有一些甚至没有字幕，大家根据自己的情况调整，如果不习惯英文，基础部分有很多国内的课程也非常优质)：
　　微积分相关
　　Calculus: Single Variable
　　Multivariable Calculus
　　线性代数
　　Linear Algebra
　　概率统计
　　Introduction to Statistics: Deive Statistics
　　Probabilistic Systems Analysis and Applied Probability
　　编程语言
　　Programming for Everybody:Python
　　DataCamp: Learn R with R tutorials and coding challenges:R
　　机器学习方法
　　Statistical Learning(R)
　　machine learning：强烈推荐，Andrew Ng老师的课程
　　机器学习基石
　　机器学习技术：林轩田老师的课相对更有深度一些，把作业做完会对提升对机器学习的认识。
　　自然语言处理:斯坦福大学课程
　　日常阅读的资源
　　@爱可可-爱生活的微博
　　机器学习日报的邮件订阅等。
　　4.2 进阶资源
　　有源代码的教程
　　scikit-learn中各个算法的例子
　　《机器学习实战》 有中文版，并附有python源代码。
　　《The Elements of Statistical Learning (豆瓣)》这本书有对应的中文版：《统计学习基础 (豆瓣)》。书中配有R包。可以参照着代码学习算法。网盘中有中文版。
　　《Natural Language Processing with Python (豆瓣)》NLP 经典，其实主要是讲 python的NLTK 这个包。网盘中有中文版。
　　《Neural Networks and Deep Learning》Michael Nielsen的神经网络教材，浅显易懂。国内有部分翻译，不全，建议直接看原版。
　　图书与教材
　　《数学之美》：入门读起来很不错。
　　《统计学习方法 (豆瓣) 》：李航经典教材。
　　《Pattern Recognition And Machine Learning (豆瓣) 》：经典中教材。
　　《统计自然语言处理》自然语言处理经典教材
　　《Applied predictive modeling》：英文版，注重工程实践的机器学习教材
　　《UFLDL教程》：神经网络经典教材
　　《deeplearningbook》:深度学习经典教材。
　　工具书
　　《SciPy and NumPy (豆瓣) 》
　　《Python for Data Analysis (豆瓣) 》作者是Pandas这个包的作者
　　其他网络资料
　　机器学习(Machine Learning)与深度学习(Deep Learning)资料汇总: 作者太给力，量大干货多，有兴趣的同学可以看看，博主至今只看了一小部分。
　　◆ ◆ ◆
　　作者介绍
　　龙心尘和寒小阳：从事机器学习/数据挖掘相关应用工作，热爱机器学习/数据挖掘
　　『我们是一群热爱机器学习，喜欢交流分享的小伙伴，希望通过“ML学分计划”交流机器学习相关的知识，认识更多的朋友。欢迎大家加入我们的讨论群获取资源资料，交流和分享。』
　　联系方式：
　　龙心尘
　　johnnygong.
　　http://blog.csdn.net/han_xiaoyang
　　寒小阳
　　hanxiaoyang.
　　http://blog.csdn.net/longxinchen_ml
　　往期精彩文章推荐，点击图片可阅读
　　机器学习：用初等数学解读逻辑回归
　　机器学习算法一览
　　【干货】用朴素贝叶斯进行文本分类
请先登录再操作
请先登录再操作
微信扫一扫分享至朋友圈
普及数据思维，传播数据文化；专注大数据，每日有分享。
知名IT评论人，曾就职于多家知名IT企业，现是科幻星系创建人
未来在这里发声。
新媒体的实践者、研究者和批判者。
立足终端领域，静观科技变化。深入思考，简单陈述。
智能硬件领域第一自媒体。&&&&机器学习：入门方法与学习路径
机器学习：入门方法与学习路径
适合机器学习初学者，理出了一条清晰使用的学习路径和资源
嵌到我的页面
<input type="text" readonly="true" value="">
若举报审核通过，可奖励20下载分
被举报人：
举报的资源分：
请选择类型
资源无法下载
资源无法使用
标题与实际内容不符
含有危害国家安全内容
含有反动色情等内容
含广告内容
版权问题，侵犯个人或公司的版权
*详细原因：
VIP下载&&免积分60元/年（1200次）
您可能还需要
课程资源下载排行苹果/安卓/wp
积分 173, 距离下一级还需 87 积分
权限: 自定义头衔
道具: 彩虹炫, 涂鸦板, 雷达卡, 热点灯, 金钱卡, 显身卡, 匿名卡下一级可获得
权限: 签名中使用图片
购买后可立即获得
权限: 隐身
道具: 金钱卡, 彩虹炫, 雷达卡, 热点灯, 涂鸦板
问：本人大学本科，对很感兴趣，想从事这方面的研究。在网上看到机器学习有一些经典书如Bishop的PRML， TomMitchell的machine learning，还有patternclassification，不知该如何入门？那本书比较容易理解？ 答：最近在学teradata的aster数据挖掘工具，果然商业的框架跟hadoop的易学性易用性可拓展性都有天壤之别啊。建议有兴趣的同学自查资料，软件贵的惊人，但是对于自身维护团队水平一般的企业还是值得买的
-----------
不邀自来，结合我现在的工作以及当年机器学习的经验来讲一下自己的一些感受。
首先从机器学习的全流程说起。
输入：机器学习按输入数据分可以分结构化数据(表)，半结构化数据(文本，日志等)，非结构化数据(图片，录像)，后两者对应的分支中比较出名分别是文本挖掘和图像挖掘，其实就是通过提取特征的方式 把半结构化数据 非结构化数据转化为结构化数据，然后进行机器学习。
按输入数据是否预测状态分，可以分为有监督学习数据及无监督学习数据，直接决定后续模型是使用分类模型还是聚类模型。
同时如果数据量到达了T级，就要考虑时候hadoop框架了，这里要说明的是，hadoop框架只是解决大数据处理效率瓶颈的工具，除非你志向是做架构师，不然不用深究，掌握hadoop家族的sql处理工具hive和机器学习工具mahout就可以了，需要掌握java和sql，这是基础。
下一步，数据清洗和数据降维，在数据清洗方面不是学术界研究的重点，清洗方法有很多，主要通过描述性统计量填补缺失值和极端值，数据降维方面有较多比较出名的算法，如主成分分析，lasso，LDA线性判别分析，变量聚类等，数据降维是重点，因为维度过大容易产生维度灾难和过度拟合问题。
然后是数据分区(有监督学习才需要做)，分成训练集，验证集，测试集，分别用于训练模型，模型内修正，多模型效果对比用。不展开讨论。
接着建模，分为分类算法，聚类算法，规则关联算法，分类算法是大头，建议分别拜读支持向量机，概率图模型，神经网络(虽然我不喜欢但是google的深度学习就是用的神经网络)，决策树(C4.5)，逻辑回归(吐槽：线性回归什么的看不看得看个人水平)，混合高斯模型等，聚类算法有KNN，LDA潜在迪力克雷分析(做文本挖掘效果一流)，聚类算法研究不多，大多机器学习算法都是基于有监督学习的，即分类算法。规则关联算法有最简单的规则关联，路径关联分析，及协同过滤(推荐系统首选，输入数据量太大数据太稀疏跑数效率很低一般需要hadoop支持)，模型是机器学习的核心，还有一些优化模型，如EM模型等，建议阅读增加知识广度，要求学习人员要懂以下课程：概率论，高数，线性优化，线性代数还有英文，也可以边看论文边学。书籍的话推荐数据挖掘十大算法作为入门索引，然后根据每章节的参考文献找原文阅读，记得把公式推导一遍。
结果评估：本来不应该是重点，但是从个人学习和工作经历发现，有很多人不是很会看模型结果，甚至包括一些专业人士。所以如果有志做机器学习的千万要学会看结果，不然就丢人丢大了。
最直接的两个指标准确度percision和召回度recall，分别描述模型的精度和泛化性的，模型结果应在两者取得均衡。最小平方误差也是描述准确度的，算法不一样，大家更喜欢用这个评估模型精度。还有一些K-S值，基尼值，ROC值也是描述准确度和拟合度的，不同的软件会使用不同的指标，注意一下。还有就是提升度，事件捕获率这些就是描述分类预测下前百分之几数据的预测准确性情况的，不展开讨论。最直接的学法就是认真读论文的实验部分，看看它的指标评价量。
最后是工具和语言，按现在数据挖掘与机器学习的趋势，必须掌握java，python，原因是hadoop是处理大数据的框架，已成趋势，hadoop是java写的，挖掘工具mahout是java写的。python的好处在于底层基于C，语法简单，效率高，而且有很多开源的算法可以直接用，支持mapreduce。可以选择掌握R，同python，但是R效率木有python高，如果是针对商业分析建议学习SAS，因为它集成了一套专业的数据可视化及数据分析方案，大大方便了数据展示功能，这是作为商业分析所必须的。
最后补充一点，很多做数据挖掘和机器学习的人最后都走火入魔执着技术忽略了业务的重要性，忽略了模型可解释性的重要性，埋头苦干做出业务人员不能理解的黑箱模型，无法说服业务使用，最终沦为鸡肋的存在，所以在学习过程中要时刻设想技术适应的业务场景，在算法效果接近时选择高可解释性算法，做好结果的图形化展示，让业务理解，这才是王道。
转自知乎「」的回答
2016年，经管之家《机器学习》全国4月开课，详情请戳：
支持楼主：、
购买后，论坛将把您花费的资金全部奖励给楼主，以表示您对TA发好贴的支持
载入中......
经管之家AI人工智能研究中心为顺应未来人工智能的发展趋势，立足自身论坛十余年资源、结合自身特色， 为一步推进人工智能核心技术的研发和产业化，建立人工智能实训基地，主要就人机交互、机器学习、模式识别、产业实战、计算机视觉、智能语音处理、生物特征识别、自然语言理解、智能决策控制以及新型人机交互等主题进行论坛研讨、努力打造成为国内人工智能前沿线上教育平台。旨在为人工智能领域的创新企业提供高端、复合型人才。
经管之家AI人工智能研究中心为顺应未来人工智能的发展趋势，立足自身论坛十余年资源、结合自身特色， 为一步推进人工智能核心技术的研发和产业化，建立人工智能实训基地，主要就人机交互、机器学习、模式识别、产业实战、计算机视觉、智能语音处理、生物特征识别、自然语言理解、智能决策控制以及新型人机交互等主题进行论坛研讨、努力打造成为国内人工智能前沿线上教育平台。旨在为人工智能领域的创新企业提供高端、复合型人才。
详情：》》》
无限扩大经管职场人脉圈！每天抽选10位免费名额，现在就扫& 论坛VIP& 贵宾会员& 可免费加入
加入我们,立即就学扫码下载「就学」app& Join us!& JoinLearn&
&nbsp&nbsp|
&nbsp&nbsp|
&nbsp&nbsp|
&nbsp&nbsp|
&nbsp&nbsp|
&nbsp&nbsp|
如有投资本站或合作意向，请联系（010-）；
邮箱：service@pinggu.org
投诉或不良信息处理：（010-）
京ICP证090565号
京公网安备号
论坛法律顾问：王进律师