本篇主要提供分布式机器学习:算法.理论与实践/人工智能基础/深度学习/大数据教程/人工智能机器学习算法书籍电子书的pdf版本下载,本电子书下载方式为百度网盘方式,点击以上按钮下单完成后即会通过邮件和网页的方式发货,有问题请联系邮箱ebook666@outlook.com
商品基本信息,请以下列介绍为准 | |
图书名称: | 分布式机器学习:算法、理论与实践 |
作者: | 刘铁岩 陈薇 王太峰 高飞 |
定价: | 89.00 |
ISBN号: | 9787111609186 |
出版社: | 机械工业出版社 |
编辑推荐 | |
全面展示分布式机器学习理论、方法与实践 微软亚洲研究院机器学习团队潜心力作 鄂维南院士、周志华教授倾心撰写推荐序 内容前沿全面,讨论系统深刻,全彩印刷 |
内容简介 | |
本书旨在全面介绍分布式机器学习的现状,深入分析其中的核心技术问题,并且讨论该领域未来的发展方向。 全书共12章。第1章是绪论,向大家展示分布式机器学习这个领域的全景。第2章介绍机器学习的基础知识。第3章到第8章是本书的核心部分,向大家细致地讲解分布式机器学习的框架及其各个功能模块。其中第3章给出整个分布式机器学习框架的综述,而第4章到第8章则分别针对其中的数据与模型划分模块、单机优化模块、通信模块、数据与模型聚合模块加以介绍。接下来的三章是对前面内容的总结与升华。其中第9章介绍由分布式机器学习框架中不同选项所组合出来的各式各样的分布式机器学习算法,第10章讨论这些算法的理论性质,第11章则介绍几个主流的分布式机器学习系统(包括Spark MLlib 迭代式MapReduce系统,Multiverso参数服务器系统,TensorFlow数据流系统)。*后的第12章是全书的结语,在对全书内容进行简要总结之后,着重讨论分布式机器学习这个领域未来的发展方向。 本书基于微软亚洲研究院机器学习研究团队多年的研究成果和实践经验写成,既可以作为研究生从事分布式机器学习方向研究的参考文献,也可以作为人工智能从业者进行算法选择和系统设计的工具书。 人工智能大潮中,市场上已有许多机器学习书籍,但是分布式机器学习的专门书籍还很少见。本书是希望学习和了解分布式机器学习的读者的福音。 |
目录 | |
序言一序言二前 言作者介绍第1章 绪论/ 11.1 人工智能及其飞速发展/ 21.2 大规模、分布式机器学习/ 41.3 本书的安排/ 6参考文献/ 7第2章 机器学习基础/ 92.1 机器学习的基本概念/ 102.2 机器学习的基本流程/ 132.3 常用的损失函数/ 162.3.1 Hinge损失函数/ 162.3.2 指数损失函数/ 162.3.3 交叉熵损失函数/ 172.4 常用的机器学习模型/ 182.4.1 线性模型/ 182.4.2 核方法与支持向量机/ 182.4.3 决策树与Boosting/ 212.4.4 神经网络/ 232.5 常用的优化方法/ 322.6 机器学习理论/ 332.6.1 机器学习算法的泛化误差/ 342.6.2 泛化误差的分解/ 342.6.3 基于容度的估计误差的上界/ 352.7 总结/ 36参考文献/ 36第3章 分布式机器学习框架/ 413.1 大数据与大模型的挑战/ 423.2 分布式机器学习的基本流程/ 443.3 数据与模型划分模块/ 463.4 单机优化模块/ 483.5 通信模块/ 483.5.1 通信的内容/ 483.5.2 通信的拓扑结构/ 493.5.3 通信的步调/ 513.5.4 通信的频率/ 523.6 数据与模型聚合模块/ 533.7 分布式机器学习理论/ 543.8 分布式机器学习系统/ 553.9 总结/ 56参考文献/ 57第4章 单机优化之确定性算法/ 614.1 基本概述/ 624.1.1 机器学习的优化框架/ 624.1.2 优化算法的分类和发展历史/ 654.2 一阶确定性算法/ 674.2.1 梯度下降法/ 674.2.2 投影次梯度下降法/ 694.2.3 近端梯度下降法/ 704.2.4 Frank-Wolfe算法/ 714.2.5 Nesterov加速法/ 724.2.6 坐标下降法/ 754.3 二阶确定性算法/ 754.3.1 牛顿法/ 764.3.2 拟牛顿法/ 774.4 对偶方法/ 784.5 总结/ 81参考文献/ 8第5章 单机优化之随机算法/ 855.1 基本随机优化算法/ 865.1.1 随机梯度下降法/ 865.1.2 随机坐标下降法/ 885.1.3 随机拟牛顿法/ 915.1.4 随机对偶坐标上升法/ 935.1.5 小结/ 955.2 随机优化算法的改进/ 965.2.1 方差缩减方法/ 965.2.2 算法组合方法/ 1005.3 非凸随机优化算法/ 1015.3.1 Ada系列算法/ 1025.3.2 非凸理论分析/ 1045.3.3 逃离鞍点问题/ 1065.3.4 等级优化算法/ 1075.4 总结/ 109参考文献/ 109第6章 数据与模型并行/ 1136.1 基本概述/ 1146.2 计算并行模式/ 1176.3 数据并行模式/ 1196.3.1 数据样本划分/ 1206.3.2 数据维度划分/ 1236.4 模型并行模式/ 1236.4.1 线性模型/ 1236.4.2 神经网络/ 1276.5 总结/ 133参考文献/ 133第7章 通信机制/ 1357.1 基本概述/ 1367.2 通信的内容/ 1377.2.1 参数或参数的更新/ 1377.2.2 计算的中间结果/ 1377.2.3 讨论/ 1387.3 通信的拓扑结构/ 1397.3.1 基于迭代式MapReduce/AllReduce的通信拓扑/ 1407.3.2 基于参数服务器的通信拓扑/ 1427.3.3 基于数据流的通信拓扑/ 1437.3.4 讨论/ 1457.4 通信的步调/ 1457.4.1 同步通信/ 1467.4.2 异步通信/ 1477.4.3 同步和异步的平衡/ 1487.4.4 讨论/ 1507.5 通信的频率/ 1507.5.1 时域滤波/ 1507.5.2 空域滤波/ 1537.5.3 讨论/ 1557.6 总结/ 156参考文献/ 156第8章 数据与模型聚合/ 1598.1 基本概述/ 1608.2 基于模型加和的聚合方法/ 1608.2.1 基于全部模型加和的聚合/ 1608.2.2 基于部分模型加和的聚合/ 1628.3 基于模型集成的聚合方法/ 1678.3.1 基于输出加和的聚合/ 1688.3.2 基于投票的聚合/ 1718.4 总结/ 174参考文献/ 174第9章 分布式机器学习算法/ 1779.1 基本概述/ 1789.2 同步算法/ 1799.2.1 同步SGD方法/ 1799.2.2 模型平均方法及其改进/ 1829.2.3 ADMM算法/ 1839.2.4 弹性平均SGD算法/ 1859.2.5 讨论/ 1869.3 异步算法/ 1879.3.1 异步SGD/ 1879.3.2 Hogwild!算法/ 1899.3.3 Cyclades算法/ 1909.3.4 带延迟处理的异步算法/ 1929.3.5 异步方法的进一步加速/ 1999.3.6 讨论/ 1999.4 同步和异步的对比与融合/ 1999.4.1 同步和异步算法的实验对比/ 1999.4.2 同步和异步的融合/ 2019.5 模型并行算法/ 2039.5.1 DistBelief/ 2039.5.2 AlexNet/ 2049.6 总结/ 205参考文献/ 205第10章 分布式机器学习理论/ 20910.1 基本概述/ 21010.2 收敛性分析/ 21010.2.1 优化目标和算法/ 21110.2.2 数据和模型并行/ 21310.2.3 同步和异步/ 21510.3 加速比分析/ 21710.3.1 从收敛速率到加速比/ 21810.3.2 通信量的下界/ 21910.4 泛化分析/ 22110.4.1 优化的局限性/ 22210.4.2 具有更好泛化能力的非凸优化算法/ 22410.5 总结/ 226参考文献/ 226第11章 分布式机器学习系统/ 22911.1 基本概述/ 23011.2 基于IMR的分布式机器学习系统/ 23111.2.1 IMR和Spark/ 23111.2.2 Spark MLlib/ 23411.3 基于参数服务器的分布式机器学习系统/ 23611.3.1 参数服务器/ 23611.3.2 Multiverso参数服务器/ 23711.4 基于数据流的分布式机器学习系统/ 24111.4.1 数据流/ 24111.4.2 TensorFlow数据流系统/ 24311.5 实战比较/ 24811.6 总结/ 252参考文献/ 252第12章 结语/ 25512.1 全书总结/ 25612.2 未来展望/ 257索引/ 260 |
作者简介 | |
作者介绍: 刘铁岩微软亚洲研究院副院长。刘博士的先锋性研究促进了机器学习与信息检索之间的融合,被国际学术界公认为“排序学习”领域的代表人物。近年来在深度学习、分布式学习、强化学习等方面也颇有建树,发表论文200余篇,被引用近两万次。多次获得*佳论文奖、*高引用论文奖、Springer十大畅销华人作者、Elsevier*高引中国学者等。被聘为卡内基-梅隆大学(CMU)客座教授,诺丁汉大学荣誉教授,中国科技大学教授、博士生导师;被评为国际电子电气工程师学会(IEEE)会士,国际计算机学会(ACM)杰出会员。
陈薇 微软亚洲研究院机器学习组主管研究员,研究机器学习各个分支的理论解释和算法改进,尤其关注深度学习、分布式机器学习、强化学习、博弈机器学习、排序学习等。2011年于科学院数学与系统科学研究院获得博士学位,同年加入微软亚洲研究院,负责机器学习理论项目,先后在NIPS、ICML、AAAI、IJCAI等相关领域**国际会议和期刊上发表文章30余篇。
王太峰 蚂蚁金服人工智能部总监、资深算法专家。在蚂蚁金服负责AI算法组件建设,算法工作服务于蚂蚁金服的支付、国际、保险等多条业务线。在加入蚂蚁之前在微软亚洲研究院工作11年,任主管研究员,他的研究方向包括大规模机器学习、数据挖掘、计算广告学等。在国际**的机器学习会议上发表近20篇的论文,在大规模机器学习工具开源方面也做出过很多贡献,在微软期间主持开发过DMTK的开源项目。
高飞 微软亚洲研究院副研究员,主要从事分布式机器学习和深度学习的研究工作,并在国际会议上发表多篇论文。2014年设计开发了当时规模*大的主题模型算法和系统LightLDA。他还开发了一系列分布式机器学习系统,并通过微软分布式机器学习工具包(DMTK)开源在GitHub上。 |