本站支持尊重有效期内的版权/著作权,所有的资源均来自于互联网网友分享或网盘资源,一旦发现资源涉及侵权,将立即删除。希望所有用户一同监督并反馈问题,如有侵权请联系站长或发送邮件到ebook666@outlook.com,本站将立马改正
商品基本信息,请以下列介绍为准 | |
商品名称: | 大数据技术及架构图解实战派 |
作者: | 徐葳 |
定价: | 146.0 |
出版社: | 电子工业出版社 |
出版日期: | 21-05-01 |
ISBN: | 9787121437748 |
印次: | |
版次: | null |
装帧: | |
开本: | 16开 |
内容简介 |
配置和使用YARN多资源队列 . 九 、大数台搭建工具 大数台工具HDP 大数台工具CDH 大数台工具CDP . 本书还介绍了多个企业级大数据应用案例括海量数据采集、“”数据大屏、海量数据全文搜索系统等)和大数台架构案例括离线数据仓库架构、实时数据仓库架构、批流一体化数据仓库架构、数据中台架构、直播大数台架构、电商大数台架构等),可以帮助读者从全局角度理解大数据。 . 在本书中,技术内容基本上都是从零讲起的,结合原理和架构,以“图解 实战”的形式帮助读者轻松理解复杂的知识。 |
目录 |
基础篇 第1章 大数据的前世今生 1.1 什么是大数据 1.2 大数据产生的背景 1.3 大数据的4V特征 1.4 大数据的典型应用场景 1.5 大数据生态圈核心技览 技术篇 第2章 海量数据采集 2.1 为什么需要数据采集 2.2 数据形态 2.3 数据来源 2.4 数据采集规则 2.5 日志数据采集工具 2.5.1 对比常见的日志数据采集工具 2.5.2 Flume的原理及架构分析 2.5.3 Flume的应用 2.5.3.1 安装Flume 2.5.3.2 Hello World 2.5.3.3 【实战】日志采集 2.5.4 Logstash的原理及架构分析 2.5.5 Logstash的应用 2.5.5.1 安装Logstar/> 2.5.5.2 【实战】Hello World案例 2.5.5.3 【实战】采集异常日志案例 2.5.6 Filebeat的原理及架构分析 2.5.6.1 Filebeat的由来 2.5.6.2 原理及架构分析 2.5.7 Filebeat的应用 2.5.7.1 安装Filebeat 2.5.7.2 【实战】采集应用程序日志 2.6 数据库数据采集工具 2.6.1 对比常见的数据库数据采集工具 2.6.1.1 数据库离线数据采集工具 2.6.1.2 数据库实时数据采集工具 2.6.2 Saoop的原理及架构分析 2.6.3 DataX的原理及架构分析 2.6.4 Sqoop的应用 2.6.4.1 安装Sqoop 2.6.4.2 Sqoop 常见参数 2.6.4.3 【实战】导入数据 2.6.4.4 【实战】导出数据 2.6.4.5 【实战】封装Sqoop脚本 2.6.5 Canal的原理及架构分析 2.6.6 Maxwell的原理及架构分析 2.6.7 Maxwell的应用 2.6.7.1 安装Maxwell 2.6.7.2 【实战】采集MySQL数据库的实时数据 2.7 网页数据采集工具 2.7.1 常见的网页数据采集工具 2.7.2 网页数据采集工具的原理及架构分析 2.8 物联网数据采集工具 …… |
(1)体系完整,内容丰富。 (2)从零起步,循序。 (3)大量插图,易于理解。 (4)丰富的实战案例。 (5)衔接运维,无须担心大数据集群环境问题。 (6)丰富的大数据架构案例。 |
前言 |
大数据技术在国内真正开始落地大致是在14年,当时由于公司需要,作者开始从Java转行大数据。那时只需要掌握Hadoop技术就可行大数据开发了。随着大数据行业的发展,现在需要掌握Flume、Kakfa、Hive、HBase、Spark、Flink等技术了。 作者有幸亲身经历了国内大数据行业从零到一的发展历程,因此积累了丰富的实践经验,这便是写作本书的由来。 1.本书 (1)体系完整,内容丰富。 本书覆盖大数据生态圈中的完整技术体系括数据采集、存储、计算、分析、检索等全流程解决方案,只需要一本书即可学会大数据技术。 (2)从零起步,循序。 本书是从零开始讲起,循序,帮助读者快速掌握技术组件的原理、架构及实战应用。 (3)大量插图,易于理解。 一图胜干文,书中在涉及原理、架构、流程的地方都尽量配有插图,以便读者有直观的理解。 (4)丰富的实战案例。 本书介绍了大量的实战案例,能让读者“动起来”,在实践能,而不只是一种概念上的理解。 在讲解每一个知识模块时,我们都在思考:在这个知识模块中,哪些是读者必须实现的“标准动作”(实例);哪些“标准动作”是可以先完成的,以求让读者能快速有一个感知;哪些“标准动作”是有一定难度,需要放到后面完成的。读者在跟随书中一个个实例实践之后,再去理解那些抽象的概念和原理就水到渠成了。 (5)衔接运维,无须担心大数据集群环境问题。 本书的所有技术框架都有详细的安装步骤,读者可以快速搭建好需要用到的大数据集群环境,再也不用担心没有集群环行实操了。 (6)丰富的大数据架构案例。 本含了大量的大数据架构案例,结合不同的应用场景将零散的大数据技术组件整合到一起,帮助读者构建大数据的整体架构设计能力。 2.读者对象 本书既适合大数据初学者,也适合一步扩展知识面的大数据初中级人员。 本书读者对象如下: 大数据初学者; 培训机构的老师和学员; Java开发工程师; 高等院校计算机相关专业的学生; 转行大数据的; 大数据运维人员; 高等院校大数据专业的老师; 其他对大数据感兴趣的人员; 3.致谢 感谢电子工业出版社的吴宏伟老师在本书写作期间的帮助和指导。 感谢我的家人,是我的妻子丰桂华和儿子徐一铭。由于在本书写作期间,我了很多陪伴家人的时间,在此感谢他们对我的理解和支持。 后,尽管作者在本书写作期间尽可能追求严谨,但是仍然难免会有漏之处,欢迎广大读者批评指正,感谢大家。 您可以通过以下方式直接联系作者: ·公众号:大数据1024(回复“bigdata”即可获取本书配套代码) · 邮箱:xuwei@xuwei.tech |
作者简介 |
"徐葳,专注于大数据技术方向,属于国内较早一批从事大数据的,拥有10年以上互联网公司软件研发经验。 曾任职于北京猎豹移动、大数据技术研究院等企业。 曾为移动研究院安寿险、中信银行、花旗银行、中移在线等企行大数据技术企培。" |