商品参数
Flink基础教程 |
| 定价 | 39.00 |
出版社 | 人民邮电出版社 |
出版时间 | 2018年08月 |
开本 | 大32开 |
作者 | 埃伦 弗里德曼等 |
页数 | 0 |
ISBN编码 | 9787115490063 |
内容介绍
近年来,流处理变得越来越流行。作为高度创新的开源流处理器,Flink拥有诸多优势,包括容错性、高吞吐、低延迟,以及同时支持流处理和批处理的能力。本书分为6章,侧重于介绍Flink的核心设计理念、功能和用途,内容涉及事件时间和处理时间、窗口和水印机制、检查点机制、性能测评,以及Flink如何实现批处理。 本书面向有兴趣学习如何分析大规模流数据的读者。
作者介绍
作者介绍 埃伦·弗里德曼(Ellen Friedman) 解决方案咨询师,知名大数据相关技术布道师,在流处理架构和大数据处理框架等方面有多部著作。 科斯塔斯·宙马斯(Kostas Tzoumas) Flink项目核心成员,data Artisans公司联合创始人兼首#执行官,在流处理和数据科学领域经验丰富。 译者介绍 王绍翾 阿#巴巴技术专家,Apache Flink Committer,花名“大沙”。毕业于北京大学信息科学技术学院,后取得加州大学圣#亚哥分校计算机工程博士学位。目前就职于阿#巴巴计算平台事业部,负责Flink SQL引擎及机器学习的相关开发。加入阿#巴巴之前,在Facebook开发分布式图存储系统TAO。曾多次拜访由Flink创始团队创办的公司data Artisans,并与其首#执行官科斯塔斯·宙马斯(本书作者之一)以及首#技术官斯蒂芬·尤恩有着广泛的合作。
关联推荐
凭Flink高效实现容错性实时数据处理//Flink项目核心成员执笔//阿#巴巴技术专家悉心翻译
目录
前言 ix
第 1章为何选择Flink 1
1.1流处理欠佳的后果 2
1.1.1零售业和市场营销 2
1.1.2物联网 3
1.1.3电信业 5
1.1.4银行和金融业 5
1.2连续事件处理的目标 6
1.3流处理技术的演变 6
1.4初探Flink 9
1.5生产环境中的Flink 12
1.5.1布衣格电信 13
1.5.2其他案例 14
1.6Flink的适用场景 15
第 2章流处理架构 17
2.1传统架构与流处理架构 17
2.2消息传输层和流处理层 18
2.3消息传输层的理想功能 19
2.3.1兼具高性能和持久性 20
2.3.2将生产者和消费者解耦 20
2.4支持微服务架构的流数据 21
2.4.1数据流作为中心数据源 22
2.4.2欺诈检测:流处理架构用例 22
2.4.3给开发人员带来的灵活性 24
2.5不限于实时应用程序 24
2.6流的跨地域复制 26
第3章Flink 的用途 29
3.1不同类型的正确性 29
3.1.1符合产生数据的自然规律 29
3.1.2事件时间 31
3.1.3发生故障后仍保持准确 32
3.1.4及时给出所需结果 33
3.1.5使开发和运维更轻松 33
3.2分阶段采用Flink 34
第4章对时间的处理 35
4.1采用批处理架构和Lambda 架构计数 35
4.2采用流处理架构计数 38
4.3时间概念 40
4.4窗口 41
4.4.1时间窗口 41
4.4.2计数窗口 43
4.4.3会话窗口 43
4.4.4触发器 44
4.4.5窗口的实现 44
4.5时空穿梭 44
4.6水印 45
4.7真实案例:爱立信公司的Kappa 架构 47
第5章有状态的计算 49
5.1一致性 50
5.2检查点:保证exactly-once 51
5.3保存点:状态版本控制 59
5.4端到端的一致性和作为数据库的流处理器 62
5.5Flink 的性能 65
5.5.1Yahoo! Streaming Benchmark 65
5.5.2变化1:使用Flink 状态 66
5.5.3变化2:改进数据生成器并增加吞吐量 67
5.5.4变化3:消除网络瓶颈 68
5.5.5变化4:使用MapR Streams 69
5.5.6变化5:增加key 基数 69
5.6结论 71
第6章批处理:一种特殊的流处理 73
6.1批处理技术 75
6.2案例研究:Flink 作为批处理器 76
附录其他资源 79
关于作者 84