Zabbix监控系统深度实践

国内大规模Zabbix集群负责人力作
全面讲解Zabbix配置应用，深入剖析Zabbix内部原理
用真实工作需求驱动，以实践案例指引，助您监控利器出鞘
Zabbix是目前流行的分布式图形化开源监控系统解决方案，它有健全灵活的监控数据采集、存储、告警规则配置以及图形化展示界面。丰富的功能背后是极高的复杂性，特别在国内缺乏相关的中文资料的背景下，系统管理人员很难参透工具内在的精髓和局限，从而高效地将其用于大规模监控场景。本书作者曾参与大规模Zabbix集群应用项目，系统覆盖了当时5000多台主机和几十万个监控点，近百万的监控点记录，修改了Zabbix多处源码，实现了很多自动化的监控部署和Proxy-Master 的分布式监控，以及通过Zabbix Trigger自动分析等，从实践中总结了极具价值的方法、思想和技巧在本书中分享。

《Zabbix监控系统深度实践》是一本由浅入深，全面讲解Zabbix应用与原理的技术书籍，也是作者多年实战经验的总结和浓缩。在概念篇，从一个简单但完整的入门案例讲起，案例中有最基本的概念介绍，通过案例帮助那些只要将服务器加入监控，并且看到监控数据的读者；然后逐步深入，在进阶篇介绍Zabbix的各方各面的配置；在设计篇中对Zabbix的内部原理进行深入剖析，包括Zabbix与数据库的交互Zabbix数据库表的设计等，并分享作者在Zabbix上踩过的坑以及解决问题的思路。最后会在开源部分介绍58同城开源的Zatree和Chrome的插件、手机客户端等工具。
这本书会从我们工作中的实际需求出发，以实际案例作为指引，希望对于读者而言，不仅仅是学会某些具体的操作，而是深入了解Zabbix 的设计思路，掌握解决问题的方法。

　　Zabbix是目前很流行的分布式图形化开源监控系统解决方案。它有健全灵活的监控数据采集、存储、告警规则配置以及图形化展示界面，已经被越来越多的互联网公司所应用，成为运维基础架构系统的重要组成部分。
三年前，姚仁捷作为聚力传媒（PPTV）的系统工程师，参与并承担PPTV生产环境运维监控系统的建设工作。在短短三个月的时间里，完成了从方案选取、部署测试、小范围应用、全面上线的一整套工作，从无到有建设了覆盖数千台设备的运维监控系统。我作为项目负责人，对于他的成就感到非常欣慰。
本人作为姚仁捷的同事、朋友，向有志于运维自动化的朋友们郑重推荐此书！
陈文春
聚力传媒（PPTV）系统平台部高级总监
Zabbix是一个用于基础架构监控和告警的开源解决方案，可以说是近几年来国内外中小型互联网企业中流行的一种。它结合了Cacti绘图和Nagios的告警机制，并拥有非常简易的Web配置界面，再配合一些标准的监控模板，就能很轻松地上手了。姚仁捷曾经在PPTV负责过Zabbix大规模集群的工作，积累了丰富的经验和技巧，本书是他多年实践工作的结晶，从功能到部署，从原理到案例，全面讲解了Zabbix相关知识，值得一读！
程国强
携程网站运营系统开发总监
Zabbix是近几年涌现出来的开源企业级监控工具，集数据采集，图表绘制，报警等功能于一身，适合中小型企业快速的从无到有建立一个完备的监控体系。丰富的功能背后是极高的复杂性，特别在国内缺乏相关的中文资料的背景下，系统管理人员很难参透工具内在的精髓和局限，从而高效地将其用于大规模监控场景。姚仁捷是国内Zabbix大规模应用场景的实践先驱，在源代码级对Zabbix的工作机制进行过研究及优化。相信本书可以帮助后来者少走弯路，趋利避害，让Zabbix成为监控项目实施中的利器。
吴晓刚
携程网站运营中心系统开发部高级经理
Zabbix是近年来非常流行的分布式监控工具，但是上手容易，精通难。八牛曾经是国内大规模Zabbix集群的维护者，在Zabbix运维、优化及二次开发方面都有丰富的经验。本书作为他多年经验的结晶，不但详细阐述了Zabbix的部署运用，还有针对性地解析了Zabbix架构设计的关键点和具体实现方式，更列举了常见的疑难问题和解决方案，堪称监控领域难得的精品书籍，相信不同层次的读者都会有所收获。
饶琛琳
新浪网技术保障部系统架构师

第一部分 概念篇
第 1 章 自动化运维和监控系统 2
1．1 互联网公司的运维工作 2
1．2 何谓自动化运维 3
1．3 监控系统在运维自动化中的角色 5
1．4 监控系统的理想化模样 5
第 2 章 Zabbix简介 7
2．1 Zabbix发展现状 7
2．2 选择Zabbix的理由 8
2．3 Zabbix部分名词约定 9
第 3 章 Zabbix安装 11
3．1 获取Zabbix 11
3．2 Zabbix Server安装 12
3．2．1 Zabbix数据库配置 12
3．2．2 安装Zabbix Server 13
3．2．3 安装Zabbix Web前端 16
3．3 Zabbix Agent安装 18
3．3．1 UNIX/Linux上安装Zabbix Agent 18
3．3．2 Windows上安装Zabbix Agent 18
3．4 测试Zabbix Agent和Zabbix Server运行 20
3．5 配置文件详解 20
3．5．1 zabbix_server．conf 20
3．5．2 zabbix_agentd．conf 24
第 4 章 监控第一台Host 26
4．1 Host在监控系统中的活动 26
4．2 添加一个用户 27
4．3 把服务器加入Zabbix监控 27
4．4 添加Item 28
4．5 添加Trigger 29
4．6 设置Action 31
4．7 收到第一封报警邮件吧 33
4．8 Zabbix 报警流程 33
4．9 看，Zabbix在工作呢 34
4．9．1 全局搜索框 35
4．9．2 查看监控数据 35
4．9．3 查看报警信息 36
4．10 添加自定义监控点 37
第二部分 配置篇
第 5 章 增加监控 40
5．1 Host配置 41
5．2 Item属性 45
5．3 Item类型 48
5．3．1 Zabbix Agent类型 48
5．3．2 SNMP类型 51
5．3．3 IPMI类型 52
5．3．4 日志文件监控 53
5．3．5 计算型Item 54
5．3．6 Zabbix内部监控 55
5．3．7 ssh类型Item 58
5．3．8 Telnet类型Item 60
5．3．9 External Check类型Item 60
5．3．10 Aggregate类型Item 60
5．3．11 Trapper类型Item 62
5．3．12 JMX类型Item 62
5．3．13 ODBC类型Item 64
5．4 Item历史数据History和Trends 66
5．5 使用Application对Item分组 67
5．6 Item Key详解 68
5．7 Template模板 69
5．7．1 新建和配置一个Template 69
5．7．2 建立/取消Host和Template的关联 71
5．7．3 修改Template 73
5．7．4 Template和Host 73
5．7．5 Template之间的父子关系 74
5．8 Clone，Full Clone和Mass Update 75
5．9 Windows监控 76
5．10 VMware监控 82
5．11 Zabbix监控性能 84
第 6 章 报警配置 86
6．1 Triggers 86
6．1．1 配置Triggers 86
6．1．2 Trigger expression 87
6．1．3 Function详解 89
6．1．4 Trigger依赖 92
6．1．5 Trigger等级 94
6．1．6 单位 95
6．2 Events 95
6．3 Actions 96
6．3．1 Action 97
6．3．2 Operation 99
6．3．3 Condition 104
6．3．4 Escalations 107
6．3．5 Unsupported状态的Items的报警 110
6．4 Media类型 111
6．5 Maintenance状态 116
第 7 章 数据可视化 118
7．1 Graph 118
7．2 Network Maps 123
7．2．1 新建Maps 123
7．2．2 创建元素 124
7．2．3 选择元素 126
7．2．4 关联元素 126
7．2．5 关联指示器 126
7．3 Screens 127
7．4 Slide shows 131
第 8 章 Users和Macros 133
8．1 User和User group 133
8．1．1 配置User 133
8．1．2 User group 135
8．2 Macros 136
8．2．1 自带宏 136
8．2．2 用户自定义宏 137
8．2．3 自定义宏的适用范围 139
第 9 章 IT services服务监控与Web monitoring网络监控 140
9．1 Services服务监控 140
9．2 服务配置 141
9．3 Web monitoring网络监控配置 145
9．4 监控百度示例 148
第 10 章 Zabbix前端界面 151
10．1 Monitoring板块 151
10．1．1 Dashboard栏目 151
10．1．2 Overview栏目 157
10．1．3 Web栏目 158
10．1．4 Latest data栏目 159
10．1．5 Triggers栏目 159
文前．indd 10 2014-8-19 14：46：53
目 录
XI
10．1．6 Events栏目 160
10．1．7 Graphs＆Screens＆Maps栏目 161
10．2 Inventory板块 161
10．3 Reports板块 161
10．4 Configuration板块 166
10．4．1 Host groups栏目 166
10．4．2 Template栏目 167
10．4．3 Hosts栏目 168
10．4．4 Maintenance栏目 170
10．4．5 其他 170
10．5 Administration板块 171
10．5．1 General栏目 171
10．5．2 DM栏目 177
10．5．3 Authentication栏目 178
10．5．4 Users栏目 179
10．5．5 Media types栏目 181
10．5．6 Scripts栏目 181
10．5．7 Audit栏目 185
10．5．8 Queue栏目 186
10．5．9 Notification栏目 186
10．5．10 Installation栏目 187
10．6 前端配置 187
10．6．1 全局配置参数 187
10．6．2 前端维护状态显示 189
10．6．3 Profile设置 190
10．7 全局搜索框 192
第 11 章 Discovery 193
11．1 基于网络的Discovery 193
11．2 Discovery的一个例子 195
11．3 Discovery Rule和Discovery Action的配置 196
11．4 存活Agent自动加入监控 199
11．5 low-level discovery 200
文前．indd 11 2014-8-19 14：46：53
Zabbix监控系统深度实践
XII
第三部分 进阶篇
第 12 章 Zabbix API 206
12．1 Zabbix API POST参数 206
12．2 Item支持的Zabbix API方法 207
12．2．1 Item object 208
12．2．2 item．create 209
12．2．3 item．delete 210
12．2．4 item．exists 210
12．2．5 item．get 211
12．2．6 item．getobjects 214
12．2．7 item．isreadable/item．iswritable 215
12．2．8 item．update 215
12．3 如何阅读Zabbix API文档 216
第 13 章 Zabbix分布式监控 217
13．1 两种分布式架构对比 217
13．2 Proxy单级分布式架构 218
13．3 Proxy配置 219
13．4 Node多级分布式架构 220
第 14 章 Zabbix系统优化 227
14．1 Zabbix内部运行机制 227
14．2 Items过多造成性能下降 228
14．3 数据库及其他调优 232
第 15 章 轻量级日志监控应用 233
15．1 准备工作 233
15．2 添加 Item 234
15．3 测试 234
15．4 配置报警 236
15．5 轮转的日志文件 237
15．6 获取关键字 238
文前．indd 12 2014-8-19 14：46：53
目 录
XIII
第四部分 设计篇
第 16 章 Zabbix数据库表结构解析 240
16．1 表结构概述 240
16．2 Hosts表 241
16．3 Items表 244
16．4 Trigger在数据库中的结构 248
16．5 Events表 253
16．6 Triggers和Events生成的规则 255
第 17 章 History和Trends 256
17．1 sync字段的含义 257
17．2 history和trends的区别 261
17．3 housekeeper和trends表 262
17．4 Graph对于history和trends的选择 263
第 18 章 Zabbix和数据库交互详解 268
18．1 include/zbxdb．h 268
18．2 zbxdb/db．c 270
18．3 zbxdbhigh 271
第 19 章 Zabbix 2．2新功能介绍 274
19．1 数据库自动升级 274
19．1．1 检查数据库版本 274
19．1．2 mandatory和optional字段 275
19．1．3 数据库升级过程 277
19．1．4 前端提示 278
19．2 Web监控 279
19．2．1 Web监控Template化 279
19．2．2 Web监控重试机制 279
19．2．3 使用HTTP代理 280
19．2．4 URL监控中使用页面内容作为变量 281
文前．indd 13 2014-8-19 14：46：53
Zabbix监控系统深度实践
XIV
19．3 数据映射 282
19．4 网页字符串匹配 282
19．5 日志文件监控 283
19．6 Latest Data局部刷新 284
19．7 动态载入模块 285
19．8 SNMP监控改进 289
19．8．1 SNMPv3相关的增强 289
19．8．2 SNMP重试和超时机制改进 290
19．8．3 lld的复杂OIDs 290
第 20 章 Zabbix内置监控项实现 291
20．1 system．hostname 291
20．2 system．cpu．load 292
第五部分 社区和开源
第 21 章 典型案例分析 296
21．1 前端显示Zabbix server停止工作问题 296
21．2 Item设置了但没有数据 302
21．2．1 看页面是否有报错 302
21．2．2 Zabbix Server和Zabbix Agent的网络是否互通 303
21．2．3 zabbix_get是否能够获取到数据 304
21．2．4 总结 304
21．3 一个扫描history全表的SQL问题 305
21．4 解决问题的思路 315
第 22 章 Zabbix代码问题和解决 316
22．1 Duplicated Host问题 316
22．2 拼接大SQL问题 318
22．3 nextid问题 319
22．4 在Zabbix中打印日志 321
第 23 章 PPTV的Zabbix监控体系 322
23．1 Python Zabbix API 322
文前．indd 14 2014-8-19 14：46：53
目 录
XV
23．2 Spider――服务器添加Zabbix监控 324
23．3 Event Console 326
23．4 Rule Engine 326
23．5 报警系统架构 327
第 24 章 Zatree 328
第 25 章 Zabbix第三方插件 331
25．1 Chromix 331
25．2 Zabbix Notifier 332
25．3 手机端Zabbix App 333
25．3．1 ZBX Mobile 333
25．3．2 Zabbkit 335
第 26 章 微信公众平台报警 338
26．1 申请微信公众平台账号 338
26．2 配置微信公众平台账号 339
26．2．1 使用SAE进行测试开发 341
26．2．2 申请测试账号 342
26．2．3 获取access_token 342
26．2．4 获取用户的openid 343
26．2．5 发送第一条文字消息 343
26．3 微信接口请求次数限制 344
第 27 章 社区论坛 345
附录 Zabbix自带宏 347
后记 349
程序员职业生涯的一些感悟350