[套装书]ClickHouse原理解析与应用实践+HikariCP数据库连接池实战（2册）

. 实战篇（10~14章） 这是本书的精华部分。HikariCP的监控、扩展技术、常见问题等都是读者工作中较为迫切了解到、使用到的知识点，这些内容大多来自作者多年实战经验的积累及大量文献资料的收集整理，内容包罗万象、精妙绝伦。

1.5.2　社区活跃8
1.6　ClickHouse的发展历程8
1.6.1　顺理成章的MySQL时期9
1.6.2　另辟蹊径的Metrage时期10
1.6.3　自我突破的OLAPServer时期10
1.6.4　水到渠成的ClickHouse时代11
1.7　ClickHouse的名称含义12
1.8　ClickHouse适用的场景12
1.9　ClickHouse不适用的场景13
1.10　有谁在使用ClickHouse13
1.11　本章小结13
第2章　ClickHouse架构概述14
2.1　ClickHouse的核心特性14
2.1.1　完备的DBMS功能15
2.1.2　列式存储与数据压缩15
2.1.3　向量化执行引擎16
2.1.4　关系模型与SQL查询17
2.1.5　多样化的表引擎18
2.1.6　多线程与分布式18
2.1.7　多主架构19
2.1.8　在线查询19
2.1.9　数据分片与分布式查询 19
2.2　ClickHouse的架构设计20
2.2.1　Column与Field20
2.2.2　DataType20
2.2.3　Block与Block流21
2.2.4　Table22
2.2.5　Parser与Interpreter22
2.2.6　Functions 与Aggregate Functions22
2.2.7　Cluster与Replication23
2.3　ClickHouse为何如此之快24
2.3.1　着眼硬件，先想后做24
2.3.2　算法在前，抽象在后24
2.3.3　勇于尝鲜，不行就换25
2.3.4　特定场景，特殊优化25
2.3.5　持续测试，持续改进25
2.4　本章小结26
第3章　安装与部署27
3.1　ClickHouse的安装过程27
3.1.1　环境准备27
3.1.2　安装ClickHouse28
3.2　客户端的访问接口31
3.2.1　CLI31
3.2.2　JDBC33
3.3　内置的实用工具35
3.3.1　clickhouse-local35
3.3.2　clickhouse-benchmark36
3.4　本章小结38
第4章　数据定义39
4.1　ClickHouse的数据类型39
4.1.1　基础类型40
4.1.2　复合类型45
4.1.3　特殊类型48
4.2　如何定义数据表49
4.2.1　数据库49
4.2.2　数据表50
4.2.3　默认值表达式52
4.2.4　临时表53
4.2.5　分区表54
4.2.6　视图55
4.3　数据表的基本操作56
4.3.1　追加新字段56
4.3.2　修改数据类型56
4.3.3　修改备注56
4.3.4　删除已有字段57
4.3.5　移动数据表57
4.3.6　清空数据表58
4.4　数据分区的基本操作58
4.4.1　查询分区信息58
4.4.2　删除指定分区58
4.4.3　复制分区数据59
4.4.4　重置分区数据60
4.4.5　卸载与装载分区60
4.4.6　备份与还原分区61
4.5　分布式DDL执行61
4.6　数据的写入61
4.7　数据的删除与修改63
4.8　本章小结64
第5章　数据字典65
5.1　内置字典65
5.1.1　内置字典配置说明65
5.1.2　使用内置字典67
5.2　外部扩展字典67
5.2.1　准备字典数据67
5.2.2　扩展字典配置文件的元素组成68
5.2.3　扩展字典的数据结构69
5.2.4　扩展字典的类型71
5.2.5　扩展字典的数据源79
5.2.6　扩展字典的数据更新策略84
5.2.7　扩展字典的基本操作85
5.3　本章小结87
第6章　MergeTree原理解析88
6.1　MergeTree的创建方式与存储结构89
6.1.1　MergeTree的创建方式89
6.1.2　MergeTree的存储结构91
6.2　数据分区93
6.2.1　数据的分区规则93
6.2.2　分区目录的命名规则94
6.2.3　分区目录的合并过程95
6.3　一级索引98
6.3.1　稀疏索引98
6.3.2　索引粒度99
6.3.3　索引数据的生成规则99
6.3.4　索引的查询过程101
6.4　二级索引102
6.4.1　granularity与index_granularity的关系104
6.4.2　跳数索引的类型105
6.5　数据存储106
6.5.1　各列独立存储106
6.5.2　压缩数据块106
6.6　数据标记109
6.6.1　数据标记的生成规则109
6.6.2　数据标记的工作方式110
6.7　对于分区、索引、标记和压缩数据的协同总结113
6.7.1　写入过程113
6.7.2　查询过程114
6.7.3　数据标记与压缩数据块的对应关系114
6.8　本章小结116
第7章　MergeTree系列表引擎117
7.1　MergeTree117
7.1.1　数据TTL117
7.1.2　多路径存储策略121
7.2　ReplacingMergeTree128
7.3　SummingMergeTree130
7.4　AggregatingMergeTree134
7.5　CollapsingMergeTree137
7.6　VersionedCollapsingMergeTree140
7.7　各种MergeTree之间的关系总结141
7.7.1　继承关系141
7.7.2　组合关系143
7.8　本章小结144
第8章　其他常见类型表引擎145
8.1　外部存储类型145
8.1.1　HDFS145
8.1.2　MySQL149
8.1.3　JDBC150
8.1.4　Kafka152
8.1.5　File157
8.2　内存类型158
8.2.1　Memory159
8.2.2　Set159
8.2.3　Join160
8.2.4　Buffer162
8.3　日志类型164
8.3.1　TinyLog164
8.3.2　StripeLog165
8.3.3　Log166
8.4　接口类型167
8.4.1　Merge167
8.4.2　Dictionary168
8.4.3　Distributed169
8.5　其他类型170
8.5.1　Live View170
8.5.2　Null171
8.5.3　URL171
8.6　本章小结173
第9章　数据查询174
9.1　WITH子句175
9.2　FROM子句177
9.3　SAMPLE子句178
9.4　ARRAY JOIN子句180
9.5　JOIN子句183
9.5.1　连接精度184
9.5.2　连接类型186
9.5.3　多表连接189
9.5.4　注意事项190
9.6　WHERE与PREWHERE子句190
9.7　GROUP BY子句193
9.7.1　WITH ROLLUP194
9.7.2　WITH CUBE194
9.7.3　WITH TOTALS195
9.8　HAVING子句195
9.9　ORDER BY子句197
9.10　LIMIT BY子句198
9.11　LIMIT子句199
9.12　SELECT子句200
9.13　DISTINCT子句200
9.14　UNION ALL子句202
9.15　查看SQL执行计划203
9.16　本章小结207
第10章　副本与分片208
10.1　概述208
10.2　数据副本209
10.2.1　副本的特点212
10.2.2　ZooKeeper的配置方式212
10.2.3　副本的定义形式213
10.3　ReplicatedMergeTree原理解析214
10.3.1　数据结构215
10.3.2　副本协同的核心流程217
10.4　数据分片228
10.4.1　集群的配置方式228
10.4.2　基于集群实现分布式DDL232
10.5　Distributed原理解析236
10.5.1　定义形式236
10.5.2　查询的分类237
10.5.3　分片规则238
10.5.4　分布式写入的核心流程239
10.5.5　分布式查询的核心流程245
10.6　本章小结251
第11章　管理与运维252
11.1　用户配置252
11.1.1　用户profile252
11.1.2　配置约束253
11.1.3　用户定义254
11.2　权限管理257
11.2.1　访问权限257
11.2.2　查询权限258
11.2.3　数据行级权限259
11.3　熔断机制261
11.4　数据备份263
11.4.1　导出文件备份263
11.4.2　通过快照表备份264
11.4.3　按分区备份264
11.5　服务监控265
11.5.1　系统表266
11.5.2　查询日志267
11.6　本章小结270



---------------------------HikariCP数据库连接池实战---------------------------


赞誉
前言
第一篇　准备篇
第1章　阿里中间件实战，第一个案例 2
1.1　物联网MQTT单机压测130万参数调优 2
1.2　阿里中间件TCP四次挥手性能调优实战 4
1.2.1　亿级消息网关Rowan架构 4
1.2.2　人脸识别服务：异曲同工的架构 6
1.2.3　“双十一大促”全链路压测发现TCP问题 9
1.2.4　Linux内核网络参数调优 11
1.2.5　Linux TCP参数调优 12
1.2.6　一行代码大幅提升QPS 13
1.3　技术驱动业务，结果为导向 16
1.4　本章小结 17
第2章　数据库连接池江湖 19
2.1　为什么使用数据库连接池 19
2.2　数据库连接池原理 22
2.3　数据库连接池百晓生《兵器谱》 23
2.3.1　c3p0 24
2.3.2　Proxool 29
2.3.3　XAPool 30
2.3.4　DBCP 32
2.3.5　Tomcat JDBC Pool 34
2.3.6　BoneCP 36
2.3.7　Druid 38
2.4　主流数据库连接池对比 41
2.4.1　性能对比 41
2.4.2　代码复杂度 42
2.4.3　功能对比 42
2.4.4　数据库中断 43
2.5　本章小结 46
第3章　初识HikariCP 47
3.1　Hikari背景、特色及前景 47
3.2　SpringBoot数据库连接池加载顺序剖析 51
3.3　SpringBoot整合HikariCP实战 53
3.3.1　Spring Initializr 53
3.3.2　添加HikariCP依赖 55
3.3.3　JdbcTemplate 56
3.3.4　Database Initialization 57
3.3.5　启动运行 59
3.4　本章小结 60
第二篇　基础篇
第4章　HikariCP参数配置 64
4.1　校时 64
4.2　HikariCP配置手册 68
4.2.1　必需配置 69
4.2.2　非必需配置 72
4.3　HikariCP连接池配置多大合适 78
4.4　Fixed Pool Design思想 81
4.5　MySQL高性能配置 82
4.6　Hibernate配置 83
4.7　JNDI配置 85
4.8　本章小结 86
第5章　HikariCP与JDBC 87
5.1　HikariCP JDBC Logging 87
5.2　JDBC 90
5.2.1　JDBC定义 91
5.2.2　JDBC实战案例 93
5.2.3　JDBC剖析 95
5.2.4　PreparedStatement和Statement 100
5.3　JDBC与SPI 101
5.3.1　SPI简介 101
5.3.2　SPI实战案例 102
5.3.3　JDBC的SPI机制 104
5.3.4　SPI高级实战：基于Dubbo的分布式日志链路TraceID追踪 106
5.4　拓展：线程池技术 109
5.4.1　MySQL线程池简介 110
5.4.2　MySQL线程池技术内幕 111
5.4.3　MySQL线程池实战 114
5.5　本章小结 117
第三篇　原理篇
第6章　HikariCP性能揭秘 120
6.1　华山论剑 120
6.2　第三方测评 124
6.2.1　环境配置 125
6.2.2　获取关闭连接性能测试 125
6.2.3　查询一条语句性能测试 127
6.2.4　psCache性能对比 128
6.2.5　测试结论 129
6.3　HikariCP为什么这么快 129
6.3.1　精简字节码 130
6.3.2　FastList 132
6.3.3　ConcurrentBag 134
6.4　本章小结 147
第7章　HikariCP连接原理 148
7.1　获取连接 148
7.2　归还连接 155
7.3　关闭连接 158
7.4　生成连接 163
7.5　扩展阅读：DCL为什么要加volatile 166
7.6　扩展阅读：Log4j2为何性能优秀 169
7.7　本章小结 173
第8章　HikariCP参数源码解析 174
8.1　SpringBoot 2.x HikariCP参数加载原理 174
8.2　allowPoolSuspension 181
8.3　validationTimeout 187
8.4　leakDetectionThreshold 189
8.5　本章小结 202
第9章　HikariCP动态代理与字节码技术 203
9.1　HikariCP字节码工程 203
9.1.1　HikariCP的字节码技术 204
9.1.2　代理技术原理 209
9.1.3　HikariCP JIT方法内联优化 213
9.2　JMH基准测试 216
9.2.1　JMH常用注解 216
9.2.2　JMH实战案例Orika 219
9.3　本章小结 223
第四篇　实战篇
第10章　HikariCP监控实战 226
10.1　监控体系层次 226
10.2　为什么需要数据库连接池监控 228
10.3　HikariCP监控指标 231
10.3.1　hikaricp_pending_threads 233
10.3.2　hikaricp_connection_acquired_nanos 234
10.3.3　hikaricp_idle_connections 235
10.3.4　hikaricp_active_connections 235
10.3.5　hikaricp_connection_usage_millis 235
10.3.6　hikaricp_connection_timeout_total 235
10.3.7　hikaricp_connection_creation_millis 236
10.4　HikariCP监控指标实战 236
10.4.1　连接风暴 236
10.4.2　慢SQL 237
10.4.3　监控指标与参数配置 237
10.5　SpringBoot 2.0暴露HikariCP Metrics 238
10.6　SpringBoot 2.0监控HikariCP JMX 241
10.7　微服务架构下的监控平台选型 246
10.8　本章小结 250
第11章　从HikariCP Metrics谈微服务监控架构实战 252
11.1　HikariCP Metrics 253
11.2　Micrometer 258
11.3　SpringBoot 2.x自定义埋点实战 260
11.3.1　引入依赖 260
11.3.2　配置application.properties 261
11.3.3　注册Metrics 261
11.3.4　支付接口埋点统计总次数 262
11.3.5　查看指标数据 262
11.4　SpringBoot 2.x集成Micrometer源码解析 266
11.5　SpringBoot 1.5.x自定义埋点实战 269
11.5.1　引入Micrometer依赖 269
11.5.2　创建Bean并注册Metrics指标 270
11.5.3　在Controller中进行支付业务埋点 271
11.6　监控架构重点 272
11.6.1　Prometheus 272
11.6.2　Grafana 275
11.7　本章小结 278
第12章　HikariCP扩展技术 280
12.1　Flexy-Pool 280
12.2　Apache ShardingSphere 284
12.3　自研集成HikariCP和Sharding-JDBC数据库中间件 295
12.4　时钟回拨 300
12.5　本章小结 311
第13章　HikariCP常见问题 312
13.1　HikariCP故障分析技巧 312
13.2　leakDetectionThreshold参数解决Spark/Scala连接池泄露 318
13.3　详解JDBC超时 320
13.4　快速恢复 323
13.5　Oracle Connection Reset问题 327
13.6　HikariCP关闭连接的5种情况 329
13.7　如何获取HikariDataSource的active connection 330
13.8　如何对HikariCP配置文件中的服务器名、用户名、密码加密 330
13.9　HikariCP神奇的配置dataSourceProperties 330
13.10　如何获取HikariCP连接池中的原始连接 332
13.11　HikariCP并不是万能工具 332
13.12　本章小结 333
第14章　HikariCP诡案实录 334
14.1　问题描述 334
14.2　Brett经典回答 336
14.3　另一个类似的案例 337
14.4　分析问题 338
14.5　解决问题 344
14.6　本章小结 344

.　　这是一本全方位介绍ClickHouse的专业技术书，本书的问世不仅缓解了目前ClickHouse学习资料匮乏的局面，也纠正了网络上部分对ClickHouse的错误解读。
　　本书从时代背景、发展历程、核心概念、基础功能及核心原理等几个方面全面且深入地对ClickHouse进行解读。通过阅读本书，你不仅可以一站式完成对ClickHouse的学习，还能得到许多一手信息（例如ClickHouse名称的由来）。
　　在行文方面，本书尽可能使用浅显易懂的语言，并通过大量演示案例引导读者深入学习。在核心部分，本着一图胜千言的原则，本书配有大量的示意图例以帮助读者加深理解。
　　从逻辑上说，本书主体分为三大部分共11章，各章节之间以循序渐进原则来安排。
　　第一部分背景篇（第1～2章），从宏观角度描述了ClickHouse出现的时代背景、发展历程以及核心特点。
　　第1章阐述了ClickHouse诞生的缘由和发展历程。
　　第2章快速浏览了ClickHouse的核心特性和逻辑架构，并进一步探讨了它的成功秘诀。
　　第二部分基础篇（第3～5章），从使用角度介绍了ClickHouse的基础用法。
　　第3章介绍了ClickHouse的安装过程，并讲解了基础封装接口和内置工具，为后续内容讲解提供演示环境。
　　第4章介绍了ClickHouse的基础概念和基本操作方法，包括数据的类型、数据表的定义、数据表的基本操作（增、删、改、移等）、数据分区的基本操作（查询、删除、复制、重置、装/卸载等）。同时也介绍了DML查询的基本用法。
　　第5章从内置字典和外部扩展字典两个方面对ClickHouse数据字典的工作原理和操作方法进行了介绍，尤其是ClickHouse在数据字典方面的特殊之处，本书进行了详细剖析。
　　第三部分原理篇（第6～11章），从原理角度解析了ClickHouse核心功能的运行机理。
　　第6章全方位深度解读了MergeTree表引擎的工作原理，包括MergeTree的基础属性和物理存储结构，以及数据分区、一级索引、二级索引、数据存储和数据标记等重要特性。
　　第7章全方位深度解读了MergeTree表引擎系列中5种常用变种引擎的核心逻辑和使用方法。
　　第8章介绍了除MergeTree系列之外的其余5大类共18种表引擎的核心逻辑和使用方法。
　　第9章按照ClickHouse解析SQL的顺序依次介绍了WITH、FROM、SAMPLE等10余种查询子句的用法。
　　第10章对副本、分片和集群的核心工作原理和使用方法进行介绍，这是实现容灾机制的必备知识。
　　第11章对ClickHouse的权限管理、熔断机制、数据备份和运行监控进行剖析，以求进一步完善ClickHouse在实际工作中的安全性和健壮性。
　　如何阅读本书
　　本书会涉及分布式数据库领域的相关知识，故在阅读本书前读者应具备基础的分布式数据库的知识。另外本书假定读者对使用Java、SQL编程也有一定了解，且熟悉OLAP、分布式、多线程、集群、副本、分片等概念。
　　本书为照顾初学者，包含基础知识部分。如果你已经熟练掌握ClickHouse的基础知识，可以略过第3～5章的部分内容。否则，建议你顺序阅读全书。
　　不论是哪种类型的读者，都建议阅读第1章的内容，因为这部分不仅从时代背景的角度解读了ClickHouse的发展历程，还揭露了它的两个小秘密。通过对第1章的阅读，你会看到一个更加丰富立体的ClickHouse。
　　与此同时，也强烈建议所有读者阅读第6章和第10章，因为这两章阐释了ClickHouse最为核心的部分，即MergeTree的核心原理，以及副本与分片的核心原理。通过阅读这两章，你对ClickHouse运行机理的理解会更加深刻，这将有助于你把ClickHouse运用得更加炉火纯青。
　　由于篇幅所限，本书没有包含ClickHouse函数、配置参数的内容。我认为，要学习这部分内容，查阅官方手册是一种更为高效的方式。
　　本书内容基于ClickHouse 19.17.4.11版本编写，演示时所用操作系统为CentOS 7.7。书中涉及的所有演示案例，均经过实际版本验证通过。
　　另外，为了帮助读者更好地理解和应用书中的知识点，本书提供了专用的演示代码和部分样例数据，大家可以根据需要自行下载（https://github.com/nauu/clickhousebook）。
　　勘误和支持
　　由于水平有限，编写时间仓促，书中难免会出现一些错误或者不准确的地方，恳请读者批评指正。为此，我特意创建了一个提供在线支持与应急方案的站点https://github.com/nauu/clickhousebook。你可以将书中的错误发布在Bug勘误表页面中，也可以将遇到的任何问题发布在Q&A页面，我将尽量在线上为你提供最满意的解答。
　　如果你有更多的宝贵意见，也欢迎发送邮件至出版社邮箱214399230@qq.com，期待能够得到你的真挚反馈。
　　同时，你也可以关注我的微信公众号chcave，我会在此定期分享ClickHouse的最新资讯、趣闻杂谈、使用经验等。
　　致谢
　　感谢我的家人。如果没有你们的悉心照顾和鼓励，我不可能完成本书。
　　感谢我的公司远光软件。远光软件为我提供了学习和成长的环境，书中的很多知识都来自我在远光软件的工作实践。
　　感谢我的挚友李根。谢谢你提出了许多宝贵的建议。
　　感谢我的同事兼伙伴—谢小明、彭一轩、殷雷、胡艺、陈雪莹、潘登、王涛、库生玉、李昂、何宇、张锐、陈泽华、李国威、杨柯、张琛、郑凤英、姜亚玮以及名单之外的更多朋友，感谢你们在工作中对我的照顾和支持，十分荣幸能够与你们同在一个富有激情与活力的团队。
　　感谢ClickHouse社区的伙伴—Ivan Blinkov、Alexey Milovidov、郭炜、郑天祺、张健、李本旺、高鹏、赵群、胡宸章、杨兆辉、丁晓坤、王金海以及名单之外的更多朋友，是你们的无私奉献促进了社区的发展，加速了ClickHouse的普及。
　　感谢华章鲜读的读者朋友（微信名称，排名不分先后）—濤、马尚、君Hou、renwei、Luyung、朱熊、Duke、lansane、Lithium、xchf、陈刚、路途、一念之间、辛、李海武以及名单之外的更多朋友，是你们提供的宝贵建议帮助我提升了书稿的质量。
　　感谢机械工业出版社华章公司的编辑杨福川老师、孙海亮老师、李艺老师，在这一年多的时间中始终支持我的写作，你们的鼓励和帮助引导我顺利完成全部书稿。
　　
　　
　　---------------------------HikariCP数据库连接池实战---------------------------
　　
　　
　　为什么要写这本书
　　2017年我开始从事数据库连接池中间件的研发和架构工作，并在公司内部写了一系列数据库连接池HikariCP源码解析和实战的文章。在老板张聪的建议下，我申请了微信公众号并坚持分享技术，公众号的初心是：“写的内容要有人阅读，这样才会引发互动交流；有朋友就不会觉得孤独，而且互相探讨也有助于自身提高”。
　　我从事的底层数据库中间件采用了HikariCP这款数据库连接池，这让我和HikariCP结下了不解之缘。非常幸运的是，在长达近一年的时间里，每天都有大量的业务开发人员向我咨询数据库连接池的问题，最多的时候可以达到十多位同学排队咨询，使我颇有老中医开堂坐诊的感觉。我是一个细心的人，大家的疑问和最后的解决方式都会一一记录下来，我也会协助网友以及其他公司的技术人员分析定位数据库连接池问题，帮助他们的项目顺利上线我也同样感到喜悦，这段经历是我技术之路上宝贵的财富。
　　我毕业于哈工大，哈工大的校训是“规格严格，功夫到家”，母校影响着我的做事风格，我是一个追求极致的人。但每当我协助业务开发人员排查问题时，却常常发现糟糕的事情。比如很多业务项目里充斥着HikariCP、Druid、BoneCP、c3p0、Tomcat JDBC等多种数据库连接池依赖项，而开发人员却并不知道自己究竟使用的是哪款数据库连接池，而将依赖做到精简是中间件岗位最基本的素养。美国童子军有一条 “让营地比你来时更干净”的军规，这也是《Clean Code》这本经典书强烈建议的。比如，我发现很多业务开发同学咨询的问题如果总结下来是可以分门别类的，但是部分人解决了问题却不会分享、传播、传承，进而造成其他人接二连三地因为类似的问题再度陷入费时费力的排查之中；再比如，很多技术人员在学习使用数据库连接池之后想对更深入的技术进行探索，然而市面上却没有系统、深入地介绍数据库连接池的书，导致他们不得不投入到其他项目中从而没有实现深入了解数据库连接池的梦。因此，我决定撰写一本相关的图书。这是一本介绍数据库连接池的书，由于这本书中更多凝结的是我多年的实践经验、我对于社区数据库连接池上千条问题讨论的研读等，所以这本书称为“HikariCP数据库连接池实战”。
　　Hikari在日语中的意思是光，代表了极致。极致无处不在，极致可以小到一次代码提交，也可以大到整个研发流程；极致可以小到一行JDK底层代码，也可以大到整个电商系统架构；极致可以运用在技术选型，也可以运用在团队管理。极致也是分场景的，有些是大规模高并发的要求，有些原则上不到一定的数量级不能用。极致的追求，不仅需要对基础技术原理有足够深入的了解，还需要配套的中间件支持，相关的业务协助改造。极致之路，没有银弹，不要想一招毙命，一口吃成个胖子，而是要审时度势，根据当前的现状来裁定。在和HikariCP打交道的期间，我发现这是数据库连接池界一款以追求极致为初心的艺术作品。不论是从相关文献资料、问题讨论、源码更新，还是从HikariCP多年来不辞辛劳一步一个脚印的社区贡献，我都能深深感受到HikariCP在极致之路上一次又一次地超越自我，以追求卓越的状态面对未来的技术发展方向。
　　光不但是极致，更是希望。这些年，尤其是写这本书的期间，我承受了不少的委屈，也遭遇了很多的坎坷，经历了生离，也经历了死别。然而我坚持将自己的梦实现，希望能活成一束光，能够温暖别人，也能够照亮别人，这才是真正的正能量。《HikariCP数据库连接池实战》，是我的孩子，也是我梦想的实现，但我希望它不再是属于我一个人的梦，更希望能够将HikariCP的光亮照进每一名读者心中。
　　最后送大家一段话：在一无所有时，也请坚持做一名追光者，愿大家都能找到自己内心深处的光，接近并成为它，去发光发亮，成为别人眼中的和照亮别人的光，用更亮的光芒照亮世界的每一个角落。你就是太阳，蒸发了彷徨，有你的地方就是天堂。
　　读者对象
　　本书适合所有Java程序员阅读，尤其适合以下读者：
　　Java初中级开发者。
　　系统架构师。
　　中间件开发者。
　　Java多线程、并发开发者。
　　使用HikariCP参与工作流程的公司与集体。
　　开设Java相关课程的大专院校师生。
　　其他对数据库连接池技术感兴趣的人员。
　　本书特色
　　在本书写作的过程中，我尽量避免让这本书成为“代码书”或者“概念书”，用自己的实战经验和大量文献涉猎将本书凝结为一本高内涵、高价值的实战书籍。这本书准确地说写了两年的时间，第一年我在数据库连接池方面进行实践并形成零散的文字记录，第二年较为体系化地将各种经验、总结、记录梳理成册。本书的目录结构也经过了好几个版本的迭代修改，旨在让读者用最短的时间循序渐进地学完相关知识点。本书的篇幅也做过很多的压缩、删减，目的是聚焦核心内容，像“瑞士军刀”一样短小锋利，可以帮助读者快速学习并解决问题。
　　本书以阿里大型消息中间件的无池化TCP调优开篇，这也是我在阿里晋升答辩的内容之一，在扩展性能调优知识的同时顺带引出Java平台下性能调优的利器——数据库连接池。这样的开篇可以让读者真真切切感受到数据库连接池出现的必要性。接着，从数据库连接池出现的背景、原因入手，循序渐进地为大家盘点了主流的数据库连接池并进行了对比，这也弥补了市面上没有一本书体系化介绍各种数据库连接池的遗憾。
　　当然，这还只是“前戏”，本书还剖析了HikariCP这款数据库连接池的设计理念和原理，并对其重点功能和模块逐一进行了讲解。在分析之余，这本书还对HikariCP的关联技术、具体实战、扩展内容等进行了补充说明，旨在帮助读者举一反三、触类旁通。本书最后以一个疑难问题为例，通过排查问题，帮助大家一起对HikariCP的相关内容回顾和展望，以求融会贯通，温故而知新。
　　如何阅读本书
　　本书分为四大部分：
　　第一部分为准备篇，以阿里连接池极致优化案例引入，帮助读者了解数据库连接池的背景、原理，并全面了解主流的数据库连接池，包含本书的主角HikariCP。
　　第二部分为基础篇，着重讲解HikariCP参数配置、JDBC等核心模块。这些内容都是HikariCP的重中之重。除了原理性介绍以外，为了帮助读者夯实数据库连接池的基础，本书还特地对技术细节、设计理念、实战扩展等进行了补充。
　　第三部分为原理篇，首先，全方位剖析了HikariCP性能极致的原因，这些都会成为读者面试、工作中的谈资；其次，将连接原理、参数原理、动态代理与字节码技术这三个维度作为切入口，对HikariCP进行源码级别的解析，这样全方位地进行剖析不同于单视角的源码解析，更能将HikariCP的原理立体化地展示在读者面前。
　　第四部分为实战篇，这是本书精华的部分。HikariCP的监控、扩展技术、常见问题等都是读者工作中较为常用的知识点，这些内容大多来自我实战经验的积累及大量文献资料的收集整理。本部分可以独立阅读，作为案头的工具书使用。
　　勘误和支持
　　由于作者的水平有限，书中难免会出现一些错误或者不准确的地方，恳请读者批评指正。为此，我在GitHub网站上专门新建了一个issue项目（https://github.com/CharlesMaster/Hikari/issues）。你可以将书中的错误、疑问、改进建议以GitHub Issue的形式发布在Bug勘误表页面中，我将尽量在线上为读者提供最满意的解答。当然，更希望大家可以通过issue对HikariCP展开讨论，互相切磋和共同成长。如果你有更多的宝贵意见，也欢迎发送邮件至邮箱just_love_zzk@126.com，期待能够得到你的真挚反馈。
　　致谢
　　首先要感谢伟大的HikariCP的作者Brett Wooldridge，他开创了一款影响我整个人生的软件。
　　感谢Apache ShardingSphere PPMC张亮、Apache SkyWalking PPMC吴晟在我从事数据库连接池工作过程中给予的指导与帮助。感谢奇点云应用研发总监、首席架构师张聪，其作为引路人将我领入了数据库连接池领域，同时也是在他的支持与鼓励下才促成了这本书的撰写与出版。
　　感谢技术圈子中每一位充满创意和活力的朋友——何涛、程超、右军、李艳鹏、杨俊，以及名单之外的更多朋友，感谢你们长期对我的帮助与信任。
　　感谢笙笙对我写本书的支持。
　　感谢机械工业出版社华章公司的编辑杨福川老师和孙海亮老师，在这一年多的时间中始终支持我的写作，你们的鼓励和帮助引导我顺利完成全部书稿。
　　感谢王玉婵老师为本书付出的劳动。
　　最后感谢我的爸爸、妈妈、小姨、姨夫、爷爷、奶奶、外公、外婆，感谢你们将我培养成人，并时时刻刻为我灌输着信心和力量！
　　谨以此书献给我最亲爱的家人，以及众多热爱HikariCP的朋友们！
　　

.　　
　　
　　在应用系统中，对象池、连接池、线程池等池化技术被广泛用来提升应用的性能，数据库的性能对应用系统的重要性不言而喻，数据库连接池是影响数据库性能的关键因素之一。HikariCP凭借优异的性能在众多的数据库连接池中脱颖而出，并成为SpringBoot的默认数据库连接池。本书对HikariCP做了详细讲解，希望能给需要的朋友带来帮助。
　　—— 余锋（褚霸）
　　市面上开源的连接池很多，不同连接池有不同的特色。HikariCP是业界非常有名的一款以性能著称的连接池，感谢作者给我们带来了一本全面解析HikariCP的好书。本书对HikariCP的历史、原理、应用实践进行了非常详细的介绍，相信通过本书可以对HikariCP以及连接池技术有非常深刻的了解。
　　—— 周中正（德哥digoal） PostgreSQL社区成员
　　经历过漫长的发展之后，新一代的数据库连接池翘楚HikariCP已经受到越来越广泛的关注，并且逐渐成为应用开发的首选。我主导的开源项目Apache ShardingSphere也因为它极致的性能而采用它为默认的数据库连接池。一直以来，业界都缺少一本关于HikariCP的专业书籍，本书弥补了这一空白，希望读者能够和我一样，通过阅读本书更加全面地了解数据库连接池的运行原理和实现机制。
　　—— 张亮 京东数科数据研发负责人/Apache ShardingSphere发起人 & PPMC/《未来架构》作者
　　连接池作为应用系统中最常用、压力最大的组件库之一，对整个系统的稳定起到了至关重要的作用。在APM监控中，性能与数据库访问、连接池使用有直接的联系，也是影响系统性能的10大因素之一。HikariCP是一个优秀的开源连接池项目，深入学习和理解它能很好地保证项目的功能和性能稳定。通过本书，读者能够更好地了解HikariCP连接池的原理、配置和使用方法，学到实用的工程实践经验。
　　—— 吴晟 Apache SkyWalking 创始人&VP
　　数据是互联网的核心价值，一款好用且高效的数据库及相关中间件则是这份核心价值的重要保障，也是值得技术工程师们深入学习和研究的对象。始于2013年的HikariCP，在众多连接池中间件项目中脱颖而出，得到越来越多互联网公司及从业人员的青睐。本书对HikariCP的各种技术原理和实现细节做了深入剖析，同时本书还包括Linux内核、TCP网络以及性能调优的相关内容。无论是初学者，还是有一定基础的读者，都能从中汲取到养分。
　　—— 张聪 前阿里巴巴、滴滴出行架构师/奇点云应用研发总监兼首席架构师