大型网站技术架构

出版者:电子工业出版社

作者:李智慧

出品人:博文视点

页数:218

出版时间:2013-9-1

价格:59.00元

装帧:平装

isbn号码:9787121212000

具体描述

《大型网站技术架构：核心原理与案例分析》通过梳理大型网站技术发展历程，剖析大型网站技术架构模式，深入讲述大型互联网架构设计的核心原理，并通过一组典型网站技术架构设计案例，为读者呈现一幅包括技术选型、架构设计、性能优化、Web 安全、系统发布、运维监控等在内的大型网站开发全景视图。

《大型网站技术架构：核心原理与案例分析》不仅适用于指导网站工程师、架构师进行网站技术架构设计，也可用于指导产品经理、项目经理、测试运维人员等了解网站技术架构的基础概念；还可供包括企业系统开发人员在内的各类软件开发从业人员借鉴，了解大型网站的解决方案和开发理念。

作者简介

李智慧

曾在阿里巴巴担任技术专家，参与阿里巴巴基础技术平台开发和www.alibaba.com架构设计。

目前就职英特尔亚太研发中心从事云计算与大数据方面的研发工作。

目录信息

第1篇 概述
1 大型网站架构演化 2
1.1 大型网站软件系统的特点 3
1.2 大型网站架构演化发展历程 4
1.2.1 初始阶段的网站架构 4
1.2.2 应用服务和数据服务分离 4
1.2.3 使用缓存改善网站性能 5
1.2.4 使用应用服务器集群改善网站的并发处理能力 6
1.2.5 数据库读写分离 7
1.2.6 使用反向代理和CDN加速网站响应 8
1.2.7 使用分布式文件系统和分布式数据库系统 9
1.2.8 使用NoSQL和搜索引擎 10
1.2.9 业务拆分 11
1.2.10 分布式服务 11
1.3 大型网站架构演化的价值观 13
1.3.1 大型网站架构技术的核心价值是随网站所需灵活应对 13
1.3.2 驱动大型网站技术发展的主要力量是网站的业务发展 13
1.4 网站架构设计误区 14
1.4.1 一味追随大公司的解决方案 14
1.4.2 为了技术而技术 14
1.4.3 企图用技术解决所有问题 14
1.5 小结 15
2 大型网站架构模式 16
2.1 网站架构模式 16
2.1.1 分层 17
2.1.2 分割 18
2.1.3 分布式 18
2.1.4 集群 19
2.1.5 缓存 20
2.1.6 异步 20
2.1.7 冗余 21
2.1.8 自动化 22
2.1.9 安全 23
2.2 架构模式在新浪微博的应用 23
2.3 小结 25
3 大型网站核心架构要素 26
3.1 性能 27
3.2 可用性 28
3.3 伸缩性 29
3.4 扩展性 30
3.5 安全性 30
3.6 小结 31
第2篇 架构
4 瞬时响应：网站的高性能架构 34
4.1 网站性能测试 35
4.1.1 不同视角下的网站性能 35
4.1.2 性能测试指标 36
4.1.3 性能测试方法 39
4.1.4 性能测试报告 41
4.1.5 性能优化策略 41
4.2 Web前端性能优化 42
4.2.1 浏览器访问优化 42
4.2.2 CDN加速 43
4.2.3 反向代理 44
4.3 应用服务器性能优化 45
4.3.1 分布式缓存 45
4.3.2 异步操作 52
4.3.3 使用集群 53
4.3.4 代码优化 54
4.4 存储性能优化 58
4.4.1 机械硬盘vs. 固态硬盘 58
4.4.2 B+树vs. LSM树 59
4.4.3 RAID vs. HDFS 61
4.5 小结 64
5 万无一失：网站的高可用架构 66
5.1 网站可用性的度量与考核 67
5.1.1 网站可用性度量 67
5.1.2 网站可用性考核 67
5.2 高可用的网站架构 69
5.3 高可用的应用 71
5.3.1 通过负载均衡进行无状态服务的失效转移 72
5.3.2 应用服务器集群的Session管理 73
5.4 高可用的服务 76
5.5 高可用的数据 78
5.5.1 CAP原理 79
5.5.2 数据备份 82
5.5.3 失效转移 84
5.6 高可用网站的软件质量保证 85
5.6.1 网站发布 85
5.6.2 自动化测试 86
5.6.3 预发布验证 87
5.6.4 代码控制 88
5.6.5 自动化发布 90
5.6.6 灰度发布 91
5.7 网站运行监控 91
5.7.1 监控数据采集 92
5.7.2 监控管理 93
5.8 小结 94
6 永无止境：网站的伸缩性架构 95
6.1 网站架构的伸缩性设计 97
6.1.1 不同功能进行物理分离实现伸缩 97
6.1.2 单一功能通过集群规模实现伸缩 98
6.2 应用服务器集群的伸缩性设计 99
6.2.1 HTTP重定向负载均衡 100
6.2.2 DNS域名解析负载均衡 101
6.2.3 反向代理负载均衡 102
6.2.4 IP负载均衡 103
6.2.5 数据链路层负载均衡 104
6.2.6 负载均衡算法 105
6.3 分布式缓存集群的伸缩性设计 106
6.3.1 Memcached分布式缓存集群的访问模型 107
6.3.2 Memcached分布式缓存集群的伸缩性挑战 107
6.3.3 分布式缓存的一致性Hash算法 109
6.4 数据存储服务器集群的伸缩性设计 112
6.4.1 关系数据库集群的伸缩性设计 113
6.4.2 NoSQL数据库的伸缩性设计 117
6.5 小结 119
7 随需应变：网站的可扩展架构 121
7.1 构建可扩展的网站架构 122
7.2 利用分布式消息队列降低系统耦合性 123
7.2.1 事件驱动架构 123
7.2.2 分布式消息队列 124
7.3 利用分布式服务打造可复用的业务平台 126
7.3.1 Web Service与企业级分布式服务 128
7.3.2 大型网站分布式服务的需求与特点 129
7.3.3 分布式服务框架设计 130
7.4 可扩展的数据结构 131
7.5 利用开放平台建设网站生态圈 132
7.6 小结 134
8 固若金汤：网站的安全架构 135
8.1 道高一尺魔高一丈的网站应用攻击与防御 136
8.1.1 XSS攻击 136
8.1.2 注入攻击 138
8.1.3 CSRF攻击 139
8.1.4 其他攻击和漏洞 140
8.1.5 Web应用防火墙 141
8.1.6 网站安全漏洞扫描 142
8.2 信息加密技术及密钥安全管理 142
8.2.1 单向散列加密 143
8.2.2 对称加密 144
8.2.3 非对称加密 144
8.2.4 密钥安全管理 145
8.3 信息过滤与反垃圾 146
8.3.1 文本匹配 147
8.3.2 分类算法 148
8.3.3 黑名单 149
8.4 电子商务风险控制 150
8.4.1 风险 151
8.4.2 风控 151
8.5 小结 153
第3篇 案例
9 淘宝网的架构演化案例分析 156
9.1 淘宝网的业务发展历程 157
9.2 淘宝网技术架构演化 158
9.3 小结 162
10 维基百科的高性能架构设计分析 163
10.1 Wikipedia网站整体架构 163
10.2 Wikipedia性能优化策略 165
10.2.1 Wikipedia前端性能优化 165
10.2.2 Wikipedia服务端性能优化 166
10.2.3 Wikipedia后端性能优化 167
11 海量分布式存储系统Doris的高可用架构设计分析 169
11.1 分布式存储系统的高可用架构 170
11.2 不同故障情况下的高可用解决方案 171
11.2.1 分布式存储系统的故障分类 172
11.2.2 正常情况下系统访问结构 172
11.2.3 瞬时故障的高可用解决方案 173
11.2.4 临时故障的高可用解决方案 174
11.2.5 永久故障的高可用解决方案 175
12 网购秒杀系统架构设计案例分析 176
12.1 秒杀活动的技术挑战 177
12.2 秒杀系统的应对策略 177
12.3 秒杀系统架构设计 178
12.4 小结 182
13 大型网站典型故障案例分析 183
13.1 写日志也会引发故障 184
13.2 高并发访问数据库引发的故障 184
13.3 高并发情况下锁引发的故障 185
13.4 缓存引发的故障 185
13.5 应用启动不同步引发的故障 186
13.6 大文件读写独占磁盘引发的故障 186
13.7 滥用生产环境引发的故障 187
13.8 不规范的流程引发的故障 187
13.9 不好的编程习惯引发的故障 188
13.10 小结 188
第4篇 架构师
14 架构师领导艺术 190
14.1 关注人而不是产品 191
14.2 发掘人的优秀 191
14.3 共享美好蓝图 192
14.4 共同参与架构 193
14.5 学会妥协 194
14.6 成就他人 194
15 网站架构师职场攻略 196
15.1 发现问题，寻找突破 197
15.2 提出问题，寻求支持 199
15.3 解决问题，达成绩效 201
16 漫话网站架构师 203
16.1 按作用划分架构师 203
16.2 按效果划分架构师 204
16.3 按职责角色划分架构师 205
16.4 按关注层次划分架构师 205
16.5 按口碑划分架构师 206
16.6 非主流方式划分架构师 207
附录A 大型网站架构技术一览 208
附录B Web开发技术发展历程 215
后记 218
· · · · · · (收起)

读后感

不愧是架构师写的书，脉络清晰，条理分明。 非技术岗的我只是把他作为科普书籍来读，细节深入的部分也可以带过，并不影响了解全局。 以下读书建议也是针对我这类读者来说—— 全书四大部分： 第一章概述可以重点阅读，即是概览亦是总结，对网站架构的搭建，形态演化，基础模式...

核心原理与案例分析 分为三个部分，应用区、文件区、DB区： 大型网站核心架构要素：性能、可用性、伸缩性、扩展性、安全性 WEB前端性能优化：减少http请求，合并CSS、合并JavaScript、合并图片。使用浏览器缓存。启用压缩。CSS放页面最上面，JS放页面最下面。减少Cookie传输。C...  

第七章小结说到 互联网公司不停地上线新产品是本能 这个深有体会，所以程序员才加班这么多 但是这样效率很低，而且有很多软件别人也在做而且做得更好 浪费个人和公司时间，浪费资源 程序员或者其他职业是否可以选择产品出售自己的时间换取产品成功之后的利润 用劳动时间时间投...  

这年头网络很发达，几乎什么东西都可以down。有些聪明人，直接根据关键字google一下，信息也能获取个十之八九。 这年头知识不值钱，尤其是冷门小众的东西，国外分享的那么多，直接拿来用就是了。 而且，程序员大多内(闷)秀(骚)，写点漂亮的代码可以，追求妹纸这么的事情都表...  

对于规划、设计、架构、售前、技术支持等解决方案制作岗位人员，严重推荐，对工作很有帮助与指导意义。 对于开发、运维、集成等具体实施岗位人员，不推荐，仅能充当增广见闻的科普读物，对全局有个全面了解，对于日常工作没有帮助。 完美解决大型网站流量疏导需要做什么的问题...  

用户评价

我购买《大型网站技术架构》这本书，是希望能够对分布式系统的原理有一个更深入的理解，尤其是在处理大规模并发请求和数据量时，系统应该如何设计才能保持稳定和高效。书中关于分布式缓存的深入探讨，让我对Redis、Memcached等技术的应用场景有了更清晰的认识，特别是如何设计缓存失效策略、一致性哈希算法等，这些都是提升系统性能的关键。我还对书中关于分布式锁的实现机制进行了学习，理解了基于Redis的分布式锁和基于ZooKeeper的分布式锁的优缺点，以及在实际应用中如何避免死锁和保证锁的可靠性。对于大数据处理方面，书中也给出了一些初步的介绍，例如如何利用Hadoop、Spark等技术来处理海量数据，以及如何构建数据仓库和数据湖。此外，书中还触及了容器化技术Docker和Kubernetes在构建和管理大规模分布式系统中的作用，这让我对微服务架构的落地有了更直观的感受。整本书的论述逻辑清晰，从宏观架构到具体技术细节，都做到了循序渐进，让我能够逐步构建起对分布式系统的完整认知。

我抱持着学习如何构建高可用、高性能的互联网系统的目的，购入了《大型网站技术架构》这本书。阅读过程中，我发现书中关于服务发现与注册机制的讲解十分到位，特别是在微服务盛行的今天，理解Consul、ZooKeeper等工具的工作原理以及如何实现服务的动态发现和管理，对于系统的解耦和弹性伸缩至关重要。此外，书中关于API网关的章节也让我获益匪浅，它详细阐述了API网关在统一请求入口、身份认证、限流、路由等方面的作用，以及如何选择和实现一个合适的API网关。对安全性的探讨也是这本书的一大亮点，书中不仅提到了常见的Web安全威胁（如XSS、CSRF），还深入讲解了如何通过HTTPS、OAuth2等技术来保障数据的传输和访问安全。对于持续集成和持续部署（CI/CD）的自动化流水线，书中也提供了不少实践指导，如何通过Jenkins、GitLab CI等工具来自动化构建、测试和部署，这对于提升开发效率和减少人为错误有着显著的帮助。总的来说，这本书在构建一个现代化、高效率的软件交付流程方面，提供了非常有价值的参考。

作为一名渴望提升系统架构设计能力的开发者，《大型网站技术架构》这本书无疑是一份宝贵的财富。我尤其欣赏书中在论述高可用性方面所付出的努力，它不仅仅停留在理论层面，而是通过生动的案例，讲解了如何通过多活、异地容灾、数据备份和恢复等策略来构建一个真正意义上的高可用系统。对于容量规划和性能压测，书中也提供了实用的方法论，如何进行准确的容量评估，以及如何通过科学的压测来发现系统的瓶颈并进行优化，这对于提前预警潜在的性能问题非常有帮助。书中关于故障演练和应急响应的章节，也让我认识到，一个健壮的系统不仅要能抵御攻击，更要能在发生故障时快速恢复，从而将损失降到最低。我从书中学习到了很多关于如何设计一套能够自动伸缩、自我修复的弹性系统，这对于应对瞬息万变的互联网业务需求至关重要。总的来说，这本书为我提供了一个系统性的框架，帮助我从更高的维度去审视和设计技术架构，让我能够更好地应对未来工作中可能遇到的各种复杂挑战。

坦白说，我当初选择《大型网站技术架构》这本书，很大程度上是被其“技术架构”这四个字所吸引，总觉得它会像一本技术圣经，指引我在复杂的互联网世界中找到正确的方向。翻阅过程中，我发现作者在讨论性能优化和可扩展性方面确实下了不少功夫。比如，书中关于CDN（内容分发网络）的应用场景和策略，以及如何通过前端优化（如图片压缩、资源合并、懒加载等）来提升用户体验，这部分内容让我眼前一亮。我还对书中关于分布式事务的处理机制留下了深刻印象，各种两阶段提交、三阶段提交以及幂等性设计的讲解，虽然初读有些烧脑，但仔细揣摩后，确实揭示了处理跨多系统数据一致性的关键。此外，书中还涉及了消息队列的深入应用，不仅仅是简单的消息传递，更包括了如何利用消息队列来实现异步处理、削峰填谷以及事件驱动的架构模式。对于日志和监控系统，书中也给出了详实的介绍，如何收集、存储、分析日志，以及构建一个有效的监控体系，这对排查问题和及时发现系统异常至关重要。这本书的价值在于，它不仅仅是理论的堆砌，而是将这些复杂的概念与实际的工程实践紧密结合，提供了许多可操作的建议。

这本书，名为《大型网站技术架构》，我怀着极大的期待入手，希望能在其中找到解决我工作中遇到的实际痛点的答案。翻开第一页，我被书中引人入胜的开篇所吸引，作者用一种非常宏观的视角，描绘了构建一个能够承载海量用户、复杂业务逻辑、并且具备高可用性和可扩展性的网站所面临的挑战。书中深入浅出地剖析了微服务架构的优势，从如何进行服务拆分，到服务之间的通信机制（RPC、消息队列等），再到服务治理的方方面面，都做了详尽的阐述。我尤其关注的是书中关于负载均衡和容错的章节，它不仅列举了常见的负载均衡算法，还详细讲解了如何通过熔断、降级等策略来保障系统的稳定性。对于数据存储方面，这本书也提供了不少见解，比如如何选择合适的数据库，以及如何进行数据分片和读写分离，这对我正在头疼的数据库性能问题提供了新的思路。此外，书中还提到了缓存策略，从本地缓存到分布式缓存，并给出了在不同场景下应用的最佳实践。整体而言，这本书为我构建一个健壮、可伸缩的系统打下了坚实的基础，让我对“大型网站”的理解不再是模糊的概念，而是有了清晰的脉络和具体的技术栈。

从大型网站非功能需求的角度讲了讲架构的理论与一些实践指导，涉及到了性能，可用性，可扩展性，可伸缩性等等，这些特性背后的解决方案，貌似都是负载均衡技术。。。

没有特别深刻的内容，大多都是就网站架构优化中比较常见的思路，也没有过多地去介绍实际的经验。比较适合刚刚接触网站架构的同学有个通盘的了解，也可以是有一定经验的同学作为目录一样去看。

一本不错的书汪，几乎没有对独立服务的介绍。

干货不多

干货不多