大型網(wǎng)站技術(shù)架構(gòu)：核心原理與案例分析

第1篇  概述
1  大型網(wǎng)站架構(gòu)演化  
1.1  大型網(wǎng)站軟件系統(tǒng)的特點  
1.2  大型網(wǎng)站架構(gòu)演化發(fā)展歷程  
1.2.1  初始階段的網(wǎng)站架構(gòu)  
1.2.2  應(yīng)用服務(wù)和數(shù)據(jù)服務(wù)分離  
1.2.3  使用緩存改善網(wǎng)站性能  
1.2.4  使用應(yīng)用服務(wù)器集群改善網(wǎng)站的并發(fā)處理能力  
1.2.5  數(shù)據(jù)庫讀寫分離  
1.2.6  使用反向代理和CDN  加速網(wǎng)站響應(yīng)  
1.2.7  使用分布式文件系統(tǒng)和分布式數(shù)據(jù)庫系統(tǒng)  
1.2.8  使用NoSQL和搜索引擎  
1.2.9  業(yè)務(wù)拆分  
1.2.10  分布式服務(wù)  
1.3  大型網(wǎng)站架構(gòu)演化的價值觀  
1.3.1  大型網(wǎng)站架構(gòu)技術(shù)的核心價值是隨網(wǎng)站所需靈活應(yīng)對  
1.3.2  驅(qū)動大型網(wǎng)站技術(shù)發(fā)展的主要力量是網(wǎng)站的業(yè)務(wù)發(fā)展  
1.4  網(wǎng)站架構(gòu)設(shè)計誤區(qū)  
1.4.1  一味追隨大公司的解決方案  
1.4.2  為了技術(shù)而技術(shù)  
1.4.3  企圖用技術(shù)解決所有問題  
1.5  小結(jié)  
2  大型網(wǎng)站架構(gòu)模式  
2.1  網(wǎng)站架構(gòu)模式  
2.1.1  分層  
2.1.2  分割  
2.1.3  分布式  
2.1.4  集群  
2.1.5  緩存  
2.1.6  異步  
2.1.7  冗余  
2.1.8  自動化  
2.1.9  安全  
2.2  架構(gòu)模式在新浪微博的應(yīng)用  
2.3  小結(jié)  
3  大型網(wǎng)站核心架構(gòu)要素  
3.1  性能  
3.2  可用性  
3.3  伸縮性  
3.4  擴展性  
3.5  安全性  
3.6  小結(jié)  
第2篇  架構(gòu)
4  瞬時響應(yīng)：網(wǎng)站的高性能架構(gòu)  
4.1  網(wǎng)站性能測試  
4.1.1  不同視角下的網(wǎng)站性能  
4.1.2  性能測試指標(biāo)  
4.1.3  性能測試方法  
4.1.4  性能測試報告  
4.1.5  性能優(yōu)化策略  
4.2  Web 前端性能優(yōu)化  
4.2.1  瀏覽器訪問優(yōu)化  
4.2.2  CDN 加速  
4.2.3  反向代理  
4.3  應(yīng)用服務(wù)器性能優(yōu)化  
4.3.1  分布式緩存  
4.3.2  異步操作  
4.3.3  使用集群  
4.3.4  代碼優(yōu)化  
4.4  存儲性能優(yōu)化  
4.4.1  機械硬盤vs.  固態(tài)硬盤  
4.4.2  B+樹vs.LSM 樹  
4.4.3  RAIDvs.HDFS  
4.5  小結(jié)  
5  萬無一失：網(wǎng)站的高可用架構(gòu)  
5.1  網(wǎng)站可用性的度量與考核  
5.1.1  網(wǎng)站可用性度量  
5.1.2  網(wǎng)站可用性考核  
5.2  高可用的網(wǎng)站架構(gòu)  
5.3  高可用的應(yīng)用  
5.3.1  通過負載均衡進行無狀態(tài)服務(wù)的失效轉(zhuǎn)移  
5.3.2  應(yīng)用服務(wù)器集群的Session  管理  
5.4  高可用的服務(wù)  
5.5  高可用的數(shù)據(jù)  
5.5.1  CAP 原理  
5.5.2  數(shù)據(jù)備份  
5.5.3  失效轉(zhuǎn)移  
5.6  高可用網(wǎng)站的軟件質(zhì)量保證  
5.6.1  網(wǎng)站發(fā)布  
5.6.2  自動化測試  
5.6.3  預(yù)發(fā)布驗證  
5.6.4  代碼控制  
5.6.5  自動化發(fā)布  
5.6.6  灰度發(fā)布  
5.7  網(wǎng)站運行監(jiān)控  
5.7.1  監(jiān)控數(shù)據(jù)采集  
5.7.2  監(jiān)控管理  
5.8  小結(jié)  
6  永無止境：網(wǎng)站的伸縮性架構(gòu)  
6.1  網(wǎng)站架構(gòu)的伸縮性設(shè)計  
6.1.1  不同功能進行物理分離實現(xiàn)伸縮  
6.1.2  單一功能通過集群規(guī)模實現(xiàn)伸縮  
6.2  應(yīng)用服務(wù)器集群的伸縮性設(shè)計  
6.2.1  HTTP 重定向負載均衡  
6.2.2  DNS 域名解析負載均衡  
6.2.3  反向代理負載均衡  
6.2.4  IP  負載均衡  
6.2.5  數(shù)據(jù)鏈路層負載均衡  
6.2.6  負載均衡算法  
6.3  分布式緩存集群的伸縮性設(shè)計  
6.3.1  Memcached 分布式緩存集群的訪問模型  
6.3.2  Memcached 分布式緩存集群的伸縮性挑戰(zhàn)  
6.3.3  分布式緩存的一致性Hash  算法  
6.4  數(shù)據(jù)存儲服務(wù)器集群的伸縮性設(shè)計  
6.4.1  關(guān)系數(shù)據(jù)庫集群的伸縮性設(shè)計  
6.4.2  NoSQL 數(shù)據(jù)庫的伸縮性設(shè)計  
6.5  小結(jié)  
7  隨需應(yīng)變：網(wǎng)站的可擴展架構(gòu)  
7.1  構(gòu)建可擴展的網(wǎng)站架構(gòu)  
7.2  利用分布式消息隊列降低系統(tǒng)耦合性  
7.2.1  事件驅(qū)動架構(gòu)  
7.2.2  分布式消息隊列  
7.3  利用分布式服務(wù)打造可復(fù)用的業(yè)務(wù)平臺  
7.3.1  Web  Service  與企業(yè)級分布式服務(wù)  
7.3.2  大型網(wǎng)站分布式服務(wù)的需求與特點  
7.3.3  分布式服務(wù)框架設(shè)計  
7.4  可擴展的數(shù)據(jù)結(jié)構(gòu)  
7.5  利用開放平臺建設(shè)網(wǎng)站生態(tài)圈  
7.6  小結(jié)  
8  固若金湯：網(wǎng)站的安全架構(gòu)  
8.1  道高一尺魔高一丈的網(wǎng)站應(yīng)用攻擊與防御  
8.1.1  XSS  攻擊  
8.1.2  注入攻擊  
8.1.3  CSRF  攻擊  
8.1.4  其他攻擊和漏洞  
8.1.5  Web  應(yīng)用防火墻  
8.1.6  網(wǎng)站安全漏洞掃描  
8.2  信息加密技術(shù)及密鑰安全管理  
8.2.1  單向散列加密  
8.2.2  對稱加密  
8.2.3  非對稱加密  
8.2.4  密鑰安全管理  
8.3  信息過濾與反垃圾  
8.3.1  文本匹配  
8.3.2  分類算法  
8.3.3  黑名單  
8.4  電子商務(wù)風(fēng)險控制  
8.4.1  風(fēng)險  
8.4.2  風(fēng)控  
8.5  小結(jié)  
第3篇  案例
9  淘寶網(wǎng)的架構(gòu)演化案例分析  
9.1  淘寶網(wǎng)的業(yè)務(wù)發(fā)展歷程  
9.2  淘寶網(wǎng)技術(shù)架構(gòu)演化  
9.3  小結(jié)  
10  維基百科的高性能架構(gòu)設(shè)計分析  
10.1  Wikipedia 網(wǎng)站整體架構(gòu)  
10.2  Wikipedia 性能優(yōu)化策略  
10.2.1  Wikipedia 前端性能優(yōu)化  
10.2.2  Wikipedia 服務(wù)端性能優(yōu)化  
10.2.3  Wikipedia 后端性能優(yōu)化  
11  海量分布式存儲系統(tǒng)Doris  的高可用架構(gòu)設(shè)計分析  
11.1  分布式存儲系統(tǒng)的高可用架構(gòu)  
11.2  不同故障情況下的高可用解決方案  
11.2.1  分布式存儲系統(tǒng)的故障分類  
11.2.2  正常情況下系統(tǒng)訪問結(jié)構(gòu)  
11.2.3  瞬時故障的高可用解決方案  
11.2.4  臨時故障的高可用解決方案  
11.2.5  永久故障的高可用解決方案  
12  網(wǎng)購秒殺系統(tǒng)架構(gòu)設(shè)計案例分析  
12.1  秒殺活動的技術(shù)挑戰(zhàn)  
12.2  秒殺系統(tǒng)的應(yīng)對策略  
12.3  秒殺系統(tǒng)架構(gòu)設(shè)計  
12.4  小結(jié)  
13  大型網(wǎng)站典型故障案例分析  
13.1  寫日志也會引發(fā)故障  
13.2  高并發(fā)訪問數(shù)據(jù)庫引發(fā)的故障  
13.3  高并發(fā)情況下鎖引發(fā)的故障  
13.4  緩存引發(fā)的故障  
13.5  應(yīng)用啟動不同步引發(fā)的故障  
13.6  大文件讀寫?yīng)氄即疟P引發(fā)的故障  
13.7  濫用生產(chǎn)環(huán)境引發(fā)的故障  
13.8  不規(guī)范的流程引發(fā)的故障  
13.9  不好的編程習(xí)慣引發(fā)的故障  
13.10  小結(jié)  
第4篇  架構(gòu)師
14  架構(gòu)師領(lǐng)導(dǎo)藝術(shù)  
14.1  關(guān)注人而不是產(chǎn)  
14.2  發(fā)掘人的優(yōu)秀  
14.3  共享美好藍圖  
14.4  共同參與架構(gòu)  
14.5  學(xué)會妥協(xié)  
14.6  成就他人  
15  網(wǎng)站架構(gòu)師職場攻略  
15.1  發(fā)現(xiàn)問題，尋找突破  
15.2  提出問題，尋求支持  
15.3  解決問題，達成績效  
16  漫話網(wǎng)站架構(gòu)師  
16.1  按作用劃分架構(gòu)師  
16.2  按效果劃分架構(gòu)師  
16.3  按職責(zé)角色劃分架構(gòu)師  
16.4  按關(guān)注層次劃分架構(gòu)師  
16.5  按口碑劃分架構(gòu)師  206  
16.6  非主流方式劃分架構(gòu)師  
附錄A  大型網(wǎng)站架構(gòu)技術(shù)一覽  
附錄B  Web開發(fā)技術(shù)發(fā)展歷程  
后記