Ceph分布式存儲(chǔ)學(xué)習(xí)指南

目錄　Contents
推薦序
譯者序
作者簡(jiǎn)介
前言
第1章　Ceph存儲(chǔ)介紹1
1.1　概要1
1.2　Ceph的歷史和發(fā)展2
1.3　Ceph和存儲(chǔ)的未來(lái)3
1.3.1　Ceph云存儲(chǔ)解決方案4
1.3.2　Ceph軟件定義存儲(chǔ)解決方案6
1.3.3　Cehp統(tǒng)一存儲(chǔ)解決方案6
1.3.4　下一代架構(gòu)6
1.3.5　Raid時(shí)代的終結(jié)7
1.4　兼容性組合8
1.5　Ceph塊存儲(chǔ)8
1.6　Ceph文件系統(tǒng)9
1.7　Ceph對(duì)象存儲(chǔ)10
1.8　Ceph與其他存儲(chǔ)解決方案11
1.9　GPFS12
1.10　iRODS12
1.11　HDFS12
1.12　Lustre12
1.13　Gluster13
1.14　Ceph13
總結(jié)14
第2章　Ceph實(shí)戰(zhàn)部署15
2.1　使用VirtualBox創(chuàng)建沙箱環(huán)境15
2.2　從零開(kāi)始部署你的第一個(gè)Ceph集群20
2.3　縱向擴(kuò)展Ceph集群—添加monitor和OSD22
2.3.1　添加Ceph monitor22
2.3.2　添加Ceph OSD23
總結(jié)24
第3章　Ceph架構(gòu)和組件25
3.1　Ceph存儲(chǔ)架構(gòu)25
3.2　Ceph RADOS26
3.2.1　Ceph對(duì)象存儲(chǔ)設(shè)備27
3.2.2　Ceph monitor32
3.2.3　librados35
3.2.4　Ceph塊存儲(chǔ)35
3.2.5　Ceph對(duì)象網(wǎng)關(guān)36
3.3　Ceph MDS37
3.4　為Ceph集群部署MDS37
3.5　Ceph文件系統(tǒng)38
總結(jié)39
第4章　Ceph內(nèi)部構(gòu)件40
4.1　Ceph底層實(shí)現(xiàn)40
4.2　對(duì)象40
4.3　CRUSH42
4.3.1　CRUSH查找43
4.3.2　CRUSH層級(jí)結(jié)構(gòu)44
4.3.3　恢復(fù)和再平衡45
4.3.4　編輯CRUSH map45
4.3.5　定制集群布局46
4.4　PG47
4.4.1　計(jì)算PG數(shù)48
4.4.2　修改PG和PGP48
4.4.3　PG peering、up集合和acting集合50
4.5　Ceph池50
4.6　Ceph數(shù)據(jù)管理53
總結(jié)55
第5章　Ceph部署56
5.1　Ceph集群硬件規(guī)劃56
5.1.1　監(jiān)控需求57
5.1.2　OSD需求57
5.1.3　網(wǎng)絡(luò)需求58
5.1.4　MDS需求59
5.2　再次配置VirtualBox環(huán)境59
5.3　準(zhǔn)備安裝Ceph59
5.4　Ceph集群手工部署61
5.4.1　安裝依賴61
5.4.2　部署Ceph集群62
5.4.3　部署monitor62
5.4.4　創(chuàng)建OSD65
5.5　擴(kuò)展集群66
5.5.1　添加monitor67
5.5.2　添加OSD68
5.6　使用ceph-deploy工具部署Ceph集群69
5.7　升級(jí)Ceph集群70
5.7.1　升級(jí)monitor71
5.7.2　升級(jí)OSD72
總結(jié)73
第6章　Ceph存儲(chǔ)配置74
6.1　RADOS塊設(shè)備74
6.1.1　創(chuàng)建你的第一個(gè)Ceph客戶端75
6.1.2　映射RADOS塊設(shè)備77
6.1.3　調(diào)整Ceph RBD的大小79
6.1.4　Ceph RBD快照80
6.1.5　復(fù)制Ceph RBD82
6.2　Ceph文件系統(tǒng)85
6.2.1　使用內(nèi)核驅(qū)動(dòng)程序掛載CephFS85
6.2.2　通過(guò)FUSE方式掛載CephFS86
6.3　使用Ceph RADOS網(wǎng)關(guān)的對(duì)象存儲(chǔ)87
6.3.1　創(chuàng)建虛擬機(jī)88
6.3.2　安裝RADOS網(wǎng)關(guān)89
6.3.3　配置RADOS網(wǎng)關(guān)92
6.3.4　創(chuàng)建radosgw用戶96
6.3.5　訪問(wèn)Ceph對(duì)象存儲(chǔ)97
6.4　S3 API兼容的Ceph對(duì)象存儲(chǔ)97
總結(jié)102
第7章　Ceph操作及管理103
7.1　Ceph服務(wù)管理103
7.1.1　采用sysvinit運(yùn)行Ceph103
7.1.2　根據(jù)類型啟動(dòng)守護(hù)進(jìn)程104
7.1.3　根據(jù)類型停止守護(hù)進(jìn)程105
7.1.4　啟動(dòng)及停止所有守護(hù)進(jìn)程105
7.1.5　啟動(dòng)及停止指定守護(hù)進(jìn)程106
7.2　把Ceph作為服務(wù)運(yùn)行106
7.2.1　啟動(dòng)、停止所有守護(hù)進(jìn)程107
7.2.2　啟動(dòng)、停止指定守護(hù)進(jìn)程107
7.3　橫向擴(kuò)展Ceph集群107
7.4　向Ceph集群中添加OSD節(jié)點(diǎn)108
7.5　Ceph集群縮容110
7.6　從Ceph集群中移除并關(guān)閉一個(gè)OSD111
7.7　從Ceph集群中移除OSD112
7.8　替換出故障的磁盤設(shè)備113
7.9　管理CRUSH map115
7.10　確定CRUSH的位置116
7.11　CRUSH map內(nèi)部細(xì)節(jié)117
7.12　將不同的池置于不同的OSD中119
總結(jié)122
第8章　監(jiān)控Ceph集群123
8.1　監(jiān)控Ceph集群123
8.1.1　檢查集群健康狀況124
8.1.2　監(jiān)控集群事件124
8.1.3　集群利用率統(tǒng)計(jì)125
8.1.4　檢查集群的狀態(tài)125
8.1.5　基于密鑰的集群驗(yàn)證126
8.2　監(jiān)控Ceph MON127
8.2.1　MON狀態(tài)127
8.2.2　MON法定人數(shù)狀態(tài)127
8.3　監(jiān)控Ceph OSD128
8.3.1　OSD樹(shù)視圖128
8.3.2　OSD統(tǒng)計(jì)129
8.3.3　檢查CRUSH map129
8.3.4　監(jiān)控PG130
8.4　監(jiān)控MDS132
8.5　使用開(kāi)源管理控制臺(tái)監(jiān)控Ceph133
8.5.1　Kraken133
8.5.2　ceph-dash工具136
8.5.3　Calamari138
總結(jié)138
第9章　Ceph與OpenStack的集成139
9.1　OpenStack簡(jiǎn)介139
9.2　Ceph—OpenStack的最佳搭檔140
9.3　創(chuàng)建OpenStack測(cè)試環(huán)境141
9.3.1　啟動(dòng)一個(gè)OpenStack主機(jī)141
9.3.2　安裝OpenStack143
9.3.3　Ceph和OpenStack145
9.3.4　在OpenStack節(jié)點(diǎn)安裝Ceph145
9.3.5　為OpenStack配置Ceph146
總結(jié)152
第10章　Ceph性能調(diào)優(yōu)和基準(zhǔn)測(cè)試153
10.1　Ceph性能概述153
10.2　Ceph性能關(guān)鍵點(diǎn)—硬件層面154
10.2.1　CPU154
10.2.2　內(nèi)存155
10.2.3　網(wǎng)絡(luò)155
10.2.4　磁盤156
10.3　Ceph性能調(diào)優(yōu)—軟件層面156
10.3.1　集群配置文件157
10.3.2　配置文件段157
10.4　Ceph集群性能優(yōu)化158
10.4.1　全局調(diào)優(yōu)參數(shù)158
10.4.2　OSD調(diào)優(yōu)參數(shù)158
10.4.3　客戶端調(diào)優(yōu)參數(shù)161
10.4.4　通用調(diào)優(yōu)參數(shù)161
10.5　Ceph糾刪碼162
10.5.1　低成本冷存儲(chǔ)164
10.5.2　實(shí)現(xiàn)糾刪碼164
10.6　Ceph緩存分層167
10.6.1　writeback模式167
10.6.2　read-only模式167
10.6.3　部署緩存分層168
10.7　使用RADOS bench對(duì)Ceph進(jìn)行基