Hadoop集群與安全

譯者序
作者簡介
審校者簡介
前言
第1章 構建Hadoop集群
1.1 選擇Hadoop集群硬件
1.1.1 選擇DataNode硬件
1.1.2 低存儲密度集群
1.1.3 高存儲密度集群
1.1.4 NameNode和JobTracker硬件配置
1.1.5 網(wǎng)關和其他輔助服務
1.1.6 網(wǎng)絡配置
1.1.7 Hadoop硬件總結
1.2 Hadoop發(fā)行版
1.2.1 Hadoop版本
1.2.2 選擇Hadoop發(fā)行版
1.2.3 Cloudera Hadoop 發(fā)行版
1.2.4 Hortonworks Hadoop發(fā)行版
1.2.5 MapR
1.3 為Hadoop集群選擇操作系統(tǒng)
1.4 小結
第2章 安裝和配置Hadoop
2.1 在Hadoop集群中配置操作系統(tǒng)
2.1.1 選擇和設置文件系統(tǒng)
2.1.2 設置Java開發(fā)包
2.1.3 其他操作系統(tǒng)設定
2.1.4 設置CDH存儲庫
2.2 設置NameNode
2.2.1 JournalNode節(jié)點、ZooKeeper以及故障轉(zhuǎn)移控制器
2.2.2Hadoop配置文件
2.2.3 NameNode高可用方案配置
2.2.4 JobTracker配置
2.2.5DataNode配置
2.3 小結
第3章 配置Hadoop生態(tài)系統(tǒng)
3.1托管Hadoop生態(tài)項目
3.2 Sqoop
3.2.1安裝和配置Sqoop
3.2.2 Sqoop導入示例
3.2.3 Sqoop導出示例
3.3 Hive
3.3.1Hive架構
3.3.2安裝Hive Metastore
3.3.3 安裝Hive客戶端
3.3.4 安裝Hive Server
3.4Impala
3.4.1 Impala架構
3.4.2 安裝Impala state store
3.4.3 安裝Impala server
3.5 小結
第4章 Hadoop安全
4.1 Hadoop安全概述
4.2 Hadoop分布式文件系統(tǒng)安全
4.3 MapReduce安全
4.4 Hadoop服務級別驗證
4.5 Hadoop和Kerberos
4.5.1 Kerberos概述
4.5.2 Hadoop中的Kerberos
4.6 小結
第5章 監(jiān)控Hadoop集群
5.1 監(jiān)控策略介紹
5.2 Hadoop參數(shù)
5.2.1 JMX參數(shù)
5.2.2 使用Nagios監(jiān)控Hadoop
5.2.3 監(jiān)控Hadoop分布式文件系統(tǒng)
5.2.4 NameNode校驗
5.2.5 JournalNode檢查
5.2.6 ZooKeeper檢查
5.3 監(jiān)控MapReduce
5.4 使用Ganglia監(jiān)控Hadoop
5.5 小結
第6章 在云端使用Hadoop
6.1 Amazon Elastic MapReduce
6.1.1 安裝EMR命令行接口
6.1.2 選擇Hadoop版本
6.1.3 啟動EMR集群
6.2 使用Whirr
6.3 小結
第7章 Hadoop平臺安全概述
7.1 為什么需要保障Hadoop生態(tài)系統(tǒng)的安全
7.2 確保Hadoop生態(tài)系統(tǒng)安全面臨的挑戰(zhàn)
7.3 關鍵安全因素
7.4 小結
第8章 Hadoop安全體系設計
8.1 什么是Kerberos
8.1.1 Kerberos關鍵術語
8.1.2 Kerberos如何工作
8.1.3 Kerberos 的優(yōu)點
8.2 不采用Kerberos的Hadoop默認安全模型
8.3 Hadoop Kerberos 安全模型實現(xiàn)
8.3.1 用戶層次的訪問控制
8.3.2 服務層次的訪問控制
8.3.3 用戶和服務認證
8.3.4 授權令牌
8.3.5 作業(yè)令牌
8.3.6 數(shù)據(jù)塊訪問令牌
8.4 小結
第9章 配置一個安全Hadoop集群
9.1 前提條件
9.2 設置Kerberos
9.3 配置Hadoop使用Kerberos認證
9.3.1 在所有Hadoop節(jié)點設置Kerberos客戶端
9.3.2 配置Hadoop服務標識
9.4 Hadoop用戶設置
9.5 安全Hadoop自動部署
9.6 小結
第10章 Hadoop生態(tài)系統(tǒng)安全保障
10.1 為Hadoop生態(tài)系統(tǒng)組件配置Kerberos
10.1.1 Hive安全設置
10.1.2 Oozie安全設置
10.1.3 Flume安全設置
10.1.4 HBase安全設置
10.1.5 Sqoop安全設置
10.1.6 Pig安全設置
10.2 Hadoop生態(tài)系統(tǒng)組件安全保障最佳實踐
10.3 小結
第11章 集成Hadoop與企業(yè)安全系統(tǒng)
11.1 集成EIM系統(tǒng)
11.1.1 配置EIM與Hadoop集成
11.1.2 集成基于Active Directory的EIM系統(tǒng)與Hadoop生態(tài)系統(tǒng)
11.2 從企業(yè)網(wǎng)絡訪問安全Hadoop集群
11.2.1 HttpFS
11.2.2 HUE
11.2.3 Knox Gateway Server
11.3 小結
第12章 Hadoop中敏感數(shù)據(jù)安全保護
12.1 Hadoop中敏感數(shù)據(jù)及保護方法
12.2 小結
第13章 安全事件與審計日志
13.1 Hadoop集群安全事故和事件監(jiān)控
13.2 Hadoop集群審計日志設置
13.3 小結
附錄 Hadoop安全機制解決方案