目　錄
譯者序
作者簡介
審校者簡介
前言
第1章　構建Hadoop集群1
1.1　選擇Hadoop集群硬件2
1.1.1　選擇DataNode硬件3
1.1.2　低存儲密度集群4
1.1.3　高存儲密度集群5
1.1.4　NameNode和JobTracker硬件配置6
1.1.5　網關和其他輔助服務8
1.1.6　網絡配置8
1.1.7　Hadoop硬件總結9
1.2　Hadoop發行版10
1.2.1　Hadoop版本10
1.2.2　選擇Hadoop發行版11
1.2.3　Cloudera Hadoop 發行版11
1.2.4　Hortonworks Hadoop發行版12
1.2.5　MapR12
1.3　為Hadoop集群選擇操作係統13
1.4　小結14
第2章　安裝和配置Hadoop15
2.1　在Hadoop集群中配置操作係統15
2.1.1　選擇和設置文件係統15
2.1.2　設置Java開發包16
2.1.3　其他操作係統設定17
2.1.4　設置CDH存儲庫18
2.2　設置NameNode18
2.2.1　JournalNode節點、ZooKeeper以及故障轉移控製器22
2.2.2Hadoop配置文件23
2.2.3　NameNode高可用方案配置25
2.2.4　JobTracker配置31
2.2.5DataNode配置36
2.3　小結47
第3章　配置Hadoop生態係統48
3.1托管Hadoop生態項目48
3.2　Sqoop49
3.2.1安裝和配置Sqoop49
3.2.2　Sqoop導入示例50
3.2.3　Sqoop導齣示例52
3.3　Hive52
3.3.1Hive架構53
3.3.2安裝Hive Metastore54
3.3.3　安裝Hive客戶端　56
3.3.4　安裝Hive Server57
3.4Impala59
3.4.1　Impala架構59
3.4.2　安裝Impala state store60
3.4.3　安裝Impala server60
3.5　小結63
第4章　Hadoop安全64
4.1　Hadoop安全概述64
4.2　Hadoop分布式文件係統安全65
4.3　MapReduce安全66
4.4　Hadoop服務級彆驗證 68
4.5　Hadoop和Kerberos69
4.5.1　Kerberos概述70
4.5.2　Hadoop中的Kerberos71
4.6　小結76
第5章　監控Hadoop集群77
5.1　監控策略介紹77
5.2　Hadoop參數78
5.2.1　JMX參數79
5.2.2　使用Nagios監控Hadoop80
5.2.3　監控Hadoop分布式文件係統81
5.2.4　NameNode校驗81
5.2.5　JournalNode檢查83
5.2.6　ZooKeeper檢查83
5.3　監控MapReduce84
5.4　使用Ganglia監控Hadoop85
5.5　小結86
第6章　在雲端使用Hadoop87
6.1　Amazon Elastic MapReduce87
6.1.1　安裝EMR命令行接口88
6.1.2　選擇Hadoop版本89
6.1.3　啓動EMR集群89
6.2　使用Whirr93
6.3　小結94
第7章　Hadoop平颱安全概述95
7.1　為什麼需要保障Hadoop生態係統的安全96
7.2　確保Hadoop生態係統安全麵臨的挑戰96
7.3　關鍵安全因素97
7.4　小結99
第8章　Hadoop安全體係設計100
8.1　什麼是Kerberos100
8.1.1　Kerberos關鍵術語101
8.1.2　Kerberos如何工作102
8.1.3　Kerberos 的優點103
8.2　不采用Kerberos的Hadoop默認安全模型103
8.3　Hadoop Kerberos 安全模型實現105
8.3.1　用戶層次的訪問控製105
8.3.2　服務層次的訪問控製105
8.3.3　用戶和服務認證106
8.3.4　授權令牌106
8.3.5　作業令牌106
8.3.6　數據塊訪問令牌107
8.4　小結108
第9章　配置一個安全Hadoop集群109
9.1　前提條件109
9.2　設置Kerberos110
9.3　配置Hadoop使用Kerberos認證117
9.3.1　在所有Hadoop節點設置Kerberos客戶端117
9.3.2　配置Hadoop服務標識118
9.4　Hadoop用戶設置124
9.5　安全Hadoop自動部署124
9.6　小結125
第10章　Hadoop生態係統安全保障126
10.1　為Hadoop生態係統組件配置Kerberos127
10.1.1　Hive安全設置127
10.1.2　Oozie安全設置130
10.1.3　Flume安全設置131
10.1.4　HBase安全設置134
10.1.5　Sqoop安全設置137
10.1.6　Pig安全設置138
10.2　Hadoop生態係統組件安全保障最佳實踐138
10.3　小結139
第11章　集成Hadoop與企業安全係統140
11.1　集成EIM係統141
11.1.1　配置EIM與Hadoop集成142
11.1.2　集成基於Active Directory的EIM係統與Hadoop生態係統143
11.2　從企業網絡訪問安全Hadoop集群144
11.2.1　HttpFS145
11.2.2　HUE145
11.2.3　Knox Gateway Server146
11.3　小結147
第12章　Hadoop中敏感數據安全保護148
12.1　Hadoop中敏感數據及保護方法148
12.2　小結154
第13章　安全事件與審計日誌155
13.1　Hadoop集群安全事故和事件監控155
13.2　Hadoop集群審計日誌設置158
13.3　小結160
附錄　Hadoop安全機製解決方案161
· · · · · · (收起)