Hadoop集群與安全

譯者序
作者簡介
審校者簡介
前言
第1章 構(gòu)建Hadoop集群
1.1 選擇Hadoop集群硬件
1.1.1 選擇DataNode硬件
1.1.2 低存儲密度集群
1.1.3 高存儲密度集群
1.1.4 NameNode和JobTracker硬件配置
1.1.5 網(wǎng)關(guān)和其他輔助服務(wù)
1.1.6 網(wǎng)絡(luò)配置
1.1.7 Hadoop硬件總結(jié)
1.2 Hadoop發(fā)行版
1.2.1 Hadoop版本
1.2.2 選擇Hadoop發(fā)行版
1.2.3 Cloudera Hadoop 發(fā)行版
1.2.4 Hortonworks Hadoop發(fā)行版
1.2.5 MapR
1.3 為Hadoop集群選擇操作系統(tǒng)
1.4 小結(jié)
第2章 安裝和配置Hadoop
2.1 在Hadoop集群中配置操作系統(tǒng)
2.1.1 選擇和設(shè)置文件系統(tǒng)
2.1.2 設(shè)置Java開發(fā)包
2.1.3 其他操作系統(tǒng)設(shè)定
2.1.4 設(shè)置CDH存儲庫
2.2 設(shè)置NameNode
2.2.1 JournalNode節(jié)點、ZooKeeper以及故障轉(zhuǎn)移控制器
2.2.2Hadoop配置文件
2.2.3 NameNode高可用方案配置
2.2.4 JobTracker配置
2.2.5DataNode配置
2.3 小結(jié)
第3章 配置Hadoop生態(tài)系統(tǒng)
3.1托管Hadoop生態(tài)項目
3.2 Sqoop
3.2.1安裝和配置Sqoop
3.2.2 Sqoop導(dǎo)入示例
3.2.3 Sqoop導(dǎo)出示例
3.3 Hive
3.3.1Hive架構(gòu)
3.3.2安裝Hive Metastore
3.3.3 安裝Hive客戶端
3.3.4 安裝Hive Server
3.4Impala
3.4.1 Impala架構(gòu)
3.4.2 安裝Impala state store
3.4.3 安裝Impala server
3.5 小結(jié)
第4章 Hadoop安全
4.1 Hadoop安全概述
4.2 Hadoop分布式文件系統(tǒng)安全
4.3 MapReduce安全
4.4 Hadoop服務(wù)級別驗證
4.5 Hadoop和Kerberos
4.5.1 Kerberos概述
4.5.2 Hadoop中的Kerberos
4.6 小結(jié)
第5章 監(jiān)控Hadoop集群
5.1 監(jiān)控策略介紹
5.2 Hadoop參數(shù)
5.2.1 JMX參數(shù)
5.2.2 使用Nagios監(jiān)控Hadoop
5.2.3 監(jiān)控Hadoop分布式文件系統(tǒng)
5.2.4 NameNode校驗
5.2.5 JournalNode檢查
5.2.6 ZooKeeper檢查
5.3 監(jiān)控MapReduce
5.4 使用Ganglia監(jiān)控Hadoop
5.5 小結(jié)
第6章 在云端使用Hadoop
6.1 Amazon Elastic MapReduce
6.1.1 安裝EMR命令行接口
6.1.2 選擇Hadoop版本
6.1.3 啟動EMR集群
6.2 使用Whirr
6.3 小結(jié)
第7章 Hadoop平臺安全概述
7.1 為什么需要保障Hadoop生態(tài)系統(tǒng)的安全
7.2 確保Hadoop生態(tài)系統(tǒng)安全面臨的挑戰(zhàn)
7.3 關(guān)鍵安全因素
7.4 小結(jié)
第8章 Hadoop安全體系設(shè)計
8.1 什么是Kerberos
8.1.1 Kerberos關(guān)鍵術(shù)語
8.1.2 Kerberos如何工作
8.1.3 Kerberos 的優(yōu)點
8.2 不采用Kerberos的Hadoop默認安全模型
8.3 Hadoop Kerberos 安全模型實現(xiàn)
8.3.1 用戶層次的訪問控制
8.3.2 服務(wù)層次的訪問控制
8.3.3 用戶和服務(wù)認證
8.3.4 授權(quán)令牌
8.3.5 作業(yè)令牌
8.3.6 數(shù)據(jù)塊訪問令牌
8.4 小結(jié)
第9章 配置一個安全Hadoop集群
9.1 前提條件
9.2 設(shè)置Kerberos
9.3 配置Hadoop使用Kerberos認證
9.3.1 在所有Hadoop節(jié)點設(shè)置Kerberos客戶端
9.3.2 配置Hadoop服務(wù)標識
9.4 Hadoop用戶設(shè)置
9.5 安全Hadoop自動部署
9.6 小結(jié)
第10章 Hadoop生態(tài)系統(tǒng)安全保障
10.1 為Hadoop生態(tài)系統(tǒng)組件配置Kerberos
10.1.1 Hive安全設(shè)置
10.1.2 Oozie安全設(shè)置
10.1.3 Flume安全設(shè)置
10.1.4 HBase安全設(shè)置
10.1.5 Sqoop安全設(shè)置
10.1.6 Pig安全設(shè)置
10.2 Hadoop生態(tài)系統(tǒng)組件安全保障最佳實踐
10.3 小結(jié)
第11章 集成Hadoop與企業(yè)安全系統(tǒng)
11.1 集成EIM系統(tǒng)
11.1.1 配置EIM與Hadoop集成
11.1.2 集成基于Active Directory的EIM系統(tǒng)與Hadoop生態(tài)系統(tǒng)
11.2 從企業(yè)網(wǎng)絡(luò)訪問安全Hadoop集群
11.2.1 HttpFS
11.2.2 HUE
11.2.3 Knox Gateway Server
11.3 小結(jié)
第12章 Hadoop中敏感數(shù)據(jù)安全保護
12.1 Hadoop中敏感數(shù)據(jù)及保護方法
12.2 小結(jié)
第13章 安全事件與審計日志
13.1 Hadoop集群安全事故和事件監(jiān)控
13.2 Hadoop集群審計日志設(shè)置
13.3 小結(jié)
附錄 Hadoop安全機制解決方案