大數(shù)據(jù)技術及其應用

上篇 基礎篇
第1章 大數(shù)據(jù)技術概述
1．1 大數(shù)據(jù)的發(fā)展歷史
1．2 大數(shù)據(jù)的基本特征
1．3 大數(shù)據(jù)處理框架
1．4 大數(shù)據(jù)技術的主要應用領域
1．4．1 大數(shù)據(jù)技術在公共事業(yè)領域的應用
1．4．2 大數(shù)據(jù)技術在消費領域的應用
1．4．3 大數(shù)據(jù)技術在金融領域的應用
1．4．4 大數(shù)據(jù)技術在工業(yè)領域的應用
1．4．5 大數(shù)據(jù)技術在醫(yī)療領域的應用
1．4．6 大數(shù)據(jù)技術在農(nóng)業(yè)領域的應用
習題
參考文獻
第2章 大數(shù)據(jù)處理平臺Hadoop
2．1 Hadoop簡介
2．1．1 Hadoop概述
2．1．2 Hadoop特性
2．1．3 Hadoop應用現(xiàn)狀
2．2 Hadoop架構與組成
2．2．1 Hadoop架構
2．2．2 Hadoop組成模塊
習題
參考文獻
瓣分布式文件系統(tǒng)HDFs
3．1 HDFS簡介
3．1．1 HDFS設計理念
3．1．2 HDFS的缺點
3．1．3 基本組成結構與文件訪問過程
3．2 HDFS體系架構
3 2 1NameNnde
3．2．2 DataNode
3．2．3 C1ient
3．3 HDFS數(shù)據(jù)讀寫過程
3．3．1 讀取數(shù)據(jù)
3．3．2 寫數(shù)據(jù)
3．4 保障HDFS可靠性的措施
3．4．1 冗余備份
3．4．2 副本存放
3．4．3 心跳檢測
3．4．4 安全模式
3．4．5 數(shù)據(jù)完整性檢測
3．4．6 空間回收
3．4．7 MetaData磁盤失效
3．4．8 快照
3．5 HDFS Shell
3．5．1 通用選項
3．5．2 用戶命令
3．5．3 管理與更新
3．6 HDFS JavaAPI編程實踐
3．6．1 HDFS常用JavaAPI介紹
3．6．2 HDFS Java API編程案例
習題
參考文獻
第4章 分布式計算框架MapReduce
4．1 MapReduce框架結構
4．1．1 MapRednee的函數(shù)式編程概述
4．1．2 MapRedace組成
4．1．3 MapReduce框架核心優(yōu)勢
4．2 WlordCount實例分析
4．2．1 WorclCount任務
4．2．2 WordCount設計思路
4．2．3 WordCount執(zhí)行過程
4．3 MapReduce執(zhí)行流程
4．3．1 MapReduce執(zhí)行流程概述
4．3．2 MapRedace各個執(zhí)行階段
4．4 MapReduce運行原理
4．4．1 作業(yè)提交
4．4．2 作業(yè)初始化
4．4．3 任務分配
……
中篇 編程篇
下篇 應用篇