MapReduce2.0源碼分析與編程實戰培訓

?MapReduce2.0源碼分析與編程實戰培訓

課程大綱：

第1章　大象也會跳舞

1.1　大數據時代　

1.2　大數據分析時代　

1.3　簡單、粗暴、有效這就是Hadoop　

1.4　MapReduce與Hadoop　

1.5　看，大象也會跳舞　

第2章　大象的肚子HDFS文件系統詳解

2.1　HDFS基礎詳解　

2.2　HDFS數據存取流程分析　

2.3　HDFS命令行操作詳解　

2.4　通過Web瀏覽HDFS文件　

2.5　HDFS接口使用詳解　

2.6　HDFS文件同步與并發訪問　

第3章　“吃下去吐出來”Hadoop文件I/O系統詳解

3.1　Hadoop的壓縮類型介紹　

3.2　Hadoop的壓縮類庫　

3.3　I/O中序列化類型詳解　

3.4　實現自定義的Writable類型　

3.5　Hadoop中小文件處理詳解　

第4章　“大象的大腦”MapReduce框架結構與源碼分析

4.1　MapReduce框架結構與源碼分析　

4.2　編程實戰：經典的MapReduce單詞計數程序　

第5章　深入！MapReduce配置與測試

5.1　MapReduce環境變量配置詳解　

5.2　使用MRUnit對MapReduce進行測試　

5.3　在本地磁盤上進行MapReduce測試　

5.4　MapReduce計數器　

第6章　大象的思考流程MapReduce運行流程詳解

6.1　經典MapReduce任務的工作流程　

6.2　經典MapReduce任務異常處理詳解　

6.3　經典MapReduce任務的數據處理過程　

6.4　MapReduce?2.0(YARN)工作流程詳解　

第7章　更強的大象MapReduce高級程序設計續

7.1　MapReduce程序設計默認格式類型詳解　

7.2　InputFormat輸入格式詳解　

7.3　OutputFormat輸出格式詳解　

7.4　多種輸入與輸出使用介紹　

第8章　MapReduce相關特性詳解

8.1　MapReduce計數器　

8.2　排序與查找　

8.3　對輸出結果的值分組排序　

8.4　編程實戰：使用二次排序自動查找最小值　

第9章　啤酒與尿布MapReduce連接與數據挖掘初步

9.1　對于同樣格式數據進行MapReduce連接　

9.2　對于不同格式數據進行MapReduce連接　

9.3　不能說的秘密啤酒與尿布　

9.4　數據挖掘初步　

第10章　MapReduce實戰編程及深度分析

10.1　編程實戰：自定義數據庫中讀取數據　

10.2　編程實戰：串聯尋找共同轉載微博　

10.3　編程實戰：云存儲模型　

10.4　編程實戰：多文檔相似關鍵字檢索　

10.5　編程實戰：學生成績整理與分組