曙海教學優勢
本課程以項目實現為導向,面向企事業項目實際需要,秉承二十一年積累的教學品質,老師將會與您分享設計的全流程以及工具的綜合使用經驗、技巧。線上/線下/上門皆可,課程可定制,熱線:4008699035。
曙海培訓的課程培養了大批受企業歡迎的工程師。曙海培訓的課程在業內有著響亮的知名度。大批企業和曙海
建立了良好的合作關系,合作企業30萬+。
?大數據處理與優化最佳實踐培訓
課程安排
? |
主題 |
內容見要 |
第一部分 |
海量數據處理系統 |
這個部分主要講解海量數據處理的架構設計,針對海量數據的問題設計海量數據的架構解決方案。 ???海量數據處理的系統場景 ???大數據時代的數據架構解決方案 ???海量數據處理的架構匯總 ???8種海量數據處理的架構設計比較 ???分布式系統架構的海量數據處理設計 ???海量數據處理設計 典型案例分析: |
NoSQL的實踐應用 |
n??High?performance并發要求 n??Huge?Storage的存取 n??High?Scalability的服務器分布要求 n??High?Availability的服務器健壯要求
n??K-V模型的Column設計 n??Document模型的B?Tree設計 n??Object模型的基于Object數據訪問設計
n??Apache?Hbase架構解析 n??Facebook?Cassandra架構解析 n??Google?BigTable架構解析 典型案例分析: |
|
進入Hadoop的精彩世界 |
|
|
第二部分 |
Hadoop部署與編程 |
|
Hive架構及實踐案例沙盤演練 |
n??gzip n??bz2 n??lzo n??rcfile
n??MapJoin n??數據傾斜 n??Join順序 n??UDF編寫注意事項 n??快速獲取結果TopN
|
|
第三部分 |
Hadoop集群架構搭建及實踐案例沙盤演練 |
|
MapReduce架構及實踐案例沙盤演練 |
n??MapReduce的原理和運行過程 n??構建MapReduce的開發環境
n??使用MapReduce的Java接口實現經典的WordCount n??wordcount運行過程解析 n??MapReduce實現數據去重操作 n??MapReduce實現數據排序 n??MapReduce實現數據平均數據的計算
|
|
HBase架構及實踐案例沙盤演練 |
n??Features:Scalability實現 n??HBaseFeatures:Column-Oriented實現 n??High?Performance?Random?R/W實現 n??HBase?Features:?Scan?Search實現 n??HBase?Features:?High?\Availability實現 典型案例分析: |