您現在的位置: 18luck新利全站下载 >> 管理信息化>> 大數據>> 資料信息

Hadoop大數據開發與性能調優實戰培訓課程(PPT 59頁)

所屬分類:
大數據
文件大小:
2506 KB
下載地址:
相關資料:
大數據, 實戰培訓, 培訓課程
Hadoop大數據開發與性能調優實戰培訓課程(PPT 59頁)內容簡介
主要內容
Hadoop的特點
Hadoop集群的物理分布
Namenode
SecondaryNameNode
DataNode
Block
Block的副本放置策略
HDFS 讀寫流程
HDFS讀寫流程
數據損壞處理
HDFS安全模式
HDFS文件權限
HDFS回收站
HDFS開發常用命令
MapReduce特性
MapReduce執行流程
JobTracker(JT)和TaskTracker(TT)簡介
JobTracker失敗
TaskTracker失敗
文件輸入格式InputFormat
輸入數據分塊InputSplits
數據記錄讀入RecordReader
Mapper
Combiner
Partitioner & Shuffle&Sort
Reducer
文件輸出格式OutputFormat
MapReduce
單一Reduce處理
多個Reduce處理
無Reduce處理
Hadoop平台應用特點
精彩案例
案例2:Yahoo
Yahoo應用揭秘
案例3:Facebook
Facebook數據倉庫
Facebook任務統計
Facebook應用
案例4:Taobao

..............................

Baidu
map