您现在的位置: 精品资料网 >> 管理信息化 >> 大数据 >> 资料信息

Hadoop大数据开发与性能调优实战培训课程(PPT 59页)

所属分类:
大数据
文件大小:
2506 KB
下载地址:
相关资料:
大数据,实战培训,培训课程
Hadoop大数据开发与性能调优实战培训课程(PPT 59页)内容简介
主要内容
Hadoop的特点
Hadoop集群的物理分布
Namenode
SecondaryNameNode
DataNode
Block
Block的副本放置策略
HDFS 读写流程
HDFS读写流程
数据损坏处理
HDFS安全模式
HDFS文件权限
HDFS回收站
HDFS开发常用命令
MapReduce特性
MapReduce执行流程
JobTracker(JT)和TaskTracker(TT)简介
JobTracker失败
TaskTracker失败
文件输入格式InputFormat
输入数据分块InputSplits
数据记录读入RecordReader
Mapper
Combiner
Partitioner & Shuffle&Sort
Reducer
文件输出格式OutputFormat
MapReduce
单一Reduce处理
多个Reduce处理
无Reduce处理
Hadoop平台应用特点
精彩案例
案例2:Yahoo
Yahoo应用揭秘
案例3:Facebook
Facebook数据仓库
Facebook任务统计
Facebook应用
案例4:Taobao

..............................