您现在的位置: 精品资料网 >> 人力资源 >> 企业培训 >> 资料信息

Hahoop培训讲座(PPT 56页)

所属分类:
企业培训
文件大小:
1384 KB
下载地址:
相关资料:
培训讲座
Hahoop培训讲座(PPT 56页)内容简介
主要内容
Hahoop 培训
海量数据处理平台架构
Hadoop能解决哪些问题
Hadoop在国内的情景
Hadoop开发人员市场需求和待遇
Hadoop在国内的人才储备
Hadoop介绍
Hadoop生态系统介绍
HDFS设计原则
HDFS系统结构
NameNode(NN)
NameNode
DataNode(DN)
Block的副本放置策略
再说Block
数据损坏(corruption)处理
HDFS文件权限
HDFS文件读取
HDFS文件写入
HDFS文件存储
HDFS文件存储结构
HDFS开发常用命令
Hadoop管理员常用命令
HDFS API详解
用Java对HDFS编程
开发hadoop依赖的jar和自带的example
Hadoop自带的examples.jar介绍
实例
MapReduce模型
运行步骤
MapReduce执行流程
MapReduce基本流程
JobTracker(JT)和TaskTracker(TT)简介
再论JobTracker(JT)和TaskTracker(TT)
Mapreduce原理
JobTracker失败
TaskTracker失败
Hadoop Job Scheduler
Fair Scheduler(公平调度器)
mapreduce的类型与格式
mapreduce的数据类型与java类型对应关系
Writable接口
实现自定义的mapreduce类型
最小的MapReduce驱动
mapreduce驱动默认的设置
Combiners和Partitioner编程
 Combiners分析
使用 Combiners要小心
 Partitioner分析
mapreduce提供的Patitioner
自定义的Partitioner

..............................