Hadoop开发培训课程

课程目标

此课程面向企业软件工程师、数据库工程师、以及对Hadoop开发感兴趣的各类技术人员。通过此课程的学习，学员可以全面掌握Hadoop的架构原理和使用场景，并通过贯穿课程的习题项目进行实战锻炼，从而熟练使用Hadoop进行MapReduce程序开发。

培训大纲：

Hadoop背景介绍

Hadoop生态系统概览

Hadoop分布式文件系统(HDFS)

什么是HDFS

HDFS设计目标

HDFS系统特点

HDFS工作原理

HDFS服务进程

HDFS使用

HDFS命令行工具

启动、停止HDFS服务

如何查看HDFS日志

查看HDFS Web控制台

HDFS配置参数

上机开发环境介绍

HDFS开发

Java API详解

FuseHDFS

WebHDFS Restful API

MapReduce分布式计算框架

什么是MapReduce

MapReduce服务

MapReduce工作机制

MapReduce调度管理

MapReduce参数设置

启动、停止MapReduce服务

如何查看MapReduce日志

查看MapReduce Web控制台

MapReduce示例程序解析

MapReduce框架类库介绍

MapReduce实战，你的第一个MapReduce项目

项目需求简述

项目设计讨论

项目伪代码分析

项目实现，上机练习

MapReduce进阶实战

项目性能优化

项目结果分类汇总

项目结果排序

如何用其它语言开发MapReduce应用

MapReduce常用算法（Sort、Index、Join、IF-IDF等）介绍

Hadoop生态系统介绍

HBase入门

利用Oozie对MapReduce任务进行调度

利用Flume NG 和 Sqoop与各种数据源对接

利用Hive和Pig来简化MapReduce的开发

ZooKeeper介绍