课程目标:
本次课程以实际的演练(环境部署,程序开发)为主,分享大规模Hadoop应用的一线最有效实用经验,实践与理论相结合,让学员能够对Hadoop生态系统有一个清晰明了的认识,理解Hadoop系统适用的场景,掌握MapReduce与Hive的中高级应用开发技能,快速高效搭建稳定可靠的Hadoop集群,满足生产环境的标准。
课程内容的分为4个部分:
- 进入Hadoop的精彩世界,介绍Hadoop生态系统的各个组成模块与适用场景。
- Hadoop部署,编程与管理,讲解演示在生产环境中选用和配置服务器需要注意的事项,介绍HDFS编程的Java API使用。
- MapReduce编程:讲解演示MapReduce的中高级应用开发技能。
- Hive与HBase编程:根据实际例子讲解Hive的使用与UDF的开发,以及如何通过JAVA编写HBase应用。
培训内容:
进入Hadoop的精彩世界
|
- 文件存储-HDFS
- HDFS-工作原理
- 数据计算MapReduce
- MapReduce工作原理
- SQL分析-Hive
- 海量实时读写-HBase
- 工作流调度-Ooize
- 分布式协调系统--Zookeeper
|
Hadoop部署与编程 |
- Hadoop版本介绍与选择
- Hadoop部署实践
- Hadoop安装文件构成与配置体系
- 机器硬件建议配置
- 系统环境配置
- 基本参数配置与说明
- 进程分布规划与启动
- Hadoop基本使用操作
- HDFS编程
- Hadoop系统容灾策略
- Hadoop资源调度策略
- Hadoop安全
- Hadoop系统监控与报警策略
|
MapReduce编程
|
- MapReduce的定义与工作机制
- MapReduce与分布式计算
- 编程实战
- MapReduce程序编写
- 基于MapReduce的Sort操作
- 基于MapReduce的Join操作
- Hadoop多语言编程框架Streaming
- 代码调试
|
Hive与HBase编程 |
- Hive环境部署与搭建
- Hive工作机制
- Hive语法与实践
- 数据压缩选择
- HBase编程示例
- HBase系统架构
- HBase性能测试
|
Hadoop系统管理 |
- Hadoop系统容灾策略
- Hadoop资源调度策略
- Hadoop高级配置参数
- Hadoop安全
- Hadoop系统监控与报警策略
|
如果您想学习本课程,请
预约报名
如果没找到合适的课程或有特殊培训需求,请
订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请
服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。
专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获