课程培训
Hadoop原理与高级实践培训课程

 课程目标:

本次课程以实际的演练(环境部署,程序开发)为主,分享大规模Hadoop应用的一线最有效实用经验,实践与理论相结合,让学员能够对Hadoop生态系统有一个清晰明了的认识,理解Hadoop系统适用的场景,掌握MapReduce与Hive的中高级应用开发技能,快速高效搭建稳定可靠的Hadoop集群,满足生产环境的标准。
课程内容的分为4个部分:

 

  1. 进入Hadoop的精彩世界,介绍Hadoop生态系统的各个组成模块与适用场景。
  2. Hadoop部署,编程与管理,讲解演示在生产环境中选用和配置服务器需要注意的事项,介绍HDFS编程的Java API使用。
  3. MapReduce编程:讲解演示MapReduce的中高级应用开发技能。
  4. Hive与HBase编程:根据实际例子讲解Hive的使用与UDF的开发,以及如何通过JAVA编写HBase应用。 

培训内容

 

进入Hadoop的精彩世界
  • 文件存储-HDFS
  • HDFS-工作原理
  • 数据计算MapReduce
  • MapReduce工作原理
  • SQL分析-Hive
  • 海量实时读写-HBase
  • 工作流调度-Ooize
  • 分布式协调系统--Zookeeper
Hadoop部署与编程
  • Hadoop版本介绍与选择
  • Hadoop部署实践
    • Hadoop安装文件构成与配置体系
    • 机器硬件建议配置
    • 系统环境配置
    • 基本参数配置与说明
    • 进程分布规划与启动
  • Hadoop基本使用操作
    • HDFS
    • 权限
    • MapReduce
  • HDFS编程
    • 开发环境准备
    • 读文件
    • 写文件
  • Hadoop系统容灾策略
  • Hadoop资源调度策略
  • Hadoop安全
  • Hadoop系统监控与报警策略
MapReduce编程
  • MapReduce的定义与工作机制
  • MapReduce与分布式计算
  • 编程实战
    • MapReduce程序编写
    • 基于MapReduce的Sort操作
    • 基于MapReduce的Join操作
    • Hadoop多语言编程框架Streaming
  • 代码调试
    • 运行日志
Hive与HBase编程
  • Hive环境部署与搭建
  • Hive工作机制
  • Hive语法与实践
  • 数据压缩选择
    • gzip
    • bz2
    • lzo
    • rcfile
  • HBase编程示例
  • HBase系统架构
  • HBase性能测试
Hadoop系统管理
  • Hadoop系统容灾策略
  • Hadoop资源调度策略
  • Hadoop高级配置参数
  • Hadoop安全
  • Hadoop系统监控与报警策略 



如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>