大数据培训课程1
课程目标:
通过该课程的学习,能够对大数据技术基础、Hadoop、HBase、Hive、Spark、Flink、Kafka、Flume原理及使用有深入的了解,对企业数据平台建设、开发、运维以及集群的稳定运行有很大的帮助。
课程大纲:
主题
|
内容
|
大数据技术基础&分布式文件系统&分布式资源调度系统
|
大数据背景知识、发展历程介绍
大数据平台架构层次设计
HDFS核心概念、应用场景介绍以及体系结构详解
HDFS高可用的原理介绍,共享存储、active/standby详解
HDFS常用命令实战演示,数据文件、数据块监控介绍
NameNode核心元数据fsimage/editlog原理介绍
DataNode职责介绍、数据块物理存储结构介绍
YARN体系结构详解
ResourceManager原理解析
NodeManager原理解析
容量调度器和公平调度器详解
资源两阶段申请详细流程详细
MapReduce代码实例演示
|
Hive&Spark&Flink
计算引擎
|
Hive 数据库/表/分区实战
Hive元数据库介绍、演示
HIve高级函数实战
Spark体系结构原理解析
Spark常用算子程序演示
Spark On YARN运行实践
Flink应用场景介绍,与Spark区别详解
Flink Standalone和ON YARN运行模式与区别详解
Flink常用算子实战
Kafka+Flink代码实战演示
Flink精确一次性语义原理介绍
Flink Checkpoint应用长以及原理介绍
|
HBase体系结构与工作原理
|
HBase多模生态介绍
HBase体系结构详解
HBase高并发原理、读写流程详解
HBase数据模型详解、实战演示
HBase元数据存储详解
HBase读写表/过滤器/计数器代码实战
HBase数据热点产生原因以及预分区实战
|
Flume/Kafka原理以及使用
|
Flume+Kafka在企业数据平台的应用场景
Flume高可用体系结构原理介绍
Flume Source/Channel/Sink组件详解、实战
Flume自定义拦截器、选择器实战
Flume高可用采集系统设计
Kafka体系结构原理介绍
Kafka生产者、消费者代码实战演示
Kafka消费者组、TOPIC、分区、偏移量offset关系剖析
|
如果您想学习本课程,请
预约报名
如果没找到合适的课程或有特殊培训需求,请
订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请
服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。
专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获