课程培训
Apache NiFi大数据数据处理和分发系统培训实战

 课程信息

Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi 是为数据流设计。它支持高度可配置的指示图的数据路由、转换和系统中介逻辑。

培训特色

Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi 是为数据流设计。它支持高度可配置的指示图的数据路由、转换和系统中介逻辑。

目标收益

NiFi这个项目在2015年7月成功成为Apache开源社区的顶级项目,NiFi之前是在美国国家安全局使用了8年的一个可视化,可定制的数据集成产品,2014年贡献给了Apache开源社区。我们认为NiFi的出现填补的大数据集成领域的空白, 它不仅提供了可视化的工具实现大数据环境下不同系统之间进行数据移动和互联互通如SQL,HDFS,Kafka, HBASE, Solr,HTTP(s)、(s)FTP 而且还可以以可视化的方式进行各种数据格式的转换,json,xml,avro等。NiFi的出现使得大数据环境下的数据移动变得简单、高效、安全、可视 化,大大方便了业务和开发人员。

培训对象

大数据开发团队、大数据运维团队、数据采集和ETL人员、数据治理和管理人员

课程大纲

 

主题 内容

模块 1:Nifi原理和架构

Nifi的功能概述
Nifi原理和架构 
Nifi基本模块介绍
Nifi Groups、Processor、queue和connector模块介绍
Nifi toolbar 界面演示

模块2:Nifi安装和配置

Nifi单机版安装
Nifi分布式安装
Nifi slaves节点配置
数据丢失容错和保证交付 
低延迟和高吞吐量
动态优先级 
流可以在运行时修改 

模块3:GUI 操作介绍

无缝体验设计、控制和监视
processor的create、stop、start、restart、delete等操作

模块4:Nifi自带处理器介绍

Processor的原理和功能
Kafka Processor介绍和实战
JMS Processor介绍和实战
Hbase、Cassandera、redis Processor介绍和实战
Hdfs Processor、spark Streaming实战
JDBC Processor介绍和实战
FTP、Http、XML、Json Processor介绍和实战

模块5:创建Nifi数据流

创建发送/接收目录
getFile和putFile Processor创建
创建复制文件从发送放到接收
创建Queue队列

模块6:创建高级数据流

自定义文件名
添加自定义属性
添加正则表达式
实现Path过滤规则

模块7:Nifi安全

创建用户、用户组、角色 
SSL,SSH,HTTPS加密认证
可插拔的基于角色的验证/授权
基于webUI的SLA认证授权 

模块8:创建Nifi处理器

实现一个Kafka、JMS到HDFS的流程设计
查看运行日志
查看监控

模块9:Nifi集群配置和管理

Nifi集群添加节点
删除节点
Nifi性能优化
Slaves节点的负载均衡配置
制定特定的Processor到特定的node节点
集群动态负载均衡配置

模块10:用户自定义处理器

eclipse工程创建
实现一个FilterFileProcessor功能
编译&添加到Nifi的lib下面
创建用户自定义的FilterFile处理器

模块11:Nifi实战

Nifi在互联网的使用实战
Nifi在某大型商业银行实战案例分享




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表点击在线申请

服务特点:
海量专家资源,精准匹配相关行业,相关项目专家,针对实际需求,顾问式咨询,互动式授课,案例教学,小班授课,实际项目演示,快捷高效,省时省力省钱。

专家力量:
中国科学院软件研究所,计算研究所高级研究人员
oracle,微软,vmware,MSC,Ansys,candence,Altium,达索等大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关技术专业,理论素养丰富
多年实际项目经历,大型项目实战案例,热情,乐于技术分享
针对客户实际需求,案例教学,互动式沟通,学有所获
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>