查看: 714|回复: 2

《大话流式处理系统 Flink 核心原理》掌握大数据领域新星技术,提升实战新薪未来

[复制链接]
新浪微博达人勋 仙豆  实名认证
论坛徽章:
1558
EBS财务徽章
日期:2013-11-03 10:10:32Oracle研习者初级
日期:2012-08-21 00:27:18R研习者初级
日期:2012-09-17 19:50:38Hadoop研习者初级
日期:2012-09-28 23:48:40spss初级
日期:2012-10-11 16:17:06Oracle研习者初级
日期:2012-10-18 10:33:23SAS研习者初级
日期:2012-11-18 23:07:49Hadoop研习者初级
日期:2012-11-18 23:09:43Oracle研习者初级
日期:2012-11-26 11:09:48Oracle研习者初级
日期:2012-12-06 14:23:22Hadoop研习者初级
日期:2013-10-21 22:39:48Oracle研习者初级
日期:2012-12-06 14:23:48
发表于 2019-6-20 17:22 | 显示全部楼层 |阅读模式
课程简介:
本课程首先介绍了 Flink 的开发/调试方法,并结合示例介绍了 DataSet 与 DataStream 的使用方法,Flink 的四层执行图。接着介绍了流式计算中需要解决的典型问题,如事件时间、乱序问题、窗口操作、Join 实现,以及 Flink 如何解决这些问题。然后分析了 Flink 的状态管理模型以及精典的 Asynchronous Barrier Snapshotting。最后介绍了如何诊断与优化 Flink 应用,并介绍了一个 Flink 应用案例。

课程大纲:
第一课:Flink 入门
1、Flink 开发/调试环境
2、DataSet 与 DataStream
3、几种 Key 选择方法性能比较
4、Accumulator 与 Counter

第二课:Flink 架构
1、Flink 架构
2、Flink 资源分配
3、Flink 任务调度
4、Chaining

第三课:Flink 流式计算之数据处理
1、Transformation
2、Join
3、Process Function
4、Async I/O

第四课:Flink 流式计算之时间
1、处理时间、事件时间与摄取时间
2、Watermark
3、如何处理乱序
4、Side output

第五课:Flink 流式计算之窗口
1、Tumbling Window
2、Sliding Window
3、Session Window
4、Global Window

第六课:Flink 流式计算之状态与容错
1、几种典型的状态类型
2、Asynchronous Barrier Snapshot
3、Queryable State
4、Flink 状态使用较佳实践

第七课:Flink Batch
1、Shuffle 机制
2、Iteration
3、自定义 Connector
4、容错机制

第八课:Flink Table API & SQL
1、静态表与动态表
2、连续查询中的 Join
3、UDF / UDAF / UDTF
4、与 Hive 集成

第九课:Flink 应用诊断与优化
1、背压问题发现与解决
2、内存调优
3、如何设计并发度
4、正确使用函数注解优化性能

第十课:Flink 实战演练

授课时间:
本期课程将于7月20日开始。课程持续时间大约为12周。

授课对象:
对 Flink 或者相关大数据开发感兴趣的工程师、架构师以及产品经理。较好有 JavaScala 编程基础

讲师简介:
Jason,就职某大型互联网公司,多年Kafka和Hadoop及Spark研究、应用及调优经验。现从事大数据平台(集群规模两万加)优化工作。
个人博客: http://www.jasongj.com
微信公众号: 大数据架构

新颖的课程收费形式:“逆向收费”约等于免费学习,仅收取100元固定收费+300元暂存学费,学习圆满则全额奖励返还给学员!

本门课程本来打算完全免费,某位大神曾经说过“成功就是正确的方向再加上适度的压力”。考虑到讲师本身要付出巨大的劳动,为了防止一些朋友在学习途中半途而废,浪费了讲师的付出,为此我们计划模仿某些健身课程,使用“逆向收费”的方法。
在报名时每位报名者收取400元,其中100元为固定 收费,另外300是暂存学费,即如果学员能完成全部课程要求,包括完成全部的书面和互动作业,则300元全款退回,优秀的学员还可以获得礼品 奖励。如果学员未能坚持到完全所有的学习计划任务,则会被扣款。期望这种方式可以转化为大家强烈的学习愿望和驱动力!

课程授课方式:
1、 学习方式:老师发布教学资料、教材,幻灯片和视频,学员通过网络下载学习。同时通过论坛互动中老师对学员进行指导及学员之间相互交流。
2、 学习作业:老师每周布置书面及互动作业,学员需按时按质完成作业。
3、 老师辅导:根据作业批改中发现的问题,针对性给予辅导,帮助大家掌握知识。
4、 结业测验:通过测验,完成学业。

您是否对此课程还有疑问,那么请 点击进入 FAQ,您的问题将基本得到解答
全国统一咨询热线 4008-010-006

课程现开始接受报名,报名方式
网上报名 请点击:
大话流式处理系统 Flink 核心原理
咨询Email :edu01@dataguru.cnedu02@dataguru.cn
课程入门讨论咨询群:
706821899(群内有培训公开课视频供大家免费观看)
咨询QQ: 2222010006 (上班时间在线)

技术热点、 行业资讯,培训课程信息,尽在炼数成金官方微信,低成本传递高端知识!技术成就梦想!欢迎关注!
打开微信,使用扫一扫功能,即刻关注炼数成金官方微信账户,不容错过的精彩,期待您的体验!!!
回复

使用道具 举报

新浪微博达人勋 Lee_yg  未实名认证
论坛徽章:
42
spark徽章
日期:2018-11-16 14:10:28python徽章
日期:2017-06-09 15:43:25比特币徽章
日期:2017-04-07 11:22:49Hive徽章
日期:2017-03-10 11:59:24spark徽章
日期:2017-03-09 16:41:36kettle徽章
日期:2017-01-19 17:24:54机器学习徽章
日期:2017-01-18 16:15:42搜索引擎徽章
日期:2016-12-08 15:45:05Openstack徽章
日期:2016-11-17 15:59:19python徽章
日期:2017-06-15 17:31:54python徽章
日期:2017-06-15 17:35:32python徽章
日期:2017-06-22 17:17:37
发表于 2019-6-23 11:57 | 显示全部楼层
是基于什么版本讲的哈~
是基于什么版本讲的哈~
回复 支持 反对

使用道具 举报

论坛徽章:
13
spark徽章
日期:2018-10-11 15:45:57mysql徽章
日期:2019-05-30 17:46:20搜索引擎徽章
日期:2019-04-11 15:18:35机器学习徽章
日期:2019-02-28 15:01:04python徽章
日期:2019-02-28 15:00:57机器学习徽章
日期:2019-01-24 16:03:30Hadoop研习者初级
日期:2019-01-10 14:08:51Hadoop研习者初级
日期:2019-01-10 14:05:10算法导论徽章
日期:2018-12-06 15:36:43spark徽章
日期:2018-11-16 14:09:41机器学习徽章
日期:2018-11-09 11:07:21Kafka徽章
日期:2018-10-18 15:09:17
发表于 2019-6-27 19:56 | 显示全部楼层
郭老师 又出新作了 ,:right:
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册 新浪微博登陆

本版积分规则

 

GMT+8, 2019-7-22 17:45 , Processed in 0.140801 second(s), 38 queries .