课程介绍

注意0：欲购买此课程，获取安全购买链接，索要正版授权学习平台账号，务必加咨询QQ：2536379620
注意1：由于编码原因，试听课程视频画面清晰度不如最终购买的视频。最终购买视频的画面清晰度可参见以下两张图。图1   图2
注意2：正版良心视频，购买后有机会和原作者直接短暂技术交流。
    
注意3：感觉课程太难？没有信心？还在犹豫自己学的会学不会？我们的师傅带徒弟模式会给您信心。我们承诺， 商品详情，教学大纲，视频内容，所涉及技术，可获得原创作者老师微信或QQ和针对视频范围的精心指导。线上一对一师带徒辅导问答，针对视频内代码调试，使命必达，视频之外相关技术内容，行业内信息人脉，企业内推(如有)，原创作者老师会竭诚帮助。

线上一对一师带徒辅导问答，针对视频内代码调试，使命必达。（本产品主要是卖问答服务，视频价格太低不单独卖，嫌价格高者勿拍）                 

大数据高级工程师课程体系
经受3年的市场检验
内容持续更新
系统学习大数据技术

为什么学习大数据技术？
随着社会的发展，各行各业能收集到的数据越来越多，需要处理数据量也是越来越大，因此，各行各业与大数据技术的结合势在必行！
人们都知道云计算、人工智能、区块链是未来的趋势但是你知道它们三者的基础还是大数据技术吗？

课程大纲

01
Spark Streaming 编程入门

【录播】课程内容(12分钟)

【录播】实战：本地运行Spark Streaming程序(10分钟)

【录播】细讲word count程序(14分钟)

【录播】监控Spark Streaming程序(10分钟)

【录播】讲解StreamingContext(7分钟)

【录播】讲解DStream(16分钟)
02
数据源

【录播】Queue Streams Source(6分钟)

【录播】实战：自定义数据接受者(10分钟)

【录播】实战：使用HDFS File作为数据源(14分钟)
03
DStream API

【录播】Basic API(6分钟)

【录播】Join相关API(5分钟)

【录播】transform API(8分钟)

【录播】window(窗口) API(9分钟)

【录播】reduceByKeyAndWindow API(15分钟)

【录播】为什么需要checkpoint(10分钟)

【录播】其他window相关API(2分钟)

【录播】updateStateByKey API(12分钟)

【录播】mapWithState API(16分钟)

【录播】Java版本的DStream的API(3分钟)
04
阶段实战

【录播】实战一：结果保存到HDFS(11分钟)

【录播】结果保存到Mysql讲解(13分钟)

【录播】实战二：结果保存到Mysql演示(8分钟)

【录播】Spark Streaming结合Spark Sql(6分钟)

【录播】Spark Streaming进行网站流量实时监控(11分钟)
05
Spark Streaming 原理

【录播】课程内容(7分钟)

【录播】Spark应用对比Spark Streaming应用(7分钟)

【录播】Spark Streaming Application原理(12分钟)
06
性能和稳定

【录播】性能之创建多个接收器(8分钟)

【录播】性能之接收到的数据块的数量(7分钟)

【录播】性能之接收器接收数据的速率(4分钟)

【录播】性能之数据处理的并行度(6分钟)

【录播】性能之数据处理的数据序列化(5分钟)

【录播】性能之数据处理的内存调优(5分钟)

【录播】性能之结果输出的性能调优(3分钟)

【录播】Backpressure(压力反馈)(9分钟)

【录播】Elastic Scaling(资源动态分配)(9分钟)
07
容错与语义

【录播】课程内容(5分钟)

【录播】Executor失败容错(4分钟)

【录播】Driver失败容错(9分钟)

【录播】利用WAL恢复接收到的数据(7分钟)

【录播】可靠和不可靠的Receiver(5分钟)

【录播】当一个task很慢的时候的容错(7分钟)

【录播】流计算语义(Semantics)的定义(4分钟)

【录播】Spark Streaming容错语义(9分钟)

【录播】Output怎样达到Exactly once(4分钟)
08
Flume + Kafka + Spark Streaming + Redis

【录播】课程内容(7分钟)
09
Spark Streaming 集成 Flume

【录播】Spark Streaming集成Flume(push模式)(11分钟)

【录播】Spark Streaming集成Flume(pull模式)(9分钟)

【录播】Java版本的Spark streaming集成Flume(2分钟)
10
Spark Streaming 集成 Kafka

【录播】集成 Kafka（Receiver模式）(12分钟)

【录播】集成 Kafka（Direct 模式）(8分钟)

【录播】Receiver模式对比Direct模式(10分钟)

【录播】Java版本的Spark streaming集成Kafka(3分钟)
11
Flume 集成 Kafka

【录播】Kafka作为Flume的Source(7分钟)

【录播】Kafka作为Flume的Sink(6分钟)

【录播】Kafka作为Flume的Channel(7分钟)
12
案例讲解

【录播】Redis的安装(7分钟)

【录播】实际案例业务、架构以及代码讲解(13分钟)

【录播】实际案例实战演示(9分钟)

【录播】解决上节课的Bug(10分钟)
13
Structured Streaming

【录播】课程内容(4分钟)

【录播】Spark Streaming的优点和痛(10分钟)

【录播】Continuous Application(11分钟)

【录播】Streaming in Spark的未来(7分钟)