-
价格: 99
已购买原价: 199 课程名: Spark Streaming
分类: Spark
-
611
1
讲师介绍: 张敏
大数据工程师/算法工程师/大数据讲师，毕业于西华大学软件工程专业。曾就职于亨通网智及北京汇通天下，主要负者大数据平台搭建，大数据业务的实现和分析，并为其它部门提供技术指导。目前在物联网公司参加公司大数据平台建设及数据挖掘工作，在大数据领域有着丰富的实战经验。 擅长领域：Spark/Hadoop、算法设计及系统架构、数据挖掘。在Spark内核方面有深入的研究，参与Scala基础入门，Spark内核相关书籍部分内容的编写工作。
课程简介:
本课程主要介绍了以下内容：
1.SparkStreaming 总体介绍
2.使用SparkStreaming监控HDFS目录
3.使用SparkStreaming处理Socket数据
4.实现SparkStreaming的自定义数据接收器
5.SparkStreaming整合Kafka数据源，消费Kafka数据源
6.讲解SparkStreaming中常见的操作、设计模式及性能优化
7.SparkStreaming实现有状态数据统计项目实战介绍及整体架构
8.数据可视化之借助SparingBoot快速搭建数据可视化框架
9.模拟网络点击事件，将事件信息发送到Kafka的topic
10.SparkStreaming从Kafka消费数据做有状态的数据更新，并借助SparkSql中的DataFrame将更细的数据覆写到关系型数据库Mysql中
