spark机器学习班视频课程spark机器学习班
资源详情
第一阶段 spark基础入门第1课 spark系统概述与编程接口知识点1:spark系统概述知识点2:spark rdd分区及依赖关系知识点3:rdd api-transformation、action实战项目:pagerank中的依赖关系第2课 spark运行模式及原理知识点1:spark运行模式知识点2:spark基本工作流程知识点3:spark shuffle讲解实战项目:yarn cluster模式—部署、运行、内部实现及其原理第二阶段 spark进阶:存储、调度、忄生能调优第3课 spark存储、调度、与监控分析知识点1:存储管理模块整体架构知识点2:rdd持久化知识点3:shuffle数据持久化知识点4:广播(broadcast)变量持久化知识点5:spark调度相关流程实战项目:spark监控管理第4课 spark忄生能调优知识点1:开发调优知识点2:资源调优知识点3:数据倾斜调优实战项目:shuffle调优第三阶段 spark深入:即时查询、流计算与图计算第5课 spark即时查询讲解知识点1:sqlcontext 及dataframe的介绍知识点2:常用的查询操作知识点3:流计算系统的对比知识点4:spark streaming的介绍与数据处理流程知识点5:流数据源的接入知识点6:transformation与window操作实战项目:sql优化配置、及流计算项目的部署与调优第6课 spark图计算讲解知识点1:属忄生图的介绍知识点2:edge、vertex、triplet介绍与创建知识点3:属忄生图的操作知识点4:图算法介绍实战项目:图的调优第四阶段 spark机器学习实战第7课 spark机器学习讲解知识点1:mllib 机器学习库介绍知识点2:基本的统计分析功能知识点3:基本的机器学习库使用介绍知识点4:模型的评价标准库使用介绍实战项目:使用逻辑回归完成kdd99的分类问题第8课 spark机器学习应用实战项目:使用mllib的树模型完成分类问题实战项目:使用mllib搭建推荐系统本帖隐藏的内容链接: