瑞客论坛

 找回密码
 立即注册
查看: 1253|回复: 1

【中级】Spark简介与计算模型视频教程 3课时 附ppt

[复制链接]

金币14148  第82名

145

主题

0

回帖

1万

积分

论坛元老

Rank: 8Rank: 8

威望
58
贡献
83
热心值
0
金币
14148
注册时间
2020-8-31
发表于 2019-3-23 21:44 | 显示全部楼层 |阅读模式
课程介绍:

本课程主要对Spark进行了简单介绍,给出了Spark的生态系统综述,同时进行Spark基本概念、计算模型进行了阐述,最后向大家讲解了Spark开发环境的配置。

课程背景:

Apache Spark是自由开源的分布式内存计算平台,目前已经成为 Apache 基金会的顶级项目。该平台可以快速、多计算范式、可靠地处理海量数据,除了基本批处理型外,还支持流计算、图计算、SQL分析和机器学习。

核心内容:

1.Spark生态系统
2.Spark优点
3.RDD
4.Transformation和Action
5.Spark开发环境搭建

软件环境:Intellij,Linux,Scala

是否提供资料:否

课程等级:中级

适合人群:

数据工程师,数据分析师

课程目录:

1 Spark简介 06:59
本课时介绍 Apache Spark的前世今生、基本功能。Spark生态系统,并对比传统批处理式系统讲解Spark的优点。
2 Spark计算模型 08:29
本课时介绍Spark计算模型,讲解了RDD和RDD上的运算Transformation和Action,以及Spark的运行时模型。
3 Spark开发环境搭建 13:01
本课时主要介绍Spark开发环境的搭建,在Windows以及Linux平台搭建Spark开发环境,通过SBT构建Spark项目,通过Spark Shell执行Spark程序。


游客,如果您要查看本帖隐藏内容请回复

回复

使用道具 举报

金币44  第13490名

0

主题

2941

回帖

1万

积分

论坛元老

Rank: 8Rank: 8

威望
5369
贡献
4648
热心值
0
金币
44
注册时间
2019-10-30
发表于 2024-3-14 16:36 | 显示全部楼层
强烈支持楼主ing……
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|瑞客论坛 |网站地图

GMT+8, 2024-11-24 09:09

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表