查看: 26596|回复: 227

[Spark/Scala/Kafka] 开源力量Spark开发实战 Spark架构原理集群开发视频教程 Spark大数据开发视频教程

  [复制链接]

24

主题

39

帖子

435

积分

Kib

Rank: 3Rank: 3

贡献
-76
技术
127
活跃
30
在线时间
3 小时
发表于 2016-7-21 11:57:31 | 显示全部楼层 |阅读模式
开源力量Spark开发实战 Spark架构原理集群开发视频教程  Spark大数据开发视频教程

2.jpg

迅雷有声音.jpg



课程介绍

本课程内容主要包括Spark生态系统、Spark架构、Spark执行原理的概述,实际动手搭建Spark集群,同时学习Spark实时计算、Spark Streaming流式计算的多语言编程,最后学习Spark SQL、基于Spark的机器学习、图计算等相关内容。
课程背景
Hadoop在大数据领域应经证明了其存在的价值,在超大数据量时,Hadoop有着较高的优势。
但是在普通数据量实时计算上面还是差很多,因为Hadoop的设计导致数据计算具有较高的延迟,所以无法满足实时数据需求,而单机计算更没有办法满足,由此诞生了Spark,基于内存的分布式实时计算框架,在某些数据量情况下,Spark的计算性能超Hadoop百倍,而算法实现仅有其1/10,甚至更少,所有Spark未来会成为大数据领域一颗耀眼的明星!


课程大纲


第一周 Spark生态系统概述
1.Spark生态系统概述
2.BDAS
3.Spark运行模式
4.Spark核心内容
(1)RDD
(2)transformation
(3)action
5.lineage
6.容错处理
7.宽依赖与窄依赖

第二周 Spark运行、开发环境搭建
1.Hadoop2.x安装
2.spark源码编译
3.spark安装及测试
4.Spark on YARN
5.开发环境搭建

第三周 spark 编程
1.常用RDD
2.常用transformation
3.常用action
4.Scala、python、Java多种语言编程实践

第四周 Spark Streaming概述及实践
1.DStream
2.数据源
3.transformation on DStreams
4.checkpoint
5.容错
6.编程实践
7.性能优化



-------------------课程目录-------------------


│      课时1:spark基本介绍,RDD操作方式.rar
│      课时2:付费学员服务指引.rar
│      课时3:学习资料.rar
│      课时4:1.Spark基本介绍.rar
│      课时5:2.Spark-RDD操作方式.rar
│      课时6:3.spark容错、调度.rar
│      课时7:1.spark安装基础,JDK、hadoop.rar
│      课时8:2.scala、spark安装及测试.rar
│      课时9:3.开发环境搭建.rar
│      课时10:PPT课件
│      课时11:学习资料课件
│      课时12:1.RDD知识回顾.rar
│      课时13:2.transformation实践操作.rar
│      课时14:3.RDD之Transformation.rar
│      课时15:4.RDD之action学习.rar
│      课时16:PPT课件
│      课时17:1.SparkStreaming.rar
│      课时18:2.spark之transformation.rar
│      课时19:3.sparkstreaming之Windowsoperations.rar
│      课时20:4.sparkstreaming之transformoperations.rar
│      课时21:5.sparkstreaming之outputoperation及代码优化点.rar



游客,如果您要查看本帖隐藏内容请回复

0

主题

1186

帖子

7586

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
-100
技术
0
活跃
866
在线时间
95 小时

水神有钱银!我爱三通

发表于 2016-7-21 14:45:30 | 显示全部楼层
开源力量Spark开发实战

2

主题

596

帖子

4170

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
0
技术
0
活跃
775
在线时间
74 小时
擅长技术
思科华为
发表于 2016-7-21 16:26:52 | 显示全部楼层
收下了 不知道好不

2

主题

1921

帖子

1万

积分

Nib

Rank: 11Rank: 11Rank: 11Rank: 11

贡献
3
技术
15
活跃
2834
在线时间
143 小时
发表于 2016-7-21 18:45:34 | 显示全部楼层
thanks for sharing

17

主题

1010

帖子

7090

积分

Yib

Rank: 10Rank: 10Rank: 10

贡献
9
技术
53
活跃
665
在线时间
236 小时
发表于 2016-7-21 21:12:19 | 显示全部楼层
这个是不是和hadoop配合的那个玩意儿啊?

16

主题

7673

帖子

5万

积分

Cib

Rank: 13Rank: 13Rank: 13Rank: 13

贡献
0
技术
0
活跃
12021
在线时间
591 小时
发表于 2016-7-21 21:19:07 | 显示全部楼层
thanks for sharing

2

主题

5442

帖子

3万

积分

Cib

Rank: 13Rank: 13Rank: 13Rank: 13

贡献
0
技术
0
活跃
6762
在线时间
465 小时
擅长技术
思科华为
发表于 2016-7-21 22:06:50 | 显示全部楼层
学习下新技术,新知识。

6

主题

1630

帖子

1万

积分

论坛贵宾VIP-永久权限

Rank: 8Rank: 8

贡献
3
技术
19
活跃
1832
在线时间
289 小时

我爱三通水神有钱银!

发表于 2016-7-21 22:30:06 | 显示全部楼层
好资料,谢谢分享

2

主题

2525

帖子

1万

积分

Dib

Rank: 12Rank: 12Rank: 12

贡献
0
技术
0
活跃
5459
在线时间
282 小时
QQ
发表于 2016-7-21 23:38:58 | 显示全部楼层
非常好,希望可以帮到我入门

3

主题

2073

帖子

1万

积分

Dib

Rank: 12Rank: 12Rank: 12

贡献
0
技术
1
活跃
3534
在线时间
264 小时
发表于 2016-7-22 06:15:47 | 显示全部楼层
Thanks for your share
使用 高级模式(可批量传图、插入视频等)
您需要登录后才可以回帖 登录 | 立即注册

快速回复 返回顶部 返回列表