Spark编程模型(RDD编程模型)
2017-06-18 14:54
260 查看
[b]Spark编程模型(RDD编程模型)[/b]
下图给出了rdd 编程模型,并将下例中用 到的四个算子映射到四种算子类型。spark 程序工作在两个空间中:spark rdd空间和 scala原生数据空间。在原生数据空间里, 数据表现为标量(即scala基本类型,用橘 色小方块表示)、集合类型(蓝色虚线 框) 和持久存储(红色圆柱)。
下图给出了rdd 编程模型,并将下例中用 到的四个算子映射到四种算子类型。spark 程序工作在两个空间中:spark rdd空间和 scala原生数据空间。在原生数据空间里, 数据表现为标量(即scala基本类型,用橘 色小方块表示)、集合类型(蓝色虚线 框) 和持久存储(红色圆柱)。
相关文章推荐
- Spark--RDD编程模型
- Spark编程模型RDD设计以及运行原理
- spark编程模型(二):RDD详解
- Spark编程模型(RDD编程模型)
- Spark Core :RDD与Spark流水线编程模型
- Spark Streaming的编程模型
- 比较全的Spark中的函数使用及编程模型
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第2节:Spark架构设计(1)
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第2节:Spark架构设计(2)
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第2节:Spark架构设计(2)
- Spark编程模型
- Spark入门到精通视频学习资料--第二章:Spark生态系统介绍,Spark整体概述与Spark编程模型(2讲)
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第2节:Spark架构设计(1)
- Spark入门实战系列--3.Spark编程模型(下)--IDEA搭建及实战
- Spark分布式计算和RDD模型研究
- Spark编程模型(之莎士比亚文集词频统计实现)
- Spark中的编程模型
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第1节:为什么Spark是大数据必然的现在和未来?(2)
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第1节:为什么Spark是大数据必然的现在和未来?(2)
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第3节:Spark架构设计(2)