IT博客汇
首页
精华
技术
设计
资讯
扯淡
权利声明
登录
注册
Spark1.0.0 编程模型
book_mmicky
发表于
2014-06-18 10:55:03
love
0
Spark Application可以在集群中并行运行,其关键是抽象出RDD的概念(详见RDD 细解),也使得Spark Application的开发变得简单明了。下图浓缩了Spark的编程模型。 1:Spark应用程序的结构 Spark应用程序可分两部分:driver部分和executor部分初始化SparkContext和主体程序