GitHub 资料项目推荐|spark源码学习笔记|深入了解大数据处理框架

"

GitHub 资料项目推荐|spark源码学习笔记|深入了解大数据处理框架

项目分析

仓库名称:spark_study

标星(star):236 (不错哦,潜力股项目)

标星趋势

关注(watch):39

拷贝(fork):86

贡献人数:1

仓库大小:10 MB

综合推荐指数: 2星

项目概述

通过spark源码阅读,把spark内部运行逻辑用图表+文字说明的形式展现出来。 图表能够清晰表达全局的逻辑关系和细节部分

目录

Graphx:构建graph和聚合消息

从SparkPi图解Spark core (hangzhou spark meetup分享过一次)

  1. spark UI源码阅读 2015.6.11
  2. 食不厌精,脍不厌细:如何一步步将kcore算法提升5倍性能 2014.12.27
  3. 图解spark repl 2016.1.12

Spark八法

“井中八法”一共八式,因寇仲天赋行军打仗的超卓领导才能,以兵法入刀,故各式均含用兵之道。

总纲:故善战者,立于不败之地,而不失敌之败也。是故胜兵先胜而后求战,败兵先战而后求胜,因敌而制胜。

从八个方面分析spark, 观脉络看细节。

  1. 概要
  2. Spark八法之方圆: RDD
  3. Spark八法之不攻: DAG、Lazy 进行中

项目地址

https://github.com/shijinkui/spark_study

程序员新视界:分享有趣、有料的流行程序员话题,每天进步一点点。


"
发表评论
留言与评论(共有 0 条评论)
   
验证码:

相关文章

推荐文章

'); })();