- 必读:从官方的开发者页面着手,包括如何构建spark以及编码规范(强烈建议读读编程规范)等;https://cwiki.apache.org/confluence/display/SPARK/Contributing+to+Spark
- 必读: 官方文档简介:http://spark.apache.org/docs/latest/,以及这里的所有超链接都应该看一遍。应该有个印象;
- 必读: RDD的论文:http://www.cs.berkeley.edu/~matei/papers/2012/nsdi_spark.pdf
- 必做: 搭建spark的本地环境,编译、打包wordCount程序使其正常跑起来;不要仅仅使用spark-shell,要使用正常的提交;google一下,这个例子相关的资料太多了;强烈建议使用IDEA+MAVEN(不用sbt是因为国内使用sbt过程中一些依赖下载卡死。。)
- 可选:使用spark的API,编写一些简单的例子执行;主要是熟悉spark的API;
- 如果不熟悉scala,读:http://www.tutorialspoint.com/scala/scala_access_modifiers.htm ,然后https://twitter.github.io/scala_school/ 。强烈不建议中文的资料,因为当前的spark中文资料比较少,而且很多属于的翻译不规范。。
- 可选: 如果使用CHD集群,强烈建议跟着官方的入门example走一遍:http://blog.cloudera.com/blog/2014/04/how-to-run-a-simple-apache-spark-app-in-cdh-5/