《Spark大数据分析实战》——2.4节配置Spark源码阅读环境

  1. 云栖社区>
  2. 华章计算机>
  3. 博客>
  4. 正文

《Spark大数据分析实战》——2.4节配置Spark源码阅读环境

华章计算机 2017-05-02 11:31:00 浏览1146
展开阅读全文

本节书摘来自华章社区《Spark大数据分析实战》一书中的第2章,第2.4节配置Spark源码阅读环境,作者高彦杰 倪亚宇,更多章节内容可以访问云栖社区“华章社区”公众号查看

2.4 配置Spark源码阅读环境
由于Spark使用SBT作为项目管理构建工具,SBT的配置文件中配置了依赖的jar包网络路径,在编译或者生成指定类型项目时需要从网络下载jar包。需要用户预先安装git。在Linux操作系统或者Windows操作系统上(用户可以下载Git Shell,在Git Shell中进行命令行操作)通过“sbt/sbt gen-idea”命令,生成Intellij项目文件,然后在Intellij IDE中直接通过“Open Project”打开项目。
克隆Spark源码:

git clone https:// github.com/apach

网友评论

登录后评论
0/500
评论
华章计算机
+ 关注
所属云栖号: 华章计算机