spark windows开发调试环境

2017-11-24 19:35:57来源:CSDN作者:ABCDEFG0929人点击

分享

spark在windows搭建开发测试环境,需要进行配置
1、JDK
本人用的是jdk1.7.0_15
2、hadoop-2.6.0.tar.gz
下载hadoop-2.6.0.tar.gz,解压,假如解压到D:/hadoop-2.6.0,环境变量添加HADOOP_HOME=D:/hadoop-2.6.0,path添加%HADOOP_HOME%/bin;
3、spark-1.6.0-bin-hadoop2.6.tgz
下载spark-1.6.0-bin-hadoop2.6.tgz,解压,假如解压到D:/spark-1.6.0-bin-hadoop2.6,环境变量添加SPARK_HOME=D:/spark-1.6.0-bin-hadoop2.6,path添加%SPARK_HOME%/bin;
以上的三个需要注意版本匹配,配置完成后重启电脑。

最新文章

123

最新摄影

闪念基因

微信扫一扫

第七城市微信公众平台